a
    •˜ëjÜP  ã                ©   @   s^  d Z ddlmZmZ ddlmZ e�rÆddlmZmZm	Z	m
Z
mZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZmZm Z m!Z!m"Z"m#Z#m$Z$m%Z%m&Z&m'Z'm(Z(m)Z)m*Z*m+Z+m,Z,m-Z-m.Z.m/Z/m0Z0m1Z1m2Z2m3Z3m4Z4m5Z5m6Z6m7Z7m8Z8m9Z9m:Z:m;Z;m<Z<m=Z=m>Z>m?Z?m@Z@mAZAmBZBmCZCmDZDmEZEmFZFmGZGmHZHmIZImJZJmKZKmLZLmMZMmNZNmOZOmPZPmQZQmRZRmSZSmTZTmUZUmVZVmWZWmXZXmYZYmZZZm[Z[m\Z\m]Z]m^Z^m_Z_m`Z`maZambZbmcZcmdZdmeZemfZfmgZgmhZhmiZimjZjmkZkmlZlmmZmmnZnmoZompZpmqZqmrZrmsZsmtZtmuZumvZvmwZwmxZxmyZymzZzm{Z{m|Z|m}Z}m~Z~mZm€Z€m�Z�m‚Z‚mƒZƒm„Z„m…Z…m†Z†m‡Z‡mˆZˆm‰Z‰mŠZŠm‹Z‹mŒZŒm�Z�mŽZŽm�Z�m�Z�m‘Z‘m’Z’m“Z“m”Z”m•Z•m–Z–m—Z—m˜Z˜m™Z™mšZšm›Z›mœZœm�Z�mžZžmŸZŸm Z m¡Z¡m¢Z¢m£Z£m¤Z¤m¥Z¥m¦Z¦m§Z§m¨Z¨m©Z©mªZªm«Z«m¬Z¬ ddl­m®Z®m¯Z¯ dddœZ°d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d	d
œ¨Z±ee²e±d�Z³e´edœdd„Zµg d¢Z¶dS )aF  **Document Loaders**  are classes to load Documents.

**Document Loaders** are usually used to load a lot of Documents in a single run.

**Class hierarchy:**

.. code-block::

    BaseLoader --> <name>Loader  # Examples: TextLoader, UnstructuredFileLoader

**Main helpers:**

.. code-block::

    Document, <name>TextSplitter
é    )ÚTYPE_CHECKINGÚAny)Úcreate_importer)¦ÚAcreomLoaderÚAirbyteCDKLoaderÚAirbyteGongLoaderÚAirbyteHubspotLoaderÚAirbyteJSONLoaderÚAirbyteSalesforceLoaderÚAirbyteShopifyLoaderÚAirbyteStripeLoaderÚAirbyteTypeformLoaderÚAirbyteZendeskSupportLoaderÚAirtableLoaderÚAmazonTextractPDFLoaderÚApifyDatasetLoaderÚArcGISLoaderÚArxivLoaderÚAssemblyAIAudioTranscriptLoaderÚAsyncChromiumLoaderÚAsyncHtmlLoaderÚAZLyricsLoaderÚAzureAIDataLoaderÚAzureBlobStorageContainerLoaderÚAzureBlobStorageFileLoaderÚBibtexLoaderÚBigQueryLoaderÚBiliBiliLoaderÚBlackboardLoaderÚBlockchainDocumentLoaderÚBraveSearchLoaderÚBrowserlessLoaderÚBSHTMLLoaderÚChatGPTLoaderÚCollegeConfidentialLoaderÚConcurrentLoaderÚConfluenceLoaderÚCoNLLULoaderÚCouchbaseLoaderÚ	CSVLoaderÚCubeSemanticLoaderÚDatadogLogsLoaderÚDataFrameLoaderÚDiffbotLoaderÚDirectoryLoaderÚDiscordChatLoaderÚDocugamiLoaderÚDocusaurusLoaderÚDocx2txtLoaderÚDropboxLoaderÚDuckDBLoaderÚEtherscanLoaderÚEverNoteLoaderÚFacebookChatLoaderÚFaunaLoaderÚFigmaFileLoaderÚFileSystemBlobLoaderÚGCSDirectoryLoaderÚGCSFileLoaderÚGeoDataFrameLoaderÚGitbookLoaderÚGithubFileLoaderÚGitHubIssuesLoaderÚ	GitLoaderÚGoogleApiClientÚGoogleApiYoutubeLoaderÚGoogleDriveLoaderÚGoogleSpeechToTextLoaderÚGutenbergLoaderÚHNLoaderÚHuggingFaceDatasetLoaderÚIFixitLoaderÚImageCaptionLoaderÚIMSDbLoaderÚ
IuguLoaderÚJoplinLoaderÚ
JSONLoaderÚLakeFSLoaderÚLarkSuiteDocLoaderÚMastodonTootsLoaderÚMathpixPDFLoaderÚMaxComputeLoaderÚMergedDataLoaderÚMHTMLLoaderÚModernTreasuryLoaderÚMongodbLoaderÚMWDumpLoaderÚNewsURLLoaderÚNotebookLoaderÚNotionDBLoaderÚNotionDirectoryLoaderÚOBSDirectoryLoaderÚOBSFileLoaderÚObsidianLoaderÚOneDriveFileLoaderÚOneDriveLoaderÚOnlinePDFLoaderÚOpenCityDataLoaderÚOutlookMessageLoaderÚPagedPDFSplitterÚPDFMinerLoaderÚPDFMinerPDFasHTMLLoaderÚPDFPlumberLoaderÚPlaywrightURLLoaderÚPolarsDataFrameLoaderÚPsychicLoaderÚPubMedLoaderÚPyMuPDFLoaderÚPyPDFDirectoryLoaderÚPyPDFium2LoaderÚPyPDFLoaderÚPySparkDataFrameLoaderÚPythonLoaderÚReadTheDocsLoaderÚRecursiveUrlLoaderÚRedditPostsLoaderÚ
RoamLoaderÚRocksetLoaderÚRSSFeedLoaderÚS3DirectoryLoaderÚS3FileLoaderÚSeleniumURLLoaderÚSharePointLoaderÚSitemapLoaderÚSlackDirectoryLoaderÚSnowflakeLoaderÚSpreedlyLoaderÚ	SRTLoaderÚStripeLoaderÚTelegramChatApiLoaderÚTelegramChatFileLoaderÚTelegramChatLoaderÚTencentCOSDirectoryLoaderÚTencentCOSFileLoaderÚTensorflowDatasetLoaderÚ
TextLoaderÚToMarkdownLoaderÚ
TomlLoaderÚTrelloLoaderÚTwitterTweetLoaderÚUnstructuredAPIFileIOLoaderÚUnstructuredAPIFileLoaderÚUnstructuredCSVLoaderÚUnstructuredEmailLoaderÚUnstructuredEPubLoaderÚUnstructuredExcelLoaderÚUnstructuredFileIOLoaderÚUnstructuredFileLoaderÚUnstructuredHTMLLoaderÚUnstructuredImageLoaderÚUnstructuredMarkdownLoaderÚUnstructuredODTLoaderÚUnstructuredOrgModeLoaderÚUnstructuredPDFLoaderÚUnstructuredPowerPointLoaderÚUnstructuredRSTLoaderÚUnstructuredRTFLoaderÚUnstructuredTSVLoaderÚUnstructuredURLLoaderÚUnstructuredWordDocumentLoaderÚUnstructuredXMLLoaderÚWeatherDataLoaderÚWebBaseLoaderÚWhatsAppChatLoaderÚWikipediaLoaderÚXorbitsLoaderÚYoutubeAudioLoaderÚYoutubeLoaderÚYuqueLoader)ÚBlobÚ
BlobLoaderrp   r„   )re   r…   z$langchain_community.document_loaders)¨r   r   r   r   r   r   r	   r   r
   r   r   r   r   r   r   r   r   r   r   r   r   r   r"   r   r   r   r   r«   r¬   r   r    r!   r)   r#   r'   r$   r%   r&   r(   r*   r,   r+   r-   r.   r/   r0   r1   r2   r3   r4   r5   r6   r7   r8   r9   r:   r;   r<   r=   r@   rA   r?   r>   rB   rC   rE   rD   rF   rG   rH   rI   rK   rJ   rL   rN   rM   rP   rO   rU   rX   rQ   rR   rS   rT   rV   rW   rY   rZ   r[   r\   r]   r^   r_   r`   ra   rb   rc   rd   re   rf   rg   rh   ri   rj   rk   rl   rm   rn   ro   rp   rq   rr   rs   rt   ru   rx   rv   rw   ry   rz   r�   r{   r|   r}   r~   r   r€   r‚   r…   rƒ   r„   rˆ   r†   r‡   r‰   rŠ   r‹   rŒ   r�   rŽ   r�   r�   r’   r‘   r“   r”   r•   r–   r—   r˜   r™   rš   r›   rœ   r�   rž   rŸ   r    r¡   r¢   r£   r¤   r¥   r¦   r§   r¨   r©   rª   )Zdeprecated_lookups)ÚnameÚreturnc                 C   s   t | ƒS )zLook up attributes dynamically.)Ú_import_attribute)r­   © r°   úb/mnt/bigstor/www/usecases/.venv/lib/python3.9/site-packages/langchain/document_loaders/__init__.pyÚ__getattr__y  s    r²   )ªr   r   r   r   r   r   r	   r
   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r"   r   r   r   r   r«   r¬   r   r    r!   r)   r#   r'   r$   r%   r&   r(   r*   r,   r+   r-   r.   r/   r0   r1   r2   r3   r4   r5   r6   r7   r8   r9   r:   r;   r<   r=   r@   rA   r>   r?   rB   rC   rD   rE   rF   rG   rH   rI   rK   rJ   rL   rN   rM   rO   rP   rU   rX   rQ   rR   rS   rT   rV   rW   rY   rZ   r[   r\   r]   r^   r_   r`   ra   rb   rc   rd   rf   rg   rh   re   ri   rj   rk   rl   rm   rn   rp   ro   rq   rr   rx   rs   rt   ru   rv   rw   ry   rz   r�   r{   r|   r}   r~   r   r€   r‚   rƒ   r„   r…   r†   r‡   rˆ   r‰   rŠ   r‹   rŒ   r�   rŽ   r�   r�   r’   r‘   r“   r”   r•   r–   r—   r˜   r™   rš   r›   rœ   r�   rž   rŸ   r    r¡   r¢   r£   r¤   r¥   r¦   r§   r¨   r©   rª   N)·Ú__doc__Útypingr   r   Zlangchain._apir   Z$langchain_community.document_loadersr   r   r   r   r	   r
   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r   r    r!   r"   r#   r$   r%   r&   r'   r(   r)   r*   r+   r,   r-   r.   r/   r0   r1   r2   r3   r4   r5   r6   r7   r8   r9   r:   r;   r<   r=   r>   r?   r@   rA   rB   rC   rD   rE   rF   rG   rH   rI   rJ   rK   rL   rM   rN   rO   rP   rQ   rR   rS   rT   rU   rV   rW   rX   rY   rZ   r[   r\   r]   r^   r_   r`   ra   rb   rc   rd   re   rf   rg   rh   ri   rj   rk   rl   rm   rn   ro   rp   rq   rr   rs   rt   ru   rv   rw   rx   ry   rz   r{   r|   r}   r~   r   r€   r�   r‚   rƒ   r„   r…   r†   r‡   rˆ   r‰   rŠ   r‹   rŒ   r�   rŽ   r�   r�   r‘   r’   r“   r”   r•   r–   r—   r˜   r™   rš   r›   rœ   r�   rž   rŸ   r    r¡   r¢   r£   r¤   r¥   r¦   r§   r¨   r©   rª   Zlangchain_core.document_loadersr«   r¬   Z_old_to_new_nameZDEPRECATED_LOOKUPÚ__package__r¯   Ústrr²   Ú__all__r°   r°   r°   r±   Ú<module>   sr  ÿ ÿ ¢ *þ	€ Ø ,