Concurrent Loader
其運作方式與 GenericLoader 相同,但針對選擇優化其工作流程的人,則為並行處理。
from langchain_community.document_loaders import ConcurrentLoader
API 參考:ConcurrentLoader
loader = ConcurrentLoader.from_filesystem("example_data/", glob="**/*.txt")
files = loader.load()
len(files)
2