惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

K
Kaspersky official blog
V
Visual Studio Blog
宝玉的分享
宝玉的分享
月光博客
月光博客
CTFtime.org: upcoming CTF events
CTFtime.org: upcoming CTF events
Y
Y Combinator Blog
让小产品的独立变现更简单 - ezindie.com
让小产品的独立变现更简单 - ezindie.com
大猫的无限游戏
大猫的无限游戏
H
Help Net Security
博客园_首页
Recent Announcements
Recent Announcements
小众软件
小众软件
MongoDB | Blog
MongoDB | Blog
Attack and Defense Labs
Attack and Defense Labs
The GitHub Blog
The GitHub Blog
Google DeepMind News
Google DeepMind News
Cisco Talos Blog
Cisco Talos Blog
L
LINUX DO - 最新话题
V2EX - 技术
V2EX - 技术
Simon Willison's Weblog
Simon Willison's Weblog
P
Palo Alto Networks Blog
PCI Perspectives
PCI Perspectives
T
Troy Hunt's Blog
Hacker News: Ask HN
Hacker News: Ask HN
S
Security Affairs
量子位
The Register - Security
The Register - Security
腾讯CDC
T
The Exploit Database - CXSecurity.com
P
Privacy & Cybersecurity Law Blog
V
Vulnerabilities – Threatpost
L
LINUX DO - 热门话题
N
News and Events Feed by Topic
Cloudbric
Cloudbric
Cyberwarzone
Cyberwarzone
cs.CL updates on arXiv.org
cs.CL updates on arXiv.org
Recent Commits to openclaw:main
Recent Commits to openclaw:main
cs.AI updates on arXiv.org
cs.AI updates on arXiv.org
D
Darknet – Hacking Tools, Hacker News & Cyber Security
TaoSecurity Blog
TaoSecurity Blog
Scott Helme
Scott Helme
C
Cybersecurity and Infrastructure Security Agency CISA
The Last Watchdog
The Last Watchdog
W
WeLiveSecurity
H
Hacker News: Front Page
T
Tor Project blog
C
Cyber Attacks, Cyber Crime and Cyber Security
NISL@THU
NISL@THU
Know Your Adversary
Know Your Adversary
C
CXSECURITY Database RSS Feed - CXSecurity.com

博客园 - 慕尘

在浏览器跑 Qwen2.5 使用 WSL 在 Windows 上安装 Linux LangExtract pgvector 向量数据库 Faiss Goose trafilatura unstructured python里使用Playwright python的jieba MinGW nomic-embed-text 解析非结构化数据 能够使用require但不能使用import ChromaDB nvm-windows 使用js实现文字转语音 pyttsx3 Ollama笔记
LangChain 的 DocumentLoader
慕尘 · 2025-03-05 · via 博客园 - 慕尘

在 Node.js 中使用 LangChain 的 DocumentLoader 可以帮助你加载和处理文档数据,以便进一步用于语言模型或其他 NLP 任务。

LangChain 是一个用于构建基于语言模型的应用程序的框架,支持 Python 和 JavaScript(Node.js)

https://js.langchain.com/docs/introduction

加载文本文件

test.js

import { TextLoader } from "langchain/document_loaders/fs/text";
 
// 创建一个TextLoader实例,指定文件路径
const loader = new TextLoader("./说明.txt");
 
// 加载文档
loader.load().then((docs) => {
  console.log(docs); // 输出加载的文档对象
});

 node test.js

[

    Document {

        pageContent: '要下载降水……以通过填写经纬度来定义子区域。\r\n',

        metadata: { source: './说明.txt' },

        id: undefined

    }

]

CSV文件

import { CSVLoader } from "@langchain/community/document_loaders/fs/csv";

const loader = new CSVLoader("2024623.csv");

// 加载文档
loader.load().then((docs) => {
  console.log(docs); // 输出加载的文档对象
});

Docx

import { DocxLoader } from  "@langchain/community/document_loaders/fs/docx";

const loader = new DocxLoader("NCEPGDAS0P25.docx");

// 加载文档
loader.load().then((docs) => {
  console.log(docs); // 输出加载的文档对象
});

需要安装

mammoth 是一个用于将 Microsoft Word 文档(.docx 文件) 转换为 HTML 或 Markdown 的 JavaScript 库。它专注于提取文档中的内容(如文本、标题、列表等),并生成简洁的 HTML 或 Markdown 格式,同时忽略复杂的样式和布局

PDF

import { PDFLoader } from "@langchain/community/document_loaders/fs/pdf";

const loader = new PDFLoader("CALPUFF_v7Roadway.pdf");

// 加载文档
loader.load().then((docs) => {
  console.log(docs); // 输出加载的文档对象
});

需要安装