Web Transpose

什么是Web Transpose？

Web Transpose 帮助将完整的网站转化为数据集，用于构建自定义的 LLM，配合 Webⱼ Crawl 使用。它允许用户将网站及内容（如 PDF、常见问题解答等）转化为微调的提示和向量数据库的块，消除了对网络爬虫的需求。

如何使用 Web Transpose？

Web Transpose 提供诸如 AI 网页爬虫、分布式网页爬虫和网站聊天机器人的工具。用户可以无须编码就能抓取网站，快速构建 AI 应用，并使用向量数据库查询网站。该网站还提供各种功能的代码示例。

Web Transpose 的核心功能

AI 网页爬虫
分布式网页爬虫
向量数据库与聊天

Web Transpose 的使用案例

#1 构建 AI 网站聊天机器人
#2 从电商网站抓取产品数据
#3 创建包含网站数据的向量数据库以便查询