Skip to content

Releases: fluoos/crawl2ai

v1.1.0

15 May 14:48

Choose a tag to compare

  • 增加项目制管理不同应用场景的数据集

v1.0.0

10 May 07:40

Choose a tag to compare

  • 增加大模型配置列表,支持配置默认的模型
  • 修改调用大模型使用openai库
  • 修改从模型配置列表读取模型和apikey
  • 增加大模型提示词配置和修改
  • 增加可以手动增加数据集问题和答案
  • 数据集问题支持增删查改

v0.1.0

13 Apr 08:25

Choose a tag to compare

  • 支持深度爬取指定域名的所有链接
  • 支持将链接转换成大模型友好的markdown文件
  • 支持上传.md、.txt、.pdf、.docx、.doc等文件,自动转换成.md文件
  • 支持通过DeepSeek大模型将markdown转换成训练大模型可用的数据集
  • 支持导出 JSONL 和 JSON 两种输出格式
  • 支持导出 Alpaca、ShareGPT 和自定义格式
  • 支持预览转换结果