#开源 #爬虫 #工具

🕷️ Crawl4AI - 一款开源的 Web 爬虫工具

使用文档

Crawl4AI 旨在简化网页数据的爬取与提取过程，专为 LLM 和 AI 应用打造

使用门槛非常低，一行命令就可以开始，爬取新闻类网站比较简单，速度是真的快（如图爬的是NBC的新闻，输出md格式）

📮投稿 📢频道 💬群聊 🔎索引

#NSFW #爬虫 #视频管理

🔞JavSP - 一键刮削多站点 AV 元数据

JavSP 可以提取影片文件名中的番号信息，自动抓取并汇总多个站点数据的 AV 元数据，按照指定的规则分类整理影片文件

并创建供 Emby、Jellyfin、Kodi 等软件使用的元数据文件

下载exe文件之后选择存储小姐姐的文件夹即可一键刮削！

这个刮削器最大的亮点是汇总了多个网站的元数据，所以信息非常全面

📑相关阅读

Stash - 给小电影一个家

📮投稿 📢频道 💬群聊 🔎索引

#AI #爬虫 #开源

🕷️ ScrapeGraphAI - 一个基于 AI 的网页爬虫工具包

在线体验

通过使用 AI 大模型，用户可以在短时间内抓取数千个网页，仅需几行代码即可完成爬虫设置和运行

支持本地 Ollama、OpenAI、Gemini、Groq、Azure

📮投稿 📢频道 💬群聊 🔎索引

#开源 #爬虫 #工具

🕷️EasySpider - 一个开源的无代码可视化爬虫工具

开源地址 | 视频教程

📄软件由浙江大学学生开发，版权归浙大所有，并且还有论文支持

下载打开软件之后，你只需要在网页上选择自己想要爬的内容并根据提示框操作即可完成爬虫设计和执行即可

📝使用体验

小白看一遍教程基本能会个8成以上，所以受众面非常广泛

智能程度感觉不如后羿、八爪鱼这些商业软件，但是作为开源软件已经完全合格了

📮投稿 📢频道 💬群聊

#爬虫 #工具

🕷DataPicker - 一款专业的无代码网络数据采集器

📃即使你是小白，你也可以通过它可以从任何网页上提取或采集数据，然后导出数据为 Excel 或 JSON 文件

并且还自带了公开配方，你可以利用现成的方案进行爬取

频道： @geekshare
bot：@Geekshare_bot

#开源 #爬虫 #隐私

INFO SPIDER - 一个神奇的工具箱，旨在安全快捷的帮助用户拿回自己的数据，基于你自己的数据生成图表文件，使你可以更直观、深入了解自己的信息

📚文档

📃如果有一个这样的工具，它能帮你拿回你的个人信息，它能帮你把分散在各种站点的个人信息聚合起来，它能帮你分析你的个人数据并给你提供建议，它能帮你把个人数据可视化让你更清楚地了解自己。而INFO SPIDER就是这样的一个工具。

频道： @geekshare
bot：@Geekshare_bot