CyberScraper 2077 是一款功能强大的网页抓取工具,它使用 OpenAI、Gemini 和 Ollama AI 技术高效、精确地提取数据。
该软件支持将数据导出为不同格式(JSON、CSV、HTML 等),并使用 AI 进行精确解析。
其主要功能包括:绕过验证码、防止被检测为机器人、异步操作以加快抓取速度,以及请求缓存以减少重复调用 API 的次数。
此外,还支持多页面搜索,以便从网站的不同页面中提取数据。
安装过程支持虚拟化环境和 Docker,可根据系统能力选择集成 OpenAI、Gemini 和 Ollama 模型。
🧬 https://github.com/itsOwen/CyberScraper-2077#tools