简介
Tap4 AI Crawler 是由 tap4.ai 开源的网页爬虫,能够将网站转换为包含LLM的摘要信息。它具备强大的网页抓取、爬取和数据提取能力,以及网页截图功能。基于Python构建,轻量级,易于维护,适合对AI工具目录感兴趣的个人开发者以及对Python感兴趣的学习者。
截图

产品特色
获取输入网站的标题、描述和介绍
为输入的网站制作截图
支持使用LLM(如llama3/chatgpt)处理网站介绍并生成SEO友好的Markdown描述
快速配置
快速部署
支持自定义API密钥进行REST API访问
使用教程
1. 注册Cloudflare账号并选择R2服务,创建存储图片的存储桶,并设置为公开访问。
2. 创建R2 API令牌,并保存相关参数,如ENDPOINT_URL, BUCKET_NAME等。
3. 克隆项目到本地,并根据需要修改.env文件中的环境变量。
4. 安装Python依赖,并运行项目,本地将暴露RestAPI。
5. 使用curl通过POST请求验证API,发送包含url和其他参数的JSON格式请求。
6. 接收API响应,获取网站描述、详情、截图等信息。
流量来源
直接访问 | 51.61% | 外链引荐 | 33.46% | 邮件 | 0.04% |
自然搜索 | 12.58% | 社交媒体 | 2.19% | 展示广告 | 0.11% |
最新流量情况
月访问量
4.92m
平均访问时长
393.01
每次访问页数
6.11
跳出率
36.20%
总流量趋势图
地理流量分布情况
美国
19.34%
中国
13.25%
印度
9.32%
俄罗斯
4.28%
德国
3.63%
地理流量分布全球图
同类开源产品

Awesome LLM Resourses
awesome-LLM-resourses是一个汇总了全球大语言模型(LLM)资源的平台,提供了从数据获取、微调、推理、评估到实际应用等一系列资源和工具。
AI工具网址目录#资源汇总

Geekits
中文精选
Geekits是一个由YGeeker出品的开源和免费的平台,提供了一系列实用工具,包括人工智能、生活常用、图片视频处理、编程开发等多个领域。
AI工具网址目录#免费

Hoody AI
Hoody AI是一个注重隐私的统一界面,旨在提供匿名访问多种大型语言模型(LLMs)的功能。
AI工具网址目录#匿名访问

Aibase
中文精选
AIbase是一个综合性平台,它拥有一个全面的国内外AI产品数据库,收录了超过7000个出色的人工智能网站和产品,覆盖了40多个不同的领域,如Ai绘画生成、Ai文案写作、Ai视频编辑、Ai智能营销等。
AI工具网址目录#智能匹配

Query Key
优质新品
QAbot-zh/query-key是一个纯前端API检测工具,它支持多种API格式的测活,如oneapi/newapi等,并且能够检测openai格式的API。
AI工具网址目录#数据安全

Cyberscraper 2077
CyberScraper 2077是一款基于AI的网页爬虫工具,它利用OpenAI和Ollama等大型语言模型(LLM)来智能解析网页内容,提供数据提取服务。
AI爬虫#openai

Scrape It Now!
Scrape It Now! 是一个开源的网页抓取工具,它提供了一整套自动化网页抓取和索引的解决方案。
AI爬虫#自动化

Gmft
gmft是一个用于将PDF中的表格转换为多种格式的工具包。
AI工具网址目录#表格提取

Transformer Explainer
Transformer Explainer是一个致力于帮助用户深入理解Transformer模型的在线可视化工具。
AI工具网址目录#Transformer模型
替代品

Query Key
优质新品
QAbot-zh/query-key是一个纯前端API检测工具,它支持多种API格式的测活,如oneapi/newapi等,并且能够检测openai格式的API。
AI工具网址目录#数据安全

Cyberscraper 2077
CyberScraper 2077是一款基于AI的网页爬虫工具,它利用OpenAI和Ollama等大型语言模型(LLM)来智能解析网页内容,提供数据提取服务。
AI爬虫#openai

Scrape It Now!
Scrape It Now! 是一个开源的网页抓取工具,它提供了一整套自动化网页抓取和索引的解决方案。
AI爬虫#自动化

Gmft
gmft是一个用于将PDF中的表格转换为多种格式的工具包。
AI工具网址目录#表格提取

Transformer Explainer
Transformer Explainer是一个致力于帮助用户深入理解Transformer模型的在线可视化工具。
AI工具网址目录#Transformer模型

Crawlee
Crawlee 是一个用于构建可靠爬虫的 Python 网络爬虫和浏览器自动化库,提取数据用于AI、LLMs、RAG或GPTs。
AI爬虫#crawler

Awesome Cluade Artifacts
Awesome-Cluade-Artifacts 是一个GitHub仓库,致力于收集和展示由Anthropic的AI助手Claude在对话中生成的有趣、实质性的内容。
AI工具网址目录#社区分享

Tap4 AI Crawler
Tap4 AI Crawler 是由 tap4.ai 开源的网页爬虫,能够将网站转换为包含LLM的摘要信息。
AI爬虫#AI工具站

Brainyai
BrainyAI是一个完全免费的Chrome浏览器扩展,用户只需登录一次即可使用各种AI网站。
AI工具网址目录#浏览器扩展
精选AI产品推荐

Nocode
中文精选
NoCode 是一款无需编程经验的平台,允许用户通过自然语言描述创意并快速生成应用,旨在降低开发门槛,让更多人能实现他们的创意。
开发平台#应用开发
912

Listenhub
优质新品
ListenHub 是一款轻量级的 AI 播客生成工具,支持中文和英语,基于前沿 AI 技术,能够快速生成用户感兴趣的播客内容。
音频生成#AI
348

Lovart
国外精选
Lovart 是一款革命性的 AI 设计代理,能够将创意提示转化为艺术作品,支持从故事板到品牌视觉的多种设计需求。
AI设计工具#创意工具
1,128

Fastvlm
FastVLM 是一种高效的视觉编码模型,专为视觉语言模型设计。
AI模型#图像处理开源
564

Smart PDFs
国外精选
Smart PDFs 是一个在线工具,利用 AI 技术快速分析 PDF 文档,并生成简明扼要的总结。
文章摘要#AI
984

Keysync
KeySync 是一个针对高分辨率视频的无泄漏唇同步框架。
视频编辑#视频处理开源
480

Anyvoice
AnyVoice是一款领先的AI声音生成器,采用先进的深度学习模型,将文本转换为与人类无法区分的自然语音。
音频生成#文本转语音
26.38k

Liblibai
中文精选
LiblibAI是一个中国领先的AI创作平台,提供强大的AI创作能力,帮助创作者实现创意。
AI模型#图像生成
344.42k