A
ai.robots.txt
ai-robots-txt/ai.robots.txt
要屏蔽的AI代理和机器人列表
★4.0kstars
Python
MIT
更新: 今天
📋 项目速览
点击展开
这是什么?安全与治理领域,基于crawlers和crawling的用Python构建、开源工具
作者是谁?由 ai-robots-txt 团队维护,GitHub 4K⭐,在 安全与治理 分类 413 个项目中排名第 65
为什么诞生?随着crawlers和crawling在安全与治理中的普及,ai-robots-txt打造了ai.robots.txt作为一站式解决方案。
能干什么?核心场景:privacy
怎么用 AI 安装?推荐使用 AI 编码助手根据 GitHub README 自动完成 pip 安装和虚拟环境配置。
🔗 github.com/ai-robots-txt/ai.robots.txt | 官网 https://github.com/ai-robots-txt/ai.robots.txt/releases.atom
🔗 github.com/ai-robots-txt/ai.robots.txt | 官网 https://github.com/ai-robots-txt/ai.robots.txt/releases.atom
标签
aicrawlerscrawlingprivacy