English
资源合集

ai.robots.txt

ai-robots-txt/ai.robots.txt

汇集应被屏蔽的 AI 爬虫清单,并提供 robots.txt、Nginx、Apache 等现成配置用于阻止抓取。

标签