# 一搜的爬虫访问过于频繁 User-agent:YisouSpider Disallow: / # 禁止 ChatGLM 爬虫 User-agent: ChatGLM Spider Disallow: / User-agent: ChatGLM-Spider Disallow: / User-agent:* Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php # Android源代码不允许爬虫访问,否则会非常占用带宽 Disallow: /Android_4.2.2/ Disallow: /Android_7.0.0_r21/ Disallow: /Android_10.0.0_r40/ # 鸿蒙源代码不允许爬虫访问,否则非常占用带宽 Disallow: /OpenHarmony_3.1/ Disallow: /OpenHarmony-v4.1-Release/ Disallow: /OpenHarmony-v5.0.0-Release/ # Chrome源代码不允许爬虫访问,否则非常占用带宽 Disallow: /Chromium/ # Git 镜像不允许爬虫访问,否则非常占用带宽 Disallow: /gitea-mirrors/ # 禁止搜索引擎收录搜索结果页 Disallow: /?s=*