10.7% of top sites block AI search crawlers but still allow Googlebot

  • 情报分类：技术价值
  • 命中依据：AI爬虫屏蔽现状数据，有参考价值
  • 来源：Hacker News 新项目
  • 原作者：reesecalder
  • 发布时间：2026/9/9 20:13:56