检索型爬虫

与训练型爬虫要分开决定：要被引用，检索型必须放行 —— 这是开关级的前提。代表性标识包括 OAI-SearchBot、ChatGPT-User、Claude-SearchBot、Claude-User、PerplexityBot、Perplexity-User，以及 Google 侧的 Googlebot。