小施掌柜 · 网站访问记录
谁来读过这些文字
2026-09-23 至 2026-09-23 · 北京时间 · 已记录 1/1 天 · 数字可能包含采样估算
统计任务运行中。展示截至昨日的完整自然日，并定时自动复核。
识别范围：Cloudflare Radar 已验证机器人目录 663 项，加上未收录但名称明显为自动程序的兜底识别。每个请求只归入一个主分类。
记录以来累计（截至昨日）
已识别爬虫请求12,8692026-09-08 至 2026-09-23
其中 AI 服务6,3802026-09-08 至 2026-09-23
页面浏览量9862026-09-08 至 2026-09-23
昨日爬虫概览
昨日爬虫请求1,238已取得 1/1 天数据
内容页面成功请求668不含静态资源与站点文件
被访问内容页面283不同内容路径数量
爬虫用途分类
互斥主分类，合计等于全部爬虫请求
AI 抓取与训练438如 GPTBot、Meta-ExternalAgent
AI 搜索308如 OAI-SearchBot、PerplexityBot
AI 助手与按需读取48如 ChatGPT-User、Claude-User
传统搜索引擎153如 Googlebot、Bingbot、百度
搜索与 AI 混合25目前主要为 PetalBot
SEO 与站点审计260如 Lighthouse、站点检查工具
社交与链接预览3社交平台和聊天软件预览
监控、分析与 Webhook1可用性检查与自动通知
目录外自动程序2名称明显，但尚未被目录收录或验证
响应状态
成功响应 · 2xx1,224包括页面及其他资源
页面不存在 · 4044用于发现失效或错误链接
403 / 429 响应0拒绝访问或限流
服务器异常 · 5xx0需要优先检查
3xx 重定向7不含 304
其他状态2未归入上述类别的响应状态
304 未修改响应：1。它表示爬虫沿用缓存，不等于抓取失败。
浏览器访问
昨日页面浏览46已取得 1/1 天数据
昨日访问次数36Visits，不是独立人数
哪些爬虫来过
| 爬虫标识 | 平台 | 主分类 | 请求次数 | 相对数量 |
|---|---|---|---|---|
| GoogleOther | AI 抓取与训练 | 415 | ||
| AhrefsBot | Ahrefs | SEO 与站点审计 | 197 | |
| ShapBot | Parallel | AI 搜索 | 155 | |
| Googlebot | 传统搜索引擎 | 94 | ||
| OAI-SearchBot | OpenAI | AI 搜索 | 80 | |
| PerplexityBot | Perplexity | AI 搜索 | 73 | |
| MJ12Bot | Majestic | SEO 与站点审计 | 63 | |
| bingbot | Microsoft | 传统搜索引擎 | 58 | |
| ChatGPT-User | OpenAI | AI 助手与按需读取 | 48 | |
| PetalBot | Huawei | 搜索与 AI 混合 | 25 | |
| meta-externalagent | Meta | AI 抓取与训练 | 19 | |
| FacebookExternalHit | Meta | 社交与链接预览 | 3 | |
| GPTBot | OpenAI | AI 抓取与训练 | 2 | |
| 未收录 · HeadlessChrome | 未验证 | 其他可识别程序 | 1 | |
| ClaudeBot | Anthropic | AI 抓取与训练 | 1 | |
| Wordpress Namecheap | Namecheap | 监控、分析与 Webhook | 1 | |
| 未收录 · curl | 未验证 | 其他可识别程序 | 1 | |
| Baiduspider | Baidu | 传统搜索引擎 | 1 | |
| Bytespider | ByteDance | AI 抓取与训练 | 1 |
昨日热门抓取页面
内容路径筛选 · 2xx 响应
昨日未成功访问最多的页面
仅显示内容路径 · 4xx/5xx 响应
| 页面 | 状态码 | 请求次数 |
|---|---|---|
| /超级个体 | 404 | 1 |
每天的记录
| 日期 | 全部爬虫 | AI 服务 | 浏览器浏览量 |
|---|---|---|---|
| 2026-09-23 | 1,238 | 794 | 46 |
爬虫数据最近成功读取：2026-09-24 11:38:25
浏览器数据最近成功读取：2026-09-24 11:38:25
全量表示 Cloudflare Radar 当前目录中可通过 User-Agent 识别的已知机器人，并额外兜底名称明显的自动程序；不包括故意伪装成普通浏览器且没有可用识别信号的程序。User-Agent 名称可以伪造；verified 模式会优先使用可用的 Cloudflare 检测 ID。每个请求只进入一个主分类，不会重复计入总数。
只记录经过本域名 Cloudflare 的请求。今日数据定时覆盖，不在当天重复计入累计；次日取得完整数据后才进入累计。有数据的零显示“0”。近 7/30 天在数据积累完整前仅为已取得日期的小计。抓取不代表内容已被训练、收录或引用；浏览器统计可能因脚本拦截而漏计。分类程序版本：2026-09-16。