• 注册
  • 服务器运维教程 服务器运维教程 关注:4 内容:8

    被人工智能ClaudeBot爬虫抓取网站内容导致服务器经常超负荷。

  • 查看作者
  • 打赏作者
  • 4
  • 服务器运维教程
  • LV.4
    VIP
    靓号:23456
    赞助
    关注公众号:“站长笔记”或“站长笔记网”;下载资源请登录电脑端体验更佳,站长笔记网域名:www.zzbj.net

    今天站长网站服务器突然100%,但是网站并没有用户涌入,检查日志发现大量的国外IP和下列代码记录。

    Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

    搜索资料查看后,发现这个是国外的ClaudeBot爬虫,所以我们可以通过一下办法来进行屏蔽,解决网站超负荷状态。

    ClaudeBot是Claude的爬虫,Claude是一款国外人工智能(AI)聊天机器人。

    隐藏内容需要回复可以看见

    回复
    LV.0
    嘿嘿嘿
    回复
    LV.0

    嘿嘿嘿

    回复
    来学习了
    回复
    LV.0
    SVIP

    看看

    回复

    请登录之后再进行评论

    登录
  • 全站动态
  • 任务中心
  • 帖子间隔 侧栏位置: