·设为首页收藏本站📧邮箱修改🎁免费下载专区📒收藏夹📱AI全功能
返回列表 发布新帖

最近日志中出现苹果搜索的爬虫,大家可以关注一下

[复制链接]
129 4
发表于 2025-1-17 08:20:55 | 查看全部 阅读模式

马上注册,免费下载更多dz插件网资源。

您需要 登录 才可以下载或查看,没有账号?立即注册

×
关于 Applebot了解有关 Apple 网络爬虫工具 Applebot 的信息。Applebot 抓取的数据用于为多项功能提供支持,例如集成到 Apple 生态系统内许多用户体验(包括“聚焦”、Siri 和 Safari 浏览器)中的搜索技术。在 robots.txt 中启用 Applebot 可让网站内容显示在世界各地的 Apple 用户使用这些产品获得的搜索结果中。Applebot 能够从 Web 服务器访问多种资源,包括但不限于 robots.txt、网站地图、RSS 源、HTML 以及渲染页面所需的子资源(例如 javascript、Ajax 请求、图像等)。

以上是苹果官方关于爬虫的简介,大家可以观察一下日志,看看有没有这个爬虫。。。还有就是大家有苹果搜索的来路吗?要是可以做好这部分流量的话也挺不错的,毕竟苹果用户是消费大户~
爬虫的UA是下边这样的:
"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)"
我要说一句 收起回复

评论4

独家记忆Lv.8 发表于 2025-1-17 08:21:46 | 查看全部
已屏蔽。。。没什么鬼用
我要说一句 收起回复
IT618发布Lv.8 发表于 2025-1-17 08:21:56 | 查看全部
接下来会有一大堆ai训练机器人冒用这个bot,就像租用阿里云服务器做爬虫的最喜欢伪装神马yisou爬虫
我要说一句 收起回复
浅生Lv.8 发表于 2025-1-17 08:22:55 | 查看全部
好吧,我觉得还需要观察
我要说一句 收起回复
CrystαlLv.8 发表于 2025-1-17 08:23:48 | 查看全部
这个是无法避免的,现在AI爬虫都很频繁啊
我要说一句 收起回复

回复

 懒得打字嘛,点击右侧快捷回复【查看最新发布】   【应用商城享更多资源】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

最新热评 加载中...
AI智能体
投诉/建议联系

discuzaddons@vip.qq.com

未经授权禁止转载,复制和建立镜像,
如有违反,按照公告处理!!!
  • 联系QQ客服
  • 添加微信客服

联系DZ插件网微信客服|最近更新|Archiver|手机版|小黑屋|DZ插件网! ( 鄂ICP备20010621号-1 ) 知道创宇云防御

您的IP:216.73.217.127(美国),GMT+8, 2026-11-5 03:02 , Processed in 0.367353 second(s), 51 queries , Gzip On, Redis On.

Powered by Discuz! X5.1 Licensed

© 2001-2026 Discuz! Team.

关灯 在本版发帖
扫一扫添加微信客服
QQ客服返回顶部
快速回复 返回顶部 返回列表