最近的爬虫也是疯狂,每天早上9点开始
每天早上9点开始,每个请求都是一个IP,UA头模拟的浏览器
若是只访问静态也就算了,动态页还不能关闭,部分内容是动态显示的。疯狂请求动态页
找规律找到吐血。每天早上9点关闭msyql半小时,要么机器满载。。
你们都有啥好办法不?
若是只访问静态也就算了,动态页还不能关闭,部分内容是动态显示的。疯狂请求动态页
找规律找到吐血。每天早上9点关闭msyql半小时,要么机器满载。。
你们都有啥好办法不?