支持 0
反对 0
举报
2022-03-16 14:14
1、网页页面比较大,导致抓取不完整?
这个根本就是扯淡了,有心的人自己去看看lee发布的一次声明吧。大概的意思就是百度目前不会犹豫页面过大导致只抓取部分内容(之前是说100K大小)。并且即便是展示内容不完整,也不代表下载库中文件是不完整的。
2、网站打开速度慢,快照不完整?
这个是非常有可能的,这就需要自己通过网页打开测试工具(加载顺序)和服务器监测软件自己看看了。
3、代码采用JS等不能爬行的代码?
这个也是一个可能,有好多的程序,在相同模块采用JS。这样快照中就不会出现这部分内容。
|