支持 0
反对 0
举报
2022-03-16 23:30
看了夜息博客,所以让现任公司的 BI 将百度蜘蛛记录从原始日志分离出来。
![]() 但是服务器只能修改日志文件名是哪个子域名。 之后使用 PHP 等编程技术访问服务器根据日志名字再在每条记录的相对路径添加域名,生成第 3 份日志。 另外受2014年03月10日 @否子戈 回答启发 http://ask.seowhy.com/question/9079 百度蜘蛛亦可能使用了智能解析。 与 占了 ,其他可以忽略不计。 ![]() 是北京电信线路 ![]() 是北京联通线路 现任公司外网有电信和联通 2 个不同 IP 地址。智能解析可以加快抓取速度,电信的百度蜘蛛访问电信的 IP,联通的百度蜘蛛访问联通的 IP。 8 年前 赞同 1 评论 1 收藏 举报 ![]() 之前是没发现能直接列出绝对的地址的日志分析工具。 |