如何判断是否冒充Baiduspider的抓取?

2017-04-09 08:40

  描述:220.181.51.* 这个ip段是百度蜘蛛吗?
  官方回复:如何判断是否冒充Baiduspider的抓取?
  在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
  host 123.125.66.120
  120.66.125.123.in-addr.arpa domain name pointer
  baiduspider-123-125-66-120.crawl.baidu.com.
  host 119.63.195.254
  254.195.63.119.in-addr.arpa domain name pointer
  BaiduMobaider-119-63-195-254.crawl.baidu.jp.
  在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
  在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器输入dig xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

    上一篇:网站被黑导致K站该如何处理? 下一篇:网站的gzip压缩对网站的收录和权重有没有影响?
    分享到:
    收藏
    相关阅读