• 请不要在回答技术问题时复制粘贴 AI 生成的内容
alwayshere
V2EX  ›  程序员

感觉各个搜索引擎蜘蛛是不是内部都有联系沟通?

  •  
  •   alwayshere · Sep 27, 2018 · 1370 views
    This topic created in 2961 days ago, the information mentioned may be changed or developed.

    Googlebot,yandex bot,bing bot,只要其中一个 bot 爬取量大了,另外的 bot 爬取量马上就降下来了,其中一个 bot 不爬了,其它 bot 立马又兴奋了赶紧来爬,就像内部都相互通知了似的,难道这些搜索引擎都会约定好了谁先上?

    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1569 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 17:36 · PVG 01:36 · LAX 09:36 · JFK 12:36
    ♥ Do have faith in what you're doing.