专栏

俄罗斯大型搜索引擎Yandex宣布,他们现在正在通过CSS和JavaScript文件进行爬行测试。目的是让Yandex更好地理解网页以及为更现代的浏览器设计的网页上的内容。他们开始在已知页面的一小部分上测试此爬网过程,但他们计划稍后将其扩展到更大的索引集。由于这项努力,Yandex通知网站管理员确保他们的CSS和JavaScript文件没有阻止Yandex爬虫。同样,Google和Bing建议您不要阻止他们的机器人抓取您的CSS和JavaScript文件和资源。俄语搜索博客也用英语对此进行了总结,因为他们说流利的俄语,而我却不会。他们补充说,“Yandex的索引程序中的这种变化可能会对Yandex SEO产生影响,至少从长远来看是这样。