当前位置:网站首页 / 建站知识 / 网站建设知识

如何检查哪些URL被谷歌使用Python索引?

发布时间:2016-10-20 08:29点击次数:

谷歌搜索控制台可以帮助您确定您的网页被索引,但有关识别不属于那些是什么?专栏作家保罗·夏皮罗有一个Python脚本,做到了这一点。

谷歌使用Python索引

有三个主要组成部分有机的搜索:抓取,索引和排名。当一个像谷歌搜索引擎到达你的网站,抓取了所有它找到的链接。关于它找到什么样的信息,然后输入到搜索引擎的索引,在不同的因素来确定抓取的网页,以及以什么顺序,对于特定的搜索查询。

作为SEO的,我们往往关注排名组件上我们的努力,但如果搜索引擎无法抓取和索引您网站上的网页,你不会从谷歌获得任何流量。显然,以确保您的网站是正确抓取和被搜索引擎收录是SEO的重要组成部分。

但你怎么能告诉如果你的网站是适当的索引?

如果你有机会获得谷歌搜索控制台,它会告诉你多少页都包含在你的XML网站地图以及其中有多少被索引。不幸的是,它并不至于要告诉你哪些页面去未编入索引。

XML网站地图

这可以让你有很多猜测或手动检查。这就像寻找大海捞针。推荐国内SEO监测工具http://webinsights.cn 。