差不多就是这个问题。有没有比标准sitemap.xml更有效的方法来[添加/强制重新抓取/删除]，即管理您网站在谷歌中的索引条目？记得几年前看到一个不知名博主的文章，说他在自己的网站上写新闻的时候，这个新闻的url入口会立刻出现在google的搜索结果中。我认为他提到了一些特别的事情。我不记得具体是什么......谷歌自己提供的一些自动重新抓取系统？但是，我不确定。所以我问，你认为我是在自欺欺人吗，除了sitemap.xml之外没有其他方法来管理索引内容？我只需要确定这一点。谢谢。 最佳答案 我认为您不会找到您正在寻找的神奇“Eli

在StackOverflow上回答了几个问题后，我很高兴能提出我的第一个问题!我们刚刚发现，Google不仅将我们位于www.的网站编入索引，而且还将来自mx1.、2.、wwww.、ww.、nc.网站的URL编入索引。和httpwww。显然这不是好消息，因为Google会认为这些是重复页面。人们建议这意味着我们的网站允许通配符子域，但据我所知，IIS不允许通配符子域。我们正在使用WindowsServer2003，我认为这意味着IIS6。我们托管我们自己的网站。有谁知道为什么会发生这种情况，以及将来如何阻止这种情况发生？我知道Bing不会为这些子域编制索引。提前致谢。

我对Google索引有疑问。问题是我有几个域(语言突变)示例:www.example.com、www.example.co.uk、www.example.de。所以每个站点都有自己的语言和自己的SEO链接，例如:search/zh-cn/building/window/77/1/search/zh-cn/building/window/77/1/search/de-de/gebaude/fenster/77/1/现在Google正在为那些带有错误域的SEOurl链接编制索引，例如www.example.co.uk/search/de-de/gebaude/fenster/77/1/显然

我不希望我页面上的某些div被Google关注，因为它们包含来自其他网站的重复内容，我是否可以阻止这些div被“不关注”'？我看过这个:Methodsforpreventingsearchenginesfromindexingirrelevantcontentonapage但它为此建议使用JavaScript，我不能在我的案例中使用JS，而且这个问题是从2009年开始的，我希望现在情况有所改变？ 最佳答案 如果您真的不想为此使用javascript，唯一可以阻止Google索引您页面的某些内容的方法是使用iframe+robotsn

我有一个看起来像这样的网站:Mainpage(index.php)用户可以在其中研究企业。要在页面(search/index.php)显示结果，页面url将如下所示:/search/index.php?what=plumber&where=montreal&page=1该页面将生成动态链接以访问找到的业务资料。当您单击其中一个链接时，您将到达此处:/entreprises/index.php?companyName=Something如何让之前的链接在Google上被编入索引？ 最佳答案 这似乎是规范URL标记的好情况。您需要为相关

关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎与helpcenter中定义的范围内的编程无关。.关闭8年前。Improvethisquestion我的网站上有一些没有404的错误页面。阻止谷歌将它们编入索引的最佳方法是什么？选项1header("HTTP/1.0410Gone");如果内容没有消失怎么办？例如:该文章不存在。或错误的参数已被捕获选项2它只影响一个页面还是整个域？选项3使用404会产生一些其他问题，我想避免。机器人.txt此选项将不起作用，因为错误将取决于数据库并且不是静态的。

我需要在Google和其他搜索引擎上为我的网站编制索引，尽管我的网站是一个IP地址数据库并且网页是动态生成的，例如example.com/show.php?&ip=ipvalue是否可以通过直接链接如上所示的直接URL，将我在数据库中的每个IP地址编入Google和其他搜索引擎的索引？我知道如何设置适当的站点地图文件来索引静态内容，但我不明白如何告诉搜索引擎索引一个物理上不存在的URL，除非用户传递数据库中的值。 最佳答案 没有人(无论是人类访问者还是搜索引擎机器人)都知道文档是动态创建的还是作为静态文件存在。搜索引擎没有理由将指向

您好，我对谷歌索引有疑问。我通常会看到一些网站，当您在google中查找它们时，它们会显示为这样Websitexhomeofertsjobsabout-ussignupetc...好吧，我有一个在RubyonRails上制作的应用程序，我的主要页面是基于查询的，所以例如我的网站中有3个主要页面，这些是urlmywebsite.com/?mos_popular=truemywebsite.com/?featured=truemywebsite.com/?best_discounts=true就是这样，如您所见，我没有为每个单独的url或页面，它们只是基于查询。所以我的问题是如何告诉谷歌将

因此Google采用:http://www.mysite.com/mypage/#!pageState并将其转换为:http://www.mysite.com/mypage/?_escaped_fragment_=pageState...所以...将具有301状态的内容重定向到类似以下内容是否公平:http://www.mysite.com/mypage/pagestate/然后返回一个HTML快照？我的想法是，如果您有一个现有的html结构，并且您只想添加ajax作为渐进式增强，这将是一个公平的方法，如果Google只是跳过_escaped_fragment_并为重定向的URL编制索

自GoogleCanNowExecuteAJAX&JavaScriptForIndexing,这对seoforgoogle意味着什么？我们必须采取哪些不同的做法，以及我们可以做出哪些改变，以便Google机器人不会抓取所有内容。以前我们拥有的是没有发生过的奢侈，但现在似乎已经发生了。由于谷歌爬虫，这可能会增加带宽。我们如何防止谷歌(以及future任何其他搜索引擎)索引我们的ajax代码？ 最佳答案 首先，Google这样做并不意味着其他人也这样做。这也不意味着他们正式为文章中列出的网站以外的任何人这样做，或者他们做得很好。其次，您