自动重定向/地理位置和搜索引擎优化 - 检测其是否正在访问站点的蜘蛛

Question

我有一个网站，搜索排名已被填补。它 应该 非常友好，因为它是使用XHTML/CSS构建的，并且已经与SEO工具包相对。

我唯一能认为Google可能很烦人的是

• 关键字是整个站点相同的，而不是专门的。 （看不到为什么这是一笔巨大的交易

• 已经设置了另一个仅指向我的网站的URL（不重定向）（再次 - 没什么大不了的）

• 非英国用户会自动将其宣传到该网站的美国版本上，该网站是另一个品牌。我想这可能是问题所在。如果Google Spiders我的网站来自美国，那么它将永远不会获得英国版本

因此，问题是可以检测到谁在访问您的网站是否实际上是蜘蛛网的搜索引擎。在这种情况下，我不想做任何地理位置

Answer 1

1. 请勿在整个网站上使用相同的关键字。尝试每页使用特定的关键字。
2. 请勿将几个URL：S点直接到同一位点，因为这会导致来自不同域的嵌入链路对不同的域进行处理。如果您通过重定向指向URL，则将所有的内联链路添加到目标域，从而增加其“ Inlink分数”。
3. 要检测是来自爬虫的请求，请使用browsercaps项目： http://owenbrady.net/browsercaps/