机器人会抓取 iframe 吗？

StackOverflow https://stackoverflow.com/questions/1453296

  •  12-09-2019
  •  | 
  •  

题

机器人在 iframe 内爬行常见吗？他们是如何做到的？他们会立即为其建立索引，还是只是“记住”URL 并有时稍后继续？

有帮助吗？

解决方案

如果某个地方有 href/src 链接 索引 （IE。 爬行的) HTML/XHTML 页面，它将被索引。页面是否通过 iFrame 呈现给用户无关紧要。

其他提示

内部框架很容易抓取如其他人指出。不过，我想澄清的您的网页的不会得到“信用”为内容的iframe。所以，你的网页实际上不会得到索引为包含内容 - 它仅仅是一个跳板爬虫索引的iframed网页上，并直接链接到它。这是很重要的理解，如果在iframe指向的内容是不是在您的域，你期望利用iframe的内容为自己的网页的知名度。从你的问题不知道是否这是你的意图。

我可以想象左右;我知道Googlebot便。

如果有疑问，你可以控制使用robots.txt和你的页脚一些额外的链接的东西。看向下链接在该页面的底部，例如

的iframe只是包含一个HTML内容像任何其他HTML页面。结果 所以，是的引擎机器人将抓取他们。

和你可能希望他们抓取，因为这可能是您的内容。结果 然而，你可能不希望用户直接访问你的网站的框架。

所以，你可能要检测的情况下框架。所以，你会使用JavaScript来增加他们，他们不存在。

<script type="text/javascript">
    if (top.frames.length==’0′) {
        window.location.replace("Appropriate url with frames");
    }
</script>

作为最后的评论我建议你的不使用框架的。他们强烈不推荐，因为他们是绝对反对任何无障碍的政策。结果 他们让没有在他们的主页看到的任何内容您的网站。因此，它显然不利于你的排名。

如果你能避开他们，这样做（和你总是可以）。

许可以下： CC-BY-SA 和 归因
不隶属于 StackOverflow
scroll top