如何防止搜索引擎仅索引我的页面的一部分
-
06-07-2019 - |
题
最好的方法是什么?
把它放在iframe中。
使用javascript加载后设置此部分?
感谢
解决方案
这与雅虎有关:
通过Javascript加载内容也会阻止它。
iframe我认为不会,因为它可以看到源并最终可以抓取它(除非机器人文件指定该文件为不可破解或元标记(并且仅适用于符合robots.txt的蜘蛛)
其他提示
这会有帮助吗? 机器人排除标准
不隶属于 StackOverflow
题
最好的方法是什么?
把它放在iframe中。
使用javascript加载后设置此部分?
感谢
解决方案
这与雅虎有关:
通过Javascript加载内容也会阻止它。
iframe我认为不会,因为它可以看到源并最终可以抓取它(除非机器人文件指定该文件为不可破解或元标记(并且仅适用于符合robots.txt的蜘蛛)
其他提示
这会有帮助吗? 机器人排除标准