关于如何禁止爬虫查看HTML代码

Question

类似于796.com 当打开网页查看到的源代码 没有网页的关键字 而是一些JS引用 我想类似于这样或者其他方法 混淆我本身的网站HTML 让爬虫无法工作 我这里的爬虫也指的一些机器人

Answer 1

如果排除你这个打广告嫌疑的话，实话告诉你，你那个796什么的更好爬，做爬虫的最喜欢你这么搞了，所以最后，我可以告诉你根本不存在让爬虫无法工作的问题，除非你牺牲用户体验，每五分钟刷个验证码啥的出来。