python selenium 有界面模式正常,个别网站无界面模式运行报错403 怎么办?

新手上路,请多包涵

我使用正常有界面模式运行都是正常的。
但是使用了无界面模式,(主要是要配置到服务器上)我用的显示等待,所以报错是 TimeoutException异常。没有找到元素。我试着排查问题。
使用print(browser.page_source) 发现输出的内容如下

<html><head><title>403 Forbidden</title></head>
<body>
<center><h1>403 Forbidden</h1></center>


<center>Apple</center>

<!-- a padding to disable MSIE and Chrome friendly error page -->
<!-- a padding to disable MSIE and Chrome friendly error page -->
<!-- a padding to disable MSIE and Chrome friendly error page -->
<!-- a padding to disable MSIE and Chrome friendly error page -->
<!-- a padding to disable MSIE and Chrome friendly error page -->
<!-- a padding to disable MSIE and Chrome friendly error page -->
</body></html>

这是什么原因,就单单这一个网址是这样的。其他的例如百度等都可以获取到网页源码的。
我的无界面配置如下:

# 创建chrome参数对象
    options = webdriver.ChromeOptions()
    options.add_argument('--no-sandbox')  # 解决DevToolsActivePort文件不存在的报错
    options.add_argument('window-size=1600x900')  # 指定浏览器分辨率
    options.add_argument('--disable-gpu')  # 谷歌文档提到需要加上这个属性来规避bug
    options.add_argument('--hide-scrollbars')  # 隐藏滚动条, 应对一些特殊页面
    options.add_argument('blink-settings=imagesEnabled=false')  # 不加载图片, 提升速度
    options.add_argument('--headless')  # 浏览器不提供可视化页面. linux下如果系统不支持可视化不加这条会启动失败
    browser = webdriver.Chrome(options=options)

请问是否需要加什么内容呢?为什么出现403错误,请问怎么解决?### 问题描述

阅读 4.6k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题