阅读 103

selenium控制的爬虫被网站识别出来

在浏览器对象生成之后,尝试利用execute_cdp_cmd()进行伪装。

# 复制粘贴以下代码到对象生成之后,再去get可能可以解决问题
# 如果不能解决问题,说明网站通过别的方式识别出了爬虫,需继续完善
driver.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument", {
               "source": """
      Object.defineProperty(navigator, ‘webdriver‘, {
        get: () => undefined
      })
    """
          })

原文:https://www.cnblogs.com/CJTARRR/p/15006038.html

文章分类
代码人生
版权声明:本站是系统测试站点,无实际运营。本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 XXXXXXo@163.com 举报,一经查实,本站将立刻删除。
相关推荐