利用selenium进行爬虫时,防止js检测驱动的方法

时间:2020-01-07 00:09:37   收藏:0   阅读:781

浏览器前端通常会做一下反爬虫的手段,如下

webdriver = window.navigator.webdriver;
if(webdriver){    
console.log(‘你这个傻逼你以为使用Selenium模拟浏览器就可以了?‘)
} else {    
console.log(‘正常浏览器‘)
}

如何利用爬虫针对js代码的反爬手段进行规避,以谷歌浏览器为例,进行设置,代码如下

from selenium import webdriver
option = webdriver.ChromeOptions() option.add_experimental_option(excludeSwitches, [enable-automation]) driver = webdriver.Chrome(options=option)

原文:https://www.cnblogs.com/ffrs/p/12158632.html

评论(0
© 2014 bubuko.com 版权所有 - 联系我们:wmxa8@hotmail.com
打开技术之扣,分享程序人生!