使用pyppeteer访问页面。解决链接时间过短,链接中断的问题

使用pyppeteer访问页面。解决链接时间过短,链接中断的问题


1、最常的参数headless
最常的参数headless,如果它的值为True或者默认不设置,在启动的时候我们是看不到任何界面的,如果它的值为False,在启动的时候就可以看到界面。一般使用False。
2、args参数
启动界面时,我们会在浏览器上边看到“Chrome正在受到自动测试软件的控制”,关闭这个提示需要增加args参数:args=[’–disable-infobars’]。但是!有些网站还是可以检测到webdriver,例如发生滑块报错等。
3、解决webdriver检测
只需要使用JavaScript赋值为false即可,代码如下:
await page.evaluate(’’’() =>{ Object.defineProperties(navigator,{ webdriver:{ get: () => false } })}’’’)
4、userDataDir参数
设置用户目录,第一次登陆时输入用户名和密码,后面再登陆就不需要再输入密码了,同时会在当前目录自动生成一个userdata文件夹userDataDir=’./userdata’
上代码
使用pyppeteer访问页面。解决链接时间过短,链接中断的问题
访问之后会出现链接时间过短,链接中断的问题
解决方法:(减号删除该行,加号增加该行)
修改pyppeteer/connection.py中44行:
– self._url, max_size=None, loop=self._loop)
+self._url, max_size=None, loop=self._loop, ping_interval=None, ping_timeout=None)