pyppeteer 实在是有点坑,坑太多了,填不完。node
使用 pyppeteer 碰到的错误
-
pyppeteer.errors.ElementHandleError: Error: failed to find element matching selector ".btn_ok"
python我使用了下面的代码后出现的:为了实现检测元素是否存在,存在则程序结束,不存在则重试web
btn_ok = await page.Jeval('.btn_ok', 'node => node.style')
浏览器解决办法:微信
btn_ok = await page.querySelector('[class="nc_iconfont btn_ok"]')
websocket可是使用这个以后,当滑动失败以后,重现刷新滑动验证码以后,又会出现下面的错误。scrapy
更新(2020-01-20):socket
以前的理解错误了,这个根本缘由是执行关闭浏览器
await browser.close()
的时候没有权限删除用户的浏览数据。编辑器解决办法:spa
定义浏览器的时候设置参数
'userDataDir': r'D:\temporary'
,指定一个用户能够执行的目录,这样的话就能够了。可是这样的话,至关于保存了用户的浏览数据。
可能又会碰到这么个错误,事件循环打开浏览器后,并无执行,直接返回结果。
看了一下文档,调用
createIncogniteBrowserContext()
直接打开一个无痕浏览器。这样就爽多了关闭的时候须要注意分开关闭,无痕关闭,正常打开的浏览器也须要关闭。
-
pyppeteer.errors.NetworkError: Protocol Error (Runtime.callFunctionOn): Session closed. Most likely the page has been closed.

解决办法:这是因为库自己的问题。pyppeteer 库的问题。

具体可参考 天猫淘宝知乎爬虫神器 -- Pyppeteer
也能够下降 websockets 的版本,改成 6.0 的版本
pip install websockets==6.0
这样问题就会少不少
这个文章会一直更新,碰到了就会更新,未完待续。。。
本文分享自微信公众号 - Python爬虫scrapy(python_scrapy)。
若有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一块儿分享。