使用 pyppeteer 碰到的错误

pyppeteer 实在是有点坑,坑太多了,填不完。node

使用 pyppeteer 碰到的错误

  • pyppeteer.errors.ElementHandleError: Error: failed to find element matching selector ".btn_ok"python

    我使用了下面的代码后出现的:为了实现检测元素是否存在,存在则程序结束,不存在则重试web

    btn_ok = await page.Jeval('.btn_ok', 'node => node.style')浏览器

    解决办法:微信

    btn_ok = await page.querySelector('[class="nc_iconfont btn_ok"]')websocket

    可是使用这个以后,当滑动失败以后,重现刷新滑动验证码以后,又会出现下面的错误。scrapy

    更新(2020-01-20):socket

    以前的理解错误了,这个根本缘由是执行关闭浏览器 await browser.close() 的时候没有权限删除用户的浏览数据。编辑器

    解决办法:spa

    定义浏览器的时候设置参数 'userDataDir': r'D:\temporary',指定一个用户能够执行的目录,这样的话就能够了。

    可是这样的话,至关于保存了用户的浏览数据。

    可能又会碰到这么个错误,事件循环打开浏览器后,并无执行,直接返回结果

    看了一下文档,调用 createIncogniteBrowserContext()直接打开一个无痕浏览器。这样就爽多了

    关闭的时候须要注意分开关闭,无痕关闭,正常打开的浏览器也须要关闭。

  • pyppeteer.errors.NetworkError: Protocol Error (Runtime.callFunctionOn): Session closed. Most likely the page has been closed.

解决办法:这是因为库自己的问题。pyppeteer 库的问题。

具体可参考 天猫淘宝知乎爬虫神器 -- Pyppeteer

也能够下降 websockets 的版本,改成 6.0 的版本

pip install websockets==6.0

这样问题就会少不少

这个文章会一直更新,碰到了就会更新,未完待续。。。


本文分享自微信公众号 - Python爬虫scrapy(python_scrapy)。
若有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一块儿分享。

相关文章
相关标签/搜索