使用 pyppeteer 碰到的错误


pyppeteer 实在是有点坑,坑太多了,填不完。

使用 pyppeteer 碰到的错误

  • pyppeteer.errors.ElementHandleError: Error: failed to find element matching selector ".btn_ok"

    我使用了下面的代码后出现的:为了实现检测元素是否存在,存在则程序结束,不存在则重试

    btn_ok = await page.Jeval('.btn_ok', 'node => node.style')

    mark

    解决办法:

    btn_ok = await page.querySelector('[class="nc_iconfont btn_ok"]')

    但是使用这个之后,当滑动失败之后,重现刷新滑动验证码之后,又会出现下面的错误。

    更新(2020-01-20):

    之前的理解错误了,这个根本原因是执行关闭浏览器 await browser.close() 的时候没有权限删除用户的浏览数据。

    解决办法:

    定义浏览器的时候设置参数 'userDataDir': r'D:\temporary',指定一个用户可以执行的目录,这样的话就可以了。

    但是这样的话,相当于保存了用户的浏览数据。

    可能又会碰到这么个错误,事件循环打开浏览器后,并没有执行,直接返回结果

    看了一下文档,调用 createIncogniteBrowserContext()直接打开一个无痕浏览器。这样就爽多了

    关闭的时候需要注意分开关闭,无痕关闭,正常打开的浏览器也需要关闭。

———————————-分割线 2020-04-23 更新————————————————————————————–

使用 await page.Jeval 又出现了同样的问题

解决: 增加下面的代码

await page.waitFor(10)
await page.waitForNavigation()

并且给 await page.Jeval 增加异常处理。不使用 if else 进行判断。如果有异常就是没有找到元素。没有异常那就是元素被找到。


  • pyppeteer.errors.NetworkError: Protocol Error (Runtime.callFunctionOn): Session closed. Most likely the page has been closed.

mark

解决办法:这是由于库本身的问题。pyppeteer 库的问题。

mark

具体可参考 天猫淘宝知乎爬虫神器 – Pyppeteer

也可以降低 websockets 的版本,改为 6.0 的版本

pip install websockets==6.0

这样问题就会少很多

这个文章会一直更新,碰到了就会更新,未完待续。。。


文章作者: Andrew
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 Andrew !
评论
 上一篇
idea激活码_jetbrains全家桶激活码_无须任何破解步骤 idea激活码_jetbrains全家桶激活码_无须任何破解步骤
话不多说,我知道你的进来是想要idea破解或者idea激活码,或者是要jetbrains系列的激活码,我公众号想要一个关注,就这么简单,我有正版激活码,idea激活、pycharm激活、webstorm激活、golang激活等通用获取激活码
2020-02-26
下一篇 
破解无限 debugger 破解无限 debugger
破解无限 debugger这几天碰到了一个网站,打开 F12 直接 debugger ,点击下一步,一直 debugger什么都做不了。 然后就开始百度,看大家怎么解决的。基本上大多数都是通过查看调用栈,找到调用函数的地方,然后在 con
2020-01-02
  目录