纯cdp自动化框架sbcdp

163 阅读2分钟

前言

闲来无事,想学习一下CDP协议,于是便看搜罗了一下cdp的开源项目,从playwright看到DrissionPage,最后无意中发现SeleniumBase这个自动化测试框架中也支持了CDP并且使用异步websockets实现的(并且提供了过5s盾的案例),于是萌生了将CDP从SeleniumBase剥离出来实现一个支持异步的python自动化框架的想法。

做了个对比:

  • playwright:同时支持同步和异步,但是需要node,底层也是对node的封装。
  • DrissionPage:不支持异步
  • SeleniumBase:支持WebDrive和CDP,丰富易用的api(但是多是方便自动化测试)

可行,开干

正文

这么繁杂的工作怎么能自己动手呢?直接将SeleniumBase拉下来,丢给ai,开始和ai掰扯指挥ai干活,让其帮我将CDP部分的代码剥离出来,很快啊,ai就将cdp剥离了出来,并跑通了ai自己编写的测试用例。看看ai干的咋样,基本没啥问题,于是调整了一下目录结构,手动删除一些没删除干净的无用代码。这样一个同步的cdp自动化框架基本就完成了。

SeleniumBase关于CDP部分的代码是使用异步的websockets实现的,但是SeleniumBase却使用loop.run_until_complete去跑异步代码,硬生生将异步改成了同步。这与我的初衷相悖,于是继续让ai将同步改回异步。ai三下五除二就搞定了,一个异步的cdp协议的自动化框架就初具雏形了。

为了同时支持异步同步,我便手动增加了一些代码,让其支持同步,调整项目结构,修复bug,最后让ai写个文档收个尾。

很快剥离工作便完成了,因为是从SeleniumBase剥离出来的CDP协议,我便将这个项目命名为sbcdp。

项目地址:github.com/ConlinH/sbc…

使用

安装

pip install sbcdp

示例

import asyncio
from sbcdp import AsyncChrome as Chrome


async def main():
    async with Chrome() as chrome:
        await chrome.get("https://httpbin.org/forms/post")
        await chrome.type('input[name="custname"]', "sbcdp 用户")
        await chrome.type('input[name="custtel"]', "123-456-7890")
        await chrome.type('input[name="custemail"]', "test@cdp-base.com")
        await chrome.type('textarea[name="comments"]', "这是使用sbcdp框架的测试")

        # 选择单选按钮
        await chrome.click('input[value="large"]')
        # 等待元素
        element = await chrome.find_element("button")
        await element.click()
        await chrome.sleep(2)


if __name__ == '__main__':
    asyncio.new_event_loop().run_until_complete(main())
    # asyncio.run(main())

5s盾示例

import asyncio
from contextlib import suppress

from sbcdp import AsyncChrome as Chrome


async def main():
    # url = "https://fractal-testnet.unisat.io/explorer"
    url = "https://steamdb.info/"
    # url = "https://cn.airbusan.com/content/individual"
    # url = "https://pastebin.com/login"
    # url = "https://simple.ripley.com.pe/"
    # url = "https://www.e-food.gr/"
    async with Chrome() as chrome:
        await chrome.get(url)
        await chrome.sleep(5)
        with suppress(Exception):
            await chrome.mouse_click('input[type=checkbox]')
        assert 'cf_clearance' in {c.name: c.value for c in await chrome.get_all_cookies()}
        print({c.name: c.value for c in await chrome.get_all_cookies()})


if __name__ == "__main__":
    asyncio.new_event_loop().run_until_complete(main())
    # asyncio.run(main())

最后

实现比较仓促,估计还有很多未知bug,看着用。