pyppeteer的Browser类及其BrowserContext类

简介: 在昨天的文章中《Python中与selenium齐名的pyppeteer库》我们对pyppeteer做了一个大致的介绍,后面将pyppeteer作为一个系列来讲,大致按照文档的思路来,再配合一些实践代码,来达到深入理解的目的。

在昨天的文章中《Python中与selenium齐名的pyppeteer库》我们对pyppeteer做了一个大致的介绍,后面将pyppeteer作为一个系列来讲,大致按照文档的思路来,再配合一些实践代码,来达到深入理解的目的。

启动器

import asyncio
from pyppeteer import launch

async def main():
browser = await launch()
page = await browser.newPage()
await page.goto('http://example.com')
await page.screenshot({'path': 'example.png'})
await browser.close()

asyncio.get_event_loop().run_until_complete(main())

其中launch是启动器,用来启动浏览器并返回browser类,launch是属于launcher类,该类还有另一种启动方式connect,connect用于连接一个已经打开的浏览器,可以在奔溃后重连,这个比selenium进步很多。
pyppeteer.launcher.connect(options: dict = None, **kwargs) → pyppeteer.browser.Browser

连接到现有的chrome,browserWSEndpoint选项是连接到chrome的必要条件。格式是ws://{host}:{port}/devtools/browser/<id>,这个值可以得到wsEndpoint。

可用选项包括:

browserWSEndpoint(str):要连接的浏览器websocket端点。(必填)
ignoreHTTPSErrors(bool):是否忽略HTTPS错误。默认为 False。
slowMo (int | float):按指定的毫秒数减慢pyppeteer的速度。
logLevel(int | str):用于打印日志的日志级别。默认值与根记录器相同。
loop(asyncio.AbstractEventLoop):事件循环(实验)。

connect方法需要一个必须参数browserWSEndpoint,这个参数通过browser的wsEndpoint属性获得:
brwoser.wsEndpoint
'ws://127.0.0.1:3533/devtools/browser/6687308b-2c43-4ccb-9464-1d2c1fec7eb5'

至于启动器launcher的launch配置参数在《Python中与selenium齐名的pyppeteer库》中已经详细说明。
另一个launcher的方法是launcher.executablePath(),可执行浏览器的默认路径。
from pyppeteer import launcher
launcher.executablePath()
'C:\Users\Administrator\AppData\Local\pyppeteer\pyppeteer\local-chromium\575458\chrome-win32\chrome.exe'

Browser类

通过启动器我们可以创建一个浏览器类Browser,比selenium复杂的地方是多了Browser类,具体的页面操作是在Browser的newPage方法上的,但是Browser也提供了一些优势,与浏览器进程的交互、多个页面对象的上文管理、模拟浏览器的基础设置、创建隐身浏览器;Browser就相当于一个管家,管理具体工作的页面,这也是pyppeteer的优势。
它具有下列一些方法和属性:

browserContexts
返回所有打开的浏览器上下文的列表。在新创建的浏览器中,这将返回单个实例 [BrowserContext]

close()
关闭连接并终止浏览器进程。

createIncogniteBrowserContext()
[已弃用]旧方法。
改用createIncognitoBrowserContext()方法。
创建一个新的隐身浏览器上下文,不会与其他浏览器上下文共享cookie /缓存。
browser = await launch()

Create a new incognito browser context.

context = await browser.createIncognitoBrowserContext()

Create a new page in a pristine context.

page = await context.newPage()

Do stuff

await page.goto('https://example.com')

newPage()
在此浏览器上创建新页面并返回其对象。

pages()
获取此浏览器的所有页面。此处不会列出不可见的页面,例如
background_page,可以通过pyppeteer.target.Target.page()查看。

process
返回此浏览器的进程。
如果创建浏览器的是实例pyppeteer.launcher.connect(),则返回None。
brwoser.process
<subprocess.Popen object at 0x02E03190>

targets()
获取浏览器中所有活动的页面列表。在多个浏览器上下文的情况下,该方法将返回包含所有浏览器上下文中的所有目标的列表。

userAgent()
返回浏览器的原始用户代理。注意页面类可以设置代理setUserAgent()。

version()
获取浏览器的版本。

wsEndpoint
返回websocket端点url。
brwoser.wsEndpoint
'ws://127.0.0.1:4636/devtools/browser/ccb4bd48-4572-468d-8549-1f4f27da8737'

BrowserContext 类

基类:pyee.EventEmitter
BrowserContext用于创建多个独立的浏览器会话,启动浏览器时,它默认使用一个BrowserContext。browser.newPage()在默认浏览器上下文中创建页面,如果页面打开另一个页面,例如通过window.open调用,则弹出窗口也属于初始化创建的浏览器上下文。
可以通过browser.createIncognitoBrowserContext()再创建一个隐身浏览器进程,“隐身”浏览器上下文不会将任何数据写入磁盘。

Create new incognito browser context

context = await browser.createIncognitoBrowserContext()

Create a new page inside context

page = await context.newPage()

... do stuff with page ...

await page.goto('https://example.com')

Dispose context once it's no longer needed

await context.close()

该类具备下列方法:

close()
关闭浏览器上下文,将关闭属于浏览器上下文的所有页面。

isIncognite()
[已弃用]改用isIncognito()方法。

isIncognito()
返回BrowserContext是否隐身。

newPage()
在浏览器上下文中创建新页面。

targets()
返回浏览器上下文中所有活动目标的列表。

BrowserContext 和Browser都是用于创建一个浏览器对象,前者是创建一个隐身浏览器,创建浏览器对象之后进而创建Page对象,页面的所有操作都在Page对象上,下一节将讲Page对象。

重要:因为同步公号的文章格式很难保证,所以后面文章选择性在其他平台同步,欢迎移步公众号(Python之战),每日更新原汁原味!

相关文章
|
7月前
|
Web App开发 数据采集 移动开发
提升Selenium在Chrome上的HTML5视频捕获效果的五个方法
在Selenium中优化Chrome的HTML5视频捕获涉及更新Chrome和ChromeDriver、配置浏览器选项、使用代理IP、调整加载策略及确保安装了正确编解码器。例如,更新驱动程序,添加如`--autoplay-policy`和`--proxy-server`的命令行参数,使用代理以防止被封,设置页面加载策略为&#39;eager&#39;,并安装必要的编解码器来确保视频播放。代码示例展示了如何集成这些优化措施。
263 2
提升Selenium在Chrome上的HTML5视频捕获效果的五个方法
|
2月前
|
Web App开发 数据采集 JavaScript
Selenium和Pyppeteer有什么区别?
Selenium和Pyppeteer均为浏览器自动化工具,适用于网页测试与爬虫开发。Selenium需手动配置环境,支持多浏览器;Pyppeteer自动下载Chromium,仅支持Chrome,但配置简便、性能更优,适合Chrome特定需求的用户。Selenium则适合跨浏览器、跨平台的复杂场景。
|
4月前
|
Web App开发 Java 测试技术
使用selenium+chromedriver+xpath爬取动态加载信息(一)
使用selenium+chromedriver+xpath爬取动态加载信息(一)
124 1
|
4月前
使用selenium+chromedriver+xpath爬取动态加载信息(二)
使用selenium+chromedriver+xpath爬取动态加载信息(二)
74 0
|
7月前
|
数据采集 安全 Java
Java Selenium WebDriver:代理设置与图像捕获
Java Selenium WebDriver:代理设置与图像捕获
|
9月前
|
移动开发 安全 测试技术
『App自动化测试之Appium应用篇』| 继承于selenium常用的元素定位方法有哪些?如何使用?
『App自动化测试之Appium应用篇』| 继承于selenium常用的元素定位方法有哪些?如何使用?
272 0
|
8月前
|
安全 网络安全 API
kotlin安卓开发JetPack Compose 如何使用webview 打开网页时给webview注入cookie
在Jetpack Compose中使用WebView需借助AndroidView。要注入Cookie,首先在`build.gradle`添加WebView依赖,如`androidx.webkit:webkit:1.4.0`。接着创建自定义`ComposableWebView`,通过`CookieManager`设置接受第三方Cookie并注入Cookie字符串。最后在Compose界面使用这个自定义组件加载URL。注意Android 9及以上版本可能需要在网络安全配置中允许第三方Cookie。
|
9月前
|
数据采集 中间件 Python
Scrapy框架 -- 结合selenium获取动态加载数据
Scrapy框架 -- 结合selenium获取动态加载数据
76 0
|
数据采集 Web App开发 JavaScript
在Pyppeteer中正确隐藏window.navigator.webdriver
在Pyppeteer中正确隐藏window.navigator.webdriver
310 0