Python 自动化爬虫利器 Playwright

Python 自动化爬虫利器 Playwright

Python Playwright 是一个基于 Node.js 的自动化测试库，它支持多种浏览器（Chrome、Firefox、Safari、Edge等），并提供了一些方便的 API 来模拟用户在浏览器中的行为。本篇将介绍 Python Playwright 库的基本使用教程。

安装

首先需要安装 Python Playwright 库，可以通过 pip 命令进行安装：

pip install playwright

安装完成后，还需要下载与所需版本的浏览器对应的浏览器驱动。

以 Chrome 浏览器为例，在 Python 环境下运行以下命令：

python -m playwright install

执行该命令后，会自动下载与当前的 Chrome 浏览器版本匹配的 Chrome 驱动程序。

使用

使用 Python Playwright 可以实现自动登录、爬取网页信息、自动化测试等功能。下面我们以自动打开网站并获取标题为例，介绍 Python Playwright 的基本用法。

from playwright.sync_api import Playwright, sync_playwright

# 启动浏览器
with sync_playwright() as p:
    browser = p.chromium.launch(headless=False)
    page = browser.new_page()

    # 打开指定网页
    page.goto('https://www.baidu.com/')

    # 获取网页标题
    title = page.title()
    print(title)

    # 关闭浏览器
    browser.close()

代码解释：

1. 导入 Playwright 库和 sync_playwright 方法。
2. 使用 sync_playwright 方法启动浏览器。
3. 使用 browser.new_page() 方法创建新的浏览器页面。
4. 使用 page.goto(url) 方法打开指定网页。
5. 使用 page.title() 方法获取网页标题。
6. 使用 browser.close() 方法关闭浏览器。

小结

Python Playwright 是一个功能强大的自动化测试库，它可以模拟用户在浏览器中的行为，支持多种浏览器，并提供了一些便捷的 API，让我们可以更加方便地操作浏览器。本篇介绍了 Python Playwright 库的基本使用方法，希望能对你有所帮助。