OpenClaw 入门指南

OpenClaw 是一款轻量级的开源自动化工具，主要用于数据抓取和任务调度。以下内容将介绍其核心功能、安装方法及代码示例。

安装 OpenClaw

通过 pip 安装最新版本：

pip install openclaw

验证安装是否成功：

import openclaw
print(openclaw.__version__)

基本用法

OpenClaw 的核心是 Claw 类，用于定义抓取任务。以下是一个简单的网页抓取示例：

from openclaw import Claw

# 初始化抓取任务
claw = Claw(
    target_url="https://example.com",
    output_format="json"
)

# 执行抓取
result = claw.fetch()
print(result)

数据提取与解析

OpenClaw 支持 XPath 和 CSS 选择器提取数据。以下示例从网页中提取标题和链接：

claw = Claw(
    target_url="https://example.com",
    selectors={
        "title": "//h1/text()",  # XPath
        "links": "a::attr(href)"  # CSS 选择器
    }
)

result = claw.fetch()
print(result)

任务调度

OpenClaw 可以与调度工具（如 APScheduler）结合，实现定时任务：

from apscheduler.schedulers.blocking import BlockingScheduler
from openclaw import Claw

def scheduled_task():
    claw = Claw(target_url="https://example.com")
    result = claw.fetch()
    print(result)

scheduler = BlockingScheduler()
scheduler.add_job(scheduled_task, 'interval', hours=1)
scheduler.start()

高级功能

1. 动态页面抓取
   使用 Selenium 集成处理 JavaScript 渲染的页面：

   from openclaw import Claw
   
   claw = Claw(
       target_url="https://dynamic-example.com",
       use_selenium=True
   )
   result = claw.fetch()
   

2. 数据存储
   将抓取结果保存到数据库（如 SQLite）：

   import sqlite3
   from openclaw import Claw
   
   claw = Claw(target_url="https://example.com")
   result = claw.fetch()
   
   conn = sqlite3.connect('data.db')
   cursor = conn.cursor()
   cursor.execute("CREATE TABLE IF NOT EXISTS scraped_data (content TEXT)")
   cursor.execute("INSERT INTO scraped_data VALUES (?)", (str(result),))
   conn.commit()
   

错误处理

OpenClaw 提供异常捕获机制，确保任务稳定性：

try:
    claw = Claw(target_url="https://example.com")
    result = claw.fetch()
except Exception as e:
    print(f"抓取失败: {e}")

通过以上示例，可以快速上手 OpenClaw 的核心功能。更多高级特性（如分布式抓取、代理支持）可参考官方文档。