Scrapling

scrapling - 高度なWebスクレイピング

tegnike Updated

File contents

scrapling - 高度なWebスクレイピング

Scraplingライブラリを使ったアンチボット対応Webスクレイピングシステム。

Features

  • Cloudflare対策
  • JavaScriptレンダリング対応
  • ブラウザフィンガープリント偽装
  • 自動リトライ・セッション管理

Usage

@nikechan Scraplingで{URL}取得して
@nikechan {URL}の内容教えて(Scrapling使用)

Dependencies

  • scrapling>=0.4

Example

from scrapling import Fetcher

fetcher = Fetcher()
page = fetcher.get("https://example.com")
print(page.text)

tegnike/openclaw-nikechan-discord commit 25e275eb37

Frequently asked questions

npx get-skill add tegnike/scrapling