Feedstock logo

Feedstock

TypeScriptでクローリング・スクレイピングと構造化データの抽出

Artificial Intelligence Developer Tools Open Source

Feedstockは、TypeScript開発者向けの高速なウェブクローラー/スクレーパー。 Bun上で動作し、Playwright/CDP/Lightpandaバックエンドを選択可能。ディープクロール、マークダウン生成、構造化抽出(CSS/XPath/正規表現)、ボット対策検知、プロキシ回転、SQLiteキャッシュを標準搭載。BFS/DFS/BestFirst による深いクロールや変更追跡、AI向けのクリーンな出力を特徴とするオープンソースのツール。

投票数: 5
← 投稿一覧に戻る