什麼是 WebCrawler API？
WebCrawler API 是一個網頁爬蟲和資料擷取API，可將網站、文件和說明中心轉換為乾淨的Markdown。它自動處理代理、重試、無頭瀏覽器、驗證碼和反機器人保護，使其易於與AI代理和知識產品整合。
如何使用 WebCrawler API？
- 若要使用WebCrawler API，請在儀表板上註冊以取得API金鑰。然後向 /v1/crawl 端點發送HTTP POST請求，包含目標URL和參數。API會傳回作業ID；使用該ID透過作業狀態端點取得爬蟲結果。可與編碼代理、Zapier、Make、n8n整合，或使用各種語言的SDK。
WebCrawler API 的核心功能
- Markdown擷取及內容清理
- 智慧快取，回應速度提升最多10倍
- 變更偵測來源，用於監控網站更新
- 自動代理輪換、重試和驗證碼解決
- JavaScript渲染和反機器人繞過
- 與Zapier、Make、n8n和Integrately的無程式碼整合
- 支援JavaScript、Python、PHP、Java和.NET的SDK
- 按需付費，無月度承諾
用戶評價
5.0
/ 50 則評價
5 星
0
4 星
0
3 星
0
2 星
0
1 星
0
暫無評價，來寫第一條吧
相似產品
WebCrawler API 推廣元件
使用網站徽章展示您的產品已收錄於 Hootool，推動社群對工具發現與傳播的支持。推廣元件可輕鬆新增到首頁或頁尾。