什麼是網頁爬蟲 API?
網頁爬蟲 API 接收你要蒐集的頁面 URL,並傳回頁面內容。API 會處理 IP 輪換、封鎖、重試和 JavaScript 渲染,你無需自己管理代理和瀏覽器。
WING PROXY 網頁爬蟲 API 自動分配住宅 IP,並以 HTML 或 JSON 格式傳回結果。只有成功傳回所需頁面的請求才會計費。
自己管理代理意味著要處理 IP 狀態、重試時機和瀏覽器指紋。網頁爬蟲 API 用一次請求完成這一切,開發者可以專注於如何使用資料。
月度方案起價為每 1,000 次請求 $0.50,大型方案低至每 1,000 次請求 $0.24。
網頁爬蟲 API 每 1,000 次請求多少錢?
網頁爬蟲 API 的價格為每 1,000 次請求 $0.50 至 $0.24,取決於你的月度方案。方案越大,每月包含的結果越多,每 1,000 次的價格越低。
Scale 方案每 1,000 次 $0.24,比 Starter 方案的 $0.50 低 52%。隨著月用量成長,升級檔位可以用同樣的預算蒐集多得多的資料。
月費從用 USDT(TRC20)儲值的餘額中支付,你可以在每月結果數量內自由分配請求。
| 方案 | 月費 | 每月結果數 | 每 1,000 次 |
|---|
| Starter | $10 | 20,000 | $0.50 |
| Growth | $50 | 125,000 | $0.40 |
| Pro | $140 | 400,000 | $0.35 |
| Business | $300 | 1,000,000 | $0.30 |
| Enterprise | $520 | 2,000,000 | $0.26 |
| Scale | $960 | 4,000,000 | $0.24 |
網頁爬蟲 API 如何運作?
傳送帶有 URL 的請求後,API 會選擇合適的 IP 和瀏覽器環境開啟頁面,遇到空白頁或封鎖頁面時自動重試,只傳回成功的結果。你只需儲存和分析傳回的內容。
用 JavaScript 渲染內容的頁面會像瀏覽器一樣開啟,在頁面完全渲染後傳回內容。無需自己執行和管理無頭瀏覽器。
API 會變換裝置和瀏覽器環境,像正常造訪一樣開啟頁面,從而提高取得所需內容而非封鎖頁面的機率。
- 傳送包含 URL 和選項(國家、輸出格式)的請求
- API 分配 IP 並開啟頁面
- 封鎖和失敗自動重試
- 以 HTML 或 JSON 取得成功結果
網頁爬蟲 API 可以蒐集哪些資料?
大多數公開網頁都可以蒐集。常見例子包括電商平台的商品和價格、公開的社群媒體貼文、徵才資訊、房產和旅行價格,以及新聞和部落格文章。
在請求中指定國家,即可取得該國訪客看到的頁面。這在比較各國價格或庫存時尤其有用。
你還可以從 HTML 中提取重複的清單和表格,只保留需要的欄位。以 JSON、CSV 或 HTML 取得結果,直接匯入現有的資料庫或分析工具。
團隊常用這個 API 按國家比較各國電商平台上的同一商品,或按職位和地區蒐集徵才資訊來分析徵才趨勢。
房產資訊、飯店和機票價格等每天變化的資訊可以定時蒐集,便於按日期分析價格趨勢。
與使用自己的代理爬取有什麼不同?
自己爬取需要自行建置代理管理、重試規則和瀏覽器設定。網頁爬蟲 API 替你完成這些工作,爬取程式碼更短,網站結構變化時需要維護的地方也更少。
按成功結果計費,失敗的請求不產生費用。規模越大、目標網站越多樣,API 方式的優勢越明顯。
即使請求堆積,API 也會按順序傳送,讓任務順利完成。適合需要按時執行的定期報告和價格追蹤。
如果你已在執行自己的爬取程式,可以只把經常被封鎖的網站遷移到 API。容易的網站保持原樣,只把難抓的交給 API,節省成本和維護工作。
網頁爬蟲 API 價格包含哪些內容?
每個方案都包含爬取所需的相同功能。
升級後功能不變,只改變每月結果數量和每 1,000 次的價格。先用小方案測試設定,再用同樣的程式碼切換到更大的方案。
- 只為成功結果付費
- 封鎖處理和自動重試
- JavaScript 渲染
- 按國家定位的請求
- HTML 或 JSON 輸出
- 自動分配住宅 IP
- API 金鑰認證
- 在控制台檢視用量
應該選擇哪個網頁爬蟲 API 方案?
先估算每月需要的結果數量,再選擇略有餘量的方案。每天約 700 次適合 Starter,每天約 4,000 次適合 Growth,每天約 13,000 次適合 Pro。
每月超過 4,000,000 次時,我們會透過客製化方案設定你的結果數量和請求速率。費用從用 USDT(TRC20)儲值的餘額中支付,API 文件提供 curl、Python 和 Node.js 程式碼範例。
月度方案涵蓋當月使用的結果。繁忙月份升級檔位,淡季切換到合適的檔位,讓成本與用量相符。
所有價格均以 USD 計價。如果在用完所有結果前升級檔位,剩餘期限繼續按較低價格計算。
如何開始使用網頁爬蟲 API?
用帳戶權杖註冊,用 USDT(TRC20)儲值餘額,選擇方案後建立 API 金鑰。把金鑰填入 API 文件中的範例程式碼,立即傳送第一個請求。
在控制台建立 API 金鑰,並可隨時重新產生。首次儲值到帳後,客服支援也會開放,你可以諮詢適合目標網站的最佳請求設定。
- 點選註冊按鈕建立帳戶權杖
- 用 USDT(TRC20)儲值餘額($50 至 $10,000)
- 選擇適合每月結果數量的方案
- 建立 API 金鑰,用範例程式碼傳送第一個請求