自動データ収集のためのAPI統合ソリューション
REST APIに基づく自動化ガイド:
- ベースコール: GETリクエスト https://pure.md/目标URL、MarkdownまたはJSONを返す(Acceptヘッダ制御)。
- 事前審査例:{"prompt": "商品名と価格のみを抽出"}。
- 定時業務Cloudflare Workersのようなサーバーレスアーキテクチャは、時間指定のクロールを設定します。
- エラー処理429 ステータスコードは自動的にバックアウ トし、リトライする。
パフォーマンス最適化のヒント
1.gzip圧縮を使用した一括リクエスト
2.繰り返しのクロールを減らすために、If-Modified-Sinceヘッダーを設定する。
3.ビジネスユーザーは長時間のウェブソケット接続が可能
4.過負荷を避けるためにAPI使用量を監視する(無料ユーザーは60回/分制限)
この答えは記事から得たものである。pure.md:URLの前に "pure.md/"を挿入して、きれいなテキストを取り出す。について































