自动化数据收集的API集成方案
基于REST API的自动化操作指南:
- ベースコール:GET请求https://pure.md/目标URL,返回Markdown或JSON(Accept头控制)
- 高级筛选:POST请求配合prompt参数,如{“prompt”:”仅提取产品名称和价格”}
- 定時業務:Cloudflare Workers等无服务器架构设置定时抓取
- エラー処理:429状态码时自动退避重试,500错误切换备用终端节点
性能优化技巧:
1. 批量请求使用gzip压缩
2. 设置If-Modified-Since头减少重复抓取
3. 商业用户可开启websocket长连接
4. 监控API使用情况避免超额(免费用户60次/分钟限制)
この答えは記事から得たものである。pure.md:URLの前に "pure.md/"を挿入して、きれいなテキストを取り出す。について