爬虫抓数字货币行情数据,新手最容易踩的五个坑我全替你试过了
爬虫抓数字货币行情数据,新手最容易踩的五个坑我全替你试过了
写爬虫抓数字货币数据这事,干了三四年,坑基本踩遍了。很多人一上来就写HTTP轮询去拉交易所接口,觉得数字货币公开API随便调,结果上线跑两小时就崩了。数字货币市场7×24不停,你的爬虫也得好用7×24不歇,别拿做普通网页抓取那套思路硬套。
交易所的API rate limit比你想象得凶得多。Binance限制2400权重/分钟,OKX、Bybit每家规则还不一样,你写个通用爬虫去轮询价格,一个循...