数据抓取相关问题 – 达观数据-文档中心 - 龙8国际
数据抓取相关问题

抓取的目标公众号数量上有限制吗?

理论上没有数量上限,在实际应用中抓取目标公众号总量在千级时就已经满足绝大多数客户需求,我们满足单个客户同时抓取目标公众号数量在万级及以上的需求。

抓取后的数据怎么获得?

抓取后的数据可以通过登录达观大数据平台进行查看,也可以通过达观微信爬虫API接口获取并保存数据,数据抓取API文档参考:数据抓取接口文档

支持实时文章数据的推送吗?

达观微信爬虫系统支持实时文章数据的推送功能,龙8国际只需要在达观大数据平台的抓取配置里添加回调地址,系统会将更新的文章数据POST到该接口。注意文章数据格式与api中定义的文章数据一致,龙8国际提交的回调接口需要正确保存和处理该数据。

在达观后台添加抓取公众号方式?

方式一:登录达观大数据平台,在“微信抓取-抓取配置-可抓取公众号”搜索框中输入公众号名称,在“操作”中点击“☆”即可;
方式二:如果通过方式一未搜索到公众号,可登录微信网页版,复制文章链接至“微信抓取-抓取配置-自定义添加”中,点击“确认”即可。

抓取频率?

抓取频率在天级,根据需求可修改抓取更新频率。