技术教程

爬爬:掌握你需要的数据 / 大数据平台TooBigData

写在开头:你知道抖音常来老司机最多的视频是那些不?抖音最火的网红是谁(粉丝、常来老司机等)?如果你不知道,看完本次的推荐,相信你就知道了。

TooBigData,是一个数据平台,通过爬虫将微博、抖音、淘宝、天猫、京东等平台上的数据进行集中,方便用户进行分析或者抖机灵(相信作者肯定不喜欢我这样不专业的介绍..)跟之前推荐的 豆瓣历史 30 天,查看正在上映电影的豆瓣评分历史走势图 有一些相似。
TooBigData提供了一个浏览器的爬虫工具叫做爬爬http://toobigdata.com/papa-download)可以帮助你对轻松、便捷对你想要的数据进行挖掘采集。
庹厑在测试使用上发现爬爬还有些不足,不过上手还算简单,相信后面会变得更好。

爬爬目前支持的数据类型有:自媒体数据
微信文章数据
今日头条文章数据
电商数据
京东商品
京东商品评论
天猫商品
天猫商品评论
亚马逊商品
亚马逊商品评论
Kickstarter 评论
Kickstarter 用户
淘宝商品数据
淘宝众筹数据
大众点评数据
社交网络数据
微博用户信息
微博用户关注
抖音视频数据
火山小视频数据
房产数据
链家租房数据
我爱我家租房数据
影视数据
豆瓣电影数据

站长 @数据青年 不仅是个爬虫大触,还是一个”文艺”青年,从站点上博文更新情况就可以看出,对爬虫、大数据比较感兴趣的朋友可以去折腾折腾。


PS:爬爬(插件)使用说明介绍项目来龙去脉:为什么会有爬爬?抖音网红排名(文章开头不知道答案的来看吧)

体验截图:

 

               

 测试获取下京东上冰箱的情况

抓取之后的本地页面

 

具体使用还是看官方文档吧····

网站地址:http://app.toobigdata.com

 

(0)

本文由 爱生活,爱Fuli 作者:haofun365 发表,转载请注明来源!

关键词:

热评文章

发表评论

电子邮件地址不会被公开。 必填项已用*标注