煎蛋网无聊图板块数据分析
【大图预警】
刚开始学习爬虫,爬了一些有意思的东西。煎蛋网的无聊图板块汇集了大量有意思的图片,翻了翻网页源码开始爬之。
由于煎蛋创始人sein曾在无聊图里发图谴责爬虫行为,所以我并没有使用那些高频的方法,而是每抓取一页,随机等待5到10秒,而且是定时在深夜才开始爬,断断续续爬完全部的无聊图前后花了我半个月的时间,捎带著把妹子图也爬完了。
(这是我的栏位)本来我最初的目的是把所有的无聊图都下载到本地收藏,但等爬完所有图片后:
太大了,等以后有时间用单位的200M网来下吧,正好在知乎上看到有大神推荐微软的power bi工具,手里有个项目也是数据分析的,抱著学习的想法,准备试著能不能从这些数据里分析出什么结论。P.S.:这方面我还是纯属小白,接触数据分析这方面也就四天左右吧,班门弄斧了。
先来认识几个人,经常刷无聊图的应该都很眼熟:
(图一 应该可以点开查看大图)「已屏蔽」这个ID里面很大一部分应该是当年的电池哥。
(图二 电池哥的马甲,可怕)(图三 各年的图片类型,并没有什么卵用反正我就是做了个图)(图四 历年来的发图量)(图五 历年来活跃用户数)(图六 所有用户的发图比例)
(图七 最终还是操起我的SQL……)
实在是分析无力,Power BI是个好东西,但我还处在入门阶段,暂时只能得出这么些东西了。
下面发一些有意思的图吧(我就不放出来了,大家根据自己的网路状态自行点击源链接):
赞成数最高的十张图:
10、OO [3802] XX [251] via wjking
OO [3802] XX [251] via wjking
9、OO [4024] XX [26] via caaiaiai
8、OO [4145] XX [51] via sein
7、OO [4155] XX [38] via 张较瘦
6、OO [4171] XX [58] via finger
5、OO [4478] XX [220] via rebecca
4、OO [4686] XX [51] via 好色猴子
3、OO [5084] XX [63] via sein
2、OO [7013] XX [53] via 六小0童
1、OO [13608] XX [76] via 膝盖中箭:
反对数最高的十张图:
10、OO [1672] XX [3077] via 哈哈哈
9、OO [26] XX [3087] via 69侠
8、OO [114] XX [3111] via 阿斯顿发的撒个
7、OO [13] XX [3208] via 不许黑我女神
6、OO [165] XX [3508] via 不许黑我女神
5、OO [470] XX [3591] via xv
4、OO [51] XX [3604] via 不许黑我女神
3、OO [36] XX [3624] via 不许黑我女神
2、OO [353] XX [4061] via asta
1、OO [18] XX [5708] via mercurypluto
等有时间再放妹子图吧,今天太晚了~
推荐阅读: