看哔哩哔哩上线咯

写在前面

终于写好了,一个拖延症大佬近两个月的成果
【点我点我】看哔哩哔哩

4.24封面

缘起

2014注册的B站,混迹B站也有两年了
2015年开始沉迷zhihu,发现了苏丽安大大的kanzhihu.com

【2016.10更新】苏神关了看知乎 = = sigh
看知乎关停

看了实现思路,很受启发
联想到bilibili很弱的排行榜
于是有了做一只哔哩哔哩日报的想法

功能

定期发布日报、周刊、月刊、UP榜(7月已完成)、总排行榜(10月已完成)等数据统计报告
视频详情页提供历史数据查看B站视频下载B站视频封面下载等功能
(在B站视频页地址的bilibili前加上kan,摁下回车)

代码代码

后台的爬虫写的一般
暂时也不准备抽成一个通用的轮子,就不开源啦

每天的十二点,爬虫会准时启动
Step 1: 爬取所有视频的信息,储存起来
Step 2: 与前一天的数据作差,得到当日增量
Step 3: 排序生成日报,发布到站点

目前整个流程大约耗时约2小时(服务器架在国外)
观察了一周,稳定性还可以

下一步做什么

  1. 吃药治拖延症
  2. 提升爬虫的稳定性
  3. 更多的数据分析
  4. 移动支持