这是一个爬取bilibili的全站热门排行榜的视频和弹幕。
以下为主要思路：
- 爬取把全站排行榜TOP100先拿下,得到全站热门排行榜的视频信息；
- 根据上一步获取视频的aid和bvid 就是视频id和视频编码；
- 第三步通过aid+bvid获取cid 就是视频的弹幕id
- 通过视频的cid获取具体的弹幕内容
- The End.
预览select * from aid_detail limit 10;
| aid | title | dynamic | bvid | view | danmaku | reply | favorite | coin | share | like | dislike | score | his_rank | duration | desc | tid | tname | owner_mid | owner_name |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 929494916 | 我疯了 | 爷青回 | BV17K4y1D7BD | 2371586 | 30823 | 5472 | 33296 | 90425 | 5974 | 380162 | 0 | 3051368 | 1 | 799 | 微博@徐大虾咯咯 | 17 | 单机游戏 | 13354765 | 徐大虾咯 |
| 929499534 | 将猪皮埋入200℃的沙子中，巨好吃？竟像鞭炮一样爆裂！！！ | 天空一声巨响～二喵的妈见打视频闪亮登场！！！#美食圈##搞笑##美食# | BV1bK4y1D7M2 | 2188058 | 7258 | 4311 | 30652 | 167861 | 3626 | 303511 | 0 | 3032129 | 2 | 430 | 砂锅粉丝可以做呀！配料打在05：56呦~ | ||||
| 已经开始着手搜集厨房小白料理，大家有啥想看的也可以告诉我呦 |
|||||||||||||||||||
| 二喵的唠嗑小群：273634334 | 76 | 美食制作 | 29329085 | 二喵的饭 | |||||||||||||||
| 802123903 | 我必须立刻融合【水无月菌】 | 英雄绝不临阵脱逃！ | BV1Vy4y1E74G | 1808812 | 10841 | 6727 | 54716 | 222543 | 15412 | 240151 | 0 | 2894445 | 3 | 617 | 剪的时间比较久，希望大家能喜欢！ | ||||
| 希望请三连点个关注！！感谢观看！！ | |||||||||||||||||||
| 有带过1张电子龙，然后发现每局必上手_(:з)∠)_ | 173 | 桌游棋牌 | 1958342 | 水无月菌 | |||||||||||||||
| 544478853 | 《山河令》磕拉了？我从来没见过这么铁的兄弟情！ | 这么铁的兄弟情都有人磕拉了？！我不同意！ | BV1Bi4y1N7Hj | 1221291 | 25367 | 10198 | 33414 | 97049 | 13248 | 215138 | 0 | 2703337 | 4 | 526 | 何为江湖？ | ||||
| 有人的地方，就有江湖。 | |||||||||||||||||||
| 有兄弟的地方，便是江湖。 | |||||||||||||||||||
| - | |||||||||||||||||||
| 喜欢的话欢迎点赞三连，当然也可以顺便关注我一下， | |||||||||||||||||||
| 听说现在关注的，以后都是尊贵的老江湖啦 :D | 182 | 影视杂谈 | 5870268 | 三代鹿人 | |||||||||||||||
| 204505070 | “曾经有人说，我们做不到” | BV1fh411D7ju | 1568569 | 6496 | 5005 | 67615 | 134878 | 33481 | 200200 | 0 | 2658675 | 5 | 283 | 今天很多习以为常的事，背后都有一些女性推动历史前进的身影。 | |||||
| 很高兴能和宝剑嫂、-筷子夹豆腐-、麻雀喳喳野行记、RachelR星星、乡村教师日记、是当归哦、vivi可爱多、巡天者叶梓颐、在下小苏九位女UP主一起用混剪的形式让更多人知道“她们”的故事 | |||||||||||||||||||
| 记住她们吧，祝大家国际劳动妇女节快乐。#致敬了不起的她# | 183 | 影视剪辑 | 335692980 | 百万剪辑狮 | |||||||||||||||
| 587119076 | 整 蛊 小 潮 院 长 | 整 蛊 小 潮 院 长 | BV1mz4y117tu | 1755990 | 5918 | 2308 | 26694 | 61346 | 3482 | 236044 | 0 | 2503614 | 6 | 213 | 杜海皇开除记01#） | ||||
| 微博@杜海皇 | |||||||||||||||||||
| 喜欢这期视频记得一键三连！ | 138 | 搞笑 | 178029850 | 杜海皇 | |||||||||||||||
| 886933190 | 拍视频三年了，两帅小伙第一次吃到这么好吃的烧烤！ | 谢谢 | BV1sK4y1J7RA | 1439876 | 10905 | 3117 | 15199 | 60400 | 2749 | 210268 | 0 | 2216347 | 7 | 450 | 好久不见 | ||||
| 甚是想念 | |||||||||||||||||||
| 一键三连 | |||||||||||||||||||
| 等你出现 | 215 | 美食记录 | 337521240 | 记录生活的蛋黄派 | |||||||||||||||
| 886902072 | 300万福利 钢铁直女第一次尝试职场淑女妆 | 阿 时隔一年美妆终于来了，大家久等了。 | |||||||||||||||||
| 然而因为技术过于辣鸡，导致后面有点垃垮/// | |||||||||||||||||||
| 正好今天过生日，所以大家轻喷=。= | |||||||||||||||||||
| 就开开心心当搞笑娱乐视频看就好！ | BV15K4y1J7a2 | 1317077 | 26679 | 8475 | 19331 | 89525 | 7342 | 167087 | 0 | 2204778 | 8 | 550 | 后面开了点美颜 因为实在是一言难尽 | ||||||
| 技术依然垃圾，大家就随便看看好啦 | |||||||||||||||||||
| 谢谢大家的支持喜欢和鼓励 | 157 | 美妆 | 26139491 | 假美食po主 | |||||||||||||||
| 972122381 | 4000块一口的米其林料理 油炸苔藓 复刻出来是什么味道？ | 1.这次你们一定可以学会！ | |||||||||||||||||
| 2.请不要乱吃苔藓 | BV1np4y1h7XM | 1583067 | 4542 | 1774 | 23291 | 84876 | 3408 | 174230 | 0 | 2168585 | 9 | 330 | 油炸蘑菇： | ||||||
| 鲍鱼菇 | |||||||||||||||||||
| 50克 玉米淀粉 | |||||||||||||||||||
| 150 克低粉 | |||||||||||||||||||
| 2克 海盐 | |||||||||||||||||||
| 2克 泡打粉 | |||||||||||||||||||
| 200 克苏打水 | |||||||||||||||||||
| 15克 菜油 | |||||||||||||||||||
| 1勺 海盐 | |||||||||||||||||||
| 1勺 辣椒粉 | |||||||||||||||||||
| 1勺 白胡椒粉 | |||||||||||||||||||
| 0.5勺 勺孜然粉 | 76 | 美食制作 | 473524263 | 澳洲阿彭 | |||||||||||||||
| 802014950 | 咬人玩具 简单背后令人赞叹的机械联动 | 牙！牙！牙！ | BV1zy4y177pD | 1616966 | 2139 | 2717 | 32122 | 86429 | 6851 | 137653 | 0 | 2083270 | 10 | 370 | 咬人玩具、咬手玩具，也是个存在了很多很多年的玩具了，一直好奇它是如何实现随机牙齿的。 | ||||
| 果然非常的巧妙 | 201 | 科学科普 | 138624168 | 方猫boom | |||||||||||||||
预览select * from cid limit 10;
| aid | bvid | cid |
|---|---|---|
| 929494916 | BV17K4y1D7BD | 306628657 |
| 929499534 | BV1bK4y1D7M2 | 306490038 |
| 802123903 | BV1Vy4y1E74G | 307269481 |
| 544478853 | BV1Bi4y1N7Hj | 306630509 |
| 204505070 | BV1fh411D7ju | 307072456 |
| 587119076 | BV1mz4y117tu | 306901769 |
| 886933190 | BV1sK4y1J7RA | 306696939 |
| 886902072 | BV15K4y1J7a2 | 306502788 |
| 972122381 | BV1np4y1h7XM | 306661655 |
| 802014950 | BV1zy4y177pD | 307066045 |
预览select * from cid_comment limit 10;
| cid | comment |
|---|---|
| 306628657 | 上天猫，就够了 |
| 306628657 | 《你小嘴抹了蜜》 |
| 306628657 | 三鹿奶粉 |
| 306628657 | 同 龟 于 尽 |
| 306628657 | 鼻涕涂抹均匀 |
| 306628657 | 《从现在起，我每跳一次都检查一下有没有方块》 |
| 306628657 | 上厕所=查攻略 |
| 306628657 | 那币也不用给了（doge） |
| 306628657 | 赵 日 地 之 声 |
| 306628657 | 死亡如风，常伴吾身 |