BliBili_danmu_crawl/README.md

BliBili_danmu_crawl

• 要求实现2024巴黎奥运会视频弹幕分析，使用爬虫在B站爬取相关视频弹幕，并给出数量排名前8项关于本次赛事应用AI技术的弹幕，同时所有数据进行词云可视化分析，最后通过统计得出关于2024巴黎奥运会利用AI技术的相关结论。
• 附加题：完成了关键词“莎莎和陈梦”的B站综合排序前300的所有视频弹幕爬取，并进行情感分析，制作词云图得出相关结论

任务背景

2024年第三十三届夏季奥林匹克运动会（2024 Summer Olympics），一般称为2024巴黎奥运会（Paris 2024），于2024年7月26日至8月11日在法国巴黎举行，此次为法国相隔100年后再次举办夏季奥运会。巴黎成为继英国伦敦后，第二个三度举办夏季奥运会的城市，前两次分别在1900年及1924年举办。最终，美国代表团以40枚金牌、126枚奖牌，坐拥奖牌榜首位；中国代表团以40枚金牌、91枚奖牌排名第二；东道主法国代表团则拿下16枚金牌、64枚奖牌位列第五。本届是现代夏季奥运会历史以来，第二次有多于一个国家的代表团（美国和中国），获得最多且同样数量的金牌。

2024巴黎奥运会，这场体育盛宴不仅承载着运动员的汗水与梦想，更是工业数字化浪潮的壮阔展示。在这场跨越国界的竞技中，数字科技如同隐形的魔术师，悄然编织着赛事的每一个细节，从幕后到台前，从组织策划到观众体验，全方位塑造着奥运会的面貌，让我们见证了一个科技与体育深度融合的新时代。

代码库目录

102201613/
│
├── output/                          2024巴黎奥运会爬虫相关输出文件夹
│   ├── 弹幕收集按序                   综合排序前300的所有视频弹幕txt文件夹
│   ├── wordcloud.jpg                  普通词云图
│   ├── wordcloud_cup.png                奖杯词云图
│   ├── 奖杯.png                      奖杯掩膜图
│   └── 统计结果top_8_withBV号.xlsx         数量排名前8的弹幕  
│
├── release/                          2024巴黎奥运会爬虫相关python代码文件夹
│   ├── mywordcloud.py                  制作出精美的词云图，里面有两种方法，第一种普通，第二种奖杯状
│   ├── test_1.py                     爬取一个指定BV号视频的所有弹幕
│   ├── test_getfor.py                 for循环一条一条爬取综合排序前300的所有视频弹幕
│   ├── test_getthread.py          	     优化–利用线程池并发爬取综合排序前300的所有视频弹幕
│   └──数据分析.py                    将所有.txt文件整合并输出数量排名前8的弹幕到xlsx文件中
│
├── 附加题：莎莎和陈梦/                  莎莎和陈梦爬虫相关文件夹
│   ├── output                       输出结果文件夹
│   │   ├── 弹幕情感分析结果图.jpg            
│   │   └──词云图.jpg   
│   ├── release                      爬虫相关python代码文件夹
│   │   ├── emotion.py                情感分析代码
│   │   ├── mywordcloud.py             制作词云图
│   │   └── test_getthread.py           线程池爬取弹幕
│   └── 弹幕收集                        
│   │   ├── 100个视频弹幕txt          
│   │   ├── merged_text.txt            将所有弹幕集合在一个txt文件中
│   │   └── sentiment_analysis_results.csv  情感分析结果
│
└── requirements.txt                   相关库版本控制