Journal | [J] 计算机系统网络和电信 Volume 3, Issue 2. 2021.
基于大数据的优酷网站弹幕的分析与研究
作者 : 郑 海霖, 张 桂花
摘要 / Abstract
随着弹幕在视频中的重要性越来越高,弹幕成为了每个大型视频网站的必备品。弹幕和评论相比,它更具有实时性与关键性。所以通过分析研究弹幕来了解观影人的实时情绪也成为了大数据分析的研究热点。主要思路是:通过爬虫获取弹幕信息,使用HDFS对数据进行存储,使用Spark从HDFS上调用数据对弹幕出现的频率进行统计排序并保存。通过研究实现了对观众的实时情绪的了解与视频关键词的分析。
关键词 / Keywords
爬虫;HDFS;Spark;弹幕
《中国学术期刊(光盘版)》电子杂志社有限公司 KDN平台基础技术由KBASE 11.0提供