基于 Hadoop 平台分析用户音乐播放日志的实现

王 思平, 鲍 正德, 李 晨曦
四川大学锦城学院计算机与软件学院，四川成都

摘要

伴随大数据技术的快速发展，使用大数据技术处理相关数据在企业和社会中的应用愈加普遍。本文从社会发展开始分析互联网音乐公司对数据处理的需求，并且开发了一个基于 hadoop 平台的音乐日志统计系统。该系统主要由日志采集组件和计算组件组成，对用户播放音乐过程中产生的日志数据进行了关于年月为单位的统计。最后把计算组件的结果放入了 Database 中。该系统开发是为能助力企业快速分析海量日志，改善传统数据库分析方式效率低下的问题。

关键词

大数据技术；音乐日志分析；Hadoop 平台

参考

邬贺铨.大数据时代的机遇与挑战[J].求

是,2013(04):47-49

郑文青.基于 hadoop 的大数据分布式集群平台搭建

的研究[J].计算机产品与流通,2017(12):143.

蒲志明. 云平台中日志管理模块的研究与实现[D].电

子科技大学,2017. [4]张海华,杨秀波,张非,钟磊.基于 Kafka 的在线教学平

台 事 件 中 心 设 计 与 实 现 [J]. 数 字 通 信 世

界,2019(02):117-118+129. [5]康毅. HBase 大对象存储方案的设计与实现[D].南京

大学,2013.