阿里音乐打算用大数据发掘下一个TFboy

简介:

大数据时代,音乐界正迎来一场革命:下一首歌流行什么,听众说了算。昨天,记者从阿里音乐得到证实,阿里音乐正在开展一项尝试:将阿里音乐平台上的用户行为数据与社交网络数据、新闻资讯数据等结合,借助阿里云“数加”上的大数据工具,预测哪些音乐人会成为下一个音乐巨星。

有猜测指出,这项技术同阿里音乐一直秘而不宣的新平台有密切联系。

据阿里音乐的数据工程师介绍,用户在音乐平台上收听、分享、收藏音乐的行为,以及在社交网络、视频网站、贴吧论坛上做出关注、评论、转发、点赞等动作,反映了对音乐人的喜好程度。“我们用word2vector算法对关键词进行聚类,结合转发点赞等原始及衍生特征,通过gbdt分布式算法进行预测分析。寻找隐藏在其中的下一个TFboy”。

不过,收集所有人的意见并做出判断,并非易事。阿里音乐的工程师透露,该项目仅每天要处理的阿里音乐平台数据就达到了100TB,更不用说海量的外部互联网数据。

值得庆幸的是,大数据技术的飞跃发展为这一设想的实现提供了基础。在过去的5年里,全球大数据计算性能实现了超过21倍的提升。2011年,Tritonsort排序100TB数据需要8274秒;到2015年,阿里云的MaxCompute只需要377秒。除了MaxCompute,阿里云的分析性数据库Analytic DB可以对90亿条的粉丝关系数据进行实时查询计算。

本文转自d1net(转载)

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
8月前
|
弹性计算 分布式计算 大数据
阿里云计算平台大数据基础工程技术论文入选 VLDB 2023
近日,在 VLDB 2023 上,由阿里云计算平台大数据基础工程技术团队主导,与计算平台 MaxCompute 团队、华东师范大学数据科学与工程学院、达摩院合作的论文入选 Industrial Track
|
SQL 机器学习/深度学习 分布式计算
峰哥帮读者精准押题,211程序媛字节、阿里大数据面经分享
峰哥帮读者精准押题,211程序媛字节、阿里大数据面经分享
峰哥帮读者精准押题,211程序媛字节、阿里大数据面经分享
|
SQL 存储 分布式计算
带你了解阿里acp大数据认证是什么
不知道小伙伴们有没有发现,手机的各种app经常会给我们推送自己感兴趣的信息或者是最近一直在浏览的信息。给人一种受到“监控”的错觉?其实这就是所谓的大数据在作祟,是不是觉得很神奇,让人觉得很不可思议?现在还有阿里大数据认证这一说法,也就是说可以在相关平台取得认证之后可以有机会去你心心念念的阿里企业工作,让你可以有机会大展身手一番。
1118 0
带你了解阿里acp大数据认证是什么
|
4月前
|
大数据 BI
阿里十年大数据专家谈“云上数据中台之道”含内部PPT
从大数据的概念被正式提出,到马云老师预言人类正从IT时代走向DT时代,大数据浪潮迭起。大数据同仁共同认知的一点是,大数据会对社会创新、产业变革、业务创新及每个人的角色定位产生近乎决定性的影响。
|
9月前
|
存储 移动开发 算法
《阿里大数据之路》读书笔记:第二章 日志采集
《阿里大数据之路》读书笔记:第二章 日志采集
|
9月前
|
数据采集 存储 消息中间件
《阿里大数据之路》读书笔记:总述
阿里数据体系主要分为数据采集、数据计算、数据服务和数据应用四大层次。
|
大数据 数据库
阿里大数据——数据库总结及原文链接
阿里大数据——数据库总结及原文链接自制脑图
81 1
阿里大数据——数据库总结及原文链接
|
机器学习/深度学习 存储 人工智能
参营拿好礼! 阿里灵杰“大数据&AI实战派”训练营正式开启
阿里灵杰依托阿里领先的云基础设施、大数据和AI工程能力、场景算法技术和多年行业实践,一站式地为企业和开发者提供云原生的大数据和AI能力体系。
参营拿好礼! 阿里灵杰“大数据&AI实战派”训练营正式开启
|
消息中间件 存储 数据可视化
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(三)
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(三)
714 0
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(三)
|
存储 消息中间件 数据可视化
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(二)
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(二)
370 0
百度、阿里、腾讯平台架构都熟悉,小米大数据平台架构OLAP架构演进是否了解(二)