周博通 | 阿里开源首个 DL 框架、4000台服务器真实数据集;明年1月开源Blink

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介:

阿里开源首个深度学习框架 X-Deep Learning

1
以深度学习为核心的人工智能技术,过去的几年在语音识别、计算机视觉、自然语言处理等领域获得了巨大的成功,其中以GPU为代表的硬件计算力,以及优秀的开源深度学习框架起到了巨大的推动作用。

尽管以TensorFlow、PyTorch、MxNet等为代表的开源框架已经取得了巨大的成功,但是当我们把深度学习技术应用在广告、推荐、搜索等大规模工业级场景时,发现这些框架并不能很好的满足我们的需求。

X-DeepLearning正是面向这样的场景设计与优化的工业级深度学习框架,经过阿里巴巴广告业务的锤炼,XDL在训练规模和性能、水平扩展能力上都表现出色,同时内置了大量的面向广告/推荐/搜索领域的工业级算法解决方案。

X-DeepLearning(包括核心训练引擎及算法解决方案)的代码已经在Github开源,地址如下:

https://github.com/alibaba/x-deeplearning

戳此看:XDL的设计理念及关键技术

阿里开源4000台服务器真实数据集

1
2015 年,阿里巴巴的数据中心,将延迟不敏感的批量离线计算任务和延迟敏感的在线服务部署到同一批机器上运行,让在线服务用不完的资源充分被离线使用以提高机器的整体利用率。

经过 3 年多的试验论证、架构调整和资源隔离优化,目前这个方案已经走向大规模生产。我们通过混部技术将集群平均资源利用率从 10% 大幅度提高到 45%。另外,通过各种优化手段,可以让更多任务运行在数据中心,将“双11”平均每万笔交易成本下降了 17%。

为了让有兴趣的学生以及相关研究人员,可以从数据上更加深入地理解大规模数据中心,我们特别发布了这份数据集(Alibaba Cluster Data V2018)。数据集中记录了某个生产集群中服务器以及运行任务的详细情况。我们希望这波数据的发布可以拉近我们与学术研究、业界同行之间的距离,促进行业的进一步发展。

下载地址:

https://github.com/alibaba/clusterdata/blob/v2018/cluster-trace-v2018/trace_2018.md

戳此看:世界级数据中心的深度解读

阿里巴巴内部 Blink 将于明年1月开源

1
今年,实时流计算技术开始步入主流,实时流计算引擎和 API 诸如 Spark Streaming、Kafka Streaming、Beam 和 Flink 持续火爆。阿里巴巴自 2015 年开始改进 Flink,并创建了内部分支 Blink,目前服务于阿里集团内部搜索、推荐、广告和蚂蚁等大量核心实时业务。

12 月 20 日, Flink Forward China 峰会在北京国家会议中心召开。在大会的主题演讲上,阿里巴巴集团副总裁周靖人宣布,阿里巴巴内部 Flink 版本 Blink 将于 2019 年 1 月正式开源!我们希望通过 Blink 开源进一步加深与 Flink 社区的联动,并推动国内更多中小型企业使用 Flink。

持续关注阿里技术公众号,我们将第一时间带来 Blink 开源的详细信息。

猜你想了解Blink:

Apache Flink 干货合集打包好了,速来下载
阿里巴巴为什么选择Apache Flink?
Flink 的新方向在哪里?

精心筹备30个月,阿里首家未来酒店FlyZoo Hotel正式开业

1
全场景人脸识别住宿、智能梯控、机器人调酒、机器人送拖鞋……近日,阿里巴巴在杭州开的首家未来酒店FlyZoo Hotel(中文名字“菲住布渴”)终于迎来开业。

“菲住布渴”酒店依托阿里强大的技术与生态支持,实现了全场景身份识别响应和大面积的AI智能服务。住客从大堂到电梯再到房间,乃至餐厅、健身房等场地,都涵盖人脸识别、语音控制、智能机器人等黑科技服务。酒店无前台,大堂有服务大使,可以随时响应住客的需要。

如果住客需要多些护肤品、缺双拖鞋、叫个餐什么的,也不用再麻烦拨打前台电话,通过天猫精灵就行。收到指令后,后台的工作人员会把东西准备好,再让机器人为您送货上门。除此之外,在餐厅,给客人上菜的也是机器人服务员;去大堂演艺吧,机器人调酒师,还会给住客制作多种不同的酒类和咖啡。

这些沉淀下的能力将很快有机会赋能到相关行业。而坐落在亲橙里的这座未来酒店,也将同身边的智慧门店、新餐饮等一道,共同在这个新零售体验中心,为人们带来关于未来的更多想象。

你有一封阿里师兄的来信

1
随着新一年脚步的临近,不少新同学收到了阿里2019校招的Offer。将要告别校园生活的,即将在阿里开启新的旅程,相信同学们一定有很多的期待和好奇。

这次,我们邀请了多位阿里技术大牛:阿里云人工智能中心负责人华先胜、蚂蚁金服副CTO胡喜、达摩院数据库首席科学家李飞飞、阿里云智能事业群研究员小邪,为所有新同学写了一封别致的信。希望能在这个冬天,会为你送去一份暖意。期待我们一起开启更好的2019。

传送门:
你有一封来自阿里师兄的来信,请查收

原文发布时间为:2018-12-24
本文作者: 今晚平安夜哦
本文来自云栖社区合作伙伴“ 阿里技术”,了解相关信息可以关注“ 阿里技术”。

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
2月前
|
机器学习/深度学习 弹性计算 运维
ECS阿里云监控服务
ECS阿里云监控服务
77 3
|
2月前
|
Java Maven
【开源视频联动物联网平台】J2mod库写一个Modbus RTU 服务器
【开源视频联动物联网平台】J2mod库写一个Modbus RTU 服务器
78 0
|
15天前
|
弹性计算 运维 Serverless
Serverless 应用引擎产品使用之在阿里函数计算中,使用阿里云API或SDK从函数计算调用ECS实例的服务如何解决
阿里云Serverless 应用引擎(SAE)提供了完整的微服务应用生命周期管理能力,包括应用部署、服务治理、开发运维、资源管理等功能,并通过扩展功能支持多环境管理、API Gateway、事件驱动等高级应用场景,帮助企业快速构建、部署、运维和扩展微服务架构,实现Serverless化的应用部署与运维模式。以下是对SAE产品使用合集的概述,包括应用管理、服务治理、开发运维、资源管理等方面。
42 4
|
15天前
|
安全 算法 Linux
【专栏】Linux 服务器还有漏洞?OpenVAS 是一款开源的漏洞扫描工具,用于全面评估 Linux 服务器安全
【4月更文挑战第28天】OpenVAS 是一款开源的漏洞扫描工具,用于全面评估 Linux 服务器安全。它具有全面性、准确性和实时性的特点,能扫描各种设备并及时发现安全漏洞。使用 OpenVAS 包括安装、配置和执行扫描,以及分析结果并采取修复措施。在使用过程中应注意扫描时间、范围和策略的选择。通过定期检查和修复漏洞,结合其他安全措施,可以提升服务器安全性。OpenVAS 是保障 Linux 服务器安全的重要工具,但安全维护也需要持续学习和适应新挑战。
|
15天前
|
运维 Serverless 文件存储
Serverless 应用引擎产品使用之阿里函数计算中stable. diffusion应用的服务器可以使用那种99元100G一年的道用型nas如何解决
阿里云Serverless 应用引擎(SAE)提供了完整的微服务应用生命周期管理能力,包括应用部署、服务治理、开发运维、资源管理等功能,并通过扩展功能支持多环境管理、API Gateway、事件驱动等高级应用场景,帮助企业快速构建、部署、运维和扩展微服务架构,实现Serverless化的应用部署与运维模式。以下是对SAE产品使用合集的概述,包括应用管理、服务治理、开发运维、资源管理等方面。
26 0
|
1月前
|
Go 开发工具 git
推荐一个开源流媒体服务器-livgo
推荐一个开源流媒体服务器-livgo
53 0
|
1月前
|
编解码 缓存 网络协议
EasyDarwin开源流媒体服务器
EasyDarwin开源流媒体服务器
64 0
|
2月前
|
Java API Maven
【开源视频联动物联网平台】JAIN-SIP库写一个SIP服务器
【开源视频联动物联网平台】JAIN-SIP库写一个SIP服务器
98 0
|
2月前
|
网络协议 Java
【开源视频联动物联网平台】J2mod库写一个Modbus TCP 服务器
【开源视频联动物联网平台】J2mod库写一个Modbus TCP 服务器
77 0
|
2月前
|
存储 弹性计算 大数据
阿里2核4G配置云服务器价格多少钱?阿里云2核4G云服务器531元一年怎么样?
随着云计算技术的日益发展,越来越多的企业和个人开始选择云服务器来满足其数据存储和处理需求。在众多的云服务提供商中,阿里云以其卓越的性能和稳定的服务赢得了广大用户的青睐。 近期,阿里云推出了一系列爆款特惠活动,其中一款2核4G通用算力型u1实例云服务器ECS备受关注。这款云服务器不仅拥有强大的计算能力,还提供了稳定的运行环境,非常适合对性能和稳定性有一定要求的用户。

热门文章

最新文章