阿里云飞天技术论坛——互联网金融数据处理及风控实践+阿里云大数据实验室

简介: 阿里云生态技术联盟(ITP)创始成员北京青苔数据科技有限公司和阿里云计算有限公司于2018年1月5日在阿里巴巴北京总部联合举办了阿里巴巴飞天技术论坛,本次论坛分享的主题是“互联网金融数据处理及风控实践”+”阿里云大数据实验室”。

阿里云生态技术联盟(ITP)创始成员北京青苔数据科技有限公司和阿里云计算有限公司于2018年1月5日在阿里巴巴北京总部联合举办了阿里巴巴飞天技术论坛,本次论坛分享的主题是“互联网金融数据处理及风控实践”+”阿里云大数据实验室”。

3f0af9278bba082ad8ea3321b8039a233f38ad9a

c4b03ea457b580a2abf81f26150dd173fe4736c2

会议邀请了华北电力大学、河南财经大学、河南工程技术学院等高校领导,从事大数据和人工智能相关企业的高管、以及部分合作伙伴等人士参会。会上,大家听取了阿里云资深专家李海龙关于互联网金融的发展和服务,以及青苔数据CEO 程永关于阿里云大数据实验室的介绍,进一步了解了大数据实验室的技术特点和优势,并亲自体验了阿里云大数据实验室基础课程的实践操作,感受到了该产品对高校大数据教育的先进性和优越性。

c37add4b5885300f1b9530b81c29264c23e1e007

                                                                                          阿里云资深专家介绍互联网金融数据处理

11523b95542bff5c188dc1d9388a9951910539a7

青苔数据CEO介阿里云大数据实验室


 

会议内容:

(一)互联网金融大数据

随着互联网金融的快速发展,海量的用户数据、交易数据以及风控数据的存储、分析和在线服务都对传统的技术架构带来了很大的挑战,在本次论坛中阿里云飞天资深专家李海龙详细介绍了如何利用云计算解决和加速对金融环境下的海量结构化、非结构化数据的实时处理与在线服务。李海龙2011年加入阿里云,负责阿里云自研分布式NoSQL数据库表格存储的研发、测试及发布工作,2015年开始负责表格存储产品化工作,对分布式NoSQL数据库的技术架构、产品设计及应用场景推广都都着丰富的经验。

(二)互联网教育大数据

       当前高校在大数据和人工智能方面存在的众多困难,比如

l  多数高校无法提供合格的大数据相关课程

     受限于数据、平台和真实行业实践经验

l  大数据科研创新存在诸多困难

      1)高校需要一个稳定高效的大数据科研环境,而不是拿开源软件进行修修补补

      2)高校需要一个可伸缩的、廉价的大数据真实实验环境

3)高校需要有各种可供参考的行业案例

为了解决高校在大数据和人工智能上面临的各种问题,北京青苔数据程永(永初)详细介绍了阿里云大数据和人工智能、阿里云大数据实验室 等。程永(前阿里云大数据业务副总经理),现任北京青苔数据CEO。之前在阿里云、IBM等公司任职,在阿里云计算有限公司历任数据业务总经理、大数据业务副总经理等,从无到有组建大数据政企线。专注数据领域17年,著有《智慧的分析洞察》(IBM官方出版)、《数据仓库与数据挖掘》(教育部十二五教材)和《DB2 V9权威指南》等书,发表过五十多篇专业技术文章。

阿里云大数据实验室作为一站式大数据实训和科研创新平台,为各行业用户提供简单易用的大数据真实环境,让数据价值触手可及。用户可通过简单快捷的可视化操作,对各种大数据进行数据采集、数据加工、数据开发、数据管理、数据分析和机器学习等操作,快速探索各种大数据创新应用。

634981c059fd138eb070e212deb2ca059c18b088

参会嘉宾正在进行阿里云大数据实验室实践操作

 

阿里云大数据实验室主要由面向大数据实训的大数据基础课程体系和行业案例课程体系、面向大数据科研创新的科研组件、大数据实验室后台支撑平台等组成。阿里云大数据实验室依赖阿里云大数据公共云平台“数加”。

阿里云大数据实验室主要包含以下功能:

1、各种大数据实训课程(面向教学):

1)在阿里云大数据真实环境中(非模拟或仿真环境)手把手教学生学习各种大数据产品的基础知识,学习过程中既支持100%图形化拖拉拽操作,也支持各种API开发管理。具体课程包括大数据基础、大数据基础实践、离线分布式平台高级开发和管理、深度学习高级开发和管理等。

2)手把手教学生学习各个行业大数据应用创新真实案例(脱敏数据),学生在课程中可以学习大数据创新过程中的各种成功经验和失败教训。具体课程包括电商广告精准营销实践、税务纳税评估实践、银行行业风险信用模型实践和电信行业用户流失分析实践等,另外还包含了11门免费的行业案例课程。

2、面向科研创新环节的大数据科研创新平台:

 在阿里云大数据平台的真实环境中(阿里云大数据平台“数加”),老师和学生可以进行各种大数据应用的创新研究。在研究过程中,可以充分借鉴各个行业的成功经验,加速大数据应用科学研究过程。

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1月前
|
存储 大数据 API
大数据隐私保护策略:加密、脱敏与访问控制实践
【4月更文挑战第9天】本文探讨了大数据隐私保护的三大策略:数据加密、数据脱敏和访问控制。数据加密通过加密技术保护静态和传输中的数据,密钥管理确保密钥安全;数据脱敏通过替换、遮蔽和泛化方法降低敏感信息的敏感度;访问控制则通过用户身份验证和权限设置限制数据访问。示例代码展示了数据库、文件系统和API访问控制的实施方式,强调了在实际应用中需结合业务场景和平台特性定制部署。
61 0
|
1月前
|
存储 大数据 数据处理
PHP 与大数据:构建高效数据处理系统
传统的数据处理系统往往难以应对大规模数据的处理需求,而PHP作为一种常用的服务器端脚本语言,在数据处理方面也有其独特的优势。本文将探讨如何利用PHP构建高效的大数据处理系统,结合实际案例分析其应用场景及优势所在。
18 2
|
13天前
|
分布式计算 大数据 BI
MaxCompute产品使用合集之MaxCompute项目的数据是否可以被接入到阿里云的Quick BI中
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
14天前
|
分布式计算 大数据 MaxCompute
MaxCompute产品使用合集之使用pyodps读取OSS(阿里云对象存储)中的文件的步骤是什么
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
2天前
|
数据采集 供应链 安全
利用大数据优化业务流程:策略与实践
【5月更文挑战第11天】本文探讨了利用大数据优化业务流程的策略与实践,包括明确业务目标、构建大数据平台、数据采集整合、分析挖掘及流程优化。通过实例展示了电商和制造企业如何利用大数据改进库存管理和生产流程,提高效率与客户满意度。随着大数据技术进步,其在业务流程优化中的应用将更加广泛和深入,企业需积极采纳以适应市场和客户需求。
|
12天前
|
存储 大数据 数据处理
矢量数据库与大数据平台的集成:实现高效数据处理
【4月更文挑战第30天】本文探讨了矢量数据库与大数据平台的集成,以实现高效数据处理。集成通过API、中间件或容器化方式,结合两者优势,提升处理效率,简化流程,并增强数据安全。关键技术支持包括分布式计算、数据压缩编码、索引优化和流处理,以优化性能和实时性。随着技术发展,这种集成将在数据处理领域发挥更大作用。
|
13天前
|
分布式计算 DataWorks Java
DataWorks产品使用合集之阿里云DataWorks专有云环境下,上传MaxCompute的UDF(用户自定义函数)的JAR包的步骤如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
22 0
|
14天前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之阿里云MaxCompute对SQL语句的长度的长度限制是多少
MaxCompute作为一款全面的大数据处理平台,广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践,可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集,涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
|
1月前
|
缓存 运维 NoSQL
面试分享:Redis在大数据环境下的缓存策略与实践
【4月更文挑战第10天】探索Redis在大数据缓存的关键作用,本文分享面试经验及必备知识点。聚焦Redis数据结构(String、List、Set、Hash、Sorted Set)及其适用场景,缓存策略(LRU、LFU、TTL)与过期机制,集群和数据分片,以及性能优化和运维技巧。通过代码示例深入理解,助你面试成功,构建高效缓存服务。
49 4
|
1月前
|
机器学习/深度学习 分布式计算 数据挖掘
阿里云 MaxCompute MaxFrame 开启免费邀测,统一 Python 开发生态
阿里云 MaxCompute MaxFrame 正式开启邀测,统一 Python 开发生态,打破大数据及 AI 开发使用边界。
735 1