Python系列直播——深入Python与日志服务,玩转大规模数据分析处理实战

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: Python系列直播——深入Python与日志服务,玩转大规模数据分析处理实战

image

第一讲——使用IPython/Jupyter Notebook与日志服务玩转超大规模数据分析与可视化

直播时间: 2月21日(周四)20:00—21:00

直播介绍: IPython/Jupyter Notebook非常流行,但随着数据量越来越大(例如几百亿条电商平台访问日志),如何继续保持灵活的交互式分析,是一个挑战。阿里云日志服务作为阿里商业操作系统的智能运维平台,无需开发就能快捷完成海量日志数据的采集、消费、投递以及查询分析等功能。这里介绍如何借助日志服务对IPython/Jupyter扩展的功能,用Python对海量数据进行深度加工(ETL)、交互式分析(通过SQL、DataFrame)、机器学习与可视化等。

PPT下载: https://yq.aliyun.com/download/3322
视频回顾: https://yq.aliyun.com/live/875

第二讲——流畅的Python数据处理及大数据处理ETL

直播时间: 3月6日(周三)20:00—21:00

直播介绍: 大数据分析中常常要对数据进行规整(ETL),而Python内置强大的数据结构以及语法(如推导式、切片、函数式编程等)对于数据处理又非常友好。本节介绍如何灵活、流畅地使用这些特性,在日志服务场景中对大规模不规则日志进行常规ETL操作。

PPT下载: https://yq.aliyun.com/download/3338
视频回顾: https://yq.aliyun.com/live/910

第三讲—— Python3舒适性编程与兼容Py2/3实践

直播时间: 3月13日(周三)20:00—21:00

直播介绍: Python3有许多“舒适编程”的特性,而Python2也即将EOL,但Py2/Py3并存的局面可预见的还是会保持一段时间。本节介绍Py3一些不错亮点,以及如何兼顾Py2/Py3的一些实践。

PPT下载: https://yq.aliyun.com/download/3344
视频回顾: https://yq.aliyun.com/live/918

第四讲——Python并发编程与实时大数据处理监控

直播时间: 3月20日(周三)20:00—21:00

直播介绍: Python多线程、多进程编程该如何做?如何避开GIL?本节以日志服务消费组模型为例,介绍相关原理实践以及如何做实时大数据的处理与监控。

PPT下载: https://yq.aliyun.com/download/3389
视频回顾: https://yq.aliyun.com/live/932

第五讲——Python日志最佳实践与日志上云实战

直播时间: 3月27日(周三)20:00—21:00

直播介绍: 良好的日志实践可以帮助后续的开发排错、运营维护监控管理工作大大提高效率,本节介绍使用Python的日志模块的最佳实践,并轻松上云,利用日志服务提高产品运维效率。

PPT链接: https://yq.aliyun.com/download/3469
视频回顾: https://yq.aliyun.com/live/949

第六讲——Python模块机制及日志服务中的ETL插件原理

直播时间: 4月3日(周三)20:00—21:00

直播介绍: Python作为动态语言,插件与模块机制非常强大,在编写框架类程序时尤其有用,本节深入浅出的介绍Python的语言扩展能力,以及日志服务中的CLI插件机制原理。

PPT链接: https://yq.aliyun.com/download/3483
视频回顾: https://yq.aliyun.com/live/969

扫码加入官方钉钉群 (11775223):
image

加入云栖python技术进阶钉群:
undefined

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
11天前
|
存储 机器学习/深度学习 数据处理
NumPy:从初识到实战,探索Python科学计算的无限可能
NumPy:从初识到实战,探索Python科学计算的无限可能
35 0
|
11天前
|
Python Windows
【Python进阶必备】一文掌握re库:实战正则表达式
【Python进阶必备】一文掌握re库:实战正则表达式
10 0
|
11天前
|
机器学习/深度学习 数据可视化 数据挖掘
Python跳水:探索数据分析的深渊
Python跳水:探索数据分析的深渊
18 0
|
6天前
|
机器学习/深度学习 数据采集 算法
Python用逻辑回归、决策树、SVM、XGBoost 算法机器学习预测用户信贷行为数据分析报告
Python用逻辑回归、决策树、SVM、XGBoost 算法机器学习预测用户信贷行为数据分析报告
16 1
|
4天前
|
机器学习/深度学习 算法 数据挖掘
【Python机器学习专栏】金融数据分析中的机器学习应用
【4月更文挑战第30天】本文探讨了机器学习在金融数据分析中的应用,如股价预测、信用评分、欺诈检测、算法交易和风险管理,并以Python为例展示了如何进行股价预测。通过使用机器学习模型,金融机构能更准确地评估风险、识别欺诈行为并优化交易策略。Python结合scikit-learn库简化了数据分析过程,助力金融从业者提高决策效率。随着技术发展,机器学习在金融领域的影响力将持续增强。
|
4天前
|
机器学习/深度学习 数据采集 TensorFlow
【Python机器学习专栏】使用Python进行图像分类的实战案例
【4月更文挑战第30天】本文介绍了使用Python和深度学习库TensorFlow、Keras进行图像分类的实战案例。通过CIFAR-10数据集,展示如何构建和训练一个卷积神经网络(CNN)模型,实现对10个类别图像的识别。首先安装必要库,然后加载数据集并显示图像。接着,建立基本CNN模型,编译并训练模型,最后评估其在测试集上的准确性。此案例为初学者提供了图像分类的入门教程,为进一步学习和优化打下基础。
|
4天前
|
SQL DataWorks 安全
DataWorks产品使用合集之DataWorks资源里python运行时候,查看中途打印日志如何解决
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
20 0
|
4天前
|
数据采集 SQL 数据挖掘
Python数据分析中的Pandas库应用指南
在数据科学和分析领域,Python语言已经成为了一种非常流行的工具。本文将介绍Python中的Pandas库,该库提供了强大的数据结构和数据分析工具,使得数据处理变得更加简单高效。通过详细的示例和应用指南,读者将了解到如何使用Pandas库进行数据加载、清洗、转换和分析,从而提升数据处理的效率和准确性。
|
5天前
|
机器学习/深度学习 数据采集 数据可视化
Python在数据分析领域的应用研究
Python在数据分析领域的应用研究
12 0
|
8天前
|
机器学习/深度学习 数据可视化 数据挖掘
PYTHON链家租房数据分析:岭回归、LASSO、随机森林、XGBOOST、KERAS神经网络、KMEANS聚类、地理可视化
PYTHON链家租房数据分析:岭回归、LASSO、随机森林、XGBOOST、KERAS神经网络、KMEANS聚类、地理可视化
13 0

相关产品

  • 日志服务