备案控制台
探索云世界
开发者社区 云原生 Serverless 文章 正文

Serverless对日志服务中的数据进行ETL处理

2020-02-13 1376
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
函数计算 FC，180元额度 3个月
推荐场景：
活动用函数FC部署Stable Diffusion 部署通义千问预体验 图生图，部署3D卡通风格模型
简介： 通过日志服务+函数计算ETL，快速完成日志采集、加工、查询、分析和展示。

直达最佳实践：【Serverless对日志服务中的数据进行ETL处理】
最佳实践频道：【点击查看更多上云最佳实践】
这里有丰富的企业上云最佳实践，从典型场景入门，提供一系列项目实践方案，降低企业上云门槛的同时满足您的需求！

场景描述

场景1：数据加工场景
通过日志服务+函数计算ETL，快速完成日志采集、加工、查询、分析和展示。

场景2：数据投递场景
为数据的目的端落地提供支撑，构建云上大数据产品间的数据管道。

解决问题

  • 日志服务进行海量日志存储
  • 函数计算按调用次数计费
  • 使用函数计算进行灵活的ETL日志数据处理任务

产品列表

  • 拟专用网VPC
  • 弹性计算服务ECS
  • 日志服务SLS
  • 函数计算FC

image

直达最佳实践 》》

image

文章标签：
函数计算
日志服务
数据处理
弹性计算
监控
Serverless
存储
大数据
关键词：
函数计算数据
函数计算日志
日志服务数据
serverless日志服务
函数计算 etl
相关实践学习
基于函数计算一键部署掌上游戏机
本场景介绍如何使用阿里云计算服务命令快速搭建一个掌上游戏机。
建立 Serverless 思维
本课程包括： Serverless 应用引擎的概念， 为开发者带来的实际价值， 以及让您了解常见的 Serverless 架构模式
最佳实践小文
目录
相关文章
cuicuicuic
|
23天前
|
监控 Serverless 数据库
Serverless 应用引擎常见问题之biphon-education-配置了SLS后一直重启如何解决
Serverless 应用引擎（Serverless Application Engine, SAE）是一种完全托管的应用平台，它允许开发者无需管理服务器即可构建和部署应用。以下是Serverless 应用引擎使用过程中的一些常见问题及其答案的汇总：
cuicuicuic
28 5
vohelon
|
4月前
|
SQL 关系型数据库 MySQL
我使用flinkcdc的sql形式进行全量同步，4张表，有两张表数据没进去，看日志，id怎么是null呢?
我使用flinkcdc的sql形式进行全量同步，4张表，有两张表数据没进去，看日志，id怎么是null呢?
vohelon
114 40
sunrr
|
5月前
|
存储 Serverless
可以在函数计算FC中使用这些挂载目录来存储和访问你的文件和数据
可以在函数计算FC中使用这些挂载目录来存储和访问你的文件和数据
sunrr
49 1
cuicuicuic
|
23天前
|
存储 SQL Serverless
Serverless 应用引擎常见问题之应用下的【应用事件】以及企业级特性下的【事件中心】没有日志如何解决
Serverless 应用引擎（Serverless Application Engine, SAE）是一种完全托管的应用平台，它允许开发者无需管理服务器即可构建和部署应用。以下是Serverless 应用引擎使用过程中的一些常见问题及其答案的汇总：
cuicuicuic
33 0
小Lee
|
5月前
|
Serverless
函数计算FC sd执行的日志在哪
函数计算FC sd执行的日志在哪看啊？
小Lee
35 1
听风de歌
|
6月前
|
数据采集 Serverless Python
基于函数计算FC一键部署Stable Diffusion的数据怎么初始化格式化？
基于函数计算FC一键部署Stable Diffusion的数据怎么初始化格式化？
听风de歌
55 1
三分钟热度的鱼
|
3月前
|
监控 Java Serverless
Serverless应用引擎日志问题之日志不显示如何解决
Serverless部署是指将应用程序部署到无服务器架构中，该架构允许开发者专注于代码而无需关心底层服务器的运行和维护；针对Serverless部署过程中可能遇到的挑战，本合集提供全面的指南和最佳实践，帮助开发者顺利实现应用的无服务器化部署。
三分钟热度的鱼
45 0
sunrr
|
3月前
|
存储 监控 Serverless
在处理阿里云函数计算3.0版本的函数时，如果遇到报错但没有日志信息的情况
在处理阿里云函数计算3.0版本的函数时，如果遇到报错但没有日志信息的情况【1月更文挑战第23天】【1月更文挑战第114篇】
sunrr
63 5
vohelon
|
3月前
|
存储 监控 数据挖掘
阿里云函数计算的日志可以通过两种方式进行处理
【1月更文挑战第16天】【1月更文挑战第76篇】阿里云函数计算（Function Compute）的日志可以通过两种方式进行处理
vohelon
56 1
阿里云云原生
|
3月前
|
消息中间件 Kubernetes Serverless
定向减免，函数计算让轻量 ETL 数据加工更简单，更省钱
本文介绍了函数计算 FC 推出的定向减免方案，让 ETL 数据加工更简单、更自动化、容错能力更强，且业务实时性更高、计算费用更低。
阿里云云原生
611 0
云原生

Serverless

热门文章

最新文章

  • 1
    让你的文档从静态展示到一键部署可操作验证
  • 2
    开发函数计算的正确姿势 —— 移植 next.js 服务端渲染框架
  • 3
    快速搭建基于 Serverless 的 .NET Core 数据库应用
  • 4
    首次揭秘：阿里巴巴中间件在 Serverless 技术领域的探索
  • 5
    10分钟-使用阿里云函数计算构建你的OCR智能识别云端小程序
  • 6
    玩转阿里云函数计算(一)----Java Http 触发器极速迁移传统 Spring 应用
  • 7
    php runtime 中 headers already sent 问题解决方案
  • 8
    浅析基于 Serverless 的前后端一体化框架 | 7月2号云栖夜读
  • 9
    浅析基于 Serverless 的前后端一体化框架
  • 10
    基于阿里云Serverless架构下函数计算的最新应用场景详解（一）
  • 1
    通义灵码牵手阿里云函数计算 FC ，打造智能编码新体验
    6
  • 2
    用 Github Actions 自动部署阿里云函数计算 FC
    179
  • 3
    函数计算+HuggingFace部署
    181
  • 4
    让你的文档从静态展示到一键部署可操作验证
    120103
  • 5
    2023 中国 Serverless 用户调查，邀您填写！
    557
  • 6
    云原生最佳实践系列 7：基于 OSS Object FC 实现非结构化文件实时处理
    201
  • 7
    云原生最佳实践系列 5：基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作
    179
  • 8
    Serverless 应用引擎常见问题之改配置变慢如何解决
    159
  • 9
    Serverless 应用引擎常见问题之做的web服务计费如何解决
    169
  • 10
    Serverless 应用引擎常见问题之工作流这执行输出通过jsonpath过滤如何解决
    180

    • 相关产品

  • 函数计算
    文档详情 产品详情

    • 相关课程

    更多
  • Serverless 函数计算架构
  • Serverless 常见架构模式
  • 初识 Serverless
  • 通过Knative轻松实现应用Serverless化交付
  • 建立 Serverless 思维
  • 降本增效实战利器 - Serverless 应用引擎

    • 相关电子书

    更多
  • All in Serverless 阿里云核心产品全面升级
  • AIGC 浪潮之上，森马的 Serverless 实践之旅
  • 极氪大数据 Serverless 应用实践

    • 相关实验场景

    更多
  • 使用函数计算FC部署TodoList应用
  • 函数计算部署AI艺术字应用，生成新春文字头像
  • 使用函数计算部署通义千问大模型实现AI对话
  • 基于通义千问X函数计算部署AI助手
  • 在ACK Serverless中部署Stable Diffusion应用
  • 使用NAS和FC部署FaceChain一键打造个人数字分身
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）
    为什么选择阿里云什么是云计算全球基础设施技术领先稳定可靠安全合规分析师报告
    产品和定价全部产品免费试用产品动态产品定价价格计算器云上成本管理
    解决方案技术解决方案
    文档与社区文档开发者社区天池大赛培训与认证
    权益中心免费试用高校计划企业扶持计划推荐返现计划
    支持与服务基础服务企业增值服务迁云服务官网公告健康看板信任中心
    关注阿里云
    关注阿里云公众号或下载阿里云APP，关注云资讯，随时随地运维管控云服务
    阿里云APP阿里云微信
    联系我们：4008013260
    法律声明Cookies政策廉正举报安全举报联系我们加入我们
    阿里巴巴集团淘宝网天猫全球速卖通阿里巴巴国际交易市场1688阿里妈妈飞猪阿里云计算AliOS万网高德UC友盟优酷钉钉支付宝达摩院淘宝海外阿里云盘饿了么
    © 2009-2024 Aliyun.com 版权所有 增值电信业务经营许可证： 浙B2-20080101 域名注册服务机构许可： 浙D3-20210002 京D3-20220015
    浙公网安备 33010602009975号浙B2-20080101-4