阿里云存储服务 + 关注
手机版

日志分析:从 ELK 到 SLS

日志分析,在 SLS 体验搜索百亿数据,秒级返回。超高性价比,无人能敌,并可轻松从 ELK 迁入

数据存储与数据库 大数据 安全 性能 日志 SLS 数据迁移 数据分析 解决方案 存储 日志分析

数据库代码化(Database-as-Code)实战(二)

前言 在数据库代码化(Database-as-Code)实战一文中介绍了如何借助 Flyway 实现 migration based 的数据库迁移。但在实践过程中,发现了如下问题: 随着项目的发展,迁移脚本数量会越来越多,而全新部署...

python SQL 数据库 数据迁移 脚本 公共云

数据库代码化(Database-as-Code)实战

最近在做专有云输出时遇到了一个棘手的问题,客户需要将我们两年前发布的版本升级到最新版。由于跨度较长,产品代码和数据库 schema 都发生了巨大变化。产品代码部分因为采用了版本管理策略,拥有明确的升级路径,但数据库部分由于未采用代码化方案,...

SQL 数据库 数据迁移 脚本 数据库迁移 index DML 存储过程 公共云

企业数据上云构建数据湖的正确姿势

在刚刚落幕的2019中国数据与存储峰会上,阿里云对象存储OSS(Object Storage Service)和业界专家一起探讨了《企业数据上云构建数据湖的正确姿势》。OSS作为非结构化数据存储池和数据湖底座,为双十一期间淘宝、天猫、支付宝...

云栖社区 数据存储与数据库 系统研发与运维 分布式 大数据 安全 架构 监控 OSS 加密 日志 数据迁移 big data 安全问道

【2019 云栖大会】对象存储海量数据管理和应用最佳实践

2019 云栖大会"下一代云存储技术与最佳实践专场",分享“对象存储海量数据管理和应用最佳实践” 议题,重点介绍对象存储 OSS 的架构原理、数据管理、最佳实践。

分布式 架构 分布式系统与计算 OSS 云栖大会 阿里技术协会 数据处理 云存储 数据迁移 aliyun 对象存储 带宽 html 数据管理

【New Feature】阿里云快照服务技术解析

一、背景   目前上云已经成为行业发展趋势,越来越多的企业级客户将业务系统和数据库迁移到云上。而传统的备份一体机/备份软件方式,并不适合云上ECS、RDS等产品的备份与容灾服务。阿里云块存储服务提供云原生的快照服务,通过针对关键业务系统的...

云栖社区 nginx 安全与风控 数据存储与数据库 python faq 加密 镜像 集群 系统盘 数据迁移 云盘 多线程 数据库迁移 安全问道

表格存储Tablestore权威指南(持续更新)

表格存储本着提升用户体验的思路,打造《表格存储Tablestore权威指南》。为用户提供可借鉴的开发指导、经典案例。经典案例按照场景应用类型划分,目前提供五类场景:元数据、消息数据、轨迹溯源、科学大数据以及物联网;每个类型下都会提供多种经典...

TableStore 实战 用户体验 数据迁移 数据分析 aliyun 解决方案 物联网 数据同步 表格存储 数据管理 经典案例

数据同步-从MySQL到Tablestore

数据同步-从MySQL到Tablestore DataX是阿里集团广泛使用的离线数据导出工具, 本文将详细介绍如何从MySQL导出全量数据到Tablestore(OTS)中。 一、导出步骤 DataX工具目前已经在github上开...

数据存储与数据库 分布式 大数据 TableStore mysql 线程 Json 配置 数据迁移 数据同步 表格存储 timestamp type datax

大数据同步利器: 表格存储全增量一体消费通道

本文会给大家详细介绍表格存储重磅推出的一项新功能--全增量一体数据通道。文章会为大家阐述数据通道的主要使用场景,表格存储数据通道的功能优势,并带大家快速入门如何使用数据通道来消费数据。本文会给大家详细介绍表格存储重磅推出的一项新功能--全增...

大数据 监控 TableStore 数据迁移 ots 数据同步 表格存储 海量数据 Blink 实时计算 数据通道 大数据分析系统 TunnelService 海量数据存储

2018 年度阿里云存储十大新闻盘点篇

数据量的爆炸式增长和企业对数据价值挖掘的渴求,让存储市场迎来前所未有的发展机遇。在过去的一年中,我们看到工业制造、在线教育、智能驾驶、基因生命科学、医疗健康、安防监控等行业正加速从数字化到智能化的转型升级,在存储空间持续增长的同时,也对存储...

安全与风控 数据存储与数据库 互联网产品及应用 大数据 分布式系统与计算 云存储技术 云栖大会 阿里技术协会 数据安全 云存储 数据迁移 存储 数据价值 智能 稳定

Windows中常用文件拷贝工具的评测和对比

本文集中测试了市面上主流的Windows文件拷贝工具,并根据速度测试和综合测评的结果为大家进行了分析和推荐。 为了方便没有时间阅读全篇的朋友,我们把最后总结的一句话放在这里:如果觉得Windows文件管理器拷贝太慢,请用Robocopy!

数据存储与数据库 线程 windows 阿里技术协会 测试 数据迁移 多线程 文件存储服务

一行命令:从 ELK 迁移日志服务

日志服务相比自建 ELK 在功能、性能、规模和成本等方面有诸多优势。对于已经存储在 Elasticsearch 中的数据,用户只需要一行命令就能方便地将数据迁移至日志服务。

nginx python 性能 日志 日志服务 数据迁移 aliyun 索引 Elasticsearch index html 数据类型 github ELK

阿里云发布国内首个混合云大数据双活容灾服务

阿里云发布了国内首个混合云大数据集群双活容灾产品-混合云容灾服务下的大数据容灾服务(HDR for Big Data),采用业界领先的数据双向实时复制技术,HDR for Big Data可以实现Hadoop集群双活和准0 RPO容灾,为大...

云栖社区 大数据 架构 云存储技术 hadoop 云栖大会 集群 数据迁移 对象存储 EMR 容灾 存储

OSS定制自定义response header

OSS通过传入"x-oss-persistent-headers"这个头,支持指定非"x-oss-meta-"开头的usermeta,满足特定用户特定场景的需求

数据存储与数据库 linux 分布式系统与计算 OSS 镜像 数据迁移

突破吞吐限制,多NAS性能聚合方案,数据上传及读写

本文提出一种通过挂载多个NAS来获取更高文件存储吞吐性能的方法,适合特殊场景下的一些应用

云栖社区 分布式 性能 HTTPS 公共云 高可用 云存储 Image 数据迁移 钉钉 多线程 文件存储服务 分布式文件系统 存储

NAS数据迁移初探

阿里云文件存储(Network Attached Storage,简称NAS)是面向阿里云ECS实例、HPC和Docker的文件存储服务,提供标准的文件访问协议,用户无需对现有应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、多...

云栖社区 数据存储与数据库 监控 阿里云 服务器 OSS 线程 阿里技术协会 数据迁移 云盘 多线程 文件存储服务 分布式文件系统 inotify

OssImport系列之四——最佳实践

介绍数据迁移工具OssImport在典型场景下的应用、典型需求的实现方法。

最佳实践 数据迁移 ossimport 典型场景 典型需求

2
GO
更多>
日志 aliyun 日志服务 存储 配置 OSS Image 数据存储与数据库 云栖社区 控制台 表格存储 SLS html 架构 对象存储 大数据 函数 LOG 日志分析 服务器 索引 TableStore 云存储 监控 Logtail 安全 性能 分布式系统与计算 SQL 分布式 数据库 阿里云 阿里技术协会 python 云存储技术 数据存储 HTTPS 集群 同步 java string 数据加工 ots 解决方案 ECS NOSQL Json 钉钉 报表 容器 高可用 windows 流计算 文件存储服务 etl 数据迁移 安全与风控 日志采集 云存储网关 mysql kubernetes 算法 云盘 NAS 加密 互联网产品及应用 数据采集 nginx sdk Group 文件存储 负载均衡 k8s linux cdn 运营 正则表达式 消息服务 数据处理 容灾 高性能 MNS API 数据中心 request Server 数据同步 电商 日志处理 数据分析 域名 最佳实践 云栖大会 系统研发与运维 物联网 数据备份 http 数组 数据安全 github 消息系统 备份 index 测试 工单 插件 数据管理 消息队列 分布式存储 docker 模块 对象存储OSS 线程 service RAM loghub spark shell 前端与交互设计 syslog 安全问道 海量数据 高并发 移动开发与客户端 hbase 镜像 基础设施 serverless 混合云存储 MaxCompute BY 带宽 stream 浏览器 type 帮助 性能优化 机器学习 云服务 可视化 磁盘 hadoop 公共云 workshop NFS web 数据类型 TSDB 数据仓库 IOT timestamp 多线程 用户体验 schema 互联网 js 弹性伸缩 test hdfs 脚本 csv faq Apache 系统软件 身份认证 微服务 弹性扩展 VPC url 主机 分布式文件系统 异地 kafka 访问日志 source 按量付费 CLI 排序 Java核心技术 IIS 查询分析 logger Blink 飞天 DDOS php Elasticsearch 常见问题 devOps google 公共云 深度学习 发布 RDS DNS 混合云备份 归档存储 混合云 demo 网络安全 slb 分布式系统 离线分析 android ATA 表达式 STS trace VMWare 大数据分析 兼容性 Bash Access 函数计算 根目录 时序 EMR file logstash 实时系统 系统盘 采集 Office 序列 多元索引 挂载OSS ossimport 大数据安全 云服务器ECS logging 态势感知 数据盘 轨迹 flink 人工智能 网络与数据通信 smb 客服 big OSS挂载 Feed流 data 日志收集 im 持续集成 分析 云原生 金融云