地理数据与数据仓库

简介: 如果想要实现Google Earth,大概的流程是怎样的呢?
在使用Google Earth的时候,感觉很神奇,因为这个服务让我们拥有了“千里眼”,可以洞察万物。Google Earth诞生之后,产生了很大的影响。从此,地图服务成为了互联网的基础服务之一。
在看BigTable的论文时,里面谈到Google Earth中的地图数据存储其中。Google Earth也算是典型的大数据应用了。
本身学习了GIS,后来工作涉及了数据仓库,就在想,如果想要实现Google Earth,大概的流程是怎样的呢?

数据源

Google Earth的数据来源有一些遥感卫星和高分辨率卫星。
遥感卫星有美国的Landsta,比如Landsta7,其覆盖周期为16天,不同的传感器分辨率有些差别,普遍在30m以上,会采集一些不可见光的遥测图像,红外波段等。中国也有类似的卫星,2015年11月27日发射了遥感卫星二十九号。
高分辨率卫星来自于DigitalGlobe,该公司旗下有QuickBird、WorldView等系列的卫星。WorldView4,其覆盖周期为3天,最高分辨率可以达到0.31m。中国在2016年08月10日发射了高分三号卫星。

收集

这些卫星,会将收集的遥测数据发送到地面站,由地面站传输到不同的地方。可以根据需要,从不同的公司或者机构获取数据。

ODS层

数据可以考虑存放在 hbase中,因为图片一般挺大的,hbase的value最大值能有多大,这个需要调整。

DM层

有了基础的数据之后,就可以做一些应用。比如,统计城市的扩张速度、农田的侵占情况等。


总结

有了地理数据之后,可以做的事情就比较多了。

比如,可以将全球史以Google Earth的形式展现,这样,对国内历史的认识会更加容易和深刻。

比如,在地理数据之上,附加各个城市的统计数据,这样就能直观展现不同城市的权力到底有多大。

相关文章
|
1月前
|
SQL 数据采集 存储
数据仓库(12)数据治理之数仓数据管理实践心得
这边文章聊聊自己对数据治理开发实践的一些思路,就是聊聊怎么开始去做数据治理这件事情。说起数据治理,有时候虽然看了很多文章,看了很多的介绍,了解数据治理的理论,但是实际上需要我们去搞的时候,就会踩很多的坑。这里记一下自己做数据治理的一些思路,做做笔记,也分享给需要的同学。 当然,想要做数据治理,想要学习了解,一下数据治理的范围,理论等,最好可以看看别人怎么做的,了解数据治理可以参考:[数据仓库(11)什么是大数据治理,数据治理的范围是哪些](https://zhuanlan.zhihu.com/p/467433967)。
230 0
|
1月前
|
存储 监控 大数据
数据仓库(11)什么是大数据治理,数据治理的范围是哪些
什么是数据治理,数据治理包含哪些方面?大数据时代的到来,给了我们很多的机遇,也有很多的挑战。最基础的调整也是大数据的计算和管理,数据治理是一个特别重要的大数据基础,他保证着数据能否被最好的应用,保证着数据的安全,治理等。那么数据治理到底能治什么,怎么治?
64 0
|
1月前
|
存储 大数据 数据管理
数据仓库(09)数仓缓慢变化维度数据的处理
数据仓库的重要特点之一是反映历史变化,所以如何处理维度的变化是维度设计的重要工作之一。缓慢变化维的提出是因为在现实世界中,维度的属性并不是静态的,它会随着时间的流逝发生缓慢的变化,与数据增长较为快速的事实表相比,维度变化相对缓慢。阴齿这个就叫做缓慢变化维。
210 2
数据仓库(09)数仓缓慢变化维度数据的处理
|
3月前
|
存储 机器学习/深度学习 数据挖掘
数据仓库与数据湖:解析数据驱动的未来
在数字化时代,数据成为企业决策的核心资源。本文将深入探讨数据仓库和数据湖的概念、特点以及应用场景,分析其在实现数据驱动决策过程中的重要性和优势,并展望数据驱动的未来发展趋势。
48 5
|
3月前
|
SQL 分布式计算 Java
数仓学习---7、数据仓库设计、数据仓库环境准备、模拟数据生成
数仓学习---7、数据仓库设计、数据仓库环境准备
121 2
|
4月前
|
Cloud Native 关系型数据库 MySQL
云数据仓库ADB如何更新、删除和导入AnalyticDBMySQL数据-更新数据?
云数据仓库ADB如何更新、删除和导入AnalyticDBMySQL数据-更新数据?
80 0
|
4月前
|
Cloud Native 关系型数据库 MySQL
云数据仓库ADB问一下,数据批量导入失败的有地方导出吗?
云数据仓库ADB问一下,数据批量导入失败的有地方导出吗?
37 0
|
4月前
|
关系型数据库 MySQL OLAP
云数据仓库ADB如何更新、删除和导入AnalyticDBMySQL数据-更新数据?
云数据仓库ADB如何更新、删除和导入AnalyticDBMySQL数据-更新数据?
198 0
|
4月前
|
存储 数据采集 缓存
云数据仓库ADB问一下,数据批量导入失败的有地方导出吗?
云数据仓库ADB问一下,数据批量导入失败的有地方导出吗?
34 0
|
4月前
|
存储 关系型数据库 MySQL
云数据仓库ADB的 热数据存储空间 在哪里看?热数据存储空间 的计费是怎么计算的?
云数据仓库ADB的 热数据存储空间 在哪里看?热数据存储空间 的计费是怎么计算的?
37 0