Google Earth Engine(GEE)——高度可扩展的时间自适应反射率融合模型(HISTARFM)数据库

简介: Google Earth Engine(GEE)——高度可扩展的时间自适应反射率融合模型(HISTARFM)数据库

高度可扩展的时间自适应反射率融合模型(HISTARFM)数据库

HISTARFM数据库是一个高空间分辨率的月度反射率时间序列,并对云层数据缺口进行修正。该数据集是通过融合陆地卫星和中分辨率成像光谱仪(MODIS)的时间序列,以30米的分辨率创建的。该方法包括使用两个估计器,它们共同作用于消除随机噪声,并使Landsat光谱反射率的偏差最小化。第一个估计器是一个最佳内插器,它使用Landsat历史数据和来自最近的过道的融合MODIS和Landsat反射率生成Landsat反射率估计。融合过程采用了一个像素级的线性回归模型。第二个估计器是一个卡尔曼滤波器,用于纠正第一个估计器产生的反射率中的任何偏差。前言 – 床长人工智能教程HISTARFM提供了改进的反射率值和一个独特而有用的副产品--反射率不确定性,这对现实的误差计算有帮助(例如,计算植被指数或生物物理变量的误差条)。关于HISTARFM算法的更详细解释,请参考Moreno-Martinez等人的2020年手稿。

https://www.sciencedirect.com/science/article/pii/S0034425720302716

 

 

Citation

Moreno-Martínez, Álvaro, Emma Izquierdo-Verdiguier, Marco P. Maneta, Gustau Camps-Valls, Nathaniel Robinson, Jordi Muñoz-Marí, Fernando Sedano,
Nicholas Clinton, and Steven W. Running. "Multispectral high resolution sensor fusion for smoothing and gap-filling in the cloud." Remote Sensing of
Environment 247 (2020): 111901.

Earth Engine Snippet

不同的版本和研究领域已经是流程:

美国CONUS数据库包含154张作为资产储存的图像。它与第二版相对应,时间覆盖范围从2009年1月到2021年10月。ImageCollection中的每张图片都覆盖了整个美国本土,每张图片都有 "版本"、"月份 "和 "年份 "属性。这些信息也存在于它们的文件名中。例如,名为Gap_Filled_Landsat_CONUS_month_10_2009_v2的图像是2009年10月CONUS地区的图像。CONUS数据库在这个资产中可用,图像在地球引擎中的加载情况如下:

var histarfm_conus = ee.ImageCollection("projects/KalmanGFwork/GFLandsat_V1")

欧洲、东亚主要地区和索马里的数据库目前正在用第5版的算法生成。版本5包含26916张图片。欧洲包含从2013年到2021年的9年,东亚包含从2019年到2021年的3年,索马里包含从2010年到2014年的5年。所有的研究区域都被划分为瓦片,作为云端优化的Geotiffs储存在谷歌云平台上。图像的名称包括月份、年份、具体研究区域和瓦片。举例来说,名为GF_2018_10_EUROPA_1的图像代表了2018年10月在欧洲的第一个瓦片上的图像。数据库的第5版可在此获得,图像可通过以下代码在地球引擎中加载:

var histarfm_ic = ee.ImageCollection("projects/ee-kalman-gap-filled/assets/histarfm_v5")

Sample code : https://code.earthengine.google.com/?scriptPath=users/sat-io/awesome-gee-catalog-examples:analysis-ready-data/HISTARFM-V5-EXAMPLE

关于如何与HISTARFM合作的更多信息,以及如何利用HISTARFM数据库改善你的研究和应用的一些例子,请访问这里的教程。

以下论文中使用了HISTARFM数据库

  • Martínez-Ferrer, L., et al. "Quantifying uncertainty in high resolution biophysical variable retrieval with machine learning." Remote Sensing of Environment 280 (2022): 113199.
  • Salerno, L., et al. "Satellite Analyses Unravel the Multi-Decadal Impact of Dam Management on Tropical Floodplain Vegetation." Frontiers in Environmental Science (2022): 357.
  • Kushal, K. C., and Sami Khanal. "Agricultural productivity and water quality tradeoffs of winter cover crops at a landscape scale through the lens of remote sensing." Journal of Environmental Management 330 (2023): 117212.

License

The dataset is licensed under a Creative Commons Attribution NonCommercial 4.0 International license.

Curated by: Álvaro Moreno-Martínez, Emma Izquierdo-Verdiguier, Jordi Muñoz-Marí and Nicolas Clinton.

Keywords: MODIS, Landsat, Land reflectance images, gap-filled temporal series, vegetation

Last updated: 06-03-2023

 

相关文章
|
14天前
|
人工智能 运维 关系型数据库
云栖大会|数据库与AI全面融合,迈入数据智能新纪元
2024年云栖大会「数据库与AI融合」专场,来自NVIDIA、宇视科技、合思信息、杭州光云科技、MiniMax等企业的代表与阿里云瑶池数据库团队,共同分享了Data+AI全面融合的最新技术进展。阿里云发布了DMS的跨云统一开放元数据OneMeta和智能开发OneOps,推出《云数据库运维》技术图书,并介绍了PolarDB、AnalyticDB、Lindorm和Tair等产品的最新能力,展示了AI在数据库领域的广泛应用和创新。
|
6月前
|
机器学习/深度学习 存储 人工智能
新一代数据库技术:融合人工智能与分布式系统的未来前景
传统数据库技术在应对大规模数据处理和智能化需求方面逐渐显露出瓶颈。本文探讨了新一代数据库技术的发展趋势,重点关注了人工智能与分布式系统的融合,以及其在未来数据管理和分析中的潜在优势。通过深度学习和自动化技术,新型数据库系统能够实现更高效的数据处理和智能化决策,为企业带来更灵活、可靠的数据解决方案。
|
2月前
|
SQL 监控 大数据
通过Google Dataflow,我们能够构建一个高效、可扩展且易于维护的实时数据处理系统
【9月更文挑战第7天】随着大数据时代的到来,企业对高效数据处理的需求日益增加,特别是在实时分析和事件驱动应用中。Google Dataflow作为Google Cloud Platform的一项服务,凭借其灵活、可扩展的特点,成为实时大数据处理的首选。本文将介绍Dataflow的基本概念、优势,并通过一个电商日志分析的实际案例和示例代码,展示如何构建高效的数据处理管道。Dataflow不仅支持自动扩展和高可用性,还提供了多种编程语言支持和与GCP其他服务的紧密集成,简化了整个数据处理流程。通过Dataflow,企业可以快速响应业务需求,优化用户体验。
70 3
|
3月前
|
SQL 监控 大数据
"解锁实时大数据处理新境界:Google Dataflow——构建高效、可扩展的实时数据管道实践"
【8月更文挑战第10天】随着大数据时代的发展,企业急需高效处理数据以实现即时响应。Google Dataflow作为Google Cloud Platform的强大服务,提供了一个完全托管的流处理与批处理方案。它采用Apache Beam编程模型,支持自动扩展、高可用性,并能与GCP服务无缝集成。例如,电商平台可通过Dataflow实时分析用户行为日志:首先利用Pub/Sub收集数据;接着构建管道处理并分析这些日志;最后将结果输出至BigQuery。Dataflow因此成为构建实时数据处理系统的理想选择,助力企业快速响应业务需求。
193 6
|
3月前
|
存储 C# 关系型数据库
“云端融合:WPF应用无缝对接Azure与AWS——从Blob存储到RDS数据库,全面解析跨平台云服务集成的最佳实践”
【8月更文挑战第31天】本文探讨了如何将Windows Presentation Foundation(WPF)应用与Microsoft Azure和Amazon Web Services(AWS)两大主流云平台无缝集成。通过具体示例代码展示了如何利用Azure Blob Storage存储非结构化数据、Azure Cosmos DB进行分布式数据库操作;同时介绍了如何借助Amazon S3实现大规模数据存储及通过Amazon RDS简化数据库管理。这不仅提升了WPF应用的可扩展性和可用性,还降低了基础设施成本。
81 0
|
3月前
|
存储 前端开发 关系型数据库
Linux 技术架构:前端、后端与数据库的完美融合
【8月更文挑战第25天】本文深入剖析了Linux操作系统的技术架构,重点介绍了前端、后端及数据库三大核心组成部分。Linux前端技术不仅涵盖了图形用户界面(GUI),包括GNOME、KDE等桌面环境,还涉及HTML、CSS、JavaScript等Web前端技术及其相关框架。后端技术则聚焦于Python、Java等多种编程语言、Apache和Nginx等Web服务器以及MySQL、PostgreSQL等数据库管理系统。Linux数据库技术覆盖了关系型和非关系型数据库,如MySQL、MongoDB等,并提供了多种数据库管理工具。
93 0
|
5月前
|
人工智能 自然语言处理 机器人
[AI Google] 新的生成媒体模型和工具,专为创作者设计和构建
探索谷歌最新的生成媒体模型:用于高分辨率视频生成的 Veo 和用于卓越文本生成图像能力的 Imagen 3。还可以了解使用 Music AI Sandbox 创作的新演示录音。
[AI Google] 新的生成媒体模型和工具,专为创作者设计和构建
|
6月前
|
人工智能 监控 搜索推荐
[AI Google] 如何通过 LearnLM 扩展生成式 AI 的好奇心和理解力
LearnLM 是 Google 新推出的一系列为学习而优化的模型,通过生成式 AI 增强教育体验,使学习变得更加有趣和个性化。
[AI Google] 如何通过 LearnLM 扩展生成式 AI 的好奇心和理解力
|
6月前
|
存储 安全 数据管理
新一代数据库技术:融合区块链与分布式存储的未来趋势
传统数据库技术在数据安全性和分布式处理方面存在局限,而新一代数据库技术正日益融合区块链和分布式存储,为数据管理带来革命性变革。本文探讨了这一趋势的发展方向,以及如何利用新技术实现更高效的数据管理与保护。
|
6月前
|
人工智能 关系型数据库 分布式数据库
【PolarDB 开源】PolarDB 与 AI 融合:智能数据库管理与预测性维护
【5月更文挑战第28天】PolarDB结合AI,开创数据库管理新纪元,实现智能优化、资源预测与分配、预测性维护。通过AI算法提升查询效率,动态调整资源,提前发现故障,增强安全。示例代码显示如何用AI预测查询时间。面对挑战,持续学习改进,未来二者融合将为数据库管理带来更多创新与竞争力。
202 0