当前位置： 首页 > news >正文

GEE/PIE遥感大数据处理与应用

news 文章来源：https://blog.csdn.net/zmjia111/article/details/132432913 2025/1/31 14:21:19

随着航空、航天、近地空间等多个遥感平台的不断发展，近年来遥感技术突飞猛进。由此，遥感数据的空间、时间、光谱分辨率不断提高，数据量也大幅增长，使其越来越具有大数据特征。对于相关研究而言，遥感大数据的出现为其提供了前所未有的机遇，但同时也提出了巨大的挑战。传统的工作站和服务器已经无法满足大区域、多尺度海量遥感数据处理的需要。

为解决这一问题，国内外涌现了许多全球尺度地球科学数据（尤其是卫星遥感数据）在线可视化计算和分析云平台如谷歌Earth Engine（GEE）和航天宏图的PIE Engine等。其中，Earth Engine最为强大，能够存取和同步遥感领域目前常用的MODIS、Landsat和Sentinel等卫星图像和NCEP等气象再分析数据集，同时依托全球上百万台超级服务器，提供足够的运算能力对这些数据进行处理。目前，Earth Engine上包含超过900个公共数据集，每月新增约2 PB数据，总容量超过80PB。作为国内最先进的遥感云平台，PIE Engine近年来发展发非常迅速，拥有丰富的国产卫星数据，以及中国区域的其它重要开源数据，在数据安全性和访问便利性方面具有独到的优势。与传统的处理影像工具（例如ENVI）相比，遥感云平台一方面提供了丰富的计算资源；另一方面，其巨大的云存储能力节省了科研人员大量的数据下载和预处理时间。

一、初识GEE和PIE遥感云平台

1. GEE和PIE平台及典型应用案例介绍

2. JavaScript基础，包括变量，运算符，数组，判断及循环语句等

3. 遥感云重要概念与典型数据分析流程

4. 遥感云基本对象及平台上手

· 影像与影像集

· 几何体、要素与要素集

· 日期、字符、数字

· 数组、列表、字典

· 影像/影像集、要素/要素集数据查询、时空过滤、可视化、属性查看等

主要对象最常用API介绍

二、GEE和PIE影像大数据处理基础

1. . 关键知识点

· 影像数学运算、关系/条件/布尔运算、形态滤波、纹理特征提取等

· 影像掩码，裁剪和镶嵌

· 集合对象的循环迭代（map/iterate）

· 集合对象联合（Join）

· 影像面向对象分析

2. 2. 主要功能

· Landsat/Sentinel-2影像批量去云

· Landsat/Sentinel-2传感器归一化、植被指数计算等

时间序列光学影像的平滑与空间插值

三、数据整合Reduce

1. 关键知识点

· 影像与影像集整合，如指定时窗的年度影像合成

· 影像区域统计与领域统计，分类后处理

· 要素集属性列统计

· 栅格与矢量的相互转换

· 分组整合与区域统计

· 影像集、影像和要素集的线性回归分析

2. 主要功能

· 研究区可用Landsat影像的数量和无云观测数量的统计分析

· 中国区域年度NDVI植被数合成及年度最绿的DOY时间查找

· 国家尺度30年尺度的降雨量时空变化趋势分析

四、云端数据可视化

1. 关键知识点

· 要素与要素集属性制图（条形图、直方图、堆积柱形图、散点图等）

· 影像制图（区域统计、分类图、直方图、散点图、线型图，饼图等）

· 影像集制图（样点时间序列图、区域统计时间序列图等）

· 数组与链表制图（散点图、样线图等）

· 图形风格和属性设置

2. 主要功能

· 基于MODIS时间序列影像的不同地表植被物候分析与制图

·基于Hansen产品的年度森林时空变化分析与专题图绘制

五、数据导入导出及资产管理

1. 关键知识点

· 不同矢量数据上传个人资产

· 影像数据上传个人资产、属性设置等

· 影像批量导出（Asset和Driver）

· 矢量数据导出（Asset和Driver）

· 空间统计分析结果导出

2. 主要功能

· PIE平台国产卫星数据下载

· 影像合成批量导出及下载

· 地面样地对应遥感指标数据导出

六、机器学习算法

1. 关键知识点

· 样本抽样（随机抽样、分层随机抽样）

· 监督分类算法（随机森林、CART、贝叶斯、SVM、决策树等）

· 非监督分类算法（wekaKMeans、wekaLVQ等）

· 分类精度评估

2. 主要功能

· 联合光学与雷达时间序列影像的森林动态监测

· 水体自动提取与洪涝监测

七、案例

1. GEE土地利用分类综合案例，实现主要功能串讲，包括地面样本准备、多源遥感影像预处理、算法开发、分类后处理、精度评估和空间统计分析与制图等环节

2. 经典PIE案例代码

· 夜间灯光指数提取

· 长时间尺度植被覆盖度反演

· 水域动态监测

· 农作物种植面积提取

· 荒漠化程度提取

3. 人口密度动态变化分析

GEE与PIE平台切换、代码优化、常见错误与调试总结

阅读全文点击《GEE/PIE遥感大数据处理与应用》

相关文章：

GEE/PIE遥感大数据处理与应用

随着航空、航天、近地空间等多个遥感平台的不断发展，近年来遥感技术突飞猛进。由此，遥感数据的空间、时间、光谱分辨率不断提高，数据量也大幅增长，使其越来越具有大数据特征。对于相关研究而言，遥感大数据的出现为其提…...

编程日记 2023/8/25 2:20:11

● 647. 回文子串 ● 516.最长回文子序列

647. 回文子串 class Solution { public:int countSubstrings(string s) {vector<vector<bool>>dp(s.size(),vector<bool>(s.size(),false));int res0;for(int is.size()-1;i>0;i--){for(int ji;j<s.size();j){if(s[i]s[j]){if(j-i<1){res;dp[i][…...

编程日记 2023/8/25 2:19:10

Mysql group by使用示例

文章目录 1. groupby时不能查询*2. 查询出的列必须在group by的条件列中3. group by多个字段&#xff0c;这些字段都有索引也会索引失效&#xff0c;只有group by单个字段索引才能起作用4. having条件必须跟group by相关联5. 用group by做去重6. 使用聚合函数做数量统计7. havi…...

编程日记 2023/8/25 2:18:09

淘宝商品详情采集接口item_get-获得淘宝商品详情（可高并发线程）

获得淘宝商品详情页面数据采集如下&#xff1a; taobao.item_get 公共参数 名称类型必须描述keyString是调用key&#xff08;必须以GET方式拼接在URL中&#xff09;注册key账号接入secretString是调用密钥api_nameString是API接口名称&#xff08;包括在请求地址中&#xff0…...

编程日记 2023/8/25 2:17:07

uniapp写公众号h5开发 附件上传 下载功能

一。 uni-app实现文件上传功能 目前，找到一款第三方插件 文件上传插件地址 https://ext.dcloud.net.cn/plugin?id=1015 将插件下载并导入项目中直接拿来使用，插件市场也有对改插件用法的描述。 用法： 1. 以下代码写于根目录下第一个view顶部或跟在自定义导航栏后面 // 以…...

编程日记 2023/8/25 2:16:05

机器学习基础09-审查分类算法（基于印第安糖尿病Pima Indians数据集）

算法审查是选择合适的机器学习算法的主要方法之一。审查算法前并 不知道哪个算法对问题最有效&#xff0c;必须设计一定的实验进行验证&#xff0c;以找到对问题最有效的算法。本章将学习通过 scikit-learn来审查六种机器学习的分类算法&#xff0c;通过比较算法评估矩阵的结果…...

编程日记 2023/8/25 2:15:02

C++ sort与优先队列排序的区别

int main() {vector<int> data{3, 1, 2};cout << "从小到大排序" << endl;sort(data.begin(), data.end(), std::less<int>());printContainer(data);auto cmp1 [](int x, int y) { return x < y; };sort(data.begin(), data.end(), cmp…...

编程日记 2023/8/25 2:13:58

【Rust】Rust学习 第十九章高级特征

现在我们已经学习了 Rust 编程语言中最常用的部分。在第二十章开始另一个新项目之前&#xff0c;让我们聊聊一些总有一天你会遇上的部分内容。你可以将本章作为不经意间遇到未知的内容时的参考。本章将要学习的功能在一些非常特定的场景下很有用处。虽然很少会碰到它们&#xf…...

编程日记 2023/8/25 2:12:57

C++ 纯虚函数和虚函数的区别

在 C 中&#xff0c;虚函数&#xff08;Virtual Function&#xff09;和纯虚函数&#xff08;Pure Virtual Function&#xff09;都是用于实现多态性的机制&#xff0c;但它们之间有一些关键的不同。 虚函数&#xff08;Virtual Function&#xff09; 定义&#xff1a;在基类…...

编程日记 2023/8/25 2:11:56

Go中的有限状态机FSM的详细介绍 _

1、FSM简介 1.1 有限状态机的定义 有限状态机&#xff08;Finite State Machine&#xff0c;FSM&#xff09;是一种数学模型&#xff0c;用于描述系统在不同状态下的行为和转移条件。 状态机有三个组成部分&#xff1a;状态&#xff08;State&#xff09;、事件&#xff08;…...

编程日记 2023/8/25 2:10:55

Python入门教程 | Python3 基本数据类型

赋值 Python 中的变量不需要声明。每个变量在使用前都必须赋值&#xff0c;变量赋值以后该变量才会被创建。 在 Python 中&#xff0c;变量就是变量&#xff0c;它没有类型&#xff0c;我们所说的"类型"是变量所指的内存中对象的类型。 等号&#xff08;&#xff…...

编程日记 2023/8/25 2:09:54

STM32移植u8g2玩转oled 用软件iic实现驱动oled

移植u8g2到stm int fputc(int ch,FILE *f) {ITM_SendChar(ch);return (ch); }void delay_us(uint32_t time) {uint32_t i8*time;while(i--); }uint8_t STM32_gpio_and_delay(u8x8_t *u8x8, uint8_t msg, uint8_t arg_int, void *arg_ptr) {//printf("%s:msg %d,arg_int …...

编程日记 2023/8/25 2:08:50

C++ 学习系列 -- string 实现

string是C标准库的重要部分&#xff0c;主要用于字符串处理。这里我们自己实现一个简单版本的 string. 一 思路 string 类中应该包含如下&#xff1a; 1. 类成员变量&#xff1a;char* m_data&#xff0c;利用 char* 指针存放字符串 2. 成员函数&#xff1a; 2.1 size(…...

编程日记 2023/8/25 2:07:47

C语言小练习（三）

&#x1f31e; “也许你感觉自己与周遭格格不入&#xff0c;但正是那些你一人度过的时光&#xff0c;让你变得越来越有意思&#xff0c;等有天别人终于注意到你的时候&#xff0c;他们就会发现一个比他们想象中更酷的人。”-《生活大爆炸》 Day03 &#x1f4dd; 一.选择题&…...

编程日记 2023/8/25 2:06:46

2023 js逆向爬虫 有道翻译 代码

前置条件&#xff1a;nodejs环境、安装 crypto 和 python3环境 js.js文件&#xff1a; const crypto require("crypto")function decode(resp_data) {g_o ydsecret://query/key/B*RGygVywfNBwpmBaZg*WT7SIOUP2T0C9WHMZN39j^DAdaZhAnxvGcCY6VYFwnHlg_n ydsecre…...

编程日记 2023/8/25 2:04:39

【物联网无线通信技术】NFC从理论到实践（FM17XX）

NFC&#xff0c;全称是Near Field Communication&#xff0c;即“近场通信”&#xff0c;也叫“近距离无线通信”。NFC诞生于2004年&#xff0c;是基于RFID非接触式射频识别技术演变而来&#xff0c;由当时的龙头企业NXP(原飞利浦半导体)、诺基亚以及索尼联合发起。NFC采用13.5…...

编程日记 2023/8/25 2:03:36

Python爬虫猿人学逆向系列——第六题

题目&#xff1a;采集全部5页的彩票数据&#xff0c;计算全部中奖的总金额&#xff08;包含一、二、三等奖&#xff09; 地址&#xff1a;https://match.yuanrenxue.cn/match/6 本题比较简单&#xff0c;只是容易踩坑。话不多说请看分析。 两个参数&#xff0c;一个m一个f&…...

编程日记 2023/8/25 2:02:35

idea使用tomcat

1. 建立javaweb项目 2. /WEB-INF/web.xml项目配置文件 如果javaweb项目 先建立项目&#xff0c;然后在项目上添加框架支持&#xff0c;选择javaee 3. 项目结构 4.执行测试&#xff1a;...

编程日记 2023/8/25 2:01:32

搭建Tomcat HTTP服务：在Windows上实现外网远程访问的详细配置与设置教程

文章目录 前言1.本地Tomcat网页搭建1.1 Tomcat安装1.2 配置环境变量1.3 环境配置1.4 Tomcat运行测试1.5 Cpolar安装和注册 2.本地网页发布2.1.Cpolar云端设置2.2 Cpolar本地设置 3.公网访问测试4.结语 前言 Tomcat作为一个轻量级的服务器&#xff0c;不仅名字很有趣&#xff0…...

编程日记 2023/8/25 2:00:31

Java学习笔记——继承（包括this，super的使用总结）

继承&#xff1a; 使用情景&#xff1a;当类与类之间&#xff0c;存在相同&#xff08;共性&#xff09;的内容&#xff0c;并满足子类是父类的一种&#xff0c;就可以考虑使用继承&#xff0c;来优化代码 Java中提供一个关键字extends&#xff0c;用这个关键字&#xff0c;我…...

编程日记 2023/8/25 1:59:30

Android 获取应用sha1和sha256

在 Android 应用开发中&#xff0c;SHA-1&#xff08;Secure Hash Algorithm 1&#xff09;值是一种哈希算法&#xff0c;常用于生成应用的数字签名。这个数字签名用于验证应用的身份&#xff0c;并确保应用在发布到设备上时没有被篡改。 以下是生成 Android 应用的 SHA-1 值的…...

编程日记 2023/8/25 1:58:28

c# 方法参数修饰符(out、ref、in)的区别

在C#中&#xff0c;ref、out和in是三种方法参数修饰符&#xff0c;它们在传递参数的方式和作用上有所不同。 ref修饰符&#xff1a; 传递方式&#xff1a;使用ref修饰符的参数可以是输入输出参数&#xff0c;即在方法调用前后都可以对其进行修改。 作用&#xff1a;通过ref修…...

编程日记 2023/8/25 1:57:27

shell 编写一个带有进度条的程序安装脚本

需求 使用 shell 写一个 软件安装脚本&#xff0c;带有进度条 示例 #!/bin/bash# 模拟软件安装的步骤列表 steps("解压文件" "安装依赖" "配置设置" "复制文件" "")# 计算总步骤数 total_steps${#steps[]}# 安装进度的初…...

编程日记 2023/8/25 1:56:25

服务器数据恢复-AIX PV完整镜像方法以及误删LV的数据恢复方案

AIX中的PV相当于物理磁盘&#xff08;针对于存储来说&#xff0c;PV相当于存储映射过来的卷&#xff1b;针对操作系统来说&#xff0c;PV相当于物理硬盘&#xff09;&#xff0c;若干个PV组成一个VG&#xff0c;AIX可以将容量不同的存储空间组合起来统一分配。AIX把同一个VG的所…...

编程日记 2023/8/25 1:55:24

首席执行官Adam Selipsky解读“亚马逊云科技的技术产品差异化”

迄今为止&#xff0c;亚马逊云科技已经参与了21世纪几乎所有的大型计算变革&#xff0c;亚马逊云科技是一个很传奇的故事&#xff0c;它始于大约20年前的一项实验&#xff0c;当时亚马逊试图出售其过剩的服务器。人们确实对此表示怀疑。为什么在线书店试图销售云服务&#xff1…...

编程日记 2023/8/25 1:54:22

C++ Day3

目录 一、类 【1】类 【2】应用实例 练习&#xff1a; 【3】封装 二、this指针 【1】this指针的格式 【2】必须使用this指针的场合 三、类中的特殊成员函数 【1】构造函数 i&#xff09;功能 ii&#xff09;格式 iii&#xff09;构造函数的调用时机 iv&#xff09;…...

编程日记 2023/8/25 1:53:19

OpenEuler 安装mysql

下载安装包 建议直接使用在openEuler官方编译移植过的mysql-5.7.21系列软件包 参考&#xff1a;操作系统迁移实战之在openEuler上部署MySQL数据库 | 数据库迁移方案 | openEuler社区官网 MySQL 5.7.21 移植指南&#xff08;openEuler 20.03 LTS SP1&#xff09; | 数据库移植…...

编程日记 2023/8/25 1:52:16

[Docker] Windows 下基于WSL2 安装

Docker 必须部署在 Linux 内核的系统上。如果其他系统想部署 Docker 就必须安装一个虚拟 Linux 环境。 1. 开启虚拟化 进入系统BIOS&#xff08;AMD 为 SVM&#xff1b;Intel 为 Intel-vt&#xff09;改为启用(enable) 2. 开启WSL 系统设置->应用->程序和功能->…...

编程日记 2023/8/25 1:51:15

（未完成）【Spring专题】SringAOP底层原理解析——阶段三（AOP）

目录 前言前置知识代理范式SpringAOP的理解Spring动态代理的实现 课程内容一、动态代理的实现1.1 Cglib动态代理1.2 JDK动态代理1.3 ProxyFactory&#xff1a;Spring对两种代理的封装 二、AOP基础知识AOP基础概念回顾通知Advice的分类Advisor的理解 三、创建代理对象的方式3.1 …...

编程日记 2023/8/25 1:50:11

使用Nodejs创建简单的HTTP服务器，借助内网穿透工具实现公网访问的方法分享

文章目录 前言1.安装Node.js环境2.创建node.js服务3. 访问node.js 服务4.内网穿透4.1 安装配置cpolar内网穿透4.2 创建隧道映射本地端口 5.固定公网地址 前言 Node.js 是能够在服务器端运行 JavaScript 的开放源代码、跨平台运行环境。Node.js 由 OpenJS Foundation&#xff0…...

编程日记 2023/8/25 1:49:10

大网站建设/企业软文营销发布平台

解析语法查询就是调用方法查询的原始查询 例如&#xff1a; 查询所有的查询器的语法为&#xff1a;*&#xff1a;*&#xff0c;因为lucene查询是根据term来做的&#xff0c;既是&#xff1a;key:value类型。*&#xff1a;*表示所有域中的所有值。 api调用语法解析 pom.xml 必须…...

编程日记 2025/1/31 14:06:28

免费做店招的网站/搭建一个app平台需要多少钱

目录 主要函数 caffe_cpu_gemm 函数caffe_cpu_gemv 函数caffe_axpy 函数caffe_set 函数caffe_add_scalar 函数caffe_copy 函数caffe_scal 函数caffeine_cup_axpby 函数caffe_add caffe_sub caffe_mul caffe_div 函数caffe_powx caffe_sqr caffe_exp caffe_abs 函数int caffe_rn…...

编程日记 2025/1/31 11:17:54

长沙营销企业网站建设/北京建站

什么是软膜灯箱?软膜灯箱属于超薄灯箱的一种&#xff0c;我们把他分为这几类&#xff1a;光面软膜灯箱&#xff0c;缎光面软膜灯箱&#xff0c;透光面软膜灯箱&#xff0c;基本膜软膜灯箱&#xff0c;绒面软膜灯箱&#xff0c;金属面软膜灯箱和冲孔面软膜灯箱。随着灯箱技术这…...

编程日记 2025/1/31 10:55:07

皖icp合肥网站建设/企业管理培训课程网课免费

void t_GotFocus(object sender, RoutedEventArgs e){var tb sender as TextBox;var gt tb.TransformToVisual(null);Point p gt.Transform(new Point(0, 0));MessageBox.Show(p.X " " p.Y);}...

编程日记 2025/1/31 7:35:28

wordpress实现选项卡/百度热词指数

主机发现 靶机 nmap扫描端口 扫描服务 -sT 说明用tcp协议&#xff08;三次握手&#xff09;扫描 -sV扫描版本 O扫描系统 UDP扫描 漏洞脚本扫描 web渗透 Squid代理分析 检索信息 可以判断是代理 3128端口与代理有关 对3128端口进行目录爆破 dirb爆破 goboster爆破 没法扫…...

编程日记 2025/1/31 5:28:41

网站建设都用什么软件/厦门网站制作全程服务

美国存在主义心理学之父罗洛梅 克尔凯郭尔&#xff08;Soren Kierkegaard&#xff09;开山鼻祖海德格尔&#xff08;Martin Heidegger&#xff09; 大师戈德斯坦&#xff08;Kurt Goldstein&#xff09; 提出了关于自我实现、焦虑和恐惧的观点罗洛梅书籍 《咨询的艺术&#xff…...

编程日记 2025/1/31 3:58:35