百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT技术 > 正文

Python | 垂直模态分解(phython垂直输出)

wptr33 2025-07-28 00:38 1 浏览

垂直模态分解概述

七八月的金陵像一口大铁锅,学校里面施工的锤子敲得叮当作响,连空气都带着钢筋水泥的味道。暑期的太阳倒像疯了似的,把地面烤得能煎蛋。开完题歇了几周,脑子里的科研也差点长了锈。乘着暑假把之前的烂摊子收拾收拾,往前推一推,不然就跟学校的脚手架一样,永远停在那儿。顺便写写代码,免得这夏天白热了一场。

EOF分析是气象学中提取主要变化模态和识别主导空间模式的重要方法。

1. EOF 基本思想

EOF 分析(即 PCA)用于将高维数据投影到按方差大小排序的正交模态上,提取主要变率。

常见的使用是针对三维数据 [time, lat, lon] ,可以得到空间模态EOF以及对应的时间序列PC。比如说冬季海温异常的信号。

1.1 数据矩阵

1.2 协方差矩阵

EOF的本质通过计算协方差矩阵的特征值和特征向量

1.3 特征分解

1.4 主成分(PC)

表示第 k EOF 模态的时间系数。

1.5 重构


2. 数据预处理:距平


3. SVD

对距平矩阵 做 SVD:


4. 垂直模态分解

以上思路同样的逻辑,那么针对 [time, level, lat, lon] 数据,就可以用来提取典型垂直廓线。

具体来说,如果你输入的变量是垂直高度或者非绝热加热时,

同理,计算PC:

实际数据的处理和EOF类似,或者了解聚类分析的话,只不过将垂直层数作为第一维。从数据维度上来说,即:

[time, level, lat, lon] -> [level, time x lat x lon]

这样应该会很清晰

4.1 重排维度

其中 m = level 数,N = time × lat × lon。

4.2 计算SVD

这里numpy和scipy都有现成的函数,直接调用即可

4.3 方差


实操

输入数据格式

这里使用的数据是ERA5的垂直速度,monthly mean 资料,单位是 Pa/s ,选择热带区域15°S-15°N,高度为:1000-100 hPa

'w' (time: 516, level: 0, latitude: 31, longitude: 360)> Size: 0B
[0 values with dtype=float64]
Coordinates:
* longitude (longitude) float32 1kB -180.0-179.0-178.0 ... 178.0179.0
* latitude (latitude) float32 124B -15.0-14.0-13.0 ... 13.014.015.0
* level (level) int32 0B
* time (time) datetime64[ns] 4kB 1979-01-011979-02-01 ... 2021-12-01
Attributes:
units: Pa s**-1
long_name: Vertical velocity
standard_name: lagrangian_tendency_of_air_pressure

代码逻辑

w(time, level, lat, lon)
↓ subset (lat=-15~15, level=1000100 hPa, time=19792021)
↓ 去除气候态季节循环,得到 w_anom
↓ 转置 -> (nlev, nt, nlat, nlon)
↓ 展平 (time × lat × lon) -> (nlev, N_samples)
↓ 去缺测列 -> (nlev, N_valid)
↓ SVD -> U(nlev, nlev), s(nlev), Vh(nlev, N_valid)
↓ EOF = U (列为垂直模态)
↓ PC = U.T @ X = Σ Vh
↓ eigval = s^2 / N_valid
↓ 计算方差贡献率

EOF模态的气象学解释

  1. EOF1 : 通常代表最主要(方差贡献最大)的垂直运动模态,可能对应深对流或大尺度垂直环流
  2. EOF2 : 常表现为垂直结构的第二主要变化,可能反映不同层次间的耦合
  3. 高阶模态 : 反映更复杂的垂直结构和局地过程

核心代码

def compute_eof(self, data: np.ndarray) -> Dict:
"""
Compute EOF analysis using SVD.

Parameters:
-----------
data : np.ndarray
Input data matrix (variables x observations)

Returns:
--------
Dict
Dictionary containing EOF results
"""

# Handle missing values
valid_mask = ~np.any(np.isnan(data), axis=0)
data_valid = data[:, valid_mask]

# Perform SVD
u, s, v = np.linalg.svd(data_valid, full_matrices=False)

# Calculate EOF patterns and PC time series
eof_patterns = u.T # EOF patterns
pc_series = np.dot(eof_patterns, data_valid) # Principal components

# Calculate eigenvalues and explained variance
nt = data_valid.shape[1]
eigenvalues = s**2 / nt
explained_variance = eigenvalues / np.sum(eigenvalues) * 100

# Estimate degrees of freedom for North test
L = 1# one-lag autocorrelation
phi_L, phi_0, dof = self._estimate_dof(data_valid, L)
eigenvalue_errors = explained_variance * np.sqrt(2 / dof)

return {
'eof_patterns': eof_patterns,
'pc_series': pc_series,
'eigenvalues': eigenvalues,
'explained_variance': explained_variance,
'eigenvalue_errors': eigenvalue_errors,
'degrees_of_freedom': dof,
'valid_mask': valid_mask,
'phi_0': phi_0,
'phi_L': phi_L
}

展示结果

掩膜陆地,只有海洋

对于热带海洋(15°S-15°N),前两个EOF模态方程贡献率可以达到84.2%,基本上可以代表了热带海洋上的主要垂直结构。 一般来说,

第二个 EOF 中垂直运动的符号在 650 hPa 左右切换。

eof_profiles_ocean_global_mask

掩膜海洋,只有陆地

eof_profiles_land_global_mask

全球区域,无掩膜

eof_profiles_global

拓展read

此外,前人研究表明,热带对流云中降水产生的效率很大程度上取决于沿着垂直方向发展的高强度对流。例如,强降雨事件往往发生在深对流区域,那里的云顶通常可以增长到对流层顶,例如西太平洋暖池。另一方面,小雨事件通常与经常发生在信风逆温地区的浅层对流有关(例如,亚热带海洋东部地区)。

热带太平洋的两种典型结构模态:

通过选择两个区域方框,可以使用上述SVD分解得到其主要的垂直廓线,可以清晰的发现两个方框中截然不同的垂直结构:

参考

Bui, H. X., J.-Y. Yu, and C. Chou, 2016: Impacts of Vertical Structure of Large-Scale Vertical Motion in Tropical Climate: Moist Static Energy Framework. Journal of the Atmospheric Sciences, 73, 4427–4437, https://doi.org/10.1175/JAS-D-16-0031.1.

Back, L. E., Z. Hansen, and Z. Handlos, 2017: Estimating Vertical Motion Profile Top-Heaviness: Reanalysis Compared to Satellite-Based Observations and Stratiform Rain Fraction. J. Atmos. Sci., 74, 855–864, https://doi.org/10.1175/JAS-D-16-0062.1.


给我点在看的人

越来越好看

相关推荐

HIVE 窗口函数详解(hive常用开窗函数)

什么是窗口函数窗口函数是SQL中一类特别的函数。和聚合函数相似,窗口函数的输入也是多行记录。不同的是,聚合函数的作用于由GROUPBY子句聚合的组,而窗口函数则作用于一个窗口,这里,窗口...

SQL高效使用20招:数据分析师必备技巧

基础优化技巧善用EXPLAIN分析执行计划EXPLAINSELECT*FROMordersWHEREorder_date>'2024-01-01';...

答记者问之 - Redis 的高效架构与应用模式解析

问:极客程序员你好,请帮我讲一讲redis答:redis主要涉及以下核心,我来一一揭幕Redis的高效架构与应用模式解析...

MySQL通过累计求新增(mysql新增表字段语句)

前两天的那篇内容《MySQL递归实现单列分列成多行》...

一文讲懂SQL窗口函数 大厂必考知识点

大家好,我是宁一。今天是我们的第24课:窗口函数。...

圣诞快乐:用GaussDB T 绘制一颗圣诞树,兼论高斯数据库语法兼容

转眼就是圣诞的节日,祝大家节日快乐。用GaussDBT(也就是GaussDB100)绘制一棵圣诞树,纯国产,更喜庆。话不多说,上图:SQL如下:SELECTCASEWHENENMOTE...

Minitab:功能强大的质量管理、统计分析及统计图形软件

一、Minitab简介Minitab软件是为质量改善、教育和研究应用领域提供统计软件和服务的先导,是全球领先的质量管理和六西格玛实施软件工具及持续质量改进的良好工具软件,她具有强大的功能和简易的可视化...

如何熟练使用SQL查询(如何熟练使用sql查询内容)

要熟练使用SQL查询(StructuredQueryLanguage),你需要系统地从语法入门,到实战练习,再到性能优化与多表查询的掌握。下面是一条循序渐进、实战驱动的学习路径:第一阶段:S...

SAP SE38如何在多个系统间同步代码

上一篇文章写了如何在多个系统之间同步开发对象:多套SAPERP之间一键同步ABAP开发内容,有兄弟问有没有简单办法同步SE38程序代码的,因为使用请求的方式同步代码有点小题大做了。...

Python | 垂直模态分解(phython垂直输出)

...

技术栈:刷了百道SQL题,还是不会用?你应该这样补短板

这是来自用户的提问,也是很多人遇到的困惑:...

mysql窗口函数为了解决更加复杂的问题

为了解决复杂问题的窗口函数我们先讲一下窗口函数是什么窗口和普通的函数作用相同在不同列上进行查询和返回比如我们有如下的表...

MariaDB开窗函数(开窗函数 mysql)

在使用GROUPBY子句时,总是需要将筛选的所有数据进行分组操作,它的分组作用域是整张表。分组以后,为每个组只返回一行。而使用基于窗口的操作,类似于分组,但却可以对这些"组"(即窗口...

一文掌握 DuckDB 时间序列分析:窗口函数实战详解

...

一篇文章搞定MySQL中的窗口函数(mysql常用的窗口函数)

我是孙斌,北理数学系毕业,分享数据分析相关知识,点击右上角“关注”,学习更多数据分析知识。在MySQL中,分组groupby一般和聚合函数连用,如groupby+sum,这样能够得到每个组的总和,...