python 批量处理nc文件-字符串拼接文件,有规律文件名

简介: python 批量处理nc文件-字符串拼接文件,有规律文件名

有文件如下:


20210416110325317.png


观察文件发现这些文件名有一定的重复,重复的地方我们可以用字符串表示,不一样的地方可以用通配符(*)表示。


##拼接文件名


str1='RSS_SMAP_SSS_L2C_r'
str2='*'#r26259_
str3='_FNL_V04.0.nc'
str4='*'


因为文件中有部分是年月日(20200101)组成,所有这里需要加入一个循环处理。


以后遇到由年月日组成的文件名同样可以处理,同时,由于每一年的每个2月时间会有不同(闰年),所以需要导入一个模块:calendar。具体使用条件可以自己在:bing上搜索:python calendar


import calendar


下面就是对于年月日写循环了


for year in range(2020,2021):#这里只展示2020年
    for month in range(1,13):#表示12个月
        for day in range(1,calendar.monthrange(year,month)[1]+1):#表示每个月的天数


同时,如果不确定是否成功,可以先用golb.glob 模糊查询一下,导入glob模块:


import glob


加入文件的路径,拼接的文件名

path='G:\\'#文件路径,一般需要两个\,别问为什么,不用可能报错
for year in range(2020,2021):
    for month in range(1,2):
        # for day in range(1,calendar.monthrange(year,month)[1]+1):
        for day in range(1,3):
#我的文件放在01号文件夹下面,所以拼接的时候加入了:'%02.0f'%month+'\\'
            fn='%02.0f'%month+'\\'+str1+str2+'_'+'%04.0f'%year+'%02.0f'%month+'%02.0f'%day+\
                'T'+str4+'_'+str4+str3      
            f=glob.glob(path+fn)  #这里需要绝对路径        


查询之后会得到一个list,既你所拥有的所以文件。之后就可以进行其他循环处理啦~~~


举个例子,我这个是nc文件,之后对于每一个nc文件进行循环处理即可:

别忘了导入模块:import netCDF4 as nc


for file in f:
     f1 =nc.Dataset(file,'r') 
      # print(f1)
      lat = `f1.variables['cellat'][:].data`
      lon = f1.variables['cellon'][:].data
      time = f1.variables['time'][:].data


那就顺便讲一下nc文件的读取方式吧!

读取nc文件的办法很多,我这里使用的是nc.Dataset(file,'r')file就是文件名,字符串(str)的格式,如 ‘20200101.nc’


你可以将其付给一个变量,并打印出来print(f1),查找你要输出的数据。

之后f1.variables['你要的数据名称'][:].data

全部的代码如下:


import calendar
import glob
import netCDF4 as nc
str1='RSS_SMAP_SSS_L2C_r'
str2='*'
str3='_FNL_V04.0.nc'
str4='*'
path='G:\\'#文件路径
for year in range(2020,2021):
    for month in range(1,13):
        for day in range(1,calendar.monthrange(year,month)[1]+1):          
            fn='%02.0f'%month+'\\'+str1+str2+'_'+'%04.0f'%year+'%02.0f'%month+'%02.0f'%day+\
                'T'+str4+'_'+str4+str3      
            f=glob.glob(path+fn)     
            for file in f:
                f1 =nc.Dataset(file,'r') 
                # print(f1)
                lat = f1.variables['cellat'][:].data
                lon = f1.variables['cellon'][:].data


                                一个努力学习python的海洋小白
                                水平有限,欢迎指正!!!
                                欢迎评论、收藏。


相关文章
|
11天前
|
机器学习/深度学习 存储 算法
解锁文件共享软件背后基于 Python 的二叉搜索树算法密码
文件共享软件在数字化时代扮演着连接全球用户、促进知识与数据交流的重要角色。二叉搜索树作为一种高效的数据结构,通过有序存储和快速检索文件,极大提升了文件共享平台的性能。它依据文件名或时间戳等关键属性排序,支持高效插入、删除和查找操作,显著优化用户体验。本文还展示了用Python实现的简单二叉搜索树代码,帮助理解其工作原理,并展望了该算法在分布式计算和机器学习领域的未来应用前景。
|
21天前
|
监控 网络安全 开发者
Python中的Paramiko与FTP文件夹及文件检测技巧
通过使用 Paramiko 和 FTP 库,开发者可以方便地检测远程服务器上的文件和文件夹是否存在。Paramiko 提供了通过 SSH 协议进行远程文件管理的能力,而 `ftplib` 则提供了通过 FTP 协议进行文件传输和管理的功能。通过理解和应用这些工具,您可以更加高效地管理和监控远程服务器上的文件系统。
51 20
|
27天前
|
存储 数据采集 数据处理
如何在Python中高效地读写大型文件?
大家好,我是V哥。上一篇介绍了Python文件读写操作,今天聊聊如何高效处理大型文件。主要方法包括:逐行读取、分块读取、内存映射(mmap)、pandas分块处理CSV、numpy处理二进制文件、itertools迭代处理及linecache逐行读取。这些方法能有效节省内存,提升效率。关注威哥爱编程,学习更多Python技巧。
|
28天前
|
存储 JSON 对象存储
如何使用 Python 进行文件读写操作?
大家好,我是V哥。本文介绍Python中文件读写操作的方法,包括文件读取、写入、追加、二进制模式、JSON、CSV和Pandas模块的使用,以及对象序列化与反序列化。通过这些方法,你可以根据不同的文件类型和需求,灵活选择合适的方式进行操作。希望对正在学习Python的小伙伴们有所帮助。欢迎关注威哥爱编程,全栈路上我们并肩前行。
|
1月前
|
存储 人工智能 Python
[oeasy]python061_如何接收输入_input函数_字符串_str_容器_ 输入输出
本文介绍了Python中如何使用`input()`函数接收用户输入。`input()`函数可以从标准输入流获取字符串,并将其赋值给变量。通过键盘输入的值可以实时赋予变量,实现动态输入。为了更好地理解其用法,文中通过实例演示了如何接收用户输入并存储在变量中,还介绍了`input()`函数的参数`prompt`,用于提供输入提示信息。最后总结了`input()`函数的核心功能及其应用场景。更多内容可参考蓝桥、GitHub和Gitee上的相关教程。
16 0
|
1月前
|
存储 算法 Serverless
剖析文件共享工具背后的Python哈希表算法奥秘
在数字化时代,文件共享工具不可或缺。哈希表算法通过将文件名或哈希值映射到存储位置,实现快速检索与高效管理。Python中的哈希表可用于创建简易文件索引,支持快速插入和查找文件路径。哈希表不仅提升了文件定位速度,还优化了存储管理和多节点数据一致性,确保文件共享工具高效运行,满足多用户并发需求,推动文件共享领域向更高效、便捷的方向发展。
|
2月前
|
计算机视觉 Python
如何使用Python将TS文件转换为MP4
本文介绍了如何使用Python和FFmpeg将TS文件转换为MP4文件。首先需要安装Python和FFmpeg,然后通过`subprocess`模块调用FFmpeg命令,实现文件格式的转换。代码示例展示了具体的操作步骤,包括检查文件存在性、构建FFmpeg命令和执行转换过程。
76 7
|
2月前
|
存储 测试技术 Python
Python 中别再用 ‘+‘ 拼接字符串了!
通过选择合适的字符串拼接方法,可以显著提升 Python 代码的效率和可读性。在实际开发中,根据具体需求和场景选择最佳的方法,避免不必要的性能损失。
62 5
|
6月前
|
SQL JSON 关系型数据库
n种方式教你用python读写excel等数据文件
n种方式教你用python读写excel等数据文件
98 1
|
8月前
|
存储 Python 内存技术
python WAV音频文件处理—— (1)读写WAV文件
python WAV音频文件处理—— (1)读写WAV文件
210 14

热门文章

最新文章

推荐镜像

更多