python 批量处理nc文件-字符串拼接文件,有规律文件名

简介: python 批量处理nc文件-字符串拼接文件,有规律文件名

有文件如下:


20210416110325317.png


观察文件发现这些文件名有一定的重复,重复的地方我们可以用字符串表示,不一样的地方可以用通配符(*)表示。


##拼接文件名


str1='RSS_SMAP_SSS_L2C_r'
str2='*'#r26259_
str3='_FNL_V04.0.nc'
str4='*'


因为文件中有部分是年月日(20200101)组成,所有这里需要加入一个循环处理。


以后遇到由年月日组成的文件名同样可以处理,同时,由于每一年的每个2月时间会有不同(闰年),所以需要导入一个模块:calendar。具体使用条件可以自己在:bing上搜索:python calendar


import calendar


下面就是对于年月日写循环了


for year in range(2020,2021):#这里只展示2020年
    for month in range(1,13):#表示12个月
        for day in range(1,calendar.monthrange(year,month)[1]+1):#表示每个月的天数


同时,如果不确定是否成功,可以先用golb.glob 模糊查询一下,导入glob模块:


import glob


加入文件的路径,拼接的文件名

path='G:\\'#文件路径,一般需要两个\,别问为什么,不用可能报错
for year in range(2020,2021):
    for month in range(1,2):
        # for day in range(1,calendar.monthrange(year,month)[1]+1):
        for day in range(1,3):
#我的文件放在01号文件夹下面,所以拼接的时候加入了:'%02.0f'%month+'\\'
            fn='%02.0f'%month+'\\'+str1+str2+'_'+'%04.0f'%year+'%02.0f'%month+'%02.0f'%day+\
                'T'+str4+'_'+str4+str3      
            f=glob.glob(path+fn)  #这里需要绝对路径        


查询之后会得到一个list,既你所拥有的所以文件。之后就可以进行其他循环处理啦~~~


举个例子,我这个是nc文件,之后对于每一个nc文件进行循环处理即可:

别忘了导入模块:import netCDF4 as nc


for file in f:
     f1 =nc.Dataset(file,'r') 
      # print(f1)
      lat = `f1.variables['cellat'][:].data`
      lon = f1.variables['cellon'][:].data
      time = f1.variables['time'][:].data


那就顺便讲一下nc文件的读取方式吧!

读取nc文件的办法很多,我这里使用的是nc.Dataset(file,'r')file就是文件名,字符串(str)的格式,如 ‘20200101.nc’


你可以将其付给一个变量,并打印出来print(f1),查找你要输出的数据。

之后f1.variables['你要的数据名称'][:].data

全部的代码如下:


import calendar
import glob
import netCDF4 as nc
str1='RSS_SMAP_SSS_L2C_r'
str2='*'
str3='_FNL_V04.0.nc'
str4='*'
path='G:\\'#文件路径
for year in range(2020,2021):
    for month in range(1,13):
        for day in range(1,calendar.monthrange(year,month)[1]+1):          
            fn='%02.0f'%month+'\\'+str1+str2+'_'+'%04.0f'%year+'%02.0f'%month+'%02.0f'%day+\
                'T'+str4+'_'+str4+str3      
            f=glob.glob(path+fn)     
            for file in f:
                f1 =nc.Dataset(file,'r') 
                # print(f1)
                lat = f1.variables['cellat'][:].data
                lon = f1.variables['cellon'][:].data


                                一个努力学习python的海洋小白
                                水平有限,欢迎指正!!!
                                欢迎评论、收藏。


相关文章
|
2月前
|
Python
在 Python 中,如何将日期时间类型转换为字符串?
在 Python 中,如何将日期时间类型转换为字符串?
130 64
|
21天前
|
计算机视觉 Python
如何使用Python将TS文件转换为MP4
本文介绍了如何使用Python和FFmpeg将TS文件转换为MP4文件。首先需要安装Python和FFmpeg,然后通过`subprocess`模块调用FFmpeg命令,实现文件格式的转换。代码示例展示了具体的操作步骤,包括检查文件存在性、构建FFmpeg命令和执行转换过程。
38 7
|
1月前
|
存储 测试技术 Python
Python 中别再用 ‘+‘ 拼接字符串了!
通过选择合适的字符串拼接方法,可以显著提升 Python 代码的效率和可读性。在实际开发中,根据具体需求和场景选择最佳的方法,避免不必要的性能损失。
46 5
|
1月前
|
Python
使用Python计算字符串的SHA-256散列值
使用Python计算字符串的SHA-256散列值
41 7
|
2月前
|
Python
在 Python 中,如何将字符串中的日期格式转换为日期时间类型?
在 Python 中,如何将字符串中的日期格式转换为日期时间类型?
41 6
|
2月前
|
开发者 Python
Python中__init__.py文件的作用
`__init__.py`文件在Python包管理中扮演着重要角色,通过标识目录为包、初始化包、控制导入行为、支持递归包结构以及定义包的命名空间,`__init__.py`文件为组织和管理Python代码提供了强大支持。理解并正确使用 `__init__.py`文件,可以帮助开发者更好地组织代码,提高代码的可维护性和可读性。
93 2
|
2月前
|
中间件 Docker Python
【Azure Function】FTP上传了Python Function文件后,无法在门户页面加载函数的问题
通过FTP上传Python Function至Azure云后,出现函数列表无法加载的问题。经排查,发现是由于`requirements.txt`中的依赖包未被正确安装。解决方法为:在本地安装依赖包到`.python_packages/lib/site-packages`目录,再将该目录内容上传至云上的`wwwroot`目录,并重启应用。最终成功加载函数列表。
|
3月前
|
Java Python
> python知识点100篇系列(19)-使用python下载文件的几种方式
【10月更文挑战第7天】本文介绍了使用Python下载文件的五种方法,包括使用requests、wget、线程池、urllib3和asyncio模块。每种方法适用于不同的场景,如单文件下载、多文件并发下载等,提供了丰富的选择。
|
3月前
|
数据安全/隐私保护 流计算 开发者
python知识点100篇系列(18)-解析m3u8文件的下载视频
【10月更文挑战第6天】m3u8是苹果公司推出的一种视频播放标准,采用UTF-8编码,主要用于记录视频的网络地址。HLS(Http Live Streaming)是苹果公司提出的一种基于HTTP的流媒体传输协议,通过m3u8索引文件按序访问ts文件,实现音视频播放。本文介绍了如何通过浏览器找到m3u8文件,解析m3u8文件获取ts文件地址,下载ts文件并解密(如有必要),最后使用ffmpeg合并ts文件为mp4文件。
|
1月前
|
人工智能 数据可视化 数据挖掘
探索Python编程:从基础到高级
在这篇文章中,我们将一起深入探索Python编程的世界。无论你是初学者还是有经验的程序员,都可以从中获得新的知识和技能。我们将从Python的基础语法开始,然后逐步过渡到更复杂的主题,如面向对象编程、异常处理和模块使用。最后,我们将通过一些实际的代码示例,来展示如何应用这些知识解决实际问题。让我们一起开启Python编程的旅程吧!