[已解决]提取处理数据

王book

已知MON 文件夹中所有TXT文件有四列数据，每一列数据由空格隔开如
1959    1    0      19.40
1959    2    0     207.70
1959    3    0      99.10
1959    4    0     164.60
运用Python
1.首先在，三省站点.xlsx 文件中，遍历所有的‘站号’。(在三省站点.xlsx的A列)
2.根据已得‘区站号’，在 MON 文件夹下遍历出所有符合条件的TXT文件（每个文件名中都包含站号，为后五位数字），
3.将第二步所得所有（.txt）文件转为 excel 文件，excel 文件后缀要求.xlsx（所有涉及到的 excel 文件都要求后缀.xlsx），并且插入表头，‘Year’ ‘Mon’ ‘Day’ ‘PRE’。
4.遍历所有已得 excel 文件的开始年份（站点开始可能年份不一致），将所有站点的开始年份，写入到新的 excel 文件中，并将其命名为 Starting year，

最佳答案

月排行榜 / 总排行榜

isdkz

2023-7-19 11:20:21

王book 发表于 2023-7-19 11:08
txt_files = [file for file in os.listdir('MON') if station[-5:] in file]
TypeError: 'float' objec ...

你得看你的三省站点.xlsx有没有站号这个表头，如果没有就在代码中替换成你的

跳转到最佳答案楼层

陶远航

为了解答您的问题，我将提供一个Python代码示例来实现您的要求。在开始之前，需要确保您已经安装了所需的库，如pandas和openpyxl。您可以使用pip命令进行安装。

1. import os
2. import pandas as pd
4. # 步骤1：读取三省站点.xlsx文件中的站号
5. station_data = pd.read_excel('三省站点.xlsx')
6. station_ids = station_data['站号'].tolist()
8. # 步骤2：遍历MON文件夹，根据站号匹配TXT文件并转为Excel文件
9. for station_id in station_ids:
10.     # 根据站号获取符合条件的TXT文件
11.     txt_files = [file for file in os.listdir('MON') if station_id[-5:] in file and file.endswith('.txt')]
12.    
13.     for txt_file in txt_files:
14.         # 读取TXT文件数据
15.         with open(os.path.join('MON', txt_file), 'r') as f:
16.             lines = f.readlines()
17.         
18.         # 解析TXT文件数据并创建DataFrame
19.         data = [line.split() for line in lines]
20.         df = pd.DataFrame(data, columns=['Year', 'Mon', 'Day', 'PRE'])
21.         
22.         # 将数据保存为Excel文件
23.         excel_file = txt_file.replace('.txt', '.xlsx')
24.         df.to_excel(excel_file, index=False, header=['Year', 'Mon', 'Day', 'PRE'])
26. # 步骤4：遍历所有Excel文件的开始年份，并写入新的Excel文件
27. start_years = {}
28. for excel_file in os.listdir('.'):
29.     if excel_file.endswith('.xlsx'):
30.         df = pd.read_excel(excel_file)
31.         start_year = str(df['Year'].min())[:4]
32.         start_years[excel_file] = start_year
34. # 创建包含开始年份的DataFrame并保存为新的Excel文件
35. start_years_df = pd.DataFrame(list(start_years.items()), columns=['Excel文件', '开始年份'])
36. start_years_df.to_excel('Starting year.xlsx', index=False)

复制代码

请确保以下事项：

1. 确保三省站点.xlsx文件位于当前工作目录下，且包含一个名为站号的列。
2. 确保MON文件夹位于当前工作目录下，并包含所有的TXT文件。
3. 执行上述代码后，将会生成多个Excel文件和一个名为Starting year.xlsx的新Excel文件。

此代码将按照您的要求遍历站号、匹配TXT文件、转换为Excel文件，然后提取每个Excel文件的开始年份，并将其写入到Starting year.xlsx中。

请注意，以上代码仅提供了实现的思路，并未经过详细测试，可能需要根据您具体的数据和需求进行适当的修改。希望对您有所帮助！如有任何问题，请随时追问。

isdkz

首先，我们需要安装一些必要的Python库，如pandas、openpyxl和xlrd。在你的命令行中运行以下命令来安装它们：

1. pip install pandas openpyxl xlrd

复制代码

然后，我们可以使用下面的Python代码来完成你的任务：

1. import pandas as pd
2. import os
3. import glob
5. # 读取三省站点.xlsx文件
6. df_station = pd.read_excel('三省站点.xlsx')
8. # 遍历所有的‘站号’
9. for station in df_station['站号']:
10.     # 在MON文件夹下遍历出所有符合条件的TXT文件
11.     for file in glob.glob(f'MON/*{station}.txt'):
12.         # 读取TXT文件
13.         df = pd.read_csv(file, sep=' ', names=['Year', 'Mon', 'Day', 'PRE'])
14.         
15.         # 将TXT文件转为xlsx文件，并插入表头
16.         df.to_excel(file.replace('.txt', '.xlsx'), index=False)
18. # 遍历所有已得xlsx文件的开始年份
19. starting_years = {}
20. for file in glob.glob('MON/*.xlsx'):
21.     df = pd.read_excel(file)
22.     starting_years[file] = df['Year'].min()
24. # 将所有站点的开始年份，写入到新的xlsx文件中
25. df_starting_years = pd.DataFrame(list(starting_years.items()), columns=['站点', '开始年份'])
26. df_starting_years.to_excel('Starting year.xlsx', index=False)

复制代码

首先，我们读取了"三省站点.xlsx"文件，并遍历了所有的'站号'。然后，我们在'MON'文件夹下遍历出所有符合条件的TXT文件，读取这些文件，并将它们转换为.xlsx文件，同时插入了表头。

然后，我们遍历了所有的.xlsx文件，找到了每个文件的开始年份，并将这些年份保存在了一个字典中。

最后，我们将这个字典转换为一个DataFrame，并将其保存为一个新的.xlsx文件，名为"Starting year.xlsx"。

歌者文明清理员

你可以使用以下Python代码来实现你提到的任务：

1. import os
   
2. import pandas as pd
   
3. 
   
4. # 读取三省站点.xlsx文件
   
5. station_file = '三省站点.xlsx'
   
6. df_station = pd.read_excel(station_file)
   
7. 
   
8. # 遍历所有站号
   
9. for station in df_station['站号']:
   
10.     # 根据区站号在MON文件夹下找到对应的TXT文件
    
11.     txt_files = [file for file in os.listdir('MON') if station[-5:] in file]
    
12.    
    
13.     # 创建新的Excel文件，插入表头
    
14.     excel_file = f'{station}_data.xlsx'
    
15.     df_data = pd.DataFrame(columns=['Year', 'Mon', 'Day', 'PRE'])
    
16.    
    
17.     # 遍历所有TXT文件并将数据添加到Excel文件中
    
18.     for txt_file in txt_files:
    
19.         data = []
    
20.         with open(os.path.join('MON', txt_file), 'r') as f:
    
21.             for line in f:
    
22.                 line = line.strip()
    
23.                 if line:
    
24.                     cols = line.split()
    
25.                     data.append(cols)
    
26.         df_temp = pd.DataFrame(data, columns=['Year', 'Mon', 'Day', 'PRE'])
    
27.         df_data = pd.concat([df_data, df_temp])
    
28.    
    
29.     # 将数据保存为Excel文件
    
30.     df_data.to_excel(excel_file, index=False)
    
31. 
    
32. # 提取所有站点的开始年份
    
33. starting_years = df_station['开始可能年份']
    
34. 
    
35. # 创建新的Excel文件，写入开始年份，并命名为Starting year
    
36. starting_year_file = 'Starting year.xlsx'
    
37. df_starting_year = pd.DataFrame({'站号': df_station['站号'], '开始年份': starting_years})
    
38. df_starting_year.to_excel(starting_year_file, index=False)
    

复制代码

请确保三省站点.xlsx文件和MON文件夹与上述代码在同一目录下，并且已经安装了pandas库。运行上述代码后，将会生成每个站点的数据Excel文件以及包含所有站点开始年份的Starting year.xlsx文件。


注：此回答由 GPT 生成，其他类似回答也是 GPT 生成，仅供参考。如果遇到非 GPT 回答请优先采纳。

王book

isdkz 发表于 2023-7-19 10:52
首先，我们需要安装一些必要的Python库，如pandas、openpyxl和xlrd。在你的命令行中运行以下命令来安装它们 ...

运行结果为空表，是否是读取TXT文件出问题

王book

歌者文明清理员 发表于 2023-7-19 11:03
你可以使用以下Python代码来实现你提到的任务：

请确保三省站点.xlsx文件和MON文件夹与上述代码在同一目 ...

txt_files = [file for file in os.listdir('MON') if station[-5:] in file]
TypeError: 'float' object is not subscriptable

isdkz

王book 发表于 2023-7-19 11:08
txt_files = [file for file in os.listdir('MON') if station[-5:] in file]
TypeError: 'float' objec ...

你得看你的三省站点.xlsx有没有站号这个表头，如果没有就在代码中替换成你的

totoro12366

过来学习学习