如何使用多进程载入数据，谢谢

flyps

有时因为数据过多，甚至是几十万多，光载入时间就需要几分钟，请问下面的代码，如何使用多进程提高载入的速度？谢谢！！
需载入的文件，我已上传至附件，需先解压，谢谢！！

1. import pandas as pd
   
2. import numpy as np
   
3. import tkinter as tk
   
4. from pandas import read_csv
   
5. from tkinter import ttk
   
6. from tkinter import filedialog
   
7. import time
   
8. 
   
9. 
   
10. root = tk.Tk()
    
11. root.geometry('300x600')
    
12. allframe = tk.Frame(root,height=300,width=600)
    
13. allframe.grid(row=0)
    
14. 
    
15. tree = ttk.Treeview(allframe,show='headings',height=30)
    
16. 
    
17. tree["columns"] = ('A','B')
    
18. 
    
19. tree.column("A",width=40,anchor='center')
    
20. tree.column("B",width=40,anchor='center')
    
21. 
    
22. tree.heading("A",text="#")
    
23. tree.heading("B",text="#")
    
24. 
    
25. tree.grid(row=0,column=0,sticky=tk.NSEW)
    
26. 
    
27. def load(treename):
    
28.         x=treename.get_children()
    
29.         for item in x:
    
30.             treename.delete(item)
    
31.         filename = filedialog.askopenfilename()
    
32.         #global file
    
33.         st = time.time()
    
34.         file = read_csv(filename,names=['a','b'])
    
35.         #print(file)
    
36.         for n in range(len(file)):
    
37.             file_list = list(file.iloc[n])
    
38.             #print(self.file_list)
    
39.             treename.insert('','end',values=file_list)
    
40.         ft = time.time()
    
41.         print('time:', ft - st)
    
42. 
    
43. theButton1 = tk.Button(allframe,text='载入',command=lambda:load(tree))
    
44. theButton1.grid(row=0,column=1,padx=25,pady=15,sticky=tk.N)
    
45. 
    
46. tk.mainloop()

复制代码

flyps

求大神解答，谢谢

聂嘉辉

看看https://www.cnblogs.com/cloud-ken/p/8432999.html是不是你要找的，用Tensorflow的那个。

疾风怪盗

https://www.jianshu.com/p/4eb6be82b7cb，Modin库
可以试试