位置: IT常识 - 正文
python多线程处理大量文件数据(python多线程处理excel)
编辑：rootadmin推荐整理分享python多线程处理大量文件数据(python多线程处理excel)，希望有所帮助，仅作参考，欢迎阅读内容。
文章相关热门搜索词:python多线程处理一个文件,python多线程处理多文件夹,python多线程处理文件,python多线程处理多文件夹,python多线程处理for循环,python多线程处理for循环,python多线程处理多个文件,python多线程处理for循环,内容如对您有帮助，希望把文章链接给更多的朋友！
在python中，我们会遇到处理大量文件数据的时候。如果我们用for循环顺序处理，处理文件数据效率额很低，这时我们就可以使用我们的多线程来处理多个超大的文件数据。
第一步：导入import threading 模块
importthreading第二步：使用多线程可以同时打开并运行多个数据
#!/usr/bin/envpython#encoding=utf-8importthreadingimporttimefromQueueimportQueuedefreadFile():file_object=open('/opt/dev/python/list.dat')globalqueueforlineinfile_object:queue.put(line)classConsumer(threading.Thread):defrun(self):globalqueuewhilequeue.qsize()>0:msg=self.name+'消费了'+queue.get()printmsgtime.sleep(0.01)queue=Queue()defmain():readFile()foriinrange(5):c=Consumer()c.start()if__name__=='__main__':main()以上就是用python多线程处理大量数据的演示代码，如果有需要处理大量文件的小伙伴，可以尝试使用多线程，会方便很多哦~
上一篇：java--IO流 ☞ 字节流
下一篇：python中filter()的多种筛选(python filter dict)