Python 多线程搜索txt文件的内容,并写入搜到的内容(Lock)
来源:互联网 发布:网页自动填表软件 编辑:程序博客网 时间:2024/05/14 15:15
import threadingimport osclass Find(threading.Thread): #搜索数据的线程类 def __init__(self,datalist,startIndex,endIndex,searchstr,savefile): #datalist要搜索的内容列表,startIndex列表搜索范围的开始下标,searchstr要搜索的内容 threading.Thread.__init__(self) self.datalist=datalist #要搜索的数据的内存地址 self.startIndex=startIndex #开始的索引 self.endIndex=endIndex #结束的索引 self.seachstr=searchstr #需要搜索的数据 self.savefile=savefile def run(self): self.findlist=[] for i in range(self.startIndex,self.endIndex): line=self.datalist[i].decode("gbk","ignore") #读取一行 if line.find(self.seachstr)!=-1: print(self.getName(),line,end="") #搜索数据 self.findlist.append(line) global mutex #多线程共享全局变量(全局锁) with mutex: #获取锁(自动释放锁) for line in self.findlist: self.savefile.write(line.encode("gbk")) mutex=threading.Lock() #创建一个锁savefile=open("c:\\zhaodao.txt","wb") #搜索到的内容写入该文件path = "C:\\data1.txt" #要搜索的文件file = open(path, "rb")datalist = file.readlines() # 全部读入内存lines=len(datalist) #所有的行数searchstr=input("输入要查询的数据")N=10 #开启10个线程threadlist=[] #线程列表# 97 9 0-1000000 1000000-2000000 2000000-3000000for i in range(0,N-1): #0,1,2,3,4,5,6,7,8 数据切割 mythd= Find(datalist,i*(lines//(N-1)) , (i+1)*(lines//(N-1)),searchstr,savefile) # //表示整除 mythd.start() threadlist.append(mythd) #添加到线程列表#97 = 97//10*10=90mylastthd= Find(datalist,lines//(N-1)*(N-1),lines,searchstr,savefile) #最后的线程搜索剩下的尾数mylastthd.start()threadlist.append(mylastthd) #添加到线程列表for thd in threadlist: #遍历线程列表 thd.join()print("finish")
阅读全文
0 0
- Python 多线程搜索txt文件的内容,并写入搜到的内容(Lock)
- python 将百度搜索风云榜的关键内容提取并写入txt文件和读取验证
- 自动创建txt文件并写入内容
- c++创建txt文件,并写入内容
- Python 多线程搜索txt中的内容
- Python读取txt内容写入xls格式的excel中
- Python读取txt内容写入xlsx格式的excel中
- python将文件夹里所有的txt文件内容写入excel
- 读文件file1.txt的内容到file2.txt
- 把内容写入TXT文件
- java读写文件-经过多方搜索整合成我需要的功能(读写指定文件夹下面的多个指定名称的txt中的内容全部写入到一个指定的txt中)
- 使用python读取txt文件的内容,并删除重复的行数
- 【示例】Hibernate中读取txt的文件内容并插入到数据库
- java实现持续写入内容到txt文件
- java实现持续写入内容到txt文件
- Android追加换行写入内容到txt文件中
- Java_IO流_按行读取文本文件的内容并按行写入到另一文件
- 读取txt文件的内容
- MySQL按照汉语拼音排序结果
- 设置为首页,加入收藏 | JS完美实现代码收藏
- Imageloader的简单实用
- 02 字符串、转义符
- pymysql链接Mysql数据库报Connection refused的错误
- Python 多线程搜索txt文件的内容,并写入搜到的内容(Lock)
- 利用EventBus及ImageLoader实现截图分享异步加载网络图片
- 十大开源游戏引擎深入比较
- 用GreenDao3.2,使用数据库so easy!
- 《android studio ndk环境配置》
- BASE64Encoder及BASE64Decoder报错的正确用法
- 解决Springboot运行时Postgrasql报错:ERROR SqlExceptionHelper:146
- 牛客网剑指offer:栈的压入弹出序列是否匹配
- Android/Java网络加载框架Retrofit(三)结合RxJava2与RxAndroid2