python 实现多线程的解决方法
本篇文章主要介绍关于python 实现多线程的三种具体解决方法,具体内容如下:
1._thread.start_new_thread(了解)
1 2 3 4 5 6 7 8 9 10 11 12 13 | import threading import time import _thread def job(): print ( "这是一个需要执行的任务。。。。。" ) print ( "当前线程的个数:" , threading.active_count() ) print ( "当前线程的信息:" , threading.current_thread()) time.sleep( 100 ) if __name__ = = '__main__' : # 创建多线程时, 需要制定该线程执行的任务 _thread.start_new_thread(job, ()) _thread.start_new_thread(job, ()) job() |
2.threading.Thread
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 | import threading import time def job(): print ( "这是一个需要执行的任务。。。。。" ) print ( "当前线程的个数:" , threading.active_count() ) time.sleep( 1 ) print ( "当前线程的信息:" , threading.current_thread()) if __name__ = = '__main__' : # 创建多线程时, 需要制定该线程执行的任务.name线程名字 target目标函数名 t1 = threading.Thread(target = job,name = 'job1' ) t2 = threading.Thread(target = job,name = 'job2' ) t1.start() t2.start() print (threading.active_count()) print ( "程序执行结束....." ) |
输出:
这是一个需要执行的任务。。。。。
当前线程的个数: 3
这是一个需要执行的任务。。。。。
3
程序执行结束.....
当前线程的个数: 3
当前线程的信息: <Thread(job1, started 140416648140544)>
当前线程的信息: <Thread(job2, started 140416639747840)>
出现的问题: 主线程执行结束, 但是子线程还在运行。
join()方法可以等待所有的子线程执行结束之后, 再执行主线程。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 | import threading import time def job(): print ( "这是一个需要执行的任务。。。。。" ) print ( "当前线程的个数:" , threading.active_count() ) print ( "当前线程的信息:" , threading.current_thread()) time.sleep( 1 ) if __name__ = = '__main__' : # 创建多线程时, 需要制定该线程执行的任务.name线程名字 target目标函数名 t1 = threading.Thread(target = job,name = 'job1' ) t2 = threading.Thread(target = job,name = 'job2' ) t1.start() t2.start() print (threading.active_count()) # 出现的问题: 主线程执行结束, 但是子线程还在运行。 # 等待所有的子线程执行结束之后, 再执行主线程 t1.join() t2.join() print ( "程序执行结束....." ) |
之前写过一个简单爬虫的实验,现在希望获取十个ip的城市和国家
-不使用多线程
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 | import time from urllib.request import urlopen # 记录时间的装饰器 def timeit(f): def wrapper( * args, * * kwargs): start_time = time.time() res = f( * args, * * kwargs) end_time = time.time() print ( "%s函数运行时间:%.2f" % (f.__name__, end_time - start_time)) return res return wrapper def get_addr(ip): url = "http://ip-api.com/json/%s" % (ip) urlObj = urlopen(url) # 服务端返回的页面信息, 此处为字符串类型 pageContent = urlObj.read().decode( 'utf-8' ) # 2. 处理Json数据 import json # 解码: 将json数据格式解码为python可以识别的对象; dict_data = json.loads(pageContent) print ( """ %s 所在城市: %s 所在国家: %s """ % (ip, dict_data[ 'city' ], dict_data[ 'country' ])) @timeit def main(): ips = [ '12.13.14.%s' % (i + 1 ) for i in range ( 10 )] for ip in ips: get_addr(ip) if __name__ = = '__main__' : main() |
时间需要138.91秒。
-使用多线程
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 | import threading import time from urllib.request import urlopen def timeit(f): def wrapper( * args, * * kwargs): start_time = time.time() res = f( * args, * * kwargs) end_time = time.time() print ( "%s函数运行时间:%.2f" % (f.__name__, end_time - start_time)) return res return wrapper def get_addr(ip): url = "http://ip-api.com/json/%s" % (ip) urlObj = urlopen(url) # 服务端返回的页面信息, 此处为字符串类型 pageContent = urlObj.read().decode( 'utf-8' ) # 2. 处理Json数据 import json # 解码: 将json数据格式解码为python可以识别的对象; dict_data = json.loads(pageContent) print ( """ %s 所在城市: %s 所在国家: %s """ % (ip, dict_data[ 'city' ], dict_data[ 'country' ])) @timeit def main(): ips = [ '12.13.14.%s' % (i + 1 ) for i in range ( 10 )] threads = [] for ip in ips: # 实例化10个对象,target=目标函数名,args=目标函数参数(元组格式) t = threading.Thread(target = get_addr, args = (ip, )) threads.append(t) t.start() # 等待所有子线程结束再运行主线程 [thread.join() for thread in threads] if __name__ = = '__main__' : main() |
3.重写run方法
重写run方法, 实现多线程, 因为start方法执行时, 调用的是run方法;run方法里面编写的内容就是你要执行的任务;
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 | import threading import time # 重写一个类,继承于threading.Thread class MyThread(threading.Thread): def __init__( self , jobName): super (MyThread, self ).__init__() self .jobName = jobName # 重写run方法, 实现多线程, 因为start方法执行时, 调用的是run方法; # run方法里面编写的内容就是你要执行的任务; def run( self ): print ( "这是一个需要执行的任务%s。。。。。" % ( self .jobName)) print ( "当前线程的个数:" , threading.active_count() ) time.sleep( 1 ) print ( "当前线程的信息:" , threading.current_thread()) if __name__ = = '__main__' : t1 = MyThread( "name1" ) t2 = MyThread( "name2" ) t1.start() t2.start() t1.join() t2.join() print ( "程序执行结束....." ) |
重写run方法实现刚才爬虫多线程案例
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 | import threading import time from urllib.request import urlopen def timeit(f): def wrapper( * args, * * kwargs): start_time = time.time() res = f( * args, * * kwargs) end_time = time.time() print ( "%s函数运行时间:%.2f" % (f.__name__, end_time - start_time)) return res return wrapper class MyThread(threading.Thread): def __init__( self , ip): super (MyThread, self ).__init__() self .ip = ip def run( self ): url = "http://ip-api.com/json/%s" % ( self .ip) urlObj = urlopen(url) # 服务端返回的页面信息, 此处为字符串类型 pageContent = urlObj.read().decode( 'utf-8' ) # 2. 处理Json数据 import json # 解码: 将json数据格式解码为python可以识别的对象; dict_data = json.loads(pageContent) print ( """ %s 所在城市: %s 所在国家: %s """ % ( self .ip, dict_data[ 'city' ], dict_data[ 'country' ])) @timeit def main(): ips = [ '12.13.14.%s' % (i + 1 ) for i in range ( 10 )] threads = [] for ip in ips: # 实例化自己重写的类 t = MyThread(ip) threads.append(t) t.start() [thread.join() for thread in threads] if __name__ = = '__main__' : main() |
本文地址:http://9zoku.com/wlbc/631.html
版权声明:本文内容来自互联网,该文版权归原作者所有。本站仅提供信息存储空间服务,不拥有文章所有权,不承担相关法律责任。若对本内容有异议或投诉请与管理员联系 5604882#qq.com(请将#换成@)。
版权声明:本文内容来自互联网,该文版权归原作者所有。本站仅提供信息存储空间服务,不拥有文章所有权,不承担相关法律责任。若对本内容有异议或投诉请与管理员联系 5604882#qq.com(请将#换成@)。