全局解释器锁(GIL)
描述Python GIL的概念, 以及它对python多线程的影响?编写一个多线程抓取网页的程序,并阐明多线程抓取程序是否可比单线程性能有提升,并解释原因。
1.python语言与GIL并无关系,只是因为python语言的解释器是Cpython,从而GIL难以从python中移除。
2.全局解释器锁GIL,每个线程在执行过程中都需要先获取GIL,保证同时刻只有一个线程可以执行代码。
3.线程释放GIL锁的情况:在IO操作等可能会引起阻塞的system call之前,可以暂时释放GIL,但在执行完毕后,必须重新获取GIL Python 3.x使用计时器(执行时间达到阈值后,当前线程释放GIL)或Python 2.x,tickets计数达到100
4.python 使用多进程是可以使用多核CPU资源的。
5.多线程爬取比单线程性能有提升,因为遇到IO阻塞会自动释放GIL锁。
深拷贝与浅拷贝
1.浅拷贝
对一个对象的顶层拷贝。(只拷贝了引用,没有拷贝内容)
2.深拷贝
对一个对象的所有层次进行拷贝。(递归)
进一步分析
3.拷贝的其他方式
分片表达式与copy.copy()一样属于浅拷贝
4.浅拷贝对可变类型和不可变类型的copy不同
copy.copy对于可变类型(数字、字符串、元组),会进行浅拷贝
copy.copy对于不可变类型(列表、字典),不会拷贝,仅仅是指向