简述Python垃圾回收机制「建议收藏」

简述Python垃圾回收机制「建议收藏」引言许多高级语言都具有自己的垃圾回收机制,以管理计算机内存,Python也不例外。对于垃圾回收机制的了解程度,成了开发人员是否真正了解Python的检验手段,在面试的时候许多面试官也喜欢以此作为题目考察面试者Garbagecollection(GC)概述现在的高级语言如java,c#等,都采用了垃圾回收机制,而不再是c,c++里用户自己管理维护内存的方式。自己管理内存极其自由,可…

大家好,又见面了,我是你们的朋友全栈君。

引言

许多高级语言都具有自己的垃圾回收机制,以管理计算机内存,Python也不例外。对于垃圾回收机制的了解程度,成了开发人员是否真正了解Python的检验手段,在面试的时候许多面试官也喜欢以此作为题目考察面试者。


Garbage collection(GC)概述

  • 现在的高级语言如javac#等,都采用了垃圾回收机制,而不再是cc++里用户自己管理维护内存的方式。
  • 自己管理内存极其自由,可以任意申请内存,但如同一把双刃剑,为大量内存泄露,悬空指针等bug埋下隐患。
  • 对于一个字符串、列表、类甚至数值都是对象,且定位简单易用的语言,自然不会让用户去处理如何分配回收内存的问题。
  • Python自带的解释器CPython主要使用了三种垃圾回收机制:是引用计数为主,标记-清除分代回收两种机制为辅的策略

Reference Counting 引用计数

  • 引用计数是一种垃圾收集机制,而且也是一种最直观,最简单的垃圾收集技术。
  • 引用计数Reference Counting的原理是,每个对象都维护一个引用计数字段,记录这个对象被引用的次数
  • 如果有新的引用指向对象,对象引用计数就加一,引用被销毁时,对象引用计数减一,当用户的引用计数为0时,该内存被释放。

优势:

  • 简单
  • 实时性:一旦没有引用,内存就直接释放了。不用像其他机制等到特定时机。实时性还带来一个好处:处理回收内存的时间分摊到了平时

如果仅仅是引用计数回收机制,会存在以下问题:

  • 需要去维护引用计数,存在执行效率问题
  • 无法解决循环引用问题

循环引用:有一组对象的引用计数不为0,但是这组对象实际上并没有被变量引用,它们之间是相互引用,而且也不会有其他的变量再去引用这组对象,最终导致如果使用引用计数法这些对象占用的内存永远不会被释放,从而导致内存泄露

# 循环引用例子
list1 = []
list2 = []
list1.append(list2)
list2.append(list1)
print(list1)
print(list2)

>>>[[[...]]]
>>>[[[...]]]

由此可知python还将引入新的回收机制(标记-清除分代回收),辅助引用计数机制完成内存的管理


图解Python的引用计数

  1. 当我们使用Python创建一个Node的实例对象,则Python立即向操作系统请求内存,同时标识符n1指向实例的内存
    在这里插入图片描述
    在这里插入图片描述
  2. 当我们创建第二个对象的时候,再次向OS请求内存
    在这里插入图片描述
  3. 创建一个对象时,Python总是在对象的C结构体里保存一个整数,称为 引用数。期初,Python将这个值设置为1
    在这里插入图片描述
  4. 值为1说明分别有个一个指针指向或是引用这三个对象。假如我们现在创建一个新的Node实例对象JKL
    在这里插入图片描述
  5. 由于我们改变了n1指向了JKL,不再指向ABC,Python就把ABC引用数置为0了。此刻,Python垃圾回收器立刻挺身而出!每当对象的引用数减为0,Python立即将其释放,把内存还给操作系统
    在这里插入图片描述

参考:Ruby 画说 Ruby 与 Python 垃圾回收


标记-清除

上面我们说到循环引用会导致对象占用的内存永远不会被释放,这里还是以图来形象说明以下循环引用的现象,以及Python的标记-清除机制是如何解决循环引用问题的

Python的循环引用

  1. Node类定义之后创建两个Node实例对象,ABC以及DEF,在图中为左边的矩形框。两个节点的引用计数都被初始化为1,因为有两个引用指向各个Node对象(n1n2)
    在这里插入图片描述

  2. 现在,让我们在Node中定义两个附加的属性,next以及prev。(Python中可以在代码运行的时候动态定义实例变量或对象属性,此处不详细说)设置 n1.next 指向 n2,同时设置 n2.prev 指回 n1

    两个Node使用循环引用的方式构成了一个双端链表。同时请注意到 ABC 以及 DEF 的引用计数值已经增加到了2。这里有两个指针指向了每个Node:首先是 n1 以及 n2,其次就是 next 以及 prev
    在这里插入图片描述

  3. 假定我们的程序不再使用这两个对象了,我们将 n1n2 都设置为None
    在这里插入图片描述

Python的标记-清除原理

如上述情况,在Python中形成来一个“孤岛”或是一组未使用的、互相指向的对象,但是谁都没有外部引用,这时候我们想要回收这部分的内存,但是由于所有的引用计数都是1而不是0,无法进行垃圾回收。

所以Python要将循环引用摘掉,就会得出这两个对象的有效计数,同时还要引入Generational GC(Generational garbage collection)算法:

Python使用一种名为零代(Generation Zero)链表来持续追踪活跃的对象。每次我们创建一个对象或其他值的时候,Python会将其加入零代链表。

  1. 当我们创建ABC节点的时候,Python将其加入零代链表,注意这并不是一个真正的链表,并不能直接在你的代码中访问。
    当我们创建DEF节点的时候,Python将其加入同样的链表。
    在这里插入图片描述
    在这里插入图片描述

  2. Python会循环遍历零代链表上的每个对象,检查链表中每个互相引用的对象,根据规则减掉其引用计数,这一步是检测循环引用
    ABCDEF 节点包含的引用数为1。同时有三个其他的对象同时存在于零代链表中,蓝色的箭头指示了有一些对象正在被零代链表之外的其他对象所引用。
    在这里插入图片描述

  3. 通过识别内部引用,Python能够减少许多零代链表对象的引用计数。在下图的第一行,能够看见ABCDEF的引用计数已经变为零了,这意味着收集器可以释放它们并回收内存空间了
    在这里插入图片描述

参考:代式垃圾回收机制


分代回收

Python中的GC阈值

  • 理想状态下,Python创建了多少个对象,一段时间后就应该回收多少的垃圾。
  • 但是实际上,由于上述的循环引用状态的存在,以及有一些对象被长时间的引用,从而被分配对象的计数值与被释放对象的计数值之间的差异在逐渐增长
  • Python中存在一个Garbage collection阈值,当被分配对象的计数值与被释放对象的计数值之间的差异累计超过某个阈值,则Python的收集机制就启动了,并且触发上述的标记-清除机制,释放“浮动的垃圾”。

Python的分代回收

  • 当执行标记-清除后,剩余的对象都是真实被引用的,而这些对象都会被移入一代链表

    所谓一代链表就是零代链表执行标记-清除之后的剩余对象组成的链表
    同样的,二代链表就是一代链表执行标记-清除之后的剩余对象组成的链表

在这里插入图片描述

  • Python采用分代回收的机制,实际上是基于弱代假说(weak generational hypothesis)提出的:这个假说由两个观点构成:年轻的对象通常“死”得也快,老对象则很有可能存活更长的时间

  • 基于此,分代回收的核心行为是:垃圾回收器会更频繁的处理新对象。一个新的对象即是你的程序刚刚创建的,而一个老的对象则是经过了几个时间周期之后仍然存在的对象。Python会在当一个对象从零代移动到一代,或是从一代移动到二代的过程中提升(promote)这个对象。

  • 分代回收的意义在于:通过频繁的处理零代链表中的新对象,Python的垃圾收集器将把时间花在更有意义的地方,它处理那些很快就可能变成垃圾的新对象。同时只在很少的时候,当满足阈值的条件,收集器才回去处理那些老变量

以上。


参考资料:
https://www.jianshu.com/p/1e375fb40506
http://www.cnblogs.com/pinganzi/p/6646742.html

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/148361.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • navicat oracle存储过程,Navicat 运行 Oracle 存储过程示例

    navicat oracle存储过程,Navicat 运行 Oracle 存储过程示例navicat存储过程界面功能点击运行时,会弹出窗口填入输入参数。使用Navicat创建存储过程在函数位置,右键新建函数,OUT参数没有默认值,写了也没用。软件自动生成存储过程框架,然后人去补充“声明变量”和“主体”部分,注意存储过程名称可以用引号,也可以不用引号。Navicat运行存储过程方法一:使用Navicat软件界面功能方法二:在查询界面创建变量并调用存储过程Orac…

    2022年7月17日
    84
  • dropout理解「建议收藏」

    dropout理解「建议收藏」1.dropout解决的问题深度神经网络的训练是一件非常困难的事,涉及到很多因素,比如损失函数的非凸性导致的局部最优值、计算过程中的数值稳定性、训练过程中的过拟合等。过拟合是指模型训练到一定程度后,在测试集上得到的测试误差远大于在训练集上得到的误差。导致过拟合的主要原因有: 1.训练数据集太小 2.模型太复杂 3.过度训练2.dropoutdropout是指在训练一…

    2022年5月1日
    56
  • 高通QXDM_log工具怎么使用

    高通QXDM_log工具怎么使用https://blog.csdn.net/u010164190/article/details/79913808

    2022年9月26日
    1
  • 【技巧总结】位运算装逼指南

    【技巧总结】位运算装逼指南位算法的效率有多快我就不说,不信你可以去用10亿个数据模拟一下,今天给大家讲一讲位运算的一些经典例子。不过,最重要的不是看懂了这些例子就好,而是要在以后多去运用位运算这些技巧,当然,采用位运算,也是可以装逼的,不信,你往下看。我会从最简单的讲起,一道比一道难度递增,不过居然是讲技巧,那么也不会太难,相信你分分钟看懂。判断奇偶数判断一个数是基于还是偶数,相信很多人都做过,一般的做法的代码如下…

    2022年6月22日
    34
  • leetcode 颜色分类_leetcode72

    leetcode 颜色分类_leetcode72给定一个包含红色、白色和蓝色,一共 n 个元素的数组,原地对它们进行排序,使得相同颜色的元素相邻,并按照红色、白色、蓝色顺序排列。此题中,我们使用整数 0、 1 和 2 分别表示红色、白色和蓝色。示例 1:输入:nums = [2,0,2,1,1,0]输出:[0,0,1,1,2,2]示例 2:输入:nums = [2,0,1]输出:[0,1,2]示例 3:输入:nums = [0]输出:[0]示例 4:输入:nums = [1]输出:[1] 提示:n == num

    2022年8月8日
    9
  • spring cache 设置过期时间_redis设置key的过期时间命令

    spring cache 设置过期时间_redis设置key的过期时间命令SpringCache+redis设置过期时间

    2022年9月25日
    2

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号