消除Python GIL:Python的未來之路

Software -丁哥开讲
709粉絲
848 次觀看·2023年8月1日
大家好,让我们来谈谈 Python 。
Python 的未来
Python 的 GIL 是什么
这是一个全局解释器锁。
它是 Python 的关键组件。
我们知道 Python 是一种解释性语言,对吗 ?
它用来解释的系统有一个锁。
这是干什么用的 ?
这是为了让 Python 的解释器正常工作。
主要是为了保证它的安全。
最流行的 Python 实现称为 CPython 。
它只允许一行代码来执行 Python 的字节码。
当我们解释时,我们将 Python 的代码翻译成它的字节代码。
然后它运行。
GIL 的存在使得当前的 Python 无法充分利用我们的多处理系统。
我们在一台电脑上有几个 GPU 核心,对吗 ?
这意味着 Python 的语言不能使用这些多处理系统。
这是对多处理程序需求的严重瓶颈。
这就是我们今天要谈论的话题。
它被称为 GIL 。
为什么 ?
现在怎么了 ?
由于目前的情况,
主要问题是当前 GIL 系统的机制使 CPython 无法实现真正的多处理。
这使得 Python 中的许多代码优化变得非常困难。
当然,这不是不可能的。
很难.
我们大多数开发人员使用多处理 ,
或者一些 Python 扩展来绕过 GIL 来做一些事情。
但是这种方法有很多局限性。
因为它不是通用的编程方法 ,
它不适合所有情况。
例如,您使用多处理,对吗 ?
首先,您的创建过程不同于执行的创建。
资源需求必须更少 ,
它更快,对吗 ?
然后你同步 ,
你只是使用多处理 ,
它的同步机制不同于多处理机制,对吗 ?
它也会有很多的表现。
绕过 GIL 的各种限制存在一些问题。
这是 GIL 对 Python 的一些挑战。
以前,Python 程序员已经做了很多尝试,对吗 ?
至少有四次针对 GIL 的重大尝试。
第一次是在 1996 年比较晚的时候,对吗 ?
一个叫格雷格的人.
他创建了一个 Python 补丁。
他用它来消灭 GIL 。
但是在使用这个补丁之后 ,
他发现表现不佳 ,
所以他没有被接受。
另一个项目叫做胆囊切除术。
这个项目叫拉里。
他是个勇敢的人,对吗 ?
你有潜力 ,
但他破坏了现有的 C Python API 。
换句话说,如果你现在用他的程序 ,
虽然你去掉了 GIL,
您的代码将几乎被阻止。
在性能方面,
它比 C Python 更糟糕 ,
所以这是不可行的,对吗 ?
另一个是 PyParallel 。
它成功绕过了 GIL,
但它仍然有局限性 ,
特别是在 TCP 通信中。
它有性能问题 ,
所以它也有一个很大的缺陷,对吗 ?
下一个是 PyPy 的 STM 项目。
它提高了并行多处理的能力 ,
但其单处理性能再次下降。
它不如人类好。
它有四个主要的尝试 ,
但它并没有达到去除 GIL 的目的。
有这样或那样的问题。
目前,
我们也在做一个删除 GIL 的项目。
这是一个名为 PEP684 的代表性项目。
它被称为子解释器。
因为我们有一整套机器 ,
, 它是 C Python 的主要解释器。
他建议我可以为 684 使用一个子解释器项目,以允许多个 Python 解释器在同一进程中运行。
这是个好主意,对吧 ?
同样的过程意味着什么 ?
它支持多处理。
它可以绕过 GIL 。
你不必依赖单一处理来解释。
它肯定会提高它的速度。
这是一个候选人。
当然,这还没有完成。
它仍在进行中。
下一个是 PEP554 。
这是一个项目。
它提供了 multi - explanator 函数的一部分,作为 Python 开发人员的标准库。
您可以指定使用多少个解释器。
不只是一个,
你可以选择自己定义它。
这是一种方法。
当然,前提仍然类似于 684 。
你能做到吗 ?
例如,您有多个解释器。
你可以解释得很快,对吧 ?
因为 Python 是同时解释和运行的 ,
所以有可能提高它的运行速度和性能,对吗 ?
底线是,你可以得到这个系统的子解释器。
下一个项目是 PEP703 。
这是对 C Python 本身的改变。
它提供了什么 ?
您不使用 GIL 选项。
您可以在使用 Python 时打开此选项。
你用它。
那么直接在 C Python 开发的开发人员就不再需要依赖 GIL 了。
这是最理想的,对吧 ?
这是一种虚无的感觉。
对我们开发人员来说 ,
我们仍然继续使用 C Python API 来编写 Python 程序。
至于 GIL,我们可以打开该选项。
或者我们可以关闭这个选项。
这是最理想的。
但是我们能做到吗 ?
我们走着瞧.
因为我们以前经历过很多失败,对吗 ?
让我们谈谈挑战和未来。
如果没有 GIL 解决方案 ,
当然很好,对吧 ?
但它有一个前提。
它必须是什么 ?
当前版本是安全的。
另一种是并行处理。
你提到了当前版本的 Python 。
例如,这些工具使用 Python API 。
对吧?
你就像搅拌机。
如果你写了一个 Blender 程序 ,
当然,你会发现搅拌机 ,
不认为这是一个 bug 。
因为这是一个 Python 问题,对吧 ?
如果你调用自己的 Python API ,
当没有同步问题时,它将崩溃。
这是 Python 本身带来的一些问题。
其并行处理能力相对较差。
如果要删除 Python 的 GIL 解决方案 ,
您必须符合当前版本。
您必须能够正确地并行处理和同步数据。
这些关键目标是底线。
你必须得到它。
另一个是你必须实现这个目标。
就过去的行动而言 ,
它的开发成本相对较高。
这也是挑战之一。
开发成本,对吗 ?
另一个是自我解释者。
该解决方案可能是可行的解决方案。
这让你解释得更快。
它让你跑得更快。
对于 Python 对象之间的共享问题 ,
这是一个正在解决的问题。
尚未完全解决。
在未来的 Python 开发中 ,
Python 现在非常流行。
因此,所谓的科学家语言和 Python 的数据结构模型是非常流行的编程语言。
但是对于未来编程语言的竞争 ,
Python 仍然可以删除吗 ?
GIL 将是非常关键的一步。
好吧,让我们总结一下。
首先,Python GR2 是 Python 的障碍。
这是一个缺点。
它不能使用多处理器。
这绝对是一个缺点。
但同时,去除 GR2 机制并不容易。
目前有一些有希望的尝试。
过去有一些,但它们不起作用。
我们现在正在做的事情也是有希望的。
例如,我使用自我解释模式。
CPython 中还有一个 GR2 变量选项。
我,程序员,继续使用现有的 CPython API 来编写 Python 代码。
对于 Python 的未来发展,目标必须是解决它。
从技术上讲,这是可行的,但难度相对较高。
如果你能做到这一点,你必须考虑一下。
如果你想这样做,你必须对 Python 做出承诺,对吗 ?
为什么我不使用其他高级语言 ?
所以这是一个选择的问题。
如果你要解决这个问题,
你投资这么多的价值点是什么 ?
一旦这个问题解决了,
Python 在未来将会非常流行。
对于数据处理需求 ,
Python 将继续保持其出色的编程语言地位。
这就是 GR2 对 Python 的重要性。
最后,欢迎订阅丁的频道。
我们主要关注软件 ,
所以我们在前面加了一个软件。
如果你有任何相关的话题,我们可以继续讨论。
在这个频道里,
我们可能会谈论与技术无关的事情。
如果您有任何建议,请在下面留言。
谢谢大家。下次见。
