为什么你写的Python运行得那么慢呢？

0顶
0踩

2014-03-17 11:44 by 副主编 WnouM 评论(3) 有8322人浏览

python 动态语言数据结构 c

大约在一年前，也就是2013年在Waza（地名），Alex Gaynor提到了一个很好的话题：为什么用Python、Ruby和Javascript写的程序总是运行的很慢呢？正如他强调的，关键就是现在出现了这个问题。换一句话说，尽管现在这种语言很慢，但不意味着没有解决办法，不意味着未来会一直这样。

当在网上问为什么Python比C语言更慢，回答最多的就是Python中有动态类型。然而，动态类型确实会在性能方面有影响，但是这并不是主要原因。

动态类型（像Python一样的主要编程语言都一样）使得编译器很难优化性能。动态使得每次执行都可能很不同，编译器难以优化。然而，正如Alex在谈话中提到的，我们花费了数年的时间来研究究竟在运行时进行类型检查的最好的办法是什么。但是没什么进展。

在现实中，在C语言和Python在运行时的巨大的不同是由于数据结构和算法的不同。有时程序员也没有注意到这一点。

用Python写不同的代码

让我们用一个Alex提到的实例来说明问题。一个Python程序员可能很喜欢用下面的例子表示一个平面上的点：

point = {'x': 0, 'y': 0}

这种方法很易读，容易编码，形式很优雅。

另一个方面，一个C语言程序员可能使用结构体来表示平面上的点：

struct Point {
   int x;
   int y;
};

尽管这种方法也和Python能一样的工作并且都是很优雅的，但这是完全不同的数据结构。这里我们告诉了编译器，我们有两个字段x和y。知道了这两个字段的类型，编译器将分配一块连续的内存来储存这两个数据。换一句话说，就像一个数组一样。任何时间，编译器都知道给定的x和y在哪里。我们可以很容易地访问这些数据，就像是访问某些常数据一样。

Python使用哈希散列的方法来解决类似的问题。所以编译器不能简单地分配连续内存存储x和y来处理这些问题。由于我们在其中任意的地方都可能出现这些键。如果我们想的话，我们也可能删除这些键。编译器必须要使用哈希函数来映射到你可能让他指向的任何存储单元。不用说，这些函数增加了处理时间。尽管也许减缓的很小，但是足可以拖慢你的代码，尤其是这种情况如果很多的时候。

如果就是想将Python翻译成C语言的话，可能就像下面这样：

std::hash_set point;
point[“x”] = x
point[“y”] = y

看这个代码片段，好像就是语言的设计者他们自己故意尽力使哈希表复杂，因此尽管是正确的，但没有人使用。由于这个原因，写C语言的人可能认为这是不可思议的，但为什么在Python就是可以接受的呢？

原因就是写Python代码的人的“dictionaries are lightweight objects”这种心态。看下面的代码，这在Python中最接近C语言结构体：

class Point(object):
     x, y = None, None
     def __init__(self, x, y):
          self.x, self.y = x, y

这对编译器是有用的，就像是C语言的结构体。例如第二行，我们明确告诉编译器但我们创造一个对象时我们总是至少需要两个数据段，我们希望编译器处理这个问题。

不幸的是这种标准的Python被叫做CPthon，不能总被使用。在我的机器上，下面的代码要执行186毫秒：

def sum_(points):
    sum_x, sum_y = 0, 0
    for point in points:
        sum_x += point['x']
        sum_y += point['y']
    return sum_x, sum_y

在我的机器上，用point.x代替point['x']会花费201毫秒。也就是说，会慢了8%。

在CPthon中，point.x通常就是被处理成dict(point)['x']。这意味着带着点的class仍然像以前一样使用字典（dictionary）的方法查找。这样的话，就很容易看出为什么directionary的方法被看为“轻量级的”。

一些Python写的代码就是为了效率而设计的，例如PyPy，能很快地执行。如果不使用Python而是使用PyPy，同样的代码片段执行时间分别是21.6和3.75毫秒。这种方法相比CPython在JIT-capable编译情况下结果都是令人满意的。换一句话说，PyPy能正确地使用数据结构。

我希望你再一次看这个最短时间3.75毫秒。这个数字表明我们能在一秒进行266000次运算，这些事来自Python的，其中有动态绑定，monkey-patching（在不改变源代码的情况下扩展或修改动态语言运行时代码的方法）等。所有的这些，都是在编码和实现中使用了更好的数据结构。下一次当你在用Python写一行代码时，想一想你在使用什么数据结构，显示的还是隐式的，考虑一下是否有更好的办法。这就是你用C语言写程序时考虑的，不是吗？

最后，我愿意相信这个文章是表明为什么Python是一个有前途的语言的一个清楚的例子（或者是类似的语言）。这表明了标准的Python实现，这里的CPython仅仅是作为一个参考，它从来就不是被设计用来更快地执行的。正如我们今天可以看到的，像PyPy一样的算法实现是可以优化你的代码到一个很好的长度。随着语言的自然发展，这些优化是可能的。我们仅仅用Python编程过23年，那么如果像C语言一样有42年的发展，Python会是什么样子呢？

有人也许会争辩说collections.namedtuple()是更接近于C语言的结构体，这是对的，但我们不要过分将事情复杂化，我们的重点是有效。

为了更清楚python是怎样工作的，请参考python文档。

英文原文：lukauskas.co.uk / 译文：OurJS / 译者：renyuzhuo

来自: OurJS

分享到：

0
顶

0
踩

评论共 3 条请登录后发表评论

3 楼 superleung 2014-03-20 20:46

diggywang 写道

超过Java再说

和JAVA的应用场景不同吧？

2 楼 xsharp 2014-03-18 09:29

diggywang 写道

超过Java再说

如果我回复一下, 会不会显得我很幼稚?

1 楼 diggywang 2014-03-17 22:21

超过Java再说

发表评论

您还没有登录,请您登录后再发表评论

0顶0踩