由 Python2 和 Python3

发布时间:2019-09-25 08:24:51编辑:auto阅读(1596)

    这几天在做一个功能实现的时候,需要把别人用 Python2.6 写好的脚步转成 Python3.4 实现,大部分地方转化都没啥问题,但是在 socket.inet_aton() 转化的过程中出了点问题,花费我不少的精力去解决,先做个记录备忘,同时给后续需要的人做个提醒。

    首先说一下,我在解决这个问题前期的思路有点问题,所以请关注最后的总结。

    需求目的:把一个 ip 地址使用 socket.inet_aton() 转化后和一个字符串组合,然后算出 MD5。

    下面是 Python2.6 的实现代码:

    #!python2
    # -*- coding: utf-8 -*-
    
    import socket
    import hashlib
    
    if __name__ == '__main__':
        ip = '192.168.1.12'
        base_str = 'testSTR'
        ip_md5 = hashlib.md5(socket.inet_aton(ip) + base_str).digest().encode('hex')
        print(ip_md5)

    运行后的输出结果为:

    fc138bb4748a18f885cc321c2c6396e2

    如果原封不动的使用 Python3.4 运行后,报错如下:

    Traceback (most recent call last):
      File "socket34.py", line 25, in <module>
        test1()
      File "socket34.py", line 10, in test1
        ip_md5 = hashlib.md5(socket.inet_aton(ip) + base_str).digest().encode('hex')
    TypeError: can't concat bytes to str

    提示说的是,socket.inet_aton(ip) 的返回值是 bytes 类型,所以不能和 str 类型的 base_str 直接进行连接操作。
    也就是说 Python2.6 和 python3.4 中对于 socket.inet_aton(ip) 的实现是有差异的,查官方文档吧。
    python2.6文档说明:

    socket.inet_aton(ip_string)
    Convert an IPv4 address from dotted-quad string format (for example, ‘123.45.67.89’) to 32-bit packed binary format, as a bytes object four characters in length.

    python3.4 文档说明:

    socket.inet_aton(ip_string)
    Convert an IPv4 address from dotted-quad string format (for example, ‘123.45.67.89’) to 32-bit packed binary format, as a string four characters in length.

    好吧,返回值类型不同,为了保证和原脚本逻辑一致,我就做个转化,把 bytes 主动转换为 str 类型再连接,修改后的代码如下:

    #!python3
    # -*- coding: utf-8 -*-
    
    import socket
    import hashlib
    
    if __name__ == '__main__':
        ip = '192.168.1.12'
        base_str = 'testSTR'
        str_md5 = socket.inet_aton(ip).decode('gbk') + base_str
        ip_md5 = hashlib.md5(str_md5).digest().encode('hex')
        print(ip_md5)

    代码通过 decode 把 bytes 使用 gbk 的方式解码成 str,至于为什么用 gbk,是因为我对比了下,只有 gbk 编码方式解码后的输出才和 python2.6 中的 str 返回值结果一致。

    行,赶紧运行一把试试看。。。还是报错了,这次的报错内容变了:

    Traceback (most recent call last):
      File "socket34.py", line 34, in <module>
        test1()
      File "socket34.py", line 12, in test1
        ip_md5 = hashlib.md5(str_md5).digest().encode('hex')
    TypeError: Unicode-objects must be encoded before hashing

    看起来 hashlib.md5() 在 Python2.6 和 Python3.4 中的实现也有差异,继续看文档。
    python2.6文档说明:

    You can now feed this object with arbitrary strings using the update() method.

    python3.4 文档说明:

    You can now feed this object with bytes-like objects (normally bytes) using the update() method.

    依然是编码格式的问题,Python2.6 中参数传入的是 str,但是 Python3.4 中参数需要传入 bytes,那就继续转码吧。
    再次转码后的代码如下:

    #!python3
    # -*- coding: utf-8 -*-
    
    import socket
    import hashlib
    
    if __name__ == '__main__':
        ip = '192.168.1.12'
        base_str = 'testSTR'
        str_md5 = socket.inet_aton(ip).decode('gbk') + base_str
        ip_md5 = hashlib.md5(str_md5.encode('gbk')).digest().encode('hex')
        print(ip_md5)

    运行后再次报错:

    Traceback (most recent call last):
      File "socket34.py", line 33, in <module>
        test1()
      File "socket34.py", line 11, in test1
        ip_md5 = hashlib.md5(str_md5.encode('gbk')).digest().encode('hex')
    AttributeError: 'bytes' object has no attribute 'encode'

    好吧,继续看文档。
    python2.6文档说明:

    hash.digest()
    Return the digest of the strings passed to the update() method so far. This is a string of digest_size bytes which may contain non-ASCII characters, including null bytes.

    python3.4 文档说明:

    hash.digest()
    Return the digest of the data passed to the update() method so far. This is a bytes object of size digest_size which may contain bytes in the whole range from 0 to 255.

    这次更严重,encode() 直接用不了,换方法吧,更新后的代码如下:

    #!python3
    # -*- coding: utf-8 -*-
    
    import socket
    import hashlib
    import binascii
    
    if __name__ == '__main__':
        ip = '192.168.1.12'
        base_str = 'testSTR'
        str_md5 = socket.inet_aton(ip).decode('gbk') + base_str
        ip_md5 = binascii.hexlify(hashlib.md5(str_md5.encode('gbk')).digest()).decode()
        print(ip_md5)

    运行后的输出结果:

    fc138bb4748a18f885cc321c2c6396e2

    终于得到了最终结果,激动,不过再回头一看,如果知道这几个函数的使用方式的话,就不需要 decode() 然后又 encode(),比如稍微优化后的代码如下:

    #!python3
    # -*- coding: utf-8 -*-
    
    import socket
    import hashlib
    import binascii
    
    if __name__ == '__main__':
        ip = '192.168.1.12'
        base_str = 'testSTR'
        str_md5 = socket.inet_aton(ip) + base_str.encode()
        ip_md5 = binascii.hexlify(hashlib.md5(str_md5).digest()).decode()
        print(ip_md5)

    总结:

    1. Python3 新增了 bytes 类型,对于 bytes 的转换逻辑要特别清楚,这地方涉及了编码类型,要特别关注;
    2. 在使用一些函数前,一定要搞清楚这个函数的具体实现,必须清楚的知道使用了这个函数是什么效果,而不仅仅是看到暂时的效果,或者经验主义的去调用(上面例子的最后一步,其实我一开始不是用的 binascii,而是用的现成的 md5 转换函数,导致 encode() 成了 utf-8 格式,而浪费了不少时间去定位);
    3. 解决问题过程中,思路一定要清晰,不能靠猜,越猜越错;
    4. 先弄明白问题的根本原因,直接从根源上去解决,比一步步的就错解错,效果更好。

    本文原创发布于公众号「sylan215」,十年测试老兵的原创干货,关注我,涨姿势!

关键字