如何在不编码的情况下将字符串转换为字节

Question

我有一堆二进制数据通过某个 C 接口（不在我的控制之下）通过 char* 传送到 python，所以我有一个任意二进制数据的字符串（通常是字节数组）。我想将它转换为字节数组以简化它与其他 python 函数的使用，但我似乎无法弄清楚如何。

不起作用的例子：

data = rawdatastr.encode() 这假定为“utf-8”并破坏数据== BAD

data = rawdatastr.encode('ascii','ignore') 剥离超过 127 个字符 == 错误

data = rawdatastr.encode('latin1') 不确定——这是迄今为止最接近的，但我没有证据表明它适用于所有字节。

data = array.array('B', [x for x in map(ord,data)]).tobytes() 这可行，但似乎要做很多简单的工作。有没有更简单的东西？

我在想我需要编写自己的身份编码来传递字节（我 认为 latin1 基于一些阅读但到目前为止没有证据来做到这一点）。

原文由 nickdmax 发布，翻译遵循 CC BY-SA 4.0 许可协议

Answer 1

虽然我怀疑其他东西正在为你解码你的数据（C 中的 char* 通常最好表示为 bytes ，特别是如果它是二进制数据）：

latin1 编解码器可以往返每个字节。您可以使用以下短程序验证这一点：

 >>> s = ''.join(chr(i) for i in range(0x100))
>>> s
'\x00\x01\x02\x03\x04\x05\x06\x07\x08\t\n\x0b\x0c\r\x0e\x0f\x10\x11\x12\x13\x14\x15\x16\x17\x18\x19\x1a\x1b\x1c\x1d\x1e\x1f !"#$%&\'()*+,-./0123456789:;<=>?@ABCDEFGHIJKLMNOPQRSTUVWXYZ[\\]^_`abcdefghijklmnopqrstuvwxyz{|}~\x7f\x80\x81\x82\x83\x84\x85\x86\x87\x88\x89\x8a\x8b\x8c\x8d\x8e\x8f\x90\x91\x92\x93\x94\x95\x96\x97\x98\x99\x9a\x9b\x9c\x9d\x9e\x9f\xa0¡¢£¤¥¦§¨©ª«¬\xad®¯°±²³´µ¶·¸¹º»¼½¾¿ÀÁÂÃÄÅÆÇÈÉÊËÌÍÎÏÐÑÒÓÔÕÖ×ØÙÚÛÜÝÞßàáâãäåæçèéêëìíîïðñòóôõö÷øùúûüýþÿ'
>>> s2 = s.encode('latin1').decode('latin1')
>>> s2 == s
True
>>> sb = bytes(range(0x100))
>>> sb
b'\x00\x01\x02\x03\x04\x05\x06\x07\x08\t\n\x0b\x0c\r\x0e\x0f\x10\x11\x12\x13\x14\x15\x16\x17\x18\x19\x1a\x1b\x1c\x1d\x1e\x1f !"#$%&\'()*+,-./0123456789:;<=>?@ABCDEFGHIJKLMNOPQRSTUVWXYZ[\\]^_`abcdefghijklmnopqrstuvwxyz{|}~\x7f\x80\x81\x82\x83\x84\x85\x86\x87\x88\x89\x8a\x8b\x8c\x8d\x8e\x8f\x90\x91\x92\x93\x94\x95\x96\x97\x98\x99\x9a\x9b\x9c\x9d\x9e\x9f\xa0\xa1\xa2\xa3\xa4\xa5\xa6\xa7\xa8\xa9\xaa\xab\xac\xad\xae\xaf\xb0\xb1\xb2\xb3\xb4\xb5\xb6\xb7\xb8\xb9\xba\xbb\xbc\xbd\xbe\xbf\xc0\xc1\xc2\xc3\xc4\xc5\xc6\xc7\xc8\xc9\xca\xcb\xcc\xcd\xce\xcf\xd0\xd1\xd2\xd3\xd4\xd5\xd6\xd7\xd8\xd9\xda\xdb\xdc\xdd\xde\xdf\xe0\xe1\xe2\xe3\xe4\xe5\xe6\xe7\xe8\xe9\xea\xeb\xec\xed\xee\xef\xf0\xf1\xf2\xf3\xf4\xf5\xf6\xf7\xf8\xf9\xfa\xfb\xfc\xfd\xfe\xff'
>>> sb == s.encode('latin1')
True

原文由 anthony sottile 发布，翻译遵循 CC BY-SA 4.0 许可协议