Как вы храните необработанные байты в виде текста, не теряя информацию в Python 2.x? - PullRequest
1 голос
/ 08 мая 2009

Предположим, у меня есть данные, хранящиеся в байтах. Например:

0110001100010101100101110101101

Как я могу сохранить его как для печати текст? Очевидным способом было бы преобразовать каждые 0 в символ «0» и каждый 1 в символ «1». На самом деле это то, чем я сейчас занимаюсь. Я хотел бы знать, как я мог бы упаковать их более плотно, без потери информации.

Я думал о преобразовании битов в группах по восемь в ASCII, но некоторые битовые комбинации не принято в этом формате. Есть еще идеи?

Ответы [ 4 ]

7 голосов
/ 08 мая 2009

Как насчет кодировки, которая использует только "безопасные" символы, такие как base64?
http://en.wikipedia.org/wiki/Base64

РЕДАКТИРОВАТЬ: Это означает, что вы хотите безопасно хранить данные в текстовых файлах и тому подобное?

В Python 2.x строки должны быть в порядке (Python не использует строки с нулевым символом в конце, поэтому не беспокойтесь об этом).

Иначе в 3.x проверьте байты и объекты bytearray. http://docs.python.org/3.0/library/stdtypes.html#bytes-methods

3 голосов
/ 08 мая 2009

Не уверен, о чем ты говоришь.

>>> sample = "".join( chr(c) for c in range(256) )
>>> len(sample)
256
>>> sample
'\x00\x01\x02\x03\x04\x05\x06\x07\x08\t\n\x0b\x0c\r\x0e\x0f\x10\x11\x12\x13\x14\
x15\x16\x17\x18\x19\x1a\x1b\x1c\x1d\x1e\x1f !"#$%&\'()*+,-./0123456789:;<=>?@ABC
DEFGHIJKLMNOPQRSTUVWXYZ[\\]^_`abcdefghijklmnopqrstuvwxyz{|}~\x7f\x80\x81\x82\x83
\x84\x85\x86\x87\x88\x89\x8a\x8b\x8c\x8d\x8e\x8f\x90\x91\x92\x93\x94\x95\x96\x97
\x98\x99\x9a\x9b\x9c\x9d\x9e\x9f\xa0\xa1\xa2\xa3\xa4\xa5\xa6\xa7\xa8\xa9\xaa\xab
\xac\xad\xae\xaf\xb0\xb1\xb2\xb3\xb4\xb5\xb6\xb7\xb8\xb9\xba\xbb\xbc\xbd\xbe\xbf
\xc0\xc1\xc2\xc3\xc4\xc5\xc6\xc7\xc8\xc9\xca\xcb\xcc\xcd\xce\xcf\xd0\xd1\xd2\xd3
\xd4\xd5\xd6\xd7\xd8\xd9\xda\xdb\xdc\xdd\xde\xdf\xe0\xe1\xe2\xe3\xe4\xe5\xe6\xe7
\xe8\xe9\xea\xeb\xec\xed\xee\xef\xf0\xf1\xf2\xf3\xf4\xf5\xf6\xf7\xf8\xf9\xfa\xfb
\xfc\xfd\xfe\xff'

Строка sample содержит все 256 различных байтов. Нет такой вещи как «битовые комбинации ... не принимаются».

Чтобы сделать его печатным , просто используйте repr(sample) - экранированные символы не ASCII Как вы видите выше.

1 голос
/ 08 мая 2009

Попробуйте стандартный массив модуль или struct модуль. Они поддерживают хранение байтов эффективным способом, но не поддерживают биты напрямую.

Вы также можете попробовать http://cobweb.ecn.purdue.edu/~kak/dist/BitVector-1.2.html или http://ilan.schnell -web.net / prog / bitarray /

0 голосов
/ 11 мая 2009

Для Python 2.x лучше всего хранить их в строке. Получив эту строку, вы можете закодировать ее в безопасные значения ASCII, используя модуль base64, поставляемый с python.

import base64
encoded = base64.b64encode(bytestring)

Это будет гораздо более сжатым, чем хранение "1" и "0".

Для получения дополнительной информации о модуле base64 см. Python docs .

...