Зачем нужна base64 (иначе я не могу просто отправить бинарный файл по электронной почте)?

Я читал о кодировке Base64 и нашел это в Википедии:

Схемы кодирования Base64 обычно используются, когда необходимо кодировать двоичные данные, которые необходимо хранить и передавать по носителям, предназначенным для работы с текстовыми данными.

... и приведенный пример отправляет двоичные файлы по электронной почте.

Я пытаюсь понять, зачем base64. Поскольку двоичные данные представляют собой набор байтов, не будет ли он напрямую переведен в ASCII, который представляет собой текстовые данные? Зачем вообще нужна base64? Или электронная почта имеет проблемы с управляющими символами в ASCII?

2 ответа

Решение

На это есть хорошая статья в Википедии.


Самые ранние итерации NCP, используемые ARPAnet, были больше похожи на битовые потоки, чем на байтовые потоки, или на попытки согласовать удобный размер байта; 8-битный байт был стандартизирован только намного позже. Было также несколько попыток создания протоколов передачи файлов, которые работали бы на разных машинах (изначально почта была функцией протокола FTP, прежде всего как MAIL а также MLFL Команды, затем разделить на MTP, позже SMTP.). Эти машины часто имели различную кодировку символов -ASCII и EBCDIC - или даже разные размеры байтов, 8-битные байты против 6-битных против...

Поэтому функции передачи почты изначально были определены для передачи относительно коротких сообщений в виде простого текста; в частности, "NVT-ASCII". Например, RFC 772 говорит:

ПРЕДСТАВИТЕЛЬСТВО И ХРАНЕНИЕ ПОЧТЫ

Почта передается с устройства хранения на отправляющем хосте на устройство хранения на принимающем хосте. Может потребоваться выполнить определенные преобразования почты, поскольку представления хранилищ данных в двух системах различны. Например, NVT-ASCII имеет разные представления хранения данных в разных системах. PDP-10 обычно хранят NVT-ASCII в виде пяти 7-битных символов ASCII, выровненных по левому краю в 36-битном слове. 360-е годы хранят NVT-ASCII в виде четырех 8-битных кодов EBCDIC в 32-битном слове. Multics хранит NVT-ASCII в виде четырех 9-битных символов в 36-битном слове.

Для простоты все данные должны быть представлены в MTP как NVT-ASCII. Это означает, что символы должны быть преобразованы в стандартное представление NVT-ASCII при передаче текста независимо от того, различаются ли отправляющий и принимающий узлы. Отправитель преобразует данные из своего внутреннего символьного представления в стандартное 8-битное представление NVT-ASCII (см. Спецификацию TELNET). Получатель преобразует данные из стандартной формы в свою собственную внутреннюю форму. В соответствии с этим стандартом последовательность должна использоваться для обозначения конца строки текста.

Даже если по кабелю передавалось восемь битов, восьмой бит часто отбрасывался или искажался, поскольку не было необходимости сохранять его; на самом деле, некоторые протоколы требуют, чтобы восьмой бит был установлен на ноль, например, начальный SMTP RFC, как указано ниже. Другими словами, программное обеспечение не было 8-битным чистым.

Обмен данными

Соединение TCP поддерживает передачу 8-битных байтов. Данные SMTP - это 7-битные символы ASCII. Каждый символ передается в виде 8-битного байта, причем старший бит сбрасывается в ноль.

Это продолжалось долгое время даже после того, как 8-битные кодировки ISO-8859-# стали широко распространенными. Несмотря на то, что некоторые серверы были уже 8-битными, другие - нет, и слепая отправка 8-битных данных привела бы к искаженным сообщениям.

Позже была опубликована "Расширенная SMTP", позволяющая почтовым серверам объявлять расширения SMTP, которые они поддерживали; один из них был 8BITMIME указывает на то, что принимающий сервер может безопасно принимать 8-битные данные. Части сообщения MIME могут иметь " Content-Transfer-Encoding: 8bit", указывая на то, что они не кодируются каким-либо образом.

Тем не менее, протокол SMTP остался линейным и имеет предел строки в 998 октетов, а также использует . линия (0D 0A 2E 0D 0A) в качестве индикатора "конец сообщения". Это означает, что, хотя большинство двоичных файлов можно было отправить без изменений, все же возможно, что файлы, содержащие эту последовательность октетов, будут интерпретированы как конец переданного сообщения, а остальная часть файла - как команда SMTP, что может привести к повреждению. Аналогичным образом, принимающий сервер может обрезать "строку" длиной более 998 октетов.

В 2000 году расширение ESMTP "BINARYMIME" было опубликовано как RFC 3030, что позволяет передавать необработанные двоичные данные по SMTP. Сообщение теперь передается порциями предварительно указанной длины, причем порция нулевой длины используется в качестве терминатора, и Base64 и подобные кодировки больше не нужны. К сожалению, немногие SMTP-серверы поддерживают это расширение; например, ни Postfix, ни Exim4 не рекламируют CHUNKING в ответ на EHLO. Чтобы воспользоваться преимуществами BINARYMIME, он должен поддерживаться всеми серверами в пути сообщения, который может быть больше, чем один или два.

Смотрите также:

Некоторые старые почтовые системы и программное обеспечение не были чистыми 8-битными, 8-й бит использовался в качестве управляющего символа. Этого было достаточно, чтобы испортить двоичные файлы, таким образом, Base64 (или другие схемы кодирования) были необходимы.

Другие вопросы по тегам