Странно \ n в кодированной строке base64 в Ruby

159

Встроенная библиотека Base64 в Ruby добавляет некоторые символы \ n. Я не могу выяснить причину. Для этого особого примера:

irb(main):001:0> require 'rubygems'
=> true
irb(main):002:0> require 'base64'
=> true
irb(main):003:0> str =  "1110--ad6ca0b06e1fbeb7e6518a0418a73a6e04a67054"
=> "1110--ad6ca0b06e1fbeb7e6518a0418a73a6e04a67054"
irb(main):004:0> Base64.encode64(str)
=> "MTExMC0tYWQ2Y2EwYjA2ZTFmYmViN2U2NTE4YTA0MThhNzNhNmUwNGE2NzA1\nNA==\n"

\ N в последней и 6-й позиции от конца. Декодер (Base64.decode64) отлично возвращает старую строку. Странно то, что эти \ n не добавляют никакого значения к закодированной строке. Когда я удаляю символы новой строки из выходной строки, декодер снова прекрасно их декодирует.

irb(main):005:0> Base64.decode64(Base64.encode64(str).gsub("\n", '')) == str
=> true

Более того, я использовал другую библиотеку JS для получения закодированных в base64 выходных данных той же входной строки, выходной файл не имеет \ n.

Это ошибка или что-то еще? Кто-нибудь сталкивался с этой проблемой раньше?

FYI,

$ ruby -v
ruby 1.8.7 (2008-08-11 patchlevel 72) [i486-linux]

ruby base64 encode

— intellidiot
источник

та же самая странная проблема здесь

— Nadav B

224

Изменить: так как я написал этот ответ Base64.strict_encode64()был добавлен, который не добавляет новые строки.

Документы несколько сбивают с толку, b64encodeпредполагается , что метод добавляет новую строку для каждого 60-го символа, и пример для encode64метода на самом деле использует b64encodeметод.

Похоже, что pack("m")метод для класса Array, который используется, encode64также добавляет символы новой строки. Я бы посчитал ошибкой дизайна, что это не обязательно.

Вы можете либо удалить символы новой строки самостоятельно, либо, если вы используете rails, есть ActiveSupport :: CoreExtensions :: Base64 :: Кодировка с помощью encode64sметода.

— Кристоффер Хаммарстрём
источник

44

Похоже, что с тех пор, как я написал этот ответ, теперь strict_encode64()якобы не добавляются новые строки.

— Кристофер Хаммарстрём,

15

Настолько глуп! Зачем ты это делаешь со мной, Руби?

— Джош М.

1

Это стандартное значение по умолчанию, но, как упоминает @ ChristofferHammarström, есть способ получить настоящую кодировку b64.

— Дан

1

По-видимому, это существует для обеспечения обратной совместимости с программным обеспечением, которое не может обрабатывать длинные строки. stackoverflow.com/a/20065991/5749914

— Воинственный шимпанзе

115

В ruby-1.9.2 у вас есть Base64.strict_encode64, который не добавляет этот \ n (перевод строки) в конце.

— ghtn
источник

Это гораздо более простое решение!

— Авишай

Я проверил Base64.strict_encode64 неправильно закодированную трехсимвольную строку. как Base64.strict_encode64 ('abc') -> YWJj. приведенный выше пример закодирован неправильно.

— CodeMaker

9

Да, это вполне нормально. В документе приведен пример, демонстрирующий разделение строк. base64 делает то же самое и в других языках (например, Python).

Причина того, что новые строки без содержания добавляются на этапе кодирования, заключается в том, что base64 изначально была разработана как механизм кодирования для отправки двоичного содержимого в электронную почту, где длина строки ограничена. Не стесняйтесь заменить их, если они вам не нужны.

— bobince
источник

1

Это только что произошло в моем приложении для Android (Java-библиотека Base64). Я был полностью смущен этим странным происшествием. Мне потребовался буквально 1 час, чтобы понять, что не так, а затем искал ошибку. Этот комментарий помогает понять проблемы наследства даже после 6 лет.

— burglarhobbit

5

Кажется, они должны быть раздеты / проигнорированы, как:

Base64.encode64(str).gsub(/\n/, '')

— meesern
источник

Это решение грязное .. что-нибудь еще?

— Арнольд Роа

1

@yaauie ( через предлагаемое редактирование ): Редактирование, которое вносит существенные изменения, как правило, не должно быть сделано. Я бы рекомендовал опубликовать это как отдельный ответ.

— Pokechu22

3

Используйте strict_encode64метод. encode64добавляет \ n каждые 60 символов

— Александр Тихонович
источник

мы можем изменить это, чтобы добавить после 76 символов?

— Соник

2

\nДобавил при использовании Base64#encode64правильно, проверьте этот пост из: https://glaucocustodio.github.io/2014/09/27/a-reminder-about-base64encode64-in-ruby/

— user1519240
источник