В моем случае это была кодировка, которая использовалась при построении исходной карты.
Если вы создадите файл инициализатора, снова регистрирующий тип mime с набором символов, установленным в :unicode
, он решит проблема:
config/initializers/sprockets-register.rb
Sprockets.register_mime_type 'application/js-sourcemap+json', extensions: ['.js.map'], charset: :unicode