Сбой основного узла обмена сообщениями Chrome в golang, если размер JSON превышает 65500 символов - PullRequest
Новая
       14

Сбой основного узла обмена сообщениями Chrome в golang, если размер JSON превышает 65500 символов

0 голосов
/ 30 ноября 2018

Я пытаюсь написать собственный хост обмена сообщениями для chrome на golang.Для этого я попытался использовать пакеты chrome-go , а также chrome-native-messaging .Оба представлены с той же проблемой, как объяснено ниже.

Вот код.Я добавил соответствующие части из пакета chrome-go в основной файл вместо того, чтобы импортировать его для простоты понимания.

Следующий код фактически работает, когда я отправляю ему сообщение json, например:{content: "Apple Mango"}.Тем не менее, он перестает работать, когда длина JSON превышает примерно 65500 символов, дать или взять 100 символов.Там также нет ошибки вывода.

package main

import (
  "encoding/binary"
  "encoding/json"
  "fmt"
  "io"
  "os"
)

var byteOrder binary.ByteOrder = binary.LittleEndian

func Receive(reader io.Reader) ([]byte, error) {
   // Read message length in native byte order
   var length uint32
   if err := binary.Read(reader, byteOrder, &length); err != nil {
       return nil, err
   }

// Return if no message
if length == 0 {
    return nil, nil
}

// Read message body
received := make([]byte, length)
if n, err := reader.Read(received); err != nil || n != len(received) {
    return nil, err
}
return received, nil
}

type response struct {
    Content string `json:"content"`
}

func main() {

  msg, err := Receive(os.Stdin)
  if err != nil {
    panic(err)
  }
  var res response
  err = json.Unmarshal([]byte(msg), &res)
  if err != nil {
     panic(err)
  }
  fmt.Println(res.Content)
 }

Для тех, кто заинтересован в тестировании, я создал репозиторий с инструкциями.Выполните следующую команду 

  git clone --depth=1  https://tesseract-index@bitbucket.org/tesseract-index/chrome-native-messaging-test-riz.git && cd chrome-native-messaging-test-riz
 ./json2msg.js < test-working.json | go run main.go
 ./json2msg.js < test-not-working.json | go run main.go

. Вы увидите, что test-not-working.json не выводит никаких данных, хотя разница с test-working.json составляет всего несколько сотен символов.

В чем здесь проблема?

1 Ответ

0 голосов
/ 30 ноября 2018

Существует ограничение конвейерного буфера, который варьируется в зависимости от системы.Например, в Mac OS X по умолчанию используется емкость 16384 байта.

Вы можете использовать этот скрипт bash для проверки размера буфера: 

M=0; while printf A; do >&2 printf "\r$((++M)) B"; done | sleep 999

Так что он не связан с go, потому что я пытался изменить ваш код для чтения из файла и Unmarshal, и это сработало: 

func main() {
    reader, err := os.Open("test-not-working.json")
    if err != nil {
        panic(err)
    }

    var res response
    decoder := json.NewDecoder(reader)
    err = decoder.Decode(&res)
    if err != nil {
        panic(err)
    }

    fmt.Println(res.Content)
}
...