Excpetion: decimal.InvalidOperation вызывается при сохранении модели данных Django - PullRequest
0 голосов
/ 18 октября 2018

Я храню данные криптовалюты в модели данных Django (используя базу данных Postgres).Подавляющее большинство записей успешно сохранены.Но, в частности, по одной записи я получаю исключение decimal.InvalidOperation.

Странно то, что я не вижу ничего отличного в том, что значения сохраняются в проблемной записи от других, которые успешно сохраняются.Я включил полную трассировку стека в Вставить bin .Перед сохранением данных я вывел необработанные значения в журнал отладки.Ниже приведена модель данных, в которую я сохраняю данные.И код, который сохраняет данные в модель данных.

Я в тупике!Кто-нибудь знает, в чем проблема?

Модель данных

class OHLCV(m.Model):
    """ Candles-stick data (open, high, low, close, volume) """

    # class variables
    _field_names = None
    timeframes = ['1m', '1h', '1d']

    # database fields
    timestamp = m.DateTimeField(default=timezone.now)
    market = m.ForeignKey('bc.Market', on_delete=m.SET_NULL, null=True, related_query_name='ohlcv_markets', related_name='ohlcv_market')
    timeframe = m.DurationField() # 1 minute, 5 minute, 1 hour, 1 day, or the like
    open = m.DecimalField(max_digits=20, decimal_places=10)
    high = m.DecimalField(max_digits=20, decimal_places=10)
    low = m.DecimalField(max_digits=20, decimal_places=10)
    close = m.DecimalField(max_digits=20, decimal_places=10)
    volume = m.DecimalField(max_digits=20, decimal_places=10)

Код, который сохраняет модель данных

@classmethod
def fetch_ohlcv(cls, market:Market, timeframe:str, since=None, limit=None):
    """
    Fetch OHLCV data and store it in the database

    :param market:
    :type market: bc.models.Market
    :param timeframe: '1m', '5m', '1h', '1d', or the like
    :type timeframe: str
    :param since:
    :type since: datetime
    :param limit:
    :type limit: int
    """

    global log
    if since:
        since = since.timestamp()*1000

    exchange = cls.get_exchange()
    data = exchange.fetch_ohlcv(market.symbol, timeframe, since, limit)
    timeframe = cls.parse_timeframe_string(timeframe)
    for d in data:
        try:
            timestamp = datetime.fromtimestamp(d[0] / 1000, tz=timezone.utc)
            log.debug(f'timestamp={timestamp}, market={market}, timeframe={timeframe}, open={d[1]}, high={d[2]}, low={d[3]}, close={d[4]}, volume={d[5]}')
            cls.objects.create(
                timestamp=timestamp,
                market=market,
                timeframe=timeframe,
                open=d[1],
                high=d[2],
                low=d[3],
                close=d[4],
                volume=d[5],
            )
        except IntegrityError:
            pass
        except decimal.InvalidOperation as e:
            error_log_stack(e)

1 Ответ

0 голосов
/ 19 апреля 2019

Посмотрите на ваши данные и проверьте, соответствуют ли они ограничениям поля:

  1. мантисса должна соответствовать max_digits ;
  2. Десятичные разряды должны быть меньше decimal_places ;
  3. И в соответствии с DecimalValidator : количество целых цифр не должно быть больше max_digits - decimal_places ;

Не уверен, как ваша fetch_ohlcv функция заполняет массив данных, но если есть деление, возможно, что числоof decimal_digits больше 10. Проблема, с которой я столкнулся, заключалась в том, что в целочисленной части было слишком много цифр, поэтому не выполнялось последнее требование.

Проверьте этот ответ для получения дополнительной информации оаналогичная проблема.

...