Сканирование DynamoDB показывает меньше элементов, чем консоль DynamoDB

Question

Почему сканирование с помощью nodejs показывает только 3 результата, в то время как инструмент администрирования DynamodB показывает 9

var params = {
    TableName: process.env.DYNAMODB_TABLE_LIGHTHOUSE,
    FilterExpression: '#blickArticleId = :valblickArticleId AND #firstFolder = :valfirstFolder',
    ExpressionAttributeNames: {
        '#blickArticleId': 'blickArticleId',
        '#firstFolder': 'firstFolder'
    },
    ExpressionAttributeValues: {
        ':valblickArticleId': 'null',
        ':valfirstFolder': 'null'
    },
  };

  const queryResponse = await dynamoDb.scan(params).promise()

не то же самое

Answer 1

Вы уверены, что ваш отсканированный контент не превышает 1 МБ?.

Если общее количество отсканированных документов превышает максимальный размер набора данных ограничение в 1 МБ, сканирование останавливается и результаты возвращаются пользователю с ключом LastEvaluated

Затем вы можете отсканировать оставшиеся элементы, используя LastEvaluatedKey.

Answer 2

Ваш код должен сканировать оставшиеся элементы. Наличие ненулевого LastEvaluatedKey указывает на то, что результаты DynamoDB разбиты на страницы. Предполагается, что консоль AWS DynamoDB выполняет нумерацию страниц.

Вот пример кода для извлечения всех элементов, если разбит на страницы .

Answer 3

как упомянул джармод, нумерация страниц - это:

const getLalalalalal = async () => {
  var params = {
    TableName: process.env.DYNAMODB_TABLE_LIGHTHOUSE,
    FilterExpression: '#blickArticleId = :valblickArticleId AND #firstFolder = :valfirstFolder',
    ExpressionAttributeNames: {
        '#blickArticleId': 'blickArticleId',
        '#firstFolder': 'firstFolder'
    },
    ExpressionAttributeValues: {
        ':valblickArticleId': 'null',
        ':valfirstFolder': 'null'
    },
  };

  return await scanTable(params)
}

const scanTable = async (params) => {
  let scanResults = [];
  let items;
  do {
      items = await dynamoDb.scan(params).promise();
      items.Items.forEach((item) => scanResults.push(item));
      params.ExclusiveStartKey = items.LastEvaluatedKey;
  } while(typeof items.LastEvaluatedKey != "undefined");

  return scanResults;
};