Можно ли установить AWS CLI v2 через PIP на Windows?
Нет, по крайней мере, не из pypi. Инструкции из github, которые вы связали, применяются только к версии 1.18, а также проект pypi находится на уровне 1.18.
Если вы переключитесь на ветку v2 на github , вы также заметите, что всякая ссылка на использование pip для установки исчезла, поэтому рекомендуется использовать только установщик .msi.
Это не должно останавливать вас как таковое, но поскольку файла whl нет, установка с помощью pip означала бы попытку скомпилировать исходный код, что, вероятно, является проблемой для windows. вы все равно можете попробовать, команда будет выглядеть примерно так:
python -m pip install git+https://github.com/aws/aws-cli/tree/v2