У вас есть начальное значение для ваших входов? Если у вас не установлено значение по умолчанию, вы также заметите в консоли предупреждение о неконтролируемых входах.
Очистка сохраненных данных формы в настройках Chrome (на вкладке «Дополнительно»)
добавьте это в поля Formik autoComplete = "off" и добавьте значение = "" в поле, но это должно исходить из ваших начальных значений formik, поэтому оно должно выглядеть следующим образом = {values.password}