Предполагая, что нет ограничения на количество EdtitText, которое будет добавлено на экран при нажатии кнопки. Здесь нужно сделать две вещи:
1) Поэтому при изменении ориентации виды удаляются. Чтобы решить эту проблему, вы можете добавить это в свой файл манифеста
<activity name= ".YourActivity" android:configChanges="orientation|screenSize"/>
ПРИМЕЧАНИЕ: Если вы используете другой макет для ландшафтного режима, при добавлении этих параметров макет для ландшафтного режима не будет
2) Чтобы сохранить представления, которые были добавлены пользователем, когда пользователь покидает (убивает приложение из кэша) приложение, необходимо сохранить добавленный счетчик EditText либо с помощью SQLiteDatabase или используя ORM, например greenDAO , Sugar ORM или любой другой, который вы считаете подходящим.
Надеюсь, это поможет. : -)