Я не могу сказать, что это совершенно невозможно для вас. Я могу с уверенностью сказать, что вы не должны пытаться делать это или ожидать, что что-то хорошее произойдет, если вы справитесь с этим. Не боритесь с рамками, пусть это работает на вас. Если дублирование является большой проблемой, вы создаете абстрактный класс, от которого наследуются ваши действия.
Кроме того, поскольку View поддерживает ссылку на контекст, в котором они были созданы. Если вам удалось передать View из одного действия в другое, вы бы создали утечку памяти. Поскольку представление будет содержать ссылку на старую активность через контекст, в котором она была создана.