Прежде всего, вам нужно инициализировать каждый TextView со ссылкой на контекст. Итак, в вашем onClick, учитывая, что он находится в MyActivity.java:
public void onClick(View v) {
TextView text = new TextView(this);
text.setLayoutParams(new LayoutParams(WRAP_CONTENT, WRAP_CONTENT); // Or what you decide
text.setText("Your text");
linearLayout.addView(text);
}
Во-вторых, учитывая, что у вас есть вызов setContentView в onCreate, который также добавляет ваш линейный вывод в представление, вам не нужно вызывать setContentView (linearLayout) каждый раз, когда нажимается кнопка.