По умолчанию <button>
внутри <form>
отправляет эту форму. Установите type
кнопки, чтобы явно не быть «отправкой»:
<button type="button" onclick="createParagraph()">Click Me</button>
Кроме того, если вы не используете фактический <form>
(не хотите отправлять его), то, вероятно, лучше всего чтобы просто удалить его:
<body>
<input id='textOne' type="text">
<input id='textTwo' type="text">
<button type="button" onclick="createParagraph()">Click Me</button>
<div id="answer"></div>
<script src="app.js"></script>
</body>
Таким образом не будет ничего, что можно было бы случайно отправить.