Да, это так.
Вы можете производить все вещи в другом проекте (веб-приложении), но когда вы используете ascx, вам нужно сделать ссылку на ваш проект ascx, а также вам нужно скопировать все файлы ascx в нужное место в проекте, где вы хотите использовать это.
Вы также можете использовать ClassLibrary, но тогда вам нужно будет вручную создавать файлы .ascx и файлы кодовой привязки, а при его использовании вы также должны копировать файлы ascx в основной проект.