Краткий ответ - да, чтобы быть уверенным, что он будет выглядеть так же, как и во всех браузерах.
Более длинный ответ заключается в том, что Firefox, Chrome и Opera имеют хорошее соответствие стандартам, поэтому, если он работает в одном, он, скорее всего, будет работать в других.
IE - это отдельное минное поле, и различия между IE6, 7 и 8 могут быть заметны. Обычно я сейчас стараюсь вообще избегать поддержки IE6, поэтому не беспокойтесь о его проверке, и IE8 имеет режим обратной совместимости IE7, так что вы можете протестировать как 7, так и 8 вместе. Если вам нужен IE6, Microsoft предоставляет образы виртуальных машин, на которых они установлены в XP, чтобы вы могли протестировать их, а не пытаться взломать несколько версий IE на вашем компьютере.
В качестве окончательной проверки что-то вроде browsershots.org может помочь вам увидеть, как это будет выглядеть в самых разных комбинациях ОС / браузеров.
Одна вещь, которую я нашел очень полезной, - это использование CSS-фреймворка, такого как YUI от Yahoo - они взяли на себя хит согласованности работы во многих браузерах, так что вы можете использовать их работу с помощью дополнительных стилей. самостоятельно.