Из моего ограниченного опыта пользователь обычно замечает, что интерактивный сайт работает медленно, если ответы обычно занимают более одной секунды. Несколько секунд или больше может быть невыносимым. Под «интерактивным» я подразумеваю что-то, где пользователь будет генерировать много страниц, например форум.
Вот интересный фрагмент статьи / книги о времени отклика: http://www.useit.com/papers/responsetime.html