У меня сложилось впечатление, что если вы не используете сессию (чтение / запись), она не будет скользить. Но вы можете применить атрибут SessionState к контроллеру, чтобы отключить его для этого контроллера (хотя он не будет работать на уровне действия).
[SessionState(System.Web.SessionState.SessionStateBehavior.Disabled)]
public class AjaxController : Controller
{
}