UIAlertView имеет метод, который называется:
- ( void )dismissWithClickedButtonIndex: ( NSInteger )buttonIndex animated:( BOOL )animated
Вы можете вызвать его в своем объекте UIAlertView для имитации нажатия кнопки.
Чтобы автоматически отключить его через некоторое время, вам понадобится что-то вроде NSTimer, чтобы проверить, все ли отображается представление предупреждений, и в таком случае отклоните его.