Вы тоже храните IP-адреса в списке? Если вы хотите показать только имя пользователя или что-то подобное в списке, вы должны хранить ip-адреса пользователей где-то еще, вероятно, словарь, когда вы добавляете пользователя в список:
var addresses = new Dictionary<string, string>();
addresses.Add("username", "127.0.0.1");
listBox.Add("username");
Для получения IP-адреса вы можете использовать:
var ipAdress = addresses[listBox.SelectedItem.Text]; // you should check for listbox.SelectedItem == null befor trying to access .Text!
(Примеры кода быстрые и грязные; не проверены).