В общем, если вам нужно отписаться от события, я бы порекомендовал не использовать лямбду, как это, и вместо этого использовать стандартный метод.но для отписки нужно хранить ссылку на него.Если вам необходимо отписаться от анонимного метода, как минимум, вы должны сохранить делегат в переменной, чтобы удалить его позже:
Dim subscription = Sub()
' ...
End Sub
AddHandler MyClass.MyEvent, subscription
' Later
RemoveHandler MyClass.MyEvent, subscription