Возможно, если вы сможете получить их участие - им понадобится clientaccesspolicy.xml или crossdomain.xml, который разрешает доступ вашему домену хостинга (или всем доменам).Без этого вы в значительной степени не можете использовать прямой доступ из Silverlight без повышенного доверия.
Тем не менее, вы можете легко получить сервер, на котором находится ваш Silverlight xap, для установления исходящего соединения черезвызов службы, затем прокси результат обратно клиенту Silverlight.