Вы можете использовать одинарные кавычки для инкапсуляции строки;поэтому ваша разметка должна выглядеть примерно так:
<SomeControl SomeProperty="{Wpf:MyExtension MyFirstParameter,
'MySecondParameter, being a string, containing some commas.'}" />
Я не уверен, понадобится ли вам также разметка escape-последовательности {}
.