Вы не можете напрямую конвертировать argb в YUV (без потерь), поскольку YUV не содержит альфа-информации.
В зависимости от того, что вы хотите сделать с цветом после того, как у вас появятся следующие возможности:
вы просто вырезаете альфа и отбрасываете прозрачность
вы конвертируете в AYUV, который также содержит альфа-канал
преобразование между цветовыми пространствами
Одна возможность преобразовать растровое изображение в байт [] - записать его в поток памяти и прочитать его кусочно.
MemoryStream stream = new MemoryStream();
bitmap.Save(stream, ImageFormat.Bmp);
byte[] data = stream.ToArray();