Да, это, конечно, возможно. (Это одно из основных свойств матрицы, это изменяемая структура данных. То есть ее записи могут быть изменены.)
Если вы присвоили матрицу имени A, то вы можете изменить запись в 4-й строке и 5-м столбце с помощью обычного назначения:
A[4,5] := 17.34;
Подробнее о работе с матрицами, векторами и массивами см. На странице справки rtable_indexing
Обратите внимание, что Matrix отличается от matrix, последний из которых теперь устарел.