Вы можете добавить имя класса в ячейки и затем использовать чистый CSS.Например:
<MultiGrid
{...this.state}
ref={this.grid}
cellRenderer={_cellRenderer}
columnWidth={_getColumnWidth}
columnCount={rows[0].length}
height={1024}
rowHeight={_getColumnHeight}
rowCount={rows.length}
width={width}
styleTopRightGrid={STYLE_TOP_RIGHT_GRID}/>
Как вы можете видеть, MultiGrid использует _cellRenderer, который:
const _cellRenderer = ({columnIndex, key, rowIndex, style}) => {
return(
<div className="cell">
{row[rowIndex][columnIndex]}
</div>
);
})
В вашем CSS вы можете просто добавить:
.cell:hover {
background-color: yellow;
}