Excel использует значение кодовой страницы для идентификации набора символов, используемого в рабочей книге. По всей вероятности, для OEM иврита установлено значение 862 (CP862). Однако не все библиотеки читателей будут проверять используемую кодовую страницу (я не знаю о php-excel-reader) или конвертировать во что-то «универсальное», поэтому вам, вероятно, нужно использовать функции iconv () или mb_ *. конфертировать из CP862 в UTF-8.
$stringCellValue iconv ( 'CP862' , 'UTF-8' , $stringCellValue );