Я просто сделал это так:
// Add listener to window on DOM ready to replace close icon with something else.
google.maps.event.addListener(infoWindow,'domready',function(){
var newImage = $('<img src="path/to/img"/>');
$(".gm-style-iw").next("div").html( newImage );
});