Ну, вам не нужно писать какой-либо Java-код для этого ... просто установите Nutch и все готово. Однако вам следует установить Nutch 1.2, который является автономным.
С Nutch1.3 вам нужно установить hadoop самостоятельно, а также установить & пользователя Solr для веб-поиска.