Недопустимый символ в авторитете в индексе 7: hdfs: // localhost: 9000 с hadoop - PullRequest
1 голос
/ 16 декабря 2011

Я пытаюсь подключиться к hdfs.

Configuration configuration = new Configuration();
configuration.set("fs.default.name", this.hdfsHost);
fs = FileSystem.get(configuration);

hdfsHost равен 127.0.0.1:9000.

, но получите это исключение в FileSystem.get ();

У меня есть другой проект с тем же кодом, но он работает хорошо.Кто-нибудь может дать какие-либо предложения?Большое спасибо

трек исключений:

Exception in thread "main" java.lang.IllegalArgumentException
at java.net.URI.create(URI.java:842)
at org.apache.hadoop.fs.FileSystem.getDefaultUri(FileSystem.java:103)
at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:95)
at TransferToHadoop.TransferFiles.<init>(TransferFiles.java:50)             
at.TransferToHadoop.ScheduleTransferJobs.getTransferFiles(ScheduleTransferJobs.java:99)
at .TransferToHadoop.ScheduleTransferJobs.main(ScheduleTransferJobs.java:30)
 Caused by: java.net.URISyntaxException: Illegal character in authority at index 7: hdfs://localhost:9000  
at java.net.URI$Parser.fail(URI.java:2809)
at java.net.URI$Parser.parseAuthority(URI.java:3147)
at java.net.URI$Parser.parseHierarchical(URI.java:3058)
at java.net.URI$Parser.parse(URI.java:3014)
at java.net.URI.<init>(URI.java:578)
at java.net.URI.create(URI.java:840)
... 5 more

Ответы [ 3 ]

3 голосов
/ 16 декабря 2011

Попробуйте передать hdfsHost в качестве квалифицированного URL hdfs: //127.0.0.1: 9000 вместо 127.0.0.1:9000

2 голосов
/ 03 октября 2015

Это может произойти, если в файле core-site.xml имеется пробел в конце относительно значения свойства для имени hdfs (fs.defaultFS).

0 голосов
/ 27 марта 2015

Свяжите имя хоста с соответствующим ip на обоих серверах, т.е. в клиенте и сервере в файле / etc / hosts

...