Configuration conf =new Configuration(); conf.set(FileSystem.FS_DEFAULT_NAME_KEY, "hdfs://192.168.0.1:8020"); としないと、 java.lang.IllegalArgumentException: Wrong FS: hdfs://192.168.0.1:8020/***, expected: file:///でエラーになる。 スキー…

もし今サーバーがUnix系OSでJavaでRuntime.exec()を使おうと思っているなら、今すぐ別の方法を検討してください。後でとんでもない目にあいますよ。 http://d.hatena.ne.jp/Kazumi007/20090930/1254319746 とんでもない目にあいました。 実行系は、Linux JDK…

HDFSのPermissionと、HiveServerへのJDBC接続のuserをあわせる。

Hadoop 1.x系 Job job = new Job(conf, "jobName"); でJobを作った後に、 job.getConfiguration().set("name", "value"); で設定した値は、Mapperから読み取ることはできない。 new Jobする前に、 Configuration conf = new Configuration(); conf.set("a", …