V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
Kamitora
V2EX  ›  问与答

开发时连接远程服务器 HDFS, 本地也需要安装 Hadoop 吗?

  •  1
     
  •   Kamitora · 2019-07-27 17:32:52 +08:00 · 1309 次点击
    这是一个创建于 1979 天前的主题,其中的信息可能已经有所发展或是发生改变。
    17:15:18.025 [main] DEBUG org.apache.hadoop.util.Shell - Failed to detect a valid hadoop home directory
    java.io.FileNotFoundException: HADOOP_HOME and hadoop.home.dir are unset.
    

    随后就是几块关于 Connection Refused 的信息

    1 条回复    2019-07-28 12:13:11 +08:00
    zsam
        1
    zsam  
       2019-07-28 12:13:11 +08:00
    windows 的话,需要配 path,需要用到专门编译的 hdfs 客户端。你搜一下 winutils,git-hub: https://github.com/steveloughran/winutils
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3498 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 10:45 · PVG 18:45 · LAX 02:45 · JFK 05:45
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.