要将hdfs中的文件下载到本地,可以使用以下方法: 使用hadoop fs命令: hadoop fs -get hdfs://&
要将hdfs中的文件下载到本地,可以使用以下方法:
hadoop fs -get hdfs://<HDFS文件路径> <本地文件路径>
例如:
hadoop fs -get hdfs://localhost:9000/user/test.txt /tmp/test.txt
hadoop distcp hdfs://<HDFS文件路径> file://<本地文件路径>
例如:
hadoop distcp hdfs://localhost:9000/user/test.txt file:///tmp/test.txt
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
public class HDFSDownload {
public static void main(String[] args) {
try {
Configuration conf = new Configuration();
FileSystem fs = FileSystem.get(conf);
Path hdfsFilePath = new Path("hdfs://localhost:9000/user/test.txt");
Path localFilePath = new Path("/tmp/test.txt");
fs.copyToLocalFile(hdfsFilePath, localFilePath);
} catch (Exception e) {
e.printStackTrace();
}
}
}
--结束END--
本文标题: hdfs下载文件到本地的方法是什么
本文链接: https://lsjlt.com/news/589894.html(转载时请注明来源链接)
有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
2024-05-24
回答
回答
回答
回答
回答
回答
回答
回答
回答
回答
0