阅读背景:

上传--下载HDFS文件并指定文件物理块的大小

来源:互联网 

使用hdfs的api接口分别实现从本地上传文件到集群和从集群下载文件到本地。

1)上传文件主要是使用FileSystem类的copyFromLocalFile()方法来实现,另外我们上传文件时可以指定以多大的物理块来存储此文件,使用conf.set("dfs.block.size","8388608")设置物理块大小是8M,此方法第二个参数的单位是字节。另外编译此代码除了需要使用hadoop-core-1.2.1.jar,还需要使用1)上传文件




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: