Ozone作为Hadoop FileSystem的配置使用-白红宇

Ozone作为Hadoop FileSystem的配置使用

阅读量：397 次

发布时间：2019-03-05

本文共 1776 字，大约阅读时间需要 5 分钟。

Ozone FileSystem?Hadoop??????????

??Hadoop???????????Ozone?????K-V?????????????????????Hadoop??????Ozone???Hadoop???????HCFS????????????Job?Spark????FileSystem????????Ozone???K-V????????????????????Ozone??????????????Ozone FileSystem????????????

Ozone FileSystem??????????namespace???????bucket???????OzoneFileSystem???????bucket???????????????????Key????????

??????bucket?????Key??Value??????Key?

??????bucket?????Key??Value???Key?

??????????Key??????????testdir/????????testdir/testfile?

???????Ozone FileSystem???Hadoop FileSystem??????????????????????

???????????????????

??Hadoop????Hadoop-2.7???

??Hadoop???

??core-site.xml??????????


        
           
        
         fs.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.BasicOzoneFileSystem
          
         
           
        
         fs.AbstractFileSystem.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.OzFs
          
         
           
        
         fs.defaultFS
            
        
         o3fs://buckettest.volumetest

??hadoop-env.sh?????ClassPath???

export HADOOP_CLASSPATH=/home/hdfs/ozone/share/ozone/lib/hadoop-ozone-filesystem-lib-legacy-0.5.0-SNAPSHOT.jar:$HADOOP_CLASSPATH

???Ozone?????????volume?volumetest??bucket?buckettest?

?????????????

?????

hadoop fs -put testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/

?????

hadoop fs -mkdir o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/subdir

?????

hadoop fs -mv o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

hadoop fs -rm o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

???????Ozone FileSystem???????????????chown?setquota????????????

??????Ozone FileSystem???????????????????????????????

转载地址：http://ckng.baihongyu.com/

你可能感兴趣的文章

Python:如何从二进制转换为 base 64 并返回?

查看>>

Python:如何以非阻塞方式读取子进程的标准输出

查看>>

Python:如何使用 plotly 制作阴影区域或交替背景颜色?

查看>>

Python:如何根据日期时间获取值的计数

查看>>

python:如何检测串行 COM 上的设备名称/ID

查看>>

Python:如何模拟 datetime.utcnow()?

查看>>

Python:如果DataFrames之间的其他值匹配，则对DataFrame中的值求和

查看>>

Python:字典思维

查看>>

Python:将 HEX 字符串转换为字节

查看>>

Python:将列表与范围列表合并

查看>>

Python:将列表列表初始化为一定大小，

Python:爬取数据出现response.status_code为403解决方法

查看>>

Python:爬取数据出现response.status_code为418解决方法

查看>>

Python:生成“元组集“；来自“元组列表“；不考虑顺序

查看>>

Python:生成具有趋势的随机时间序列数据(例如周期性、指数衰减等)

查看>>

Python:用渐进式数字重命名列表中的重复项而不对列表进行排序

查看>>

Python:矩形参数无效

查看>>