Ozone作为Hadoop FileSystem的配置使用-白红宇

Ozone作为Hadoop FileSystem的配置使用

阅读量：397 次

发布时间：2019-03-05

本文共 1776 字，大约阅读时间需要 5 分钟。

Ozone FileSystem?Hadoop??????????

??Hadoop???????????Ozone?????K-V?????????????????????Hadoop??????Ozone???Hadoop???????HCFS????????????Job?Spark????FileSystem????????Ozone???K-V????????????????????Ozone??????????????Ozone FileSystem????????????

Ozone FileSystem??????????namespace???????bucket???????OzoneFileSystem???????bucket???????????????????Key????????

??????bucket?????Key??Value??????Key?

??????bucket?????Key??Value???Key?

??????????Key??????????testdir/????????testdir/testfile?

???????Ozone FileSystem???Hadoop FileSystem??????????????????????

???????????????????

??Hadoop????Hadoop-2.7???

??Hadoop???

??core-site.xml??????????


        
           
        
         fs.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.BasicOzoneFileSystem
          
         
           
        
         fs.AbstractFileSystem.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.OzFs
          
         
           
        
         fs.defaultFS
            
        
         o3fs://buckettest.volumetest

??hadoop-env.sh?????ClassPath???

export HADOOP_CLASSPATH=/home/hdfs/ozone/share/ozone/lib/hadoop-ozone-filesystem-lib-legacy-0.5.0-SNAPSHOT.jar:$HADOOP_CLASSPATH

???Ozone?????????volume?volumetest??bucket?buckettest?

?????????????

?????

hadoop fs -put testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/

?????

hadoop fs -mkdir o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/subdir

?????

hadoop fs -mv o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

hadoop fs -rm o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

???????Ozone FileSystem???????????????chown?setquota????????????

??????Ozone FileSystem???????????????????????????????

转载地址：http://ckng.baihongyu.com/

你可能感兴趣的文章

pipreqs : 无法将“pipreqs”项识别为 cmdlet、函数、脚本文件或可运行程序的名称。请检查名称的拼写，如果包括路径，请确保路径正确，然后再试一次。

PIP使用SSH从BitBucket安装自定义软件包，无需输入SSH密码

查看>>

pip命令提示unknow or unsupported command install解决方法

查看>>

pip在安装模块时提示Read timed out

查看>>

pip更换源

查看>>

SpringBoot之Banner源码深度分解

查看>>

Pix2Pix如何工作？

查看>>

QuickBI助你成为分析师——搞定数据源

查看>>

pkl来存储python字典

查看>>

quick sort | 快速排序 C++ 实现

查看>>

pkpmbs 建设工程质量监督系统 Ajax_operaFile.aspx 文件读取漏洞复现

查看>>

pkpmbs 建设工程质量监督系统文件上传漏洞复现

查看>>

pku 2400 Supervisor, Supervisee KM求最小权匹配+DFS回溯解集

查看>>

queue队列、deque双端队列和priority_queue优先队列

pl sql 的目录所在的目录不能有小括号，如 Program Files (x86)

查看>>