Ozone作为Hadoop FileSystem的配置使用-白红宇

Ozone作为Hadoop FileSystem的配置使用

阅读量：397 次

发布时间：2019-03-05

本文共 1776 字，大约阅读时间需要 5 分钟。

Ozone FileSystem?Hadoop??????????

??Hadoop???????????Ozone?????K-V?????????????????????Hadoop??????Ozone???Hadoop???????HCFS????????????Job?Spark????FileSystem????????Ozone???K-V????????????????????Ozone??????????????Ozone FileSystem????????????

Ozone FileSystem??????????namespace???????bucket???????OzoneFileSystem???????bucket???????????????????Key????????

??????bucket?????Key??Value??????Key?

??????bucket?????Key??Value???Key?

??????????Key??????????testdir/????????testdir/testfile?

???????Ozone FileSystem???Hadoop FileSystem??????????????????????

???????????????????

??Hadoop????Hadoop-2.7???

??Hadoop???

??core-site.xml??????????


        
           
        
         fs.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.BasicOzoneFileSystem
          
         
           
        
         fs.AbstractFileSystem.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.OzFs
          
         
           
        
         fs.defaultFS
            
        
         o3fs://buckettest.volumetest

??hadoop-env.sh?????ClassPath???

export HADOOP_CLASSPATH=/home/hdfs/ozone/share/ozone/lib/hadoop-ozone-filesystem-lib-legacy-0.5.0-SNAPSHOT.jar:$HADOOP_CLASSPATH

???Ozone?????????volume?volumetest??bucket?buckettest?

?????????????

?????

hadoop fs -put testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/

?????

hadoop fs -mkdir o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/subdir

?????

hadoop fs -mv o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

hadoop fs -rm o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

???????Ozone FileSystem???????????????chown?setquota????????????

??????Ozone FileSystem???????????????????????????????

转载地址：http://ckng.baihongyu.com/

你可能感兴趣的文章

Plotly-Dash 存在未知问题并创建“加载依赖项时出错“；通过使用 Python-pandas.date_range

查看>>

Plotly-Dash:如何过滤具有多个数据框列的仪表板?

查看>>

Plotly:如何为 x 轴上的时间序列设置主要刻度线/网格线的值?

查看>>

Plotly:如何从 x 轴删除空日期?

查看>>

Plotly:如何从单条迹线制作堆积条形图?

查看>>

Plotly:如何以 Root 样式绘制直方图，仅显示直方图的轮廓?

查看>>

Plotly:如何使用 Plotly Express 组合散点图和线图?

查看>>

Plotly:如何使用 plotly.graph_objects 和 plotly.express 定义图形中的颜色?

查看>>

Plotly:如何使用 Python 对绘图对象条形图进行颜色编码?

查看>>

Plotly:如何使用 updatemenus 更新一个特定的跟踪?

查看>>

Plotly:如何使用长格式或宽格式的 pandas 数据框制作线图?

查看>>

Plotly:如何向烛台图添加交易量

查看>>

Plotly:如何在 plotly express 中找到趋势线的系数?

查看>>

Plotly:如何在桑基图中设置节点位置?

查看>>

Plotly:如何处理重叠的颜色条和图例?

查看>>

Plotly:如何手动设置 plotly express 散点图中点的颜色?

查看>>

Plotly:如何结合 make_subplots() 和 ff.create_distplot()?

查看>>

Plotly:如何绘制累积的“步骤“；直方图?

查看>>

Quartz进一步学习与使用

查看>>

Plotly条形图-根据正/负值更改颜色-python

查看>>