Ozone作为Hadoop FileSystem的配置使用-白红宇

Ozone作为Hadoop FileSystem的配置使用

阅读量：397 次

发布时间：2019-03-05

本文共 1776 字，大约阅读时间需要 5 分钟。

Ozone FileSystem?Hadoop??????????

??Hadoop???????????Ozone?????K-V?????????????????????Hadoop??????Ozone???Hadoop???????HCFS????????????Job?Spark????FileSystem????????Ozone???K-V????????????????????Ozone??????????????Ozone FileSystem????????????

Ozone FileSystem??????????namespace???????bucket???????OzoneFileSystem???????bucket???????????????????Key????????

??????bucket?????Key??Value??????Key?

??????bucket?????Key??Value???Key?

??????????Key??????????testdir/????????testdir/testfile?

???????Ozone FileSystem???Hadoop FileSystem??????????????????????

???????????????????

??Hadoop????Hadoop-2.7???

??Hadoop???

??core-site.xml??????????


        
           
        
         fs.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.BasicOzoneFileSystem
          
         
           
        
         fs.AbstractFileSystem.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.OzFs
          
         
           
        
         fs.defaultFS
            
        
         o3fs://buckettest.volumetest

??hadoop-env.sh?????ClassPath???

export HADOOP_CLASSPATH=/home/hdfs/ozone/share/ozone/lib/hadoop-ozone-filesystem-lib-legacy-0.5.0-SNAPSHOT.jar:$HADOOP_CLASSPATH

???Ozone?????????volume?volumetest??bucket?buckettest?

?????????????

?????

hadoop fs -put testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/

?????

hadoop fs -mkdir o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/subdir

?????

hadoop fs -mv o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

hadoop fs -rm o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

???????Ozone FileSystem???????????????chown?setquota????????????

??????Ozone FileSystem???????????????????????????????

转载地址：http://ckng.baihongyu.com/

你可能感兴趣的文章

POSIX标准和XSI扩展

查看>>

post install error,please remove node_moules before retry

查看>>

PostGIS中获取所有EPSG的编码以及对应Proj4字符串

查看>>

PostGIS在Windows上的下载与安装

查看>>

postgis数据库优化_postgresql 性能优化

查看>>

Postgres Docker版本安装mysql_fdw 插件

查看>>

Postgres invalid command \N数据恢复处理

查看>>

Postgres like 模糊查询匹配集合

查看>>

Postgres 自定义函数内实现 in 操作符的递归查询

查看>>

Postgres 返回当前时间前后指定天数的集合

postgres10配置huge_pages

查看>>

PostgreSQL 10.0 preview 变化 - pg_xlog,pg_clog,pg_log目录更名为pg_wal,pg_xact,log

查看>>

PostgreSQL 10.1 手册_部分 II. SQL 语言_第 15章并行查询_15.2. 何时会用到并行查询？...

查看>>

PostgreSQL 10.1 手册_部分 II. SQL 语言_第 9 章函数和操作符_9.23. 行和数组比较

查看>>

PostgreSQL 10.1 手册_部分 III. 服务器管理_第 21 章数据库角色

查看>>

Postgresql 12.9如何配置允许远程连接

查看>>

PostgreSQL 9.6 同步多副本与 remote_apply事务同步级别应用场景分析

查看>>