Ozone作为Hadoop FileSystem的配置使用-白红宇

Ozone作为Hadoop FileSystem的配置使用

阅读量：397 次

发布时间：2019-03-05

本文共 1776 字，大约阅读时间需要 5 分钟。

Ozone FileSystem?Hadoop??????????

??Hadoop???????????Ozone?????K-V?????????????????????Hadoop??????Ozone???Hadoop???????HCFS????????????Job?Spark????FileSystem????????Ozone???K-V????????????????????Ozone??????????????Ozone FileSystem????????????

Ozone FileSystem??????????namespace???????bucket???????OzoneFileSystem???????bucket???????????????????Key????????

??????bucket?????Key??Value??????Key?

??????bucket?????Key??Value???Key?

??????????Key??????????testdir/????????testdir/testfile?

???????Ozone FileSystem???Hadoop FileSystem??????????????????????

???????????????????

??Hadoop????Hadoop-2.7???

??Hadoop???

??core-site.xml??????????


        
           
        
         fs.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.BasicOzoneFileSystem
          
         
           
        
         fs.AbstractFileSystem.o3fs.impl
            
        
         org.apache.hadoop.fs.ozone.OzFs
          
         
           
        
         fs.defaultFS
            
        
         o3fs://buckettest.volumetest

??hadoop-env.sh?????ClassPath???

export HADOOP_CLASSPATH=/home/hdfs/ozone/share/ozone/lib/hadoop-ozone-filesystem-lib-legacy-0.5.0-SNAPSHOT.jar:$HADOOP_CLASSPATH

???Ozone?????????volume?volumetest??bucket?buckettest?

?????????????

?????

hadoop fs -put testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/

?????

hadoop fs -mkdir o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testdir/subdir

?????

hadoop fs -mv o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

hadoop fs -rm o3fs://buckettest.volumetest.lyq-m2-xx.xx.xx.xx/testfile2

???????Ozone FileSystem???????????????chown?setquota????????????

??????Ozone FileSystem???????????????????????????????

转载地址：http://ckng.baihongyu.com/

你可能感兴趣的文章

OpenCV与AI深度学习 | 基于YOLO和EasyOCR从视频中识别车牌

查看>>

OpenCV与AI深度学习 | 基于图像处理的火焰检测算法（颜色+边缘）

查看>>

OpenCV与AI深度学习 | 基于拉普拉斯金字塔实现图像融合（步骤 + 代码）

查看>>

OpenCV与AI深度学习 | 基于机器视觉的磁瓦表面缺陷检测方案

查看>>

OpenCV与AI深度学习 | 基于深度学习的轮胎缺陷检测系统

查看>>

OpenCV与AI深度学习 | 如何使用YOLOv9分割图像中的对象

查看>>

OpenCV与AI深度学习 | 如何使用YOLOv9检测图片和视频中的目标

查看>>

OpenCV与AI深度学习 | 如何在 Docker 容器中使用 GPU

查看>>

OpenCV与AI深度学习 | 实战 | OpenCV中更稳更快的找圆方法--EdgeDrawing使用演示（详细步骤 + 代码）

查看>>

OpenCV与AI深度学习 | 实战 | OpenCV传统方法实现密集圆形分割与计数(详细步骤 + 代码)

查看>>

OpenCV与AI深度学习 | 实战 | OpenCV实现扫描文本矫正应用与实现详解(附源码)

查看>>

OpenCV与AI深度学习 | 实战 | 使用OpenCV和Streamlit搭建虚拟化妆应用程序（附源码）

查看>>

OpenCV与AI深度学习 | 实战 | 使用OpenCV确定对象的方向(附源码)

查看>>

OpenCV与AI深度学习 | 实战 | 使用YOLOv8 Pose实现瑜伽姿势识别

查看>>

OpenCV与AI深度学习 | 实战 | 使用YoloV8实例分割识别猪的姿态（含数据集）

查看>>

OpenCV与AI深度学习 | 实战 | 使用姿态估计算法构建简单的健身训练辅助应用程序

查看>>

OpenCV与AI深度学习 | 实战 | 基于OpenCV和K-Means聚类实现颜色分割（步骤 + 代码）

查看>>

OpenCV与AI深度学习 | 实战 | 基于YoloV5和Mask RCNN实现汽车表面划痕检测(步骤 + 代码)

查看>>

OpenCV与AI深度学习 | 实战 | 基于YOLOv9+SAM实现动态目标检测和分割（步骤 + 代码）

查看>>

OpenCV与AI深度学习 | 实战 | 基于YOLOv9和OpenCV实现车辆跟踪计数（步骤 + 源码）

查看>>