`
Chrro
  • 浏览: 9435 次
  • 性别: Icon_minigender_1
  • 来自: 沈阳
社区版块
存档分类
最新评论

ceph-hadoop

 
阅读更多
1.安装ceph
2.添加hadoop-ceph.jar
3.hadoop 节点上安装ceph-client
4.ceph创建pool
   a)
    ceph osd pool create hadoop1 100
    ceph osd pool set hadoop1 size 1
   b)
     ceph osd dump | grep hadoop1
    $:pool 3 'hadoop1' rep size 1 min_size 1 crush_ruleset 0...
   c)
     ceph mds add_data_pool 3(pool's id)
   d)
    
5.修改hadoop下core-site.xml
  <property>
        <name>ceph.data.pools</name>
        <value>hadoop1</value>
  </property>
ps:
   hadoop-ceph 属性列表
----------------------------小--伙----伴-----------------------------


  • 大小: 189.3 KB
分享到:
评论

相关推荐

    CephFSHadoopPlugin.zip

    该项目是基于 Ceph 实现的 Hadoop FileSystem &#40;... installs custom HCFS jars for HADOOP-9361 finally runs the entire build, creates the jar, and runs unit tests. 标签:CephFS

    ceph上搭建hadoop

    用ceph替代hdfs跑mapreduce程序的配置过程

    hadoop-openstack-swifta:hadoop-openstack-swifta

    它可以嵌入到hadoop代码库的hadoop-openstack子模块中: : ,其方式与hadoop-aws s3a对s3n的增强: ://hadoop.apache.org/docs/stable/hadoop-aws/tools/hadoop-aws/index.html。 此代码库已经针对与Swift-API兼容...

    java8看不到源码-docker-spark-hive-zeppelin:docker-spark-hive-zeppelin

    java8 看不到源码docker-spark-hive-zeppelin 组件 Spark v.2.2.2 ...服务器,请将其添加到kubernetes/hadoop/dns/hadoop-dns-config.yaml文件中。 将外部 DNS 服务器部署到 cluser。 kubectl create -f

    RadosFs:用于 Hadoop 的 Ceph RADOS API

    雷达 Ceph RADOS 文件存储 API

    Hadoop GFS

    包含 Hadoop GFS MapReduce 的 多个PDF文档

    在配置SSH免密登录时报错:/usr/bin/ssh-copy-id: ERROR: failed to open ID file ‘/root/.pub’: 没有那个文件或目录

    [root@hadoop1 sbin]# ssh-copy-id hadoop1 /usr/bin/ssh-copy-id: ERROR: failed to open ID file '/root/.pub': 没有那个文件或目录 (to install the contents of '/root/.pub' anyway, look at the -f option) ...

    Alluxio分布式存储系统 v2.9.4

    2、兼容Hadoop HDFS的文件系统接口:基于这套接口Hadoop MapReduce和Spark可以使用Alluxio代替HDFS。 3、可插拔的底层存储:Alluxio支持将内存数据持久化到底层存储系统。Alluxio提供了通用接口以简化对接不同的底层...

    华为工程师总结linux笔记.pdf

    初级介绍基础命令等操作;中级包括:HTTP 协议 详解、...Puppet 自动化运维实战、Ansible 自动化运维实战、Jenkins 企业级自动化实战、企业 级高并发网站集群、Docker、K8S、Hadoop、Ceph、CI/CD、MQ、ZK、ETCD 等。

    华为工程师linux的笔记-第6章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第7章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第8章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第9章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第12章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第11章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第13章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第10章 .pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    A Guide to Porting C C++ to Rust 等53本

    Ceph 运维手册.epub Chromium中文文档.epub Databricks Spark 知识库.epub devops-collective-inc PowerShell.7z Docker Swarm 源码分析.epub Docker简明教程.epub FreeBSD 101 Hacks.epub Golang 101 hacks.epub ...

    华为工程师linux笔记-第1章.pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

    华为工程师linux的笔记-第2章 .pdf

    Linux性能优化、大数据量备份、Shell企业实战基础、Shell实战高级编程、自动化运维趋势、Puppet自动化运维实战、Ansible自动化运维实战、Jenkins企业级自动化实战、企业级高并发网站集群、Docker、K8S、Hadoop、Ceph...

Global site tag (gtag.js) - Google Analytics