范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

CentOS,大数据集群搭建,HBase数据模型,HBase集群搭建及管理

  Hbase介绍
  HBase定义
  HBase是以HDFS为数据存储的一种分布式、可扩展的NoSQL数据库。
  HBase数据模型
  Hbase的设计理念依据是Google的BigTable论文,论文中的介绍:BigTable是一个稀疏的、分布式的、持久的多维排序Map。
  Base 数据模型主要由table、row、column、timestamp、cell几个元素构成。
  table——表
  一个表可能包含多行数据,表其实是一个分布式的表,真正的数据是存储在Region中的,Region可以理解为分片,每个表会包含多个分片,分别由不同的RegionServer管理,每个分片会有多个副本,以实现分片的高可用。
  row——行
  一行数据包含唯一的rowkey,多个column及对应的值,一张表中所有row都按照rowkey的字典顺序由小到大排列;因为数据在Region上的分布也与rowkey相关,所以在存储数据时,设计合理的rowkey使得数据尽可能在Region上分布均匀,在查询数据时就不会出现一个RegionServer负载过高,而其它RegionServer负载较低的情况。
  column——列
  列与关系型数据的列不同,HBase中的column由column family(列簇)和 qualifier(列)组成。两者之间使用 ":" 相连,一个列簇下可以有多个列。
  cell——单元格
  单元格由五元组(rowkey、column、timestamp、type、value)组成,其中type标识操作的类型(Put/Delete)这样的操作类型,在HBase底层以KV形式存储,key为(rowkey、column、timestamp、type),值为value。
  timestamp——时间戳
  每个单元格在写入HBase时都默认分配一个时间戳,作为单元格的版本,在写入时也可以自带时间戳,HBase支持多版本特性,同一个rowkey、column下可以有多个value存在,这些value使用timestamp作为版本号,版本号越大,数据越新。Hbase安装
  前置条件
  安装环境:操作系统为CentOS,已配置免密登录,已配置Java环境变量,已安装Hadoop。
  参考:Hadoop集群搭建、操作HDFS文件系统、Zookeeper集群安装搭建。
  安装介质:hbase-2.0.5-bin.tar.gz,地址:https://hbase.apache.org/
  安装服务器:node51(192.168.2.51),node52(192.168.2.52),node53(192.168.2.53)。
  上传安装介质并解压(node51) tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module/ cd /opt/module mv hbase-2.0.5 hbase
  环境变量: sudo vim /etc/profile.d/my_env.sh #配置环境变量 #HBASE_HOME export HBASE_HOME=/opt/module/hbase export PATH=$PATH:$HBASE_HOME/bin  #执行使环境变量生效 source /etc/profile echo $HBASE_HOME
  配置(hbase-env.sh): #备份一下: cd $HBASE_HOME/conf cp hbase-env.sh hbase-env.sh.bak cp hbase-site.xml hbase-site.xml.bak  # vim hbase-env.sh : export HBASE_MANAGES_ZK=false
  配置(vim hbase-site.xml): <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>                    hbase.cluster.distributed         true                        hbase.rootdir         hdfs://node53:8020/hbase                        hbase.zookeeper.quorum         node53,node54,node55                        hbase.zookeeper.property.clientPort         2181                        zookeeper.session.timeout         120000      
  配置(vim regionservers): node53 node54 node55
  分发到其它服务器节点: xsync.sh hbase
  Hbase启停 单点启动: bin/hbase-daemon.sh start master bin/hbase-daemon.sh start regionservers 注:启动前先保证 hadoop和zookeeper。  集群启停: bin/start-hbase.sh  bin/stop-hbase.sh  注:启动后的进程HRegionServer,其中node55多了一个HMaster进程。
  Web访问:http://node53:16010/
  进入命令行 bin/hbase shell  help
  管理脚本(hbased.sh) #!/bin/bash  if [ $# -lt 1 ] then 	echo "没有参数: 传入参数为: start、stop" fi  case $1 in "start") 	ssh node55 "/opt/module/hbase/bin/start-hbase.sh" ;; "stop") 	ssh node55 "/opt/module/hbase/bin/stop-hbase.sh" ;; esac

不装了,内马尔又出争议决定!大巴黎成冤大头,姆巴佩拿他没办法最近皮克举办的国王杯7人制比赛热度也相当高,而最新的宣传片中大家也可以看到了一个相当让人意外的身影。那就是效力于大巴黎的现役球星内马尔了,在这次精心准备的宣传片中。内马尔在镜头前面潘顿莫雷拉澳洲赛场再相见!当地时间4月1日,澳洲锦标赛事系列首日唐加士打一哩赛日10场赛事即将于悉尼兰域马场举行,以中国香港为策骑基地的五届香港冠军骑师潘顿届时将返回澳洲出赛,预计他将会搭档乐观派和2022别的小孩来抢自己孩子手里的公共玩具,你该怎么办?这位妈妈,您好!看到您说的这件事情以后,我非常能理解你的心情。有别的孩子来抢自己孩子手上的玩具,当您和他讲道理的时候,孩子并不听,而且还哭起来,如果此时那位孩子的家长看到孩子在哭,怀孕40天b超能看到吗?怀孕40天b超能看到吗月经周期为2830天的女性,一般经腹超声在停经56周,经阴道超声在停经45周即可检出妊娠囊,并据妊娠囊着床位置,判断是宫内还是宫外,停经6周时,可见到胚芽及心一首诗歌的优劣是普罗大众说了算?还是专家学者说了算?既然敢写诗敢发表,我想一般作者的想法是普罗大众和专家学者都可以说优劣,但最终是由下一代或者说后人说了算。我相信后人会比现在的人聪明,好的东西,自会流传,坏的东西,也自会遗臭。如果对在窦文涛的节目里,为什么能经常看到马未都?总体来说,二者都有一定知名度,一起主持节目,双赢。窦文涛是学新闻出身,自1998年在凤凰台主持铿铿三人行,以其独有嗓音轻松谦逊的有点雅癖的风格,为大众熟知,多次获业内奖,后主持圆桌2场4球,C罗有望夺回老大!新帅赛后采访,短短9字令B费心灰意冷在本场比赛葡萄牙国家队60战胜了卢森堡之后,葡萄牙国家队目前也是迎来了两连胜。球队两场比赛狂轰了10球,而C罗本人也是两场比赛打入了4球,整体状态相当不错,而且C罗虽然没有得到队友足坛反腐多人落网,贾秀全朱广沪能全身而退吗?近日,随着中国足球反腐打假足协主席秘书长国管部部长竞赛部部长纪委会主任国足主教练纷纷落网,中国足坛内部已经彻底刮起狂飙的反贪风暴。贾秀全和朱广沪能全身而退吗?贾秀全和朱广沪在上次反作为教练范志毅会受牵连吗?陈戌源上港时曾买下崇明基地两批青训李铁被带走调查的时候,我们就知道肯定会有更多人被查,足协主席秘书长国管部部长竞赛部部长纪委会主任相继落网,意味着中国足坛内部已经彻底刮起狂飙的反贪风暴。陈戌源在上海海港期间主政期间3月27日中残局测试上期答案如图形势,红方先弃一子,再捉双得回失子时,黑方及时弃还一子,展开了有效的反击手段,使红方的先弃后取手段归于失败。黑先1。炮3平2平炮取势,弃还一子,果断之着。2车三平二因黑欧洲足坛疯狂一夜70头条创作挑战赛北京时间3月26日欧洲杯预选赛小组赛地轮继续展开较量,世界排名第5的英格兰大战第26的乌克兰世界排名第115的哈萨克斯坦挑战世界排名第18的丹麦,接下来我们就来看看两
你有洗菊花的习惯吗?这样做有什么好处?一起了解一下菊花又称肛门,洗肛门是一种很早就有的保健方法,它可以帮助预防肛门疾病,促进肛门健康。洗肛门不仅可以减少患肛门疾病的风险,还有助于改善肛门周围的血液循环,改善肛门的整体健康。肛门的作打好助企纾困组合拳推动产业高质量发展1月13日,在天目医药港医药产业孵化园的一家生物科技有限公司的实验室里,工作人员在进行实验。近年来,浙江省杭州市临安区锦南新城管委会着力培育生物医药产业链条,聚力打造集研发孵化加速隆基绿能告别高增长时代盘点一下近期势头最猛的新能源公司,那隆基绿能必须榜上有名。他几乎占全了天时地利人和的优势。先是有外媒放出消息白宫将宣布两年内不会对太阳能进口征收任何新关税。紧接着,拜登动用行政命令爆款来袭!抚仙湖华美达广场酒店年味主题年夜饭上新啦来源昆明日报掌上春城掌上春城讯抚仙湖华美达广场酒店坐落于依山傍海的城市澄江市,酒店毗邻市中心主干樱花大道,距离汽车客运站医院超市仅10分钟路程。夜晚的灯光,照亮了整座酒店,四周的椰刚刚!3倍牛股闪崩跌停,多只暴涨股大跌!猪肉板块突然爆发,发生了什么?今日早盘,A股再度上攻,白马股表现相对强势,上证50沪深300指数再创阶段性新高。两市成交受节日效应影响依旧低迷,并有进一步缩量的趋势。盘面上,节日消费相关板块活跃,猪肉鸡肉白酒酒世卫替日韩出头,建议隔离感染者10天,港府反制暂停进口韩商品近日美国务院发言人普莱斯声称,由于中国国内的疫情仍在蔓延,以及中方分享的病例病毒数据不够公开透明,因此美将要求中国旅美游客,在出发之前接受核酸检测。对于美方进一步的歧视性举措,中方爸爸软弱的家庭,后来怎么样了?专家儿女以后的人生往往会糟糕看到一篇文章,引起了小编的思考,小编觉得专家的话有些片面有些绝对,但可能也有一些道理。来源网络专家爸爸软弱的家庭,十有八九后来会变得比较糟糕。任何一个家庭,只要爸爸出事就往厕所走,内蒙古政协委员刘德建议实施骆驼产业振兴工程提升绿色富农产业辐射带动效应中国经济导报中国发展网齐英杰义博记者梁喜俊报道近年来,内蒙古突出特色资源优势,积极打造骆驼产业高地,全面推进乡村振兴,呈现出绿色富农产业蓬勃发展农牧民稳定增收的良好发展态势。聚焦农今日聊聊网红的甘草干姜汤甘草干姜汤出自伤寒论,属温阳之剂,具有益气和中温中复阳温肺暖胃的功效。健脾和胃补气养血止咳平喘等功效与作用。姜可以刺激人体的免疫系统,能够镇咳退烧减轻疼痛,还能有效抑制疾病。姜是一阳后总是感觉气血虚?一张补气血最全面的方子,今天细细品味最近大家都经历了感染新冠的情况,就有很多朋友跟我说,这阳了之后,已经康复了,但是总是会感觉提不上劲,上班还没一会就感觉累,干啥都没有兴趣,这是怎么回事呢?这就证明经历过感染后,大家中医治疗心血管疾病验方瓜蒌薤白半夏汤冠心病心绞痛是秋冬季节的多发病,因为随着气温的下降,血管的收缩血黏稠度的增加等因素,都是冠心病发作的重要诱因,冠心病属中医胸痹范畴。其病因多为思虑过度劳伤心脾饮食不节痰饮内生情志不