hbase入门简介Hadoop的局限HBase应用场景HBase与NoSQL
hbase简介1 Hadoop大数据技术出现后,很多拥有海量数据的公司开始选择像Hadoop的方式来存储海量数据
Hadoop使用分布式文件系统HDFS来存储海量数据,并使用 MapReduce 来处理。Hadoop擅长于存储各种格式的庞大的数据,任意的格式甚至非结构化的处理2 Hadoop的局限Hadoop主要是实现批量数据的处理,并且通过顺序方式访问数据 要查找数据必须搜索整个数据集, 如果要进行随机读取数据,效率较低3 HBase 与 NoSQLNoSQL是一个通用术语,泛指一个数据库并不是使用SQL作为主要语言的非关系型数据库 HBase是BigTable的开源java版本。是建立在HDFS之上,提供高可靠性、高性能、列存储、可伸缩、实时读写NoSQL的数据库系统 HBase仅能通过主键(row key)和主键的range来检索数据,仅支持单行事务 主要用来存储结构化和半结构化的松散数据 Hbase查询数据功能很简单,不支持join等复杂操作,不支持复杂的事务(行级的事务),从技术上来说,HBase更像是一个「数据存储」而不是「数据库」,因为HBase缺少RDBMS中的许多特性,例如带类型的列、二级索引以及高级查询语言等 Hbase中支持的数据类型:byte[] 与Hadoop一样,Hbase目标主要依靠横向扩展,通过不断增加廉价的商用服务器,来增加存储和处理能力,例如,把集群从10个节点扩展到20个节点,存储能力和处理能力都会加倍 HBase中的表一般有这样的特点
大:一个表可以有上十亿行,上百万列
面向列:面向列(族)的存储和权限控制,列(族)独立检索
稀疏:对于为空(null)的列,并不占用存储空间,因此,表可以设计的非常稀疏4 HBase应用场景4.1 对象存储
不少的头条类、新闻类的的新闻、网页、图片存储在HBase之中,一些病毒公司的病毒库也是存储在HBase之中4.2 时序数据
HBase之上有OpenTSDB模块,可以满足时序类场景的需求4.3 推荐画像
用户画像,是一个比较大的稀疏矩阵,蚂蚁金服的风控就是构建在HBase之上4.4 时空数据
主要是轨迹、气象网格之类,滴滴打车的轨迹数据主要存在HBase之中,另外在技术所有大一点的数据量的车联网企业,数据都是存在HBase之中4.5 CubeDB OLAP
Kylin一个cube分析工具,底层的数据就是存储在HBase之中,不少客户自己基于离线计算构建cube存储在hbase之中,满足在线报表查询的需求4.6 消息/订单
在电信领域、银行领域,不少的订单查询底层的存储,另外不少通信、消息同步的应用构建在HBase之上4.7 Feeds流
典型的应用就是xx朋友圈类似的应用,用户可以随时发布新内容,评论、点赞。4.8 NewSQL
之上有Phoenix的插件,可以满足二级索引、SQL的需求,对接传统数据需要SQL非事务的需求4.9 其他存储爬虫数据
海量数据备份
短网址
…
防骗移动电信联通运营商限制境外骚扰电话方法近期频繁接收到网络电话诈骗及境外电话,小编整理拦截境外来电骚扰的方法分享给大家,国内三大运营商用户均适用。亲测有效!!!移动用户1。编辑短信KTFSR到10086,免费开通拦截功能
聊聊华为参股的科创板新股华为全资子公司哈勃投资连续收获了科创板ipo!科创板第一只思瑞浦是最牛的,一路上来拿过了科创板第一高价股,风光无限!第二只是灿勤科技,由于有思瑞浦前车,灿勤科技开盘走势也是可圈可点
极客简报iPhoneSE传言不止一款吉利魅族双向奔赴英伟达发布新一代亮机卡,春节返程票即将开售,一些虎年值得关注的科技年货。iPhoneSE3最早4月发布,造型已沿用近8年从去年开始,iPhoneSE的爆料就一直没有间断过,根据显示
擦窗何须自己动手?推荐5款性价比超高的擦窗机器人对于很多家庭,尤其是高层住户来说,擦窗是一件繁琐又危险的清洁任务。近年来,一款新型家电走进大众视野擦窗机器人,很好地解决擦窗难问题。接下来给大家推荐5款2000元以下的擦窗机器人,
门外汉买手机看跑分,懂行人更在意这4点,看懂也算半个内行人了尽管大家都在说跑分不重要,就连手机厂商的高管也是如此,但每一场发布会上我们还是会看到跑分的数据公布,甚至连用户也开始比拼跑分了,但其实只有门外汉才看重跑分,真正懂行的人更在意以下4
消费返利合法合规认定消费返利是作为一种商家临时促销手段。随着互联网技术的发展,出现的作为第三方借助互联网搭建平台以长期实现消费返利的电子商务,一直以来存在着争议。特别是近年来一些不法分子打着以消费返利
英特尔下重注帮美国半导体实现国内制造英特尔表示,它计划花费200亿美元在俄亥俄州利克县建造一个占地1000英亩的芯片制造厂。该公司表示,在未来十年内,它对这项工作的全部投资最终可能达到1000亿美元使其成为世界上最大
锂电池痛点深藏巨大商机随着我国双碳相关工作的推进,以及新能源汽车产销量的飙升,2021年的锂电池板块火了。在锂电池产业快速发展的同时,不时曝出的相关事故也引发人们的担忧。未来,锂电池储能应如何在确保安全
英特尔宣布建厂计划拟投资1000亿美元1月21日消息,英特尔宣布了在美国俄亥俄州建立大型芯片工厂的计划,该项目最初将包括两家芯片工厂,但在其1000英亩的土地上,其规模足以容纳8家芯片工厂。英特尔将在未来10年为该基地
平台要为骑手按下减速键两会看台每当我走在街上,时常被从不同方向飞奔而来的电动车吓了一跳又一跳。广东省政协十二届五次会议第一场委员通道开启,首位发言的省政协委员毕亚林关注的就是外卖小哥为抢时间拿生命送餐的
oracle查询表的信息列注释信息查询表的列信息alltabcolumns用户可访问的表列dbatabcolumns所有表列usertabcolumns当前用户所拥有的表列selectfromalltabcolum