Redis传统数据库HBase以及Hive的区别
在大数据相关行业的面试中,经常会被问到这个问题:Redis、传统数据库、HBase以及Hive的区别。
本文将针对这个面试问题,做以下分析: 1.问题分析
面试官考核的是你对不同数据存储技术的理解和应用,概念和特性都需要回答。同时可以延伸到业务场景,考察面试者在项目实战中不同服务如何区分配合使用。2.核心问题回答
Redis
分布式缓存,基于内存,强调缓存,支持数据持久化,支持事务操作,NoSQL 类型的Key/vale数据库,同时支持List、Set等更丰富的类型。
HBase
HBase是建立在HDFS之上,提供高可靠性的列存储,实时读写的数据库系统。它介于Nosql和关系型数据库之间,仅通过主键和主键的range来检索数据,仅支持单行事务。主要用来存储非结构化和半结构化的松散数据。
关系数据库
有mysql、Oracle、SqlServer等,支持事务性操作,属于写模式,即写入数据时进行检查。它是针对具体业务在数据库联机的日常操作,通常对少数记录进行查询、修改。支持完善的sql功能,可以对少量数据进行统计分析。
Hive
Hive是基于Hadoop的数据仓库工具,可以将结构化数据文件映射为数据库表。并提供简单的sql功能,可以将sql转化为mr任务运行。因为sql学习成本低,不必专门开发mr应用,十分适合数据仓库的统计分析。 3.区别
这里可以分为两大类:关系型数据和Hive都是支持SQL引擎的数据库;Redis和Hbase都是NoSQL 类型的Key/vale数据库,支持简单的行列操作,不支持SQL引擎。
SQL类数据库中,关系型数据库更侧重于事务性操作,属于写模式,支持的数据量较小,支持索引延迟低;而Hive更侧重于查询分析操作,属于读模式,不支持索引延迟高,支持的数据量大,为数据仓库而设计。
K/V数据库中,Redis的读写性能更高,通常是几十微秒,而Hbase是几毫秒;Redis不仅支持K/V操作,也支持List、Set等更丰富的类型;Redis因为存储在内存中所以数据量较小,而Hbase的存储远远超出内存的大小。HBase适合做大数据的持久存储,而Redis比较适合做缓存。 4.问题扩展
类似的存储服务特别多,除此之外还有es和solr等等。需要先答出两种存储服务的概念,再根据核心功能,特性的不同答出两者区别。5.结合项目中的使用
在哪种场景下,使用哪种技术。传统数据库用来进行实时业务的事务处理,Redis用来做性能要求很高的实时缓存,Hive可以用来进行离线统计查询,HBase可以用来做历史数据的固化和快速查询。当然,他们是可以配合使用的。
帮祖宗立碑的事老王从租屋出来,手机响短信,是他的老婆在群里,发聊天,说她们正在一起吃饭呢。老王摸出手机,口对微信,发语音,说知道了。我拿老王开玩笑,说他的老婆,又想他了。老王在城里,他的老婆现在
听老乡,说一夜他儿子掉光的头发听说老乡,说大儿子,一夜掉光头发的事,我一听讶然,问为什么?老乡说他的三十岁儿子,一夜之间,他前额的头发,一抓一大把,掉光了?现在的人啦,生活压力大,儿子一看大把地掉头发,顾及形象
第三的儿子,叫落小雨有一户姓落的人家,住在繁华的小城,给三个儿子,分别取了有趣的名字,给第一个儿子,叫大雨。日子后,邻居们猜测这一家父母,她也许生育儿子的那一刻,正好碰上外面下大雨吧?这个母亲一听,辟
我帮儿子取名,叫汤平我这个男人,晚婚晚育,最近我的妻子,生下了孩子。望上孩子长的活泼可爱,一晃过去4个月,给孩子取名字,提上家庭的日程?我的父母亲,老婆,包括我,也许给小孩,早己物色了一个名字?但是,
在城里少了乡情,忽疏了亲情象我们多年来自遥远乡村的打工者,在城市中生活,己经把城市当第二个故乡,踩过这一个城市的砖砖互瓦,熟悉城市的角角落落。如今我在城里,看到很多家乡一带来的人,听到他说起家乡人的口音,对
阿大回了一趟老家,0K阿大这个六十几多的老宝宝,他在城里打工多年,一天想从广东回到湖南乡下的老家。听一听他这一趟的心得。现在正是防疫时期,阿大以为这一趟返回老家,会遇到扫二维码,核酸检查,居家隔离等?他
随我看一看城里的小风景每当我在城里找到一点活,会接触到陌生人,和一些世故,你随我看一看这些城里的小风景。这一天,一位四十岁,还不显老的一位美容院的女店主,一边打着电话,一边走来,她打完电话后,和我说帮她
儿子硕士毕业带回一个男朋友,爸妈能接受吗?小凯成绩优异,考上了985高校,6年的努力迎来了硕士毕业,之后就和男朋友开启了愉悦的同居生活,男朋友在深圳工作,他也选择了留在深圳。另一位女生,父母公务员,从小家教比较严,所以她一
中学校长儿子高考移民,给我们怎样的警示?近期,国内一位著名中学的校长儿子赴西藏报名高考一事引发热议,有人发帖举报其是高考移民。经调查,该校长儿子的户籍确实在藏但其父援藏未满三年,已取消其报考资格。身为国内超级中学的校长,
我们真的拿黑飞没办法?今年年初以来,全国各地发生多起无人机干扰民航飞机正常起降的事件,包括以下几起4月14日到4月30日,成都双流机场在17天内发生9起无人机扰乱机场秩序事件,引起大量航班延误。5月1日
品牌的黄金时期已来!世林钜豪欧曼等照明灯饰品牌如何出圈?综观世界强国的崛起,都是以强大的制造业为支撑的。随着过去十几二十年的发展,中国供应链积累了从低价到优质制造到智造的改变,无论产品的研发能力产品工艺,还是产品品质都得到了大幅度的提高