data-group icon indicating copy to clipboard operation
data-group copied to clipboard

数据更新频率比较高的需求适合用Hive吗,有什么比较好的解决方案?

Open dantezhao opened this issue 8 years ago • 7 comments

dantezhao avatar Mar 01 '18 06:03 dantezhao

Hive+ES || TiDB OK吗

RebieKong avatar Mar 01 '18 06:03 RebieKong

不适合,HBase适用于海量数据插入及更新需求

zhengzhuangjie avatar Mar 01 '18 06:03 zhengzhuangjie

用storm吧,可以做好毫秒级

AlanHand avatar Mar 01 '18 08:03 AlanHand

不适合,

shawnhoo007 avatar Mar 02 '18 01:03 shawnhoo007

hive不适合频繁更新的数据! 可以换一个思路,用hbase,基于版本号来按需进行处理 查询用phoenix可以查询最新的版本数据,响应时间可以达到毫秒级

hemaGitHub avatar Mar 02 '18 03:03 hemaGitHub

问题可以在详细点吗?比如说像点击流这样的实时数据更新.那么就得实时收集数据,实时计算数据,实时查询显示数据,这三者需要用到不同的技术才能处理

AlanHand avatar Mar 02 '18 08:03 AlanHand

不适合,Hive 适合数据量特别大,一次写入数据不再发生变动的场景

dengwanc avatar Aug 29 '19 11:08 dengwanc