大数据分析

大数据分析
一、需求

        数据存放于数据库中,直接基于原有数据库查询分析,响应极慢,单次分析耗费十多分钟。且考虑到数据库如果要调优重启等,那数据分析也无法使用。

二、解决方案

        项目采用Spider引擎,将亿级以内的数据抽取到存储引擎中,进行查询计算。并依据数据中的时间戳,对数据实现增量更新,减小数据库的压力,缩短需要更新的时间。同时搭配其他数据库使用,实现多源业务数据的整合分析。

三、达成效果

        亿级以内数据量的分析由以往耗时10多分钟,提升到秒级响应。有效支撑平台上千名以上的用户分析。

电话咨询

  • 电话:0311-67368552