舆情监控分析大数据存储案例
一、项目需求与挑战
信息高速发展,大众经常被戏称为吃瓜群众,不明真象。而舆情监控分析系统承担者国家社会安全稳定,保障社会治安综合治理和舆论引导的作用,达到不让谣言“引领”真相的目的。同时,在新时代的反恐中,舆情监控分析系统也成为重拳反恐的至关重要的一环。
当今社会人人可以充当信息发布源,人人都是信息传递者和接受者,信息量因此越来越巨大,而国内只有少数主体和权威机构可实施舆情监控,因此舆情监控分析是一项高难度且需求巨大的工程。
从技术角度来分析,舆情监控分析系统要求存储系统支持百亿级小文件的处理能力,涉及的存储数据包括相关的语音、图像、图片和文件等内容信息,对读写的IO性能要求也非常高。同时,海量小文件文件存储每隔一段时间就会被批量删除,要求存储空间能循环利用,对存储系统的高可用性也提出了挑战。
二、UIT解决方案
本项目是创新科击败了国内顶级竞争对手,协助权威机构提供舆情监控分析处系统的存储方案,从技术架构上、性能上突破传统存储瓶颈,既实现高性能实时同步数据处理,达到了百亿级的文件处理分析能力,满足了IO峰值要求又能实现存储空间的高速循环使用,满足了用户对舆情监控分析管理的性能和功能需要,帮助实现了舆情监测和风险预警等功能。
三、客户价值
创新科的大数据存储解决方案从技术架构上、性能上突破传统存储瓶颈,以易于管理和灵活升级等特点满足了数据的存储和管理的需求,同时,还为下阶段的数据挖掘等应用的扩展升级提供了开放的标准和接口,能够满足未来的业务规划和数据存储需求。