JIMODB大数据舆情分析应用案例

案例概述

　　1、客户工作面临的挑战

　　目前社交网络飞速发展，而伴随其产生的就是各种各样的呈爆炸式增长的多媒体信息数据，如微博，微信，Email数据等。对来处互联网的非结构化数据中隐含的舆情信息进行提炼和分析，了解当前社会舆情的热点与趋势，是当前社会安全与信息安全发展的一个重要方向。提高舆情安全监控水平的关键，在于对数据的加工，进而实现数据的增值。这就要求分析人员提高对信息的鉴别力、萃取力、掌控力，对数据进行生产、分析和解读，探索一条为用户提供分众化服务的信息增值之路。

　　2、JimoDB解决方案

　　JimoDB是上海晟淘独立研发、拥有完全独立自主知识产权的新型NoSQL实时智能大数据平台和大数据完整解决方案。JimoDB做为分布式的大数据库，可以将原始文档原封不动在进行存储并对原始数据进行分析。目前客户已经有现成的数据采集模块，每天可以自动从互联网上采集微博数据。本次实施的项目主要是通过已有的数据收集模块将所需信息实时收集到私有云的数据中心上，同时利用JimoDB高性能的非结构数据分析处理引擎进行深层次的数据挖掘与分析，用于提供商业咨询服务。

JimoDB方案说明

　　1、方案配置

　　根据客户的存储及查询量的需求，我们最终为用户设计了4台x86 pc server构建JimoDB大数据平台，每台机器10TB存储空间，48GB内存，8核CPU。设计存储容量为40TB，总体硬件成本为20w RMB。

　　2、承载业务

　　JimoDB社交多媒体信息安全监控系统利用舆情分析引擎，快速处理微博热点话题，敏感话题，并利用关键字布控和语义分析识别敏感话题。分析上网者的倾向性并进行统计。自动的主题跟踪，摘要汇总。突发事件分析，敏感预警等功能。

经验与收获

　　JimoDB的高性能数据存储、非结构数据处理、无共享点技术、快速查询与快速统计等功能，使得舆情分析的频度、深度、数据量都在同类产品中领先，同时通过云立方实现的完全无共享点技术使得整个系统的硬件投入降低90%。因此，同样的投入情况下，本方案能够提供更多维度更高效的舆情分析能力。

　　1、节约成本

　　JimoDB系统使用传统的x86 pc 服务器代替价格比较高的小机+存储的架构，一方面为客户节约了大量的成本，使整个系统有更高的投入产出比，另外通过数据的多分备份，权限控制等功能增强系统的安全性，保证客户系统的安全稳定运行。

　　2、快速响应

　　JimoDB系统查询分析速度基本都在秒级完成，对比原系统小时级别的统计分析速度有非常大的提升，同时对于更大量的数据，更长的分析周期都可以在秒级完成整个查询分析。

　　3、灵活可扩展

　　系统可以非常灵活的进行扩展，容量和性能问题都可以通过添加额外的硬件即可，如果硬件发生损坏也可以方便的进行硬件的替换，而对整个系统的数据不会产生任何影响。