1、背景
对证券市场每日的业务交易，业务部门需实时监控证券市场的各种技术数据指标，由监察部提供访问入口，来实现对证券市场交易数据的统计分析。股票证券实时行情系统在此背景下产生。此股票证券实时行情系统是对股市行情交易数据进行实时采集、实时数据分析、多维分析，即席查询，做到实时大屏监控和展示。此系统属于监察预警体系，整体包括预警规则管理，实时预警，历史预警（定时、轮巡），监察历史数据分析等。<br>
此项目是在重构并优化证券数据模型，优化历史数据分析过程和技术，大幅提升历史数据分析性能；为数据仓库前端应用提供数据服务，并简化下游系统对大数据平台多种数据存储方式、计算资源的访问方式，以统一的方式管控下游系统访问请求。可满足监察业务发展数据建模需求同时，保证核心数据模型有效性。
2、目标
1、大数据体系的建设应当在容量、性能、安全、开放性、可扩展、低成本等多维度体现出整体的优越性，形成体系化、高标准数据服务能力，为业务体系提供多层次数据服务，包括基于时效的实时数据服务、准实时数据服务、历史数据服务，以及基于数据特征的结构化数据服务、半结构化数据服务和非结构化数据服务。<br>
2、建成后的大数据支撑体系应当能针对海量、多态数据提供高效、低成本服务，构建面向未来的预测分析体系，满足业务专员、数据科学家通过统计分析、机器学习、数据挖掘、分布式处理等先进数据处理技术对海量数据进行仓内、仓外复杂分析；满足统计类、监察类、风险类、以及新业务形态的深度应用，最终达到交易与分析体系数据的融合，持续缩短业务数据的响应时间。
3、通过实时流处理解决方案，将行情数据，通过预设模型进行加工处理。对实时变化数据进行高效的预设数据模型处理，利用信息整合、分析等大数据技术，对行情数据进行分析、挖掘潜在价值。
4、可以为后续监察系统、数据信息服务系统提供实时数据支持，增加数据服务内容，提高生产效率和质量，进而提高客户的满意度。
5、建设可扩展的预警支撑技术体系，支撑当前规模预警业务，特别是通过硬件资源扩展，在保证性能指标前提下，满足未来5-10年的业务增长要求；
