GBase UP
RDBMS仍然是最成熟、处理数据效率最高的系统,是核心业务的支撑平台
SQL仍然是最易用、使用最广泛的数据处理语言
结构化数据仍然是最容易分析、价值密度最高的数据类型
大数据范围除了传统交易数据,还包含交互数据、机器产生的数据、IoT数据等
大数据处理既要满足高效的数据采集、存储,也要满足全视角的数据分析
SQL 引擎和 NoSQL 技术的融合是大数据平台的核心
GBase UP新视野包括:大数据平台处理全数据和GBase Cloud
帮助公安用户完成数字化转型,期主要案例介绍如下:
环境方面:
1. 9个UP节点以及1套8m, 1套8t, 1套64节点的MPP集群,1套70节点的hadoop集群。
2. MPP总数据量200T(规划10PB),hadoop总数据量200T(规划20PB)。
3. 并发用户数100个。
业务场景:
1. 支撑某公安用户视频监控、人案系统、公众应用系统、涉机系统、涉车系统、GIS地理信息系统、GA物联网系统、运营商/互联网数据的获取后的深度分析与社会治理系统建设。
2. 处理5000+张表,每天接收卡口数据,wifi数据1T。
某公安用户系统架构图:

组件功能说明:
统一数据管理平台(GBase UP)
提供对数据存储和计算的统一接口管理、统一调度和统一访问,简化运维和开发成本。
前置加工库( GBase 8t)
用来缓存数据,同时对分析库提供数据实时加工处理任务。
在线分析库(GBase 8a MPP Cluster)
对海量数据进行管理,支撑海量结构化数据的即席查询、复杂关联分析、比对碰撞等对计算性能要求较高的场景;针对具体专题应用场景,构建数据统计分析模型,数据集市。
离线分析库(GBase HD)
管理在线分析库提供的数据和互联网采集的非结构化数据,并进行复杂挖掘算法等离线分析运算,并将结果数据提供给在线分析库。
数据加速库(GBase 8m)
管理和存储热数据,为上层高并发、频繁实时查询的在线业务提供应用支撑。
关于GBASE南大通用
天津南大通用数据技术股份有限公司(以下简称“南大通用”)成立于2004年,是具有自主知识产权的国产数据库产品与服务提供商。作为国家级高新技术企业、国家规划布局内重点软件企业、信创工委会成员企业(0048),南大通用已连续多年被工信部下辖的赛迪顾问评为国产数据库领军企业。
自成立以来,南大通用始终坚持自主创新,产品的核心技术及底层代码自主可控,产品已通过分布式分析型数据库性能大规模专项评测(4096节点,世界规模最大)、等保四级、商用密码产品认证、涉密信息系统产品检测等资质认证。目前,南大通用已经成为国内少有的专注于数据库产品研发,并且在金融、电信行业得到规模化应用的独立数据库服务商。
经过十余年发展,南大通用构建了覆盖数据管理全生命周期、全技术栈的数据产品体系及服务解决方案,已成功为金融、电信、政务、能源、交通、国防军工等百余个行业上万家用户提供产品和服务,建立节点超过30000个,管理数据总量超过300PB。




