大数据基础平台

海康威视大数据基础平台（Hikvision Bigdata Platform，简称HBP），是海康威视基于多年海量物联网数据处理经验，基于分布式存储、分布式计算等先进架构，融合开源Hadoop生态及自研增强服务于一体，对外提供安全、可靠、易用的大数据类采集、存储、查询、分析与管理等一站式服务的企业级大数据处理平台。

重点功能

数据存储

平台提供海量多模态数据分布式存储能力。支持Kafka消息队列存储；支持PostgreSQL关系型存储；支持HBase、Cassandra、Kudu、ElasticSearch等NoSQL存储；支持图数据、时序数据等多模增强存储；支持数据以数据湖的形式存储和管理。

资源调度

平台提供基于多租户资源隔离的用户服务，支持基于Yarn、K8S为多租户用户、多业务、多模态计算提供统一资源调度管理，保障大数据集群的整体资源利用。

计算分析——实时计算

平台提供流处理引擎Hlink，支持可视化流处理开发控制，支持通过SQL或画布快速创建流式应用，支持流式应用提交前SQL语法校验，支持流式应用调试、日志管理、资源管理，可为用户快速构建实时比对、实时报警等流处理业务。

计算分析——交互式分析

平台提供统一SQL分析引擎（OneSQL），支持SQL2003标准，支持RBO/CBO优化、计算优化下推、数据压缩传输等多项优化技术，支持多数据源的跨源、跨域协同计算，兼容Hive、Impala、PrestoSQL等常用分析引擎，为用户提供数据检索、统计查询、交互式分析、Ad-hoc查询等多样化的数据分析能力。

计算分析——数据湖分析

平台支持湖仓合一融合架构，支持基于Hudi和Spark的数据湖分析。支持开放的数据存储格式，Parquet（列）、Avro（行）等，支持数据实时采集入湖，支持数据湖表的增删改查，支持分区剪裁、文件级过滤、动态缓存等数据湖分析加速。

运维管理

平台提供图形化集群运维管理，支持向导式自动部署、在线扩容/减容、服务安装/配置管理、在线服务升级、多租户管理、审计管理、用户管理等。

安全管控

平台支持多租户资源隔离，支持运行于Kerberos认证的安全模式；鉴权中心（Crown）为用户提供LDAP管理、授权管理、权限关联、权限验证等统一权限管理服务；平台支持表及字段级别的数据安全控制，支持包括行过滤、列脱敏等数据安全策略。

产品优势

平台开放性

（一）接口开放性

平台支持基于SQL语言进行使用和开发，支持SQL2003标准，支持用户基于SQL实现数据建表、数据接入、数据分析等大数据基础服务。同时，平台兼容开源社区组件原生接口，用户同样可基于原生接口进行开发，无需付出大量额外的学习成本。

（二）资源开放性

基于平台的多租户资源隔离技术、统一用户管理和权限管理，平台的基础服务、组件服务、计算资源以及数据资源均能够实现安全的开放共享。

平台安全性

（一）数据安全

支持基于Hadoop KMS的文件系统级数据加密服务，实现HDFS文件透明加密。加密和解密的过程由KMS进行管理，实际加密和解密由Client调用API完成。

（二）用户安全

平台鉴权中心提供统一的用户管理和身份验证。支持平台多租户模型与Linux用户模型的统一权限管理。同时提供基于LDAP的用户访问进行身份鉴权。

（三）组件安全

平台支持基于Kerberos的安全管控，全栈技术组件均支持Kerberos安全协议认证，任何对组件的访问都需要通过安全认证。

平台可靠性

（一）高可用

平台所有组件和服务均实现HA高可用，集群任意节点发生故障时，不出现服务中断、数据丢失或数据不一致的情况。平台具备统一的精细化服务监控，为集群、组件、服务等提供自动故障探测和健康状况评估。并支持用户自定义监控指标，指标可扩展至1500余项。

（二）数据备份和恢复

平台具备数据备份和恢复方案，支持数据库数据快速导出至本地服务器或远程目标，支持备份的数据导入至目标数据库。

平台易用性

（一）易部署

平台采用可视化向导式安装部署，支持基于预置解决方案（单机、集群）的一键式部署，无需自行完成服务的复杂配置。

（二）易维护

平台搭配可视化运维管理平台（HBM），支持集群健康监控、服务管理、告警管理、日志管理、用户审计管理等。

（三）易开发

提供在Hadoop之上的大数据基础服务，可直接基于服务进行应用开发，无需基于组件从零开始，降低学习成本和开发门槛。

平台版本

标准版

企业版

适配小规模化（1-3台）域端应用场景，主推场景包括公安区县、司法、文教卫、金融等行业。

适配中大规模（4-1000台）城市级应用场景，主推场景包括公安、交警、政府等行业

联系我们

在线咨询

项目咨询

投诉与建议

获得更好的体验

您正在使用IE浏览器，我们建议您切换以下浏览器阅览