通讯大数据平台

产品介绍

围绕大数据行业构建全面的技术能力平台，从采集数据、处理计算、分析决策提供端到端的大数据解决方案。以应用为向导，数据为基础，提供标准、可控、规范的全流程数据管理体系，形成康程自有的总体大数据平台技术能力。
对接业务繁多、形式多样、满足不同业务平台需求多样性，主要体现在同时满足数据海量存储型、跑批计算型、实时计算型等需求，使得大数据平台服务场景更加全面。 全面支持国产芯片和国产操作系统。

功能简介

  • 集群组件管理：30+组件服务状态的监控、告警，各组件版本兼容性管理
  • 集群规划：大数据集群架构规划（组件角色规划、数据湖、数据中台等）
  • 大数据集群升级：为满足不同业务场景以及爆发式增长的业务，定期需要对组件升级、集群扩容等
  • 集群优化：系统层面参数调优、组件参数调优、协助开发层面代码调优
  • 数据安全：集群数据备份、元数据备份、文件信息数据备份、数据迁移、组件HA模式等
  • 常规巡检：集群各组件每日定期巡检工作，杜绝隐患
  • 应用接入管理：新应用配置接入管理、资源分配、集群账号管理、数据权限管理
  • 故障应急响应：由于大数据组件异常繁多，故障排查难度大，业务需要及时响应处理。比如：组件无法正常启动、任务调度超出资源限制、数据块异常等。

系统特点

  • 集群规划：架构规划实施，权限规划实施，安全规划实施
  • 集群组件管理、升级：60+组件支持平滑在线升级，支持多种芯片。配备对应状态监控，报警监控等；
  • 定期巡检：巡检各软硬件、资源等运行情况，分析使用趋势，评估风险，给出优化策略；
  • 数据安全：元数据备份，系统备份，组件支持HA模式。制定数据修复策略。
  • 灵活部署：平台支持灵活部署，灵活增加组件，快速配置文件，点击启动停止等操作；
  • 集群优化：针对不同用户不同作业，制定资源、代码、配置等方面的调优策略
  • 故障应急响应：运维测试人员储备充分，故障修复及时
  • 应急处理：规划容灾集群。
  • 扩容：横向扩容，定期监控资源消耗。