存算分离，弹性扩容 多级介质混合管理 • 混合管理本地盘、云盘、 OSS 等多种存储介质 • 支持多副本异构存储，高速介质提供性能，低速介 质保障可靠性，最大化性价比 • 数据随热温冷变化，在多级介质间进行转存，大幅 降低综合成本 高效压缩与编码 • 支持使用纠删码 EC 算法，副本冗余系数低至 1.25 • 数据文件分块压缩，上层计算透明使用 • 基于 ZSTD 深度优化压缩算法，效果提升 Compatible Filesystem Protocol （ HDFS 兼容） Lindorm DFS 搜索 引擎 时序 引擎 向量 引擎 流 引擎 列存 引擎 宽表 引擎 副本异构 软件定义存储 冷热转存 文件管理 纠删码 EC 目录组织 透明压缩 多租户安 全 ( 可靠性、带宽、 IOPS 、成 本 ) N 开源数据集 原始文件 Partition1 Batch Memstore Partition2 Batch Write Log MVCC 批量组提交 （ GroupCommit ） 查询优化 写入优化 DN2 多副本并发写 （ Quorum 机 制） Diff … Origin 二 分 查 找 Origin KV Diff KV2 Diff KV1 Diff

Lipkovitz) 实时分析 — 传统的分析应用 • 垂直扩展 (Scale-up) 数据库 – 使用传统的 SQL 数据库 – 使用存储过程生成事件驱动报表 – 使用闪存盘，以减少磁盘 I/O – 使用只读副本横向扩展 (Scale Out) 只读查询 • 限制： – 无法写扩展 – 昂贵的成本 (HW&SW) 实时分析 — Complex Event Processing(CEP) • 当数据到来时立即处理数据

协议 保密协议 背景调查 技术 要求 安全物理环境 安全计算环境 物理位置选择 数据保密性 数据备份恢复 数据完整性 虚机迁移完整性 虚机迁移加密 KMS 支持 审计数据隔离 数据存储副本可用和一致 数据迁移支持 安全管理中心 集中管控 云安全管理中心 网页防篡改 云安全态势感知 数据库审计 数据加密 安全通信网络 安全区域边界 网络拓扑绘制 网络架构 访问控制 入侵防范 专有网络：专有网络是一种隔离的网络环境，安全性和性能均高于传统的经典网络。专有网络需要事先创建，详情请参见创建专有网络。 数据容灾：同城容灾：您可以在创建实例时选择多可用区，详情请参见创建多可用区副本集实例或创建多可用区分片集群实例；您也可以将现有的副本集实例或分片集群实例 从单可用区迁移至多可用区，详情请参见迁移可用区。异地容灾：您可以创建云上灾备实例，系统将自动搭建基于当前实例的灾备实例，可应对地域级别的故障。 SSL

建五个维度的指标： -Volume(容量)：是指服务承诺的最大容量是多 少，如数据库连接数、容器集群可用节点数等。 -Availablity(可用性)：代表服务是否正常，如实 例主备状态、实例可用副本数量等。 -Latency(时延)：代表响应是否足够快，如分布 实例SLI指标 容量 工单 错误率 可用性 延时 图2.6 遵照VALET模型建设SLI指标体系 15 式数据库的长事务、慢SQL执行等指标。

库始终以“极致稳定、极致 性能、极致易用”为核心目标。 万里安全数据库软件V1.0，可根据用户需求进行集中式或分布式部署，具有动态扩展、数据强一致、 集群高可用等特性。集中式部署基于数据冗余与副本管理确保数据库系统的稳定可靠无单点，同时提供 完备的事务支持，能适用于要求苛刻的在线事务处理（OLTP）应用场景，当数据量、负载增大时，数据 库集群可以无限制的动态扩展数据节点，以满足业务发展需要。 • 弹性伸缩、无限扩容 通过容器化+单元化+分布式数据库，实现分布式核心应用弹性伸缩，数据无限扩容的能力； • 核心应用开发套件 提供标准化编程模式（如联机、批量编程模型）、场景化的公共机制（如副本供数、7×24小时 76 智慧行业应用类-智慧金融 等）、金融稳定的开发框架（如优雅停机、防重幂等）； • 数字生产力工厂 实现从业务建模、设计、开发、测试、运维全生命周期管理能力，以更快地开发软件，更好地满足

基础设施云平台 云化基础设施是建立工业互联网平台的基础，利用虚拟化技术 在物理基础设施上构建多个相互独立的虚拟化资源构建 IAAS 云平台。 利用 IAAS 云平台提供的虚机高可用、热迁移、数据多副本等技术可 保障上层核心业务的稳定运行，为业务良好、快速的发展奠定基础； 利用 IAAS 平台对计算资源、网络资源、存储资源进行虚拟化和池化 管理，可根据上层应用的需要，对资源进行动态调度、动态扩展和 数据一致性：包括多源数据的数据模型不一致，例如：命名 不一致、数据结构不一致、约束规则不一致。  数据实体不一致，例如：数据编码不一致、命名及含义 不一致、分类层次不一致、生命周期不一致……。  相同的数据有多个副本的情况下的数据不一致、数据内 容冲突的问题。  数据关联性：数据关联性问题是指存在数据关联的数据关系 缺失或错误，例如：函数关系、相关系数、主外键关系、索引关系 98 企业数字化转型及企业数字化平台建设方案

，系统还应具 备服务降级功能，当部分功能不可用时，能够通过降级策略保证核 心功能的可用性，避免整体服务瘫痪。 在数据层，系统必须确保数据的完整性和一致性。为此，应定 期执行数据备份，并采用多副本机制存储数据，避免单点故障导致 数据丢失。同时，系统应支持快速数据恢复，通过增量备份和差异 备份相结合的方式，能够在最短时间内将数据恢复到故障发生前的 状态。为了进一步提升恢复效率，可以引入热备技术，确保备用数

图 142 大数据系统组网图 在集群中，服务器的工作类型分为 2 种，一为管理节点，用于管理整个集 群的服务，并提供对外服务的统一管理和调度；二为数据节点，用作数据存储、 检索和计算，通过数据多副本机制保证数据节点无单点故障。大数据管理服务 器也提供计算功能。 8.3 业务功能 8.3.1 结构化信息检索 针对视频结构化任务，我们可以分别查询机动车、行人相关分析结果，包 含相关目标抓

10core、128G 内存，2*900G SAS 硬 盘(系统盘)，12*4T SATA 硬盘； 数据存储量=70（TB）； 638 / 661 数据节点服务器数量=70（TB）*3（3 份数据副本）/48（TB 服务器存 储）/0.75（存储使用率）≈6； CPU 内存 本地存储 数量 类型 2C 10core 128G 2*900G SAS 硬盘(系统 盘)，12*4T 3 个备份； 硬件配置云平台公司统一提供：2C 10core、256G 内存、2*900G SAS 硬盘(系统盘)，12*1.2T SAS 硬盘； 服务器数量=43（TB）*3（3 份数据副本）/14（TB 服务器存储）/0.8 5（存储使用率）≈10； CPU 内存 本地存储 数量 类型 2C 10core 256G 2*900G SAS 硬盘(系统 盘)，12*1