哪吒科技: SelectDB 实时数仓在智慧港口 中的应用实践 邓宇超 哪吒科技 数据平台负责人 邓宇超 哪吒科技-数据平台负责人 曾就职于趣头条、观安信息 丰富的大数据开发及架构经验 分享嘉宾 - 哪吒科技 目录 哪吒科技数仓发展历程 01 实时数仓技术选型与架构 02 实时数仓在智慧港口的实战应用 03 收益与展望 04 01 哪吒科技数仓发展历程 图例说明 业务场景：智慧港口全生命周期与全 解决方案（SMART 系列） 数仓能力：SelectDB 统一实时数仓 挑战：复杂场景、查询效率 业务场景：数据驱动码头作业 数仓能力：混合架构下数据整合与 分析赋能 挑战：开发效率、维护成本、实时 性 业务场景：港口运营数据枢纽 数仓能力：单业务单场景数据整合 与决策赋能 挑战：数据融合性、实时性 第二阶段 第三阶段 第一阶段 1.4 哪吒科技数仓架构演变（V1 离线跑批（H+1） 数据维度比较单一，数据量少 数据量不大的情况下， 单个任务资源占用高 集疏运数字孪生 实时性要求高，数据产生到落 地在1s内 上海港8大码头数据量大，单 表数据量10亿以上，表字段多 （100+） 实时任务性能瓶颈问题， 时效性无法满足 02 实时数仓技术选型与架构 2.1 哪吒实时数仓选型因素 关键指标 SelectDB 数据导入 秒级数据导入，支持多种数据导入方式（Stream

l 重点围绕城市地下管线精准治理领域，充 分利用管线普查和现有信息化建设成果 l 基于实时一张图的城市地下管线在线监测 与辅助决策 l 实现市政管网智能化规划、建设和管理 1.4 建 设 目 标 三维综合管线、实时视频监控、管线运 行状态、巡检人员实时位置、车辆位置 分布等智慧管网相关数据，实现监测、 分析、决策与管理于一体的智慧管网 “ 一张图 ”。 2.2 智 慧 管 网 一 张 图 特色 : l 利用各种物联网传感设备，实时监测各 超级管 理员 退出 l 管线权属单位 的 : l 精确掌握管线巡检人员的实时 位置及巡检作业情况 l 对隐患点、巡检记录、事故记 录进行综合统计及管理 特色 : l 利用北斗高精度定位技术对巡 检人员进行精准定位

盾构机周期性的运行情况人工汇总上 报工作量大，实时性差 • 隧道内部分施工台车之间安全距离不 符合规定，人工监测管理难度大，效 率低，容易发生安全事故 • 在隧道施工现场 , 锚喷支护不符合设 计 要求，掘进尺度过大，通风除尘不 畅 等现象，给施工安全留下了很大 隐患 房建类项目 • 危大设备运行的安全隐患人工巡检 管 理有漏洞无法实时准确覆盖 • 车辆及人员进入现场需先进行是否 及 时有效快速降尘且需耗费大量人 力 道路类项目 • 施工效率低下，摊铺质量没有保证， 摊铺施工数据不真实不能作为质量回 溯依据，需要事后检测等 • 压实司机自由压实时存在漏压、过压 等问题，没有压实数据支撑，存在质 量隐患，事后费时费力等 • 人工监测方式效率低、监测有效性差、 突发事件反应不及时，人工监测不及 时，耗费人力物力等 迎检观摩 天气监测 双体系管理 指挥调度 资源调配 风险管控 指标管理 实测实量 物料管理 物资计划 实时监测 AI 监控 可视化看板 文档管理 施工日志 质量管理 现场人员 AI 行为识别 视频监控 工序验收 设备设施 实名制管理 综合看板 实时监控 l 2.1 产品架构 绿色施工 安全管理 互 联 互 通 大 屏 展 示 智 慧 展 厅 任务督办

数据回传：实现施工现场智慧工地相关信息的实时回传。 数据分析：通过后台算法对回传数据进行智能分析，为政府监管提供数据支撑。 远程应急指挥：在遇到突发状况时，通过监控指挥中心远程快速应对，减少损失。 智慧安监平台（ 13 个子系统） 数据分析与展示 数据 大屏 项目 基础 数据 分析 安全 监督 业务 分析 项目 现场 人员 分析 项目 隐患 排查 分析 扬尘 管控 视频 监控 危大 工程 实时 监测 项目管理 状态，并进行分析统计；对拥有施工许可证却未进行密钥申 请的项目予以预警提醒。 密钥自主申请 密钥申请审批 密钥发放跟踪 密钥未激活预警 通过对接密钥的发放实现对辖区内项目的管控 密钥申请审核 项目基础信息显示 新增项目 实时自动更新项目 政府监管平台汇总、展示辖区内所有项目信息，信息包 括：项目名称、所属分区、施工许可证、是否已对接、 项目状态；对项目密钥申请进行审核；支持新增项目。 项目管理─辅助政府单位审核申请密钥对接的项目 为：未领取密钥的项目、领取未激活的项目、领取已激活 的项目，便于政府人员查看、汇报。 密钥激活统计─辅助政府单位管理项目密钥激活状态 显示各项目检查记 录 提供 APP 隐患检查功 能 跟踪记录检查后续状 态 实时同步隐患检查记 录 由监管人员进行项目现场检查，检查方式通过政府端 APP 安全隐患检查功能完成，检查任务由相关人员下发 给检查人员，指定项目进行检查，提供项目导航功能， 检察人员可通过导航功能到达项目地点进行相关检查并

5.1 自适应性分析方法............................................................................112 5.1.1 实时数据分析...........................................................................114 5.1.2 环境变化检测... 大模型是一种基于人工智能技术的综合解决方 案，旨在通过多场景协同决策与自适应方案设计，提升城市交通管 理效率，缓解交通拥堵，优化交通资源配置。该模型的核心在于利 用大规模数据采集、深度学习、强化学习等技术，实现对交通流量 的实时监控、预测与调控。通过对交通数据的多维度分析，模型能 够动态生成最优的交通信号控制策略、路径规划建议以及突发事件 应急响应方案。 首先，交通治理 AI 大模型的构建依赖于海量的交通数据来 源 跨场景的协同决策。例如，在城市交通网络中，模型可以同时考虑 主干道、次干道、交叉口以及公共交通系统的动态变化，通过全局 优化算法（如遗传算法、粒子群优化等）生成最优的交通信号配时 方案。此外，模型还能够根据实时交通状况，动态调整公交线路的 发车间隔、地铁列车的运行速度等，从而提升整体交通网络的运行 效率。 在自适应方案设计方面，交通治理 AI 大模型具有高度的灵活 性与自学习能力。通过强化学习机制，模型能够在不断的决策过程

企业信息化 深度不够，资源不能有效整合、数据不能有效利用。 智慧工地解决方案：实时的、事件驱动的云方案 智慧工地是以项目大数据的为基础，根据项目现场业务逻辑，建 立覆盖工程建设项目全生命周期，并与项目现场施工生产过程紧密融 合，聚焦于工程施工现场的人、机、物、法、环等关键要素的云平台。 项目工程数据实时更新、生产数据自下而上汇总避免数据死角；同时， 多专业数据联动打破信息孤岛。从而提高施工现场的生产效率、管理 数字化转型的挑战是非常复杂的 实时地进行 感知、分析、和行动 遗留的系统应用 无人驾驶 虚拟现实 物联网 移动互联网 自然语言处理 服务平台 人工智能 边缘计算 人脸识别 物流 工业 4.0 智能楼宇 车联网 智慧机场 / 港 口 PMS HRM ERP BI 要求 呈现 数据库 检索 提取 传统的以数据库为中心的企业系统不能支持技术变革 这些应用系统无法支持实时的业务运营要求 Feeds 云架构 智慧工地解决方案：实时的、事件驱动的云方案 关联整合、实时触发 规则、最佳经验、约束条件、预测分析 事件型 数据流 人员位置 人员状态 机器状态 车辆位置 突发事件 质量问题 环境监测 实时 响应 与工程进度结合分析 准备设备备品备件 安排维修人员 最佳车辆路径 应急措施响应 问题实时追踪 降尘、降噪 绿色节能 实时的 事件驱动的 应用程序

4 目录 系统结构和推荐配置选型 实现方案与功能应用 5 移动端应用说明 项目监测范围 安全用能：能源供、配、用环节安全可靠 • 变配电测控、保护 • 配电所环境监测 • 水、气管网实时监测 • 电梯监视、视频监控 经济用能：能源资源利用高效可控 • 能耗对比分析 • 能耗指标及对标 • 能源平衡和损耗分析 • 计费管理和成本分析 • …… 智慧运维：设备的运维巡检管理方便可用 开放式系统架构和模块化设计，满足规模容量要求和便于扩展 安全管理机制与东莞市能耗监测中心上传要求 1 2 3 4 5 智慧云平台 总体要求 智慧能源与运维云平台总体要求 打造含能源管理、实时监控、智慧运维三位一体的综合性集成平台，提供统一 操作界面和对外窗口，“私有云”实现远程访问，方便维护和管理。 具备系统集成和开发能力，通过园区网络与其他智能化子系统（如 OA 、 ERP 、 MES 4. 视频监 视 5. 空压机 组 6. 暖通空 调 7. 柴发机 组 8. 电梯监 视 监测 范围 智慧能源与运维云平台监测范围 • 变配电保护、测控回路电参数、开关状 态实时监控 • 电能质量监测与故障诊断分析 • 进线柜电参数、开关状态监测 • 变压器三相温度 • 无功补偿、联络柜、市发电切换柜电参 数、开关状态监测 • 配电所温湿度、水浸等环境监测 • 视频监控

实现点位标注， 设备运行状态建设，实时数据展示。 基于数据平 台 + 三维可视模型实现数据 可视化管控，实现园区数字 孪生。 事件可视化处理 应 急可视化指挥 人车态势 环境态势 安监态势 设备态势 构建园区数字 大脑，实现园区 “可视、可管、可控” 三维可视 | 综合态势 | 设备管控 园区设备全连 接，一 屏全监控 三维可视 | 综合态势 | 设备管控 在模型图上实时查看设备分布情况及设备状态信 在模型图上实时查看设备分布情况及设备状态信 息（正常、异常、离线） 实时展示设备的运行状态，查看指定设备的实 时运行数据 各类智能化设备一键控制，自定义多场景智慧 化联动控制。 设备运行数据超出阈值时实时告警并定位到告 警设备，自动派发事件工单。 状态 监控 数据 可视 一键 控制 实时 预警 门禁 道闸 广播 监控 温感 …… 烟感 路灯 数据集成平 台 设备异常 设备异常 设备离线 温度： 16°C 视频监控 +AI 算法分析：打造智慧园区安防新体系 实现园区安防从被动响应 到 主动管理，缩 短事件响应 时 间，加强园区安全防护 感知 AI 处理 实时监控 周界防护 视频巡更 异常行为识别 重点人员布控 移动手持终端 查看指定摄像头的 实时监控画面以及 历史回放画面。 通过视频检测识别周 界安全风险并告警， 如攀爬、越界、人员 徘徊等 通过预设的视频巡 更路线进行远程视 频巡更，巡查园区

系统对现有车辆进行更高效的管理，通过建立具有国内先进水平的机械化车辆油料监控系 统。对环卫车辆线路轨迹、位置、速度、油耗等实时掌握和大数据分析，建设作业车辆作 业情况视频监控管理机制； 同时系统预留扩展模块及接口，为以后智慧环卫整体建设用奠 定基础。 1.2 建设必要性 1.成本控制：对车辆进行实时的跟踪定位与车辆运行状态的监督，油量的消耗的合理 性与非合理性以及加油量情况监管；历史线路、状态、油耗、里程数以及各种费用与实际 、里程数以及各种费用与实际 比较（公车私用、谎报过桥、过路费、能源费用），建立车管制度重要依据。 2.提高效力：科学是第一生产力——科技化信息化。车辆位置、状态、车辆作业情况 等信息实时更新与调度中心建立了最快的信息通道，确保调度中心制定最佳的调度方案以 及减轻调度工作量，达到科学调度、大大提高资源的利用率及周转率。 3.统计与决策：对车辆的里程，油耗，时间，速度，方位，报警，工作量，等各种大 控管理。后续可接入工作人员动态工作区域监控管理。 1.4.3 油耗检测： 实时监控车辆的油耗变化，并生成历史时段油量变化报表或油量曲线图，直观反映出 3 / 38 油量的正常消耗与非正常消耗及加油数量不足等现象，达到油耗高水平管理，能够准确的 显示加油地点和加油量。杜绝偷油现象。根据车辆百公里耗油情况推断油量的使用情况。 实时监控油箱油量变化，每月加油次数统计、加油量统计、加油时间统计、加油地点统计。

大数据企业架构讨论 案例研究：智慧交通 大数据实时处理和分析 目的：提高城市交通的科学管理和组织服务水 平 业务目标 • 智能交通数据的有力支撑 • 智能交通公共信息服务的实时传递和快速 反 应的应急指挥 • 智能交通业务联动快速应对变化 • 可视化事件跟踪 挑战 • 近千万辆轿车、轨道交通、快速公交系 统 • 高并发事件及数据流的实时处理 • 海量非结构化大数据的组织与分析 压力传感 器 传感 • 速度 传感器 器 • 生物 传感器 • 温度、湿 度…… RFID • 射频天线扫 描 • 电子标识 摄像 • 高速拍照 头 • 高清摄像 头 3 车地双向实时无线通信网数传电台 政府专网 Internet GPRS/CDMA/3G/Wi-Fi/WiMax 光纤 TCP/IP 公路可视化综合信息平台 雷达测速 GIS 公共交通运营管理平台 监控 深度分析 • 敏捷开发 • 高度扩展性 • 实时分析结 果 • 大吞吐量 • 实时准备 • 所有的数据源及数据结 构 • 低延时 • 高并发的交易 • 高度灵活的数据结 构 数据获取 数据传输 数据处理 数据是智能交通的核心 数据获取 数据传输 数据处理 People. Process. Portfolio. Discussion 实时事件处理 — 概念图解 业务场景 • 重要车辆监