技术实现

把实现细节放在这里

主界面服务业务决策；本页集中说明建设阶段、数据情况、系统架构和技术组件入口。

就业监测智能平台系统架构图
建设进度

九个阶段，逐段验收

从环境、数据、湖仓、标签、指标到 Web 演示入口，按阶段形成可复核交付物。

数据口径

10,000 个脱敏样本

当前展示北京城区 S 规模样本，页面只读取聚合指标，不展示个人级明细。

查询链路

Doris 聚合指标

Doris doris:9030/doris_ads。若 Doris 不可达，页面自动使用内置验收快照。

S 规模验收结果

100 万信令全链路压测与业务结果

阶段 9 从数据生成开始完整重跑链路，覆盖 MinIO、Iceberg、Spark、ADS 标签、Doris 指标和 Web 展示入口。

全链路通过 100 万信令 / 10,000 用户
监测用户 10,000 人 · S 规模用户画像
信令明细 1,000,000 条 · 90 天北京城区模拟信令
APP 日特征 852,000 行 · 平台、招聘、办公等应用特征
通话日特征 300,000 行 · 高频通话和峰值通话特征
招聘访问 300,000 行 · 疑似失业模型辅助信号
DWD 活跃日 605,141 行 · 通勤与移动特征日粒度

阶段划分

从数据到决策页面

阶段 0完成

需求口径冻结与项目骨架

阶段 1完成

Azure VM 与系统初始化

阶段 2完成

Docker Compose 基础平台

阶段 3完成

北京城区脱敏样本数据

阶段 4完成

Iceberg ODS/DWD 与空间特征

阶段 5完成

居住地、工作地、就业和疑似失业标签

阶段 6完成

灵活就业识别与保障缺口

阶段 7完成

Doris ADS 指标库与秒级查询

阶段 8完成

决策总览、地图研判与报表入口

阶段 9完成

S 规模全链路验收和性能记录

数据情况

当前指标覆盖

就业用户 6,191 疑似失业 1,439 灵活就业 2,400 区域聚合 10 个区县

安全边界

先聚合，再展示

Web 层只面向 Doris ADS 聚合表和受控查询模板，不开放任意 SQL，不展示用户级轨迹、精确家庭位置或小样本可识别点位。

系统架构

单 VM 验证链路

模拟数据
信令 / 应用 / 通话 / 参保
→
MinIO + Iceberg
ODS / DWD / ADS
→
Spark
空间网格 / 标签 / 聚合
→
Doris
聚合查询
→
Web + 报表
决策总览 / 地图 / 看板
阶段进度查看 PoC 各阶段交付物 系统架构查看数据链路与职责边界 模型解释查看规则、阈值和证据字段 受控查询执行白名单 Doris 查询模板 报表看板进入报表嵌入预览和外部平台 扩展路线查看从验证到生产化的路径