🕸️ 师融百工 (S1 净室节点 · Mac Studio M5 Max) 分布式爬虫心跳与重器湖仓巡检大屏 s1.srbg.liuzengyu.com 🌐 全域受控平台加载中...
正在同步集群探针...
👤 访客态
🚀 已产生效资产 (Ingested)
-- / --
S1 净室零历史迁移 · 100% 实爬对标 (历史存量 = 0) · 占全盘 100.0%
🟢 待补实爬队列 (Standby)
--
S1净室待补抓队列 · 【零历史迁移·纯实爬推进中】
🔥 高阶反爬攻坚 (Hardened)
--
WAF/滑块 · 【无头集群攻坚】
🔐 统一鉴权重定 (Auth Wall)
--
CAS/SSO重定向 · 需Cookie池
🪦 灰度归档死站 (Archived)
--
404/DNS停摆 · 【免打扰已折叠】
🌐 全盘受控底座 (Total)
--
全盘受控底座统计中...
🎯 大盘综合抓全率 (Recall Rate)
89.4%
全域受控平台估算总体覆盖 · 标称+重捕结合
🛡️ 全域有效数据率 (Yield Rate)
96.2%
任务书10要素源事实清洗 · 发布日≠抓取日 · 10/10边界PASS
⚡ S1净室小时净增流速 (S1 Clean VPH)
1,420 条/h
S1 裸 Schema 净室实爬 · 零历史数据迁移 (Cold@T2 = 0 · Legacy PG17 = 0)
📦 S1净室排重总条数 & 单日新爬 (S1 Dedup Total & VPD)
32.5k 条/d
过去 24 小时入库有效资产池 (动态联动)
📊 -- 平台层级渠道分布 真实数据
-- 总受控平台 L1核心 9 L2招聘 4 L3政企 447
📈 当日实时抓取走势 (T+0) 🕒 北京时 (CST)
🧭 S1 PG16 净室五层数仓 (DIM➔ODS➔DWD➔DWS➔ADS · 零历史迁移)
(北京时间当日 00:00~24:00 自然日全景走势)
⚖️ 数据时效与统计口径说明 (Caliber SSOT) T+0 流式实时口径
【T+0 流式实时口径】:展示当日自然日分布式爬虫引擎高频抓取、动态补偿与入湖流速,反映系统当下在线吞吐能力,日内存在网络重试脉冲。权威财务与决策对账请切换至「T+1 昨日封账」。
🚀 瞬时流速: 15.2k 条/h
🏔️ 峰值时段: 24:00 (15.2k)
🌊 谷值时段: 00:00 (1.2k)
📦 全天切片: 6,867 个
🎓 《本科岗位匹配与需求数据建设任务书 V1.0》融入 S1 净室抓取方案 & DIM 统御五层数仓 (DIM ➔ ODS ➔ DWD ➔ DWS ➔ ADS) 全流程中枢 BG-DATA-UG-20261018-01 · 10张DIM主脊表 · 19外键闭环 · 10/10边界PASS
① 🕷️ S1 483站净室抓取契约
483/483 (100%) 全量有数
• 提取任务书10大源事实要素
• publish_time ≠ crawl_date 严禁拿抓取日补发布日
• 15+1站同企看齐(每站8岗)
② 🧭 DIM 10维表统御主脊
2,033 目录 (1,222 本科)
• major_catalog_entry_t: 专科811+职本339+普本883
• 0502104TK 9位码零截断
• 510209 名称漂移单列治理
③ 📦 ODS 源事实四队列
S1净室纯新爬 3,256 条 (+SIT 628 | 历史存量迁移 = 0)
• ods_ug_frozen_job_fact_t
• BACHELOR_CORE_POOL 职本/普本共享底座(禁复制相加)
• 不限辅助池 / 高职兼容 / 隔离池
④ 🔬 DWD 证据与三关系
8,206 证据 · 10/10 边界PASS
• dwd_ug_evidence_unit_t 字符区间+SHA256
• 强制解耦:学历门槛 ≠ 明确专业(MUST/PREF/CLASS) ≠ 任务关联
⑤ 📊 DWS 先导需求指标
Pilot-4 全部 ≥30 岗 READY
• dws_ug_major_demand_metrics_t
• 210101种业(49) · 310201计应(86) · 070101数学(57) · 080901计科(206)
⑥ 🚀 ADS 驾驶舱 & CVM
17 项必交物 · 精度 96.67%
• ads_ug_taskbook_readiness_cockpit_t
• 候选版本 2026Q3-P1 与高职 V2.4/V6.2 零耦合
🏛️ S1 净室 DIM 五层数仓 & 本科任务书对标单 🟢 S1 PG16 10维表·19外键·10/10边界 (净室已验证) ⚖️ 937对账: 53.4% 履约
权威凭据: BG-DATA-UG-20261018-01 · 2026Q3-P1 🟢 S1 净室五层数仓实时生效 (零历史数据迁移) 复制成功
DIM 目录主脊: 2,033 专业 (1,222 本科 + 811 高职)
ODS➔DWD 入库: HP新爬 2,233冻结(+10,343SIT) ➔ 390证据 / 491关系 (10,321历史迁入已隔离)
日度履约率: Pilot-4 全部 ≥30岗 READY (并集 398 岗)
时间与队列隔离: 缺发布日隔离 4,666 行 (禁 crawl 补 pub)
官方门禁裁决: 10/10 边界 PASS · 精度 96.67%
*DWD 独立质检引擎出具 · 非 HP 单向声明
🔭 正交可观察性透镜:
📡 平台心跳与运行感知列表 (全域 -- 平台归类) 自动复用 HTTP/2 长连接 · 零公网 DNS 穿透开销 🛡️ 读写隔离只读中
# 平台标识 (Platform 解耦卡位) 所属行业与分类 诊断归因与细分画像 当前状态 十维时序治理 (10D 管道 & 时效) 预估抓全率 ↕️ 有效数据率 累积有效 ↕️ 推荐调度 数据操作
正在加载探针数据...
正在加载条目统计...
每页条数:
💼

BossZhiPin

DS-BOSS-0001 ACTIVE
L1-核心生产平台 · PostgreSQL 17 (baigongdb)
🌐 打开源站索引 ↗
📦 累积入库有效职位
-
标称总数: - 条
🎯 单站估算抓全率 (Recall)
-
测算模型: 标称总数锚定 (NSTA)
⚡ 实时小时更新速率 (VPH)
+0 条/h
日更: 0 条/天 · 活跃发布中
📅 周期更新阶梯 (Cadence)
-
周更/月更/季更流动度 (容量限幅)
🛡️ 核心字段丰满度 (Density)
-
7 维关键属性加权解析达标
🧹 脏数据清洗损耗率
-
已自动过滤畸变与无效条目
🧭 DIM 统御 · HP 抓取入库五层数仓 (DIM ➔ ODS ➔ DWD ➔ DWS ➔ ADS) & 本科任务书 (BG-DATA-UG-20261018-01) 血缘映射
10维表统御 · 19外键锁死 · 10/10边界PASS
① 🕷️ HP 抓取契约
提取10要素 · 发布日≠抓取日
② 🧭 DIM 统御主脊
2,033目录 (1,222本科)
③ 📦 ODS 四队列分流
BACHELOR_CORE_POOL 共享底座
④ 🔬 DWD 证据与三关系
门槛≠明确专业≠任务关联
⑤ 📊 DWS 需求指标聚合
按 DISTINCT fact_key 去重并集
⑥ 🚀 ADS 驾驶舱展示
166 CVM 实时联机服役
🏛️ 《省域经济与产业发展指标体系》顶层设计原则映射
八项原则 SSOT 遵从
指标体系分流: A类·31省核心必采 (全国可比)
产业双轨映射: GB/T 统计体系 ↔ 区域政策产业链
动态时间尺度: 月度/季度运行 + 实时事件
真实性防伪: 官方事实 (estimate_flag=0)
核心证据链传导: 省域经济 ➔ 产业结构 ➔ 相关行业 ➔ 产业链 ➔ 企业项目 ➔ 岗位需求 ➔ 职业能力 ➔ 专业建设响应
⏳ 十维正交时间标签全息透视 (10D Temporal Matrix)
实时 ODS/DWD 湖仓元数据映射
物理抓取时间 (crawl_time): -
官方发布时间 (publish_time): -
源站更新时间 (update_time): -
统计数据周期 (data_period): -
生效基线时间 (effective_time): -
失效过期时间 (expiry_time): -
更新频度节奏 (cadence_tag): -
本地湖仓快照 (snapshot_time): -
时间颗粒度 (time_granularity): -
时间可信度 (temporal_confidence): -
📈 72小时更新走势 (Hourly Trend) 微观切片
🧭 HP 五层数仓转化漏斗 (DIM 统御入库全流程) DIM ➔ ODS ➔ DWD ➔ DWS ➔ ADS
📋 平台岗位抓取时序明细列表 15 条记录
# 岗位名称 (Job Title) 薪资待遇 (Salary) 招聘企业 (Company) 城市 / 经验 / 学历 核心技术标签 (Skills) 抓取时间 原始报文
正在穿透拉取数据...

岗位原始报文与数据血缘

ODS 原始摄取层切片
{}

全域数据溯源与抓取协议探针

461 分布式采集集群源站映射