🔗 采集管线总览

把「模块 → 来源 → 频率 → 落地库」逐条接通:共 35 条管线,其中 35 条已出数(合计 70,594 行),0 条待跑 · 其中 19 个模块落在可售域,出数后由 collect_hub.measure() 自动实测并派生 CMDB- 标的
35管线总数
35已出数
70,594累计行数
19可售域模块
16平台运营(内部)

① 管线全表(35 条 · 按行数排序)

模块说明来源类别真实来源频率落地库表数行数状态可售
bid-invites定向标讯邀请与机会清单官方接口EU TED / 世行 / 各国招标门户(ti_live、global_bids,剔除联系方式列)每日plib_bid_invites.db121,497已出数是
match-cards撮合名片与供需摘要站内行为平台撮合市场 match_market.mm_pair(原表不含联系方式字段)每周plib_match_cards.db120,000已出数是
bri-resource一带一路资源与通道数据开放数据世行 / UN Comtrade 一带一路通道(obor_trade.db)每月plib_bri_resource.db38,000已出数是
hk香港主体 · 跨境通道 · 合规要点开放数据GLEIF 官方开放数据(gleif_entities)+ UN Comtrade 中国香港走廊 + 中国香港公开合规要点每月plib_hk_hub.db36,000已出数是
medical医疗健康资源与器械供需开放数据平台康养/医疗器械枢纽 r103_hubs/care_hub.db、meddev_hub.db每月plib_medical.db12,008已出数是
r106-hub产业中枢综合数据站内行为平台 24 个产业枢纽 r103_hubs/*.db 聚合(行业 × 国别中枢)每周plib_sector_core.db11,963已出数是
articles文章库(内部)站内行为平台内容文章清单(static/ 内容页)每周plib_articles.db11,742已出数内部
r91-dossiers行业档案(关键指标与参与者)开放数据平台 24 个产业枢纽 r103_hubs/*.db 聚合(行业 × 品类档案)每周plib_dossiers.db11,364已出数是
deep-hub-data深度行业数据枢纽站内行为平台 24 个垂类枢纽深度字段聚合(打分分档)每周plib_deep_data.db11,364已出数是
ops-desk运营工单与办理台账站内行为平台履约工单与办理进度(剔除联系方式列)每日plib_ops_desk.db1996已出数是
workbench工作台任务(内部)站内行为平台交付与工单任务聚合(办理进度台账)每日plib_workbench.db1927已出数内部
app应用中心入口(内部)站内行为平台 static/ 应用入口清单每周plib_app_center.db1742已出数内部
materials物料库(内部)站内行为平台宣传物料清单(static/datastore 交付件)每周plib_materials.db1566已出数内部
data-sample真实数据样本切片站内行为平台真实库 Top 库切片(列级剔联系方式 + 值级复检)每日plib_sample_slice.db1299已出数是
syscheck系统构件健康台账站内行为平台构件与库健康巡检(存在性 / 体积 / 索引)每日plib_syscheck.db1263已出数是
insights2洞察页(内部)站内行为平台洞察页清单(intel / geo / global 页)每周plib_insights_pages.db1263已出数内部
media媒体资源与投放位目录站内行为平台广告位库存与投放位(advert.av_inv、ad_hub.landing、交付形态)每周plib_media_hub.db1246已出数是
data-sample2样本快照与指纹站内行为平台样本快照(含行数指纹)每日plib_sample_snap.db1240已出数是
module-coverage模块覆盖与成熟度站内行为平台模块数据资产索引 collect_index.json每日plib_module_cov.db1210已出数是
samples样本中心(字段字典目录)站内行为平台数据资产索引(每资产一条样本目录 + 字段字典摘要)每日plib_sample_center.db1210已出数是
mod-svc模块服务指标(内部)站内行为平台模块服务指标(源自模块数据资产索引)每周plib_mod_svc.db1210已出数内部
sector-grid赛道商品(内部)站内行为平台赛道页与商品标的(static/sector-*.html、lib_boost)每周plib_sector_assets.db1179已出数内部
data-samples批量样本与校验批次站内行为平台样本批次与校验记录每日plib_sample_batch.db1175已出数是
call-center触达与外联效能台账站内行为平台外联/触达队列聚合(只出计数,不落任何联系方式)每日plib_call_center.db1170已出数是
samples2样本库索引站内行为平台数据资产索引(按域 × 库聚合)每日plib_sample_lib.db1156已出数是
ru俄语站与多语缺口(内部)站内行为平台俄语内容清单 + 其他语种缺口台账(ad_i18n 广告包 + 多语页)每周plib_site_ru.db1141已出数内部
service-detail服务目录(内部)站内行为平台交付形态与服务目录(deliver_deep.dd_mod)每周plib_service_catalog.db1124已出数内部
flagship旗舰分层(内部)站内行为平台旗舰库分层索引(17 库 × 6 档)每周plib_flagship_index.db1119已出数内部
talent人才与技能标签库授权源平台产业能力标签(r103_hubs 品类)+ 公开招聘职业分类映射每月plib_talent_hub.db196已出数是
CS客服工单(内部)站内行为平台客服与订单台账(剔除联系方式列)每日plib_cs_ticket.db186已出数内部
es西语站内容(内部)站内行为平台西语对外内容清单(ad_i18n 广告包 + 西语页)每周plib_site_es.db172已出数内部
cluster集群指标(内部)站内行为平台节点与库体积巡检(集群视图)每日plib_cluster_view.db157已出数内部
en英文站内容(内部)站内行为平台英文对外内容清单(ad_i18n 广告包 + 英文页)每周plib_site_en.db156已出数内部
global全球交付(内部)站内行为平台国别交付节点(static/geo-*.html)每月plib_global_nodes.db136已出数内部
bizcards商务名片登记(内部)站内行为平台合作与生态资源登记(剔除联系方式列)每周plib_bizcards.db117已出数内部

② 自动变现链路

① 来源 平台自有库 / 平台自有文件 / 官方开放源(本引擎不新增任何外部抓取) ↓ 只读打开 + LIMIT 上限 + 列名黑名单(联系方式列不过手) ② 落地 plib_*.db(一模块一库,表名语义化)→ 写 _pipe_run 审计行 ↓ 值级全文复检(邮箱 / 11 位手机 / +国际号)→ 命中即整库撤下 ③ 上架 collect_hub.measure() 实测行数 → plan 自动变 live ↓ 可售域模块自动派生 CMDB- SKU → 总台下单 → 履约工单 → 电子归档核销 ④ 频控 r157_daily.py(每日 02:22 cron)按频率调度,失败只记日志不影响其他任务

③ 合规声明

· 本引擎不新增任何外部采集:全部数据来自平台既有库、既有文件与已授权的官方开放源,采集行为的白名单与频控由 crawler_compliance.py 统一约束。

· 构建器绝不 select 联系方式列(email / phone / mobile / tel / wechat / whatsapp / contact / api_key 等);构建完成后再做值级全文复检,命中即整库撤下并记入审计。

· 平台运营支撑类(OPS 域)只登记、不出售,仅供内部运营看板使用。

· 本页所有行数取自 pipeline_index.json(构建时实测),不硬编码。

← 模块数据矩阵 · 旗舰数据库方案 · 订阅专区 · 返回成交总台