数据

数据发现与数据目录平台实践(2025)

数据发现与数据目录平台实践(2025)数据目录让数据资产可见可用。本文从模型、搜索与治理展开。一、模型与采集元数据模型:覆盖数据集、字段、任务与责任人。采集:在 ETL、流处理与查询层自动采集与更新。二、搜索与标签搜索:按名称、字段与标签与血缘进行检索。标签:统一标签体系与权限,支持业务域分类。三、

数据分片键选择与迁移策略(2025)

数据分片键选择与迁移策略(2025)正确的分片键与迁移策略决定系统扩展性与稳定性。一、分片键选择稳定键:按用户/租户等分片,降低热点风险。组合键:在查询与写入模式下评估键的覆盖性。二、热点与再均衡热点识别:观测分片负载与延迟与错误率。再均衡:按计划迁移或复制热点分片降低压力。三、在线迁移与路由迁移: