数据湖(Data Lake)
缩写:无
简述
以低成本对象存储等保存多形态原始与加工数据的体系,模式后置、计算与存储分离常见。治理不足时易成「数据沼泽」。
使用场景
海量原始日志、机器学习特征、多引擎共用一份数据。
实践与应用
• 分区与文件格式规范。
• 元数据与权限治理。
• 与仓协同(湖仓)明确时效与质量层。
注意事项
• 无治理的堆文件不可分析。
• 小文件与格式混乱损害性能。
对比与易混
| 数据湖 | 数仓 | |
|---|---|---|
| 模式 | 读时常见 | 写时常见 |
关联术语
• 数据仓库:治理后模型对照
• 对象存储:常见底座
• 模式:读时模式常见