#架构设计

出现在硬件行情湖仓数据平台2 引擎与消息原理1 数据平台工程1

2026年9月湖仓一体不是一次切换：旁路双写、直连湖与读路径的回滚设计把 Parquet 目录升级成 Iceberg 表，再让 Doris 直连湖、最后把后端读路径切过去——每一步都能独立验证、独立回滚。记录阶段划分理由、"读回刚写分区再入湖"保的三件事，以及 warehouse 路径被序列化成单斜杠导致 scheme null 的那个坑。大数据 2026年3月选题先问数据能不能长出来：硬件行情平台是怎么定下来的毕设立题时有四个候选方向：全栈平台、算法深度、数据中台治理、智能体应用。这篇记录我怎么做取舍——把卖点建立在"现有数据当天就能出结果"的能力上，以及为什么"预测"这个词必须从题目里拿掉。工程笔记

2026年8月Kafka 可靠性语义笔记：从分区到 Exactly-Once整理 BigData-Notes 中 Kafka 分区、副本、生产者确认、消费者 offset 和 Exactly-Once 语义，重点理解“Kafka 保证了什么，以及没有保证什么”。消息队列

2025年11月Hive、Spark 与 Doris 在数仓链路里的分工基于 BigData-Notes 的学习整理和本地项目文档，梳理 Hive Metastore、Spark SQL、Parquet、Doris 服务层的定位，以及为什么不要把所有表都同步到 Doris。OLAP