兄弟们，做大数据的要是没被“数据质量”折磨过，我都怀疑你是不是在玩票。线上业务天天变、源头数据花式造、表字段随时加减，今天你多一列，明天我空一列——只要没人盯，...

这些新名词好像将高速公路从传统的土木工程+信息化系统的范畴推向了一个集成了大数据、人工智能、车路协同等新技术的复合型领域。

qData 数据中台开源版 v1.1.0 对部分功能与工程构建流程进行了调整。本次更新主要基于社区用户在实际使用过程中反馈的问题，集中在清洗与稽查规则补充、构建...

所以这篇，我想用“走心、接地气”的方式聊聊大数据管道测试的三板斧：单元测试、集成测试、端到端测试。咱别整那些“一看就头昏”的学术名词，把它们变成能落地的策略。

大语言模型（LLMs）在复杂推理任务中，通过思路链（CoT）提示取得了显著的性能。然而，传统的CoT依赖于用自然语言明确表达的推理步骤，这不仅降低了效率，还限制...

大家好，我是 Echo_Wish。今天不聊那些高屋建瓴的框架宣传，我们来点接地气的——数据分区策略怎么做才有效？分区裁剪怎么让查询跑得飞？

在现代业务环境中，“表太多” 已成为数据库同步领域越来越普遍的现象。一个成熟的业务背后，数据库中经常有几千张甚至上万张表。在这种规模下，一旦某张表未被同步，下游...

兄弟们，今天咱不聊玄学、不说情怀，咱聊点让工程师半夜惊醒、老板天天催命的硬需求——数据流水线的事务与一致性，尤其是 Exactly-Once（“只处理一次”）怎...

我们继续来聊 Flink 容错相关的内容。前面在介绍 Checkpoint 和 Savepoint 时提到了 State 的稳定存储，那究竟如何存储以及存储在什...

从“碎片感知”到“一图统览”，从“人工搬运”到“自动流转”——某河流域数字孪生建设的底层突破

说句实在话，这几年我看过太多团队“上了 Flink”，但真正把 Flink 用对的，并不多。

现在我们已经了解了 Flink 的状态如何定义和使用，那 Flink 是如何做容错的呢？今天我们一起来了解一下。

qData 数据中台商业版指标平台通过原子指标计算模型，将指标的定义、计算、验证和存储纳入统一体系。本文将围绕该原子指标计算方案，介绍其在真实项目中的落地方式。

Flink 被广泛应用的原因，除了我们前面提到的对时间以及窗口的应用之外，另一点就是它强大的容错机制，以及对 Exactly Once 的支持。

我见过太多项目，一上来就聊 Flink 多强、Spark 多牛、ClickHouse 多快，结果一上线：