比如计算空调销量,常常会考虑订单的状态,产品的范围等因素。
在实现时,一般需要根据这些条件做数据过滤,选出来需要做计算的数据。大家常常将这类数据过滤逻辑称作取数逻辑。相同的取数逻辑常常会在很多其他指标计算中使用。如何复用就成为了一个问题。
在一般的功能性软件开发中,可以通过代码复用来解决这个问题(比如抽象一个公共的模块)。在数据开发中,除了代码复用,还需要考虑计算复用,因为很多大数据量的计算是比较消耗资源的。
先给出我们项目中的一些思考:
点这里查看全文: https://brightliao.com/#/NDE2MzJj
大家是如何进行复用的呢?还有没有其他的复用方式?
1
miniliuke 2023-01-10 09:30:21 +08:00
dbt
|
4
BrightLiao OP @dqzcwxb 哈哈,给大家分享一下个人的思考,也想听听大家的经验啊!
|
5
BrightLiao OP @miniliuke 嗯,dbt 不错,我们项目做得比较早,自己搞了一个类似 dbt 的框架,现在开源了 https://github.com/easysql/easy_sql
|
6
Livid MOD @dqzcwxb 这个主题已经被移动到 /go/promotions
|