最近在看某硅谷的实时数仓教程(以电商平台为例), 结合了下之前自己的 hadoop 项目和学校教的(学校就教了几种建模方式),发现,实时数仓对电商来说是不是价值没有那么高,比如说,双十一,可能电商平台在结束后才能做决策(不可能临时变策略)最终感觉下来跟实时差别不大,反而引入了更多花里胡哨的技术。比如说双流 join ,感觉没啥真正非它不可的场景。我认为我之所以有这种感觉,是因为大部分时候,最后决策者实施者都是人,最后反而实时性变得不重要了。感觉实时数仓可能更多的是收集日志,做系统的错误报警?有懂的老哥过来分享下经验吗?
1
raycool 104 天前
实时交易风控和反欺诈需要实时计算多一些吧。
|
2
akira 104 天前
先说下 为啥你觉得不可能临时变策略。。
|
3
Sawyerhou 103 天前 via Android 1
实时数仓是给自动化算法用的,不是给人用的。
比如推荐算法,需要根据用户最新的搜索或点击进行推荐,提高成功率。 或者高频交易,必须用最新数据计算接下来的交易操作。 自动驾驶地图,路况路面雷达天气光线等信息,都需要实时更新 |
4
hekkowoerld OP @akira 比如说,双十一电商发个 100 块钱优惠券,突然发现效果不好,然后就撤掉了(或者是加钱了)或者是类似的其他活动,这不太可能,因为这涉及到商家的权益,和消费者的利益,和平台信誉。肯定是事先做足充分的市场调研,结合往年经验,才做的一个比较完善的决策。
|
5
hekkowoerld OP @Sawyerhou 谢谢
|