MPP和Hadoop正在被抛弃?聊聊银行业数据分析的趋势
数据分析给银行业带来了巨大的收益,也正面临前所未有的挑战。 首先是历史累积数据量越来越大,随着时间推移数据类型和数据量都在累加,渐渐从涓涓细流汇聚成数据湖泊。 其次是新兴业务数据量增长迅速,随着数字人民币等新兴业务的推广,在线业务的发展,交易数量加速,导致从数据湖泊进一步长成数据海洋。
湖仓一体是否会掀起金融业的下一波数字浪潮?
当数字经济成为生活的主体,金融平台的改变是最为明显的。以往现金业务为主时,交易流程与频次都会相对更低,而如今数字化推动了交易模式和交易频率的升级,这也意味着金融平台所面临的场景及需求发生了变化。当数字的律动变得更加频繁,当用户的需求变得更加复杂,当平台的发展有了新的路径,数字化程度和数据处理能力都会成为评价金融平台的核心标准所在。
湖仓一体会成为企业的必选项吗?
作为一种新兴架构,湖仓一体在扩展性、事务性以及灵活度上都体现出了独有的优势,也正因如此,无论在技术圈还是资本圈,湖仓一体都受到了前所未有的关注度。
湖仓一体2.0:数据分析的终局之选
下图是一张非常经典的数据分析技术演进图,从中可一窥整体发展历程。本文将按时间顺序盘点下各阶段产品及技术特点,并预测下未来发展方向。
湖仓一体化的路,很多人都只走了一半
2022已至,如果回看2021,这一年无疑是数据的价值进一步体现的一年。数据应用场景不断丰富,从工业、交通、金融到制造,几乎无处不在。当然,数据价值的迅速提升也给开发者和相关企业带来了新的问题。数据量的爆发让存储成本和数据预处理需求增加,数据使用场景的拓宽和大量的结构化数据和非结构化数据让实时处理难度变高,这对平台和用户都提出新的挑战。
湖+仓≠湖仓,什么才是真正的湖仓一体?
前段时间Databricks和Snowflake因TPC-DS测试结果在湖仓战场正面开撕,让很多业内吃瓜群众大呼过瘾,我们暂且不论两企业究竟孰强孰弱。众所周知,Databricks自始至终都主打数据湖这张牌,而Snowflake则是靠云数仓库起家,有意思的是两大玩家殊途同归,决赛场最终聚焦在了当前炙手可热的Lakehouse-湖仓一体。这说明了什么?
资本为什么盯上国产数据库
上篇《资本为什么会盯上国产数据库》,老鱼从宏观层面谈了原因,如:市场够大、增速很快、需求拉动、政策利好等。本篇,老鱼想从微观角度,也就是从某一具体数据库厂商获得融资的角度进一步聊聊资本为什么盯上国产数据库。
逝世五年——你必须认识的这位数据库之父
五年前,也就是 2017 年 7 月 13 日,“数据库之父”查尔斯·巴赫曼 (Charles Bachman) 逝世。
受美制裁,俄罗斯 ClickHouse 能否扛起数据库大旗?
随着俄乌冲突的持续,包括不少巨头在内的二十余家科技公司暂停了俄罗斯的所有服务。一时间,人们对俄罗斯科技实力,尤其是基础软件的水平格外关注。通过观察作为核心基础软件之一的数据库管理系统,我们可以对俄罗斯技术实力略知一二。
Spark 对战 OushuDB !究竟是谁快出几十倍?
随着互联网技术的不断发展,各行各业的数据处理量与日俱增,Hadoop 作为一项革命性的技术提供了处理海量数据的能力,随之而来的Spark又大大提升了 Hadoop 的计算能力,解决了Hadoop 的性能问题,受到了大数据行业的热捧。但到了2022年,Spark依然是大数据行业的最佳选择吗?