Lakehouse 将如何彻底改变 SaaS

Dive into business data optimization and best practices.
Post Reply
nusaibatara
Posts: 240
Joined: Tue Jan 07, 2025 4:21 am

Lakehouse 将如何彻底改变 SaaS

Post by nusaibatara »

好吧,一些大型企业已经转向使用 Iceberg 仓库——如果这种架构的好处得到更多人的认可,更多的企业可能会效仿。这对未来几年的技术意味着什么?

从根本上来说,我们相信未来将会把计算带入数据,而不是将数据发送到计算。

我们认为,最重大的颠覆 IG数据库 将来自查询引擎开放市场的兴起——这将推动创新、提高性能并降低各种用例的成本。现有的提供托管存储和计算的数据平台(如 Snowflake 和 Databricks)将与 Trino 和 Spark 等专用查询引擎竞争不同公司的不同项目。新的查询引擎也会出现。无论哪种方式,公司都不会被锁定在与其数据仓库相关的一种查询引擎上——他们将有更多选择。

数据密集型 SaaS 应用还可以在 Iceberg 存储之上开发自己的查询引擎。例如,一些分析公司(如 Amplitude)已经构建了专门的数据库,以执行非常快速的时间序列和事件分析查询,从而实现基于实时数据的交互式分析。虽然(据我们所知)不可能在 Snowflake 或 Databricks 等标准云数据仓库上实现同等性能,但使用 Iceberg,理论上可以构建完全“仓库原生”版本的 Amplitude。Amplitude 无需复制客户的数据并将其存储在专门的数据库中,而是可以开发一个直接位于客户 Iceberg 表之上的时间序列查询引擎。
Post Reply