致力于将AI技术应用于复杂环境中数据的Cloudera近日宣布平台更新，重点包括Cloudera Iceberg REST Catalog和Cloudera Lakehouse Optimizer。此次更新进一步强化了公司致力于提供由Iceberg驱动的领先开放式数据湖仓一体架构的承诺。Iceberg REST Catalog将提供无缝共享数据所需的开放互操作性，Lakehouse Optimizer将确保数据始终处于优化状态，实现跨引擎访问数据的成本效益。同时，所有功能均在Cloudera统一的治理和安全框架下进行。上述增强功能在今日Cloudera主办的AI和数据行业盛会EVOLVE25 NYC上亮相。
随着企业竞相发掘AI和分析功能的潜力，同时也面临着诸多挑战，例如复杂的数据架构、孤立的平台和不一致的治理。在系统之间移动数据进行分析或AI训练，会增加成本、带来安全风险，并延迟洞察获取。现代企业需要开放、安全且可互操作的数据架构，以支持AI广泛存在背景下处于各类复杂环境中的数据，以及多引擎分析，同时避免数据重复或被单一供应商锁定。
Cloudera Iceberg REST Catalog-降低总体拥有成本，加快价值实现
作为将Iceberg REST Catalog集成到完整生命周期数据和AI平台中的提供商，Cloudera实现了在各类云和数据中心上的安全、零拷贝数据共享和统一治理。为应对挑战，Cloudera的新产品将Iceberg REST Catalog集成到其平台中。同时，在无需复制或移动数据的情况下，这种方式允许第三方引擎直接访问Cloudera管理的数据，并确保在公有云、数据中心和边缘计算中实现一致的执行策略和元数据智能。从实时摄取和大规模处理、到使用AI和BI的完整数据生命周期内，Cloudera能够在各类云和数据中心中，提供统一的安全、治理和互操作性。通过基于REST的访问扩展Apache Iceberg功能，Cloudera助力企业确保其数据战略面向未来，同时保持控制力、可见性和合规性。
此次更新后，所有采用Iceberg的Cloudera客户均可享受跨生态系统的无缝零拷贝互操作性，轻松连接Snowflake、Databricks、AWS Athena、AWS EMR及Salesforce等主流分析与AI引擎，同时符合ACID规范，并拥有统一的访问策略。客户还将获得企业级的治理能力，通过Cloudera的共享数据体验（SDX）将细粒度访问控制、数据血缘和审计功能扩展到第三方工具，从而确保大规模降低安全数据门槛，并确保合规性。此外，客户将拥有开放的元数据访问权限，在不受专有目录限制的情况下即时发现数据资产，通过一致的真实数据源加速AI开发和商业智能。这些增强功能降低了总体拥有成本（TCO），并加快了价值实现速度。实际案例显示，该方案能帮助客户降低高达79%的数据存储成本。同时，增强功能还提高了跨业务线数据的可见性。例如，某全球领先卫星运营商在控制成本的同时，强化了AI数据管道。
Cloudera Lakehouse Optimizer-提升查询性能并降低存储成本
Cloudera Lakehouse Optimizer是一项全新智能服务，将为Cloudera湖仓内的Apache Iceberg提供自动优化和表维护功能。其智能优化能力超越基础表维护，涵盖重写清单文件和位置删除文件等任务。通过智能优化表，该服务能够有效减少人工数据管理任务和运营成本，助力客户聚焦于提炼数据洞察。作为开放解决方案，该服务支持任意公有云上兼容Iceberg的引擎，并通过独特的用户界面提供企业就绪的可观测性和控制力，支持细粒度的策略定义与调整。优化策略可应用于特定表或整个数据目录。并且，在即将发布的版本中，该服务有望成为业界领先的支持本地部署的解决方案。内部基准测试表明，该服务可将查询性能提升高达13倍，并将存储成本降低36%。
Cloudera首席产品官Leo Brunnick表示：“作为大数据行业的领先平台公司，Cloudera持续投入资源，推动Apache Iceberg开放表格式适用于企业。通过今天的新发布，我们将继续履行承诺，为客户在其所需的任何时间和地点，提供灵活、可扩展的深度洞察。正是这份承诺，让全球众多大型企业信赖Cloudera，通过我们将AI技术应用于复杂环境中的企业数据。”
由Iceberg REST Catalog提供支持的Cloudera数据共享和Cloudera Lakehouse Optimizer 现已推出。
“掌”握科技鲜闻 （微信搜索techsina或扫描左侧二维码关注）
