用心打造
VPS知识分享网站

Airbyte的最新更新使数据传输速度更快、更可靠

Snowflake 目标连接器是 Airbyte 最受欢迎和最重要的连接器之一,此次对其进行了重大改进。这款数据集成平台和 ELT 工具宣布推出一系列强大的更新,旨在提供更快的数据传输速度、更可预测的定价以及更准确、更安全的数据,以支持人工智能和分析。

Airbyte的最新更新使数据传输速度更快、更可靠

Airbyte 数据传输平台的全新性能提升包括高容量 Snowflake 同步,成本最多可降低 95%,具体降幅取决于使用场景。这得益于其采用直接加载方式并优化了计算和存储资源的使用。Airbyte 采用直接加载旨在减少不必要的延迟和复杂性。以前需要数小时才能完成的任务现在只需几分钟即可完成,从而显著降低了数据传输成本。

同步速度比以前的流程快十倍,这得益于新设计的底层加载机制,该机制利用了 Snowflake 的原生批量加载功能,从而显著提高了性能并降低了成本。

该公司声称,现在大规模使用 Snowflake 的团队将受益于更快的 AI 工作负载或下游分析数据交付速度,而且基础设施成本要低得多。

同样,Airbyte平台中数据量排名第三的数据库源——Microsoft SQL Server连接器,速度提升高达84%。与此同时,MySQL到S3的同步速度也大幅提升,从23 MB/s提升至110 MB/s,提升幅度高达五倍。公司数据显示,用户现在只需两个半小时即可将1 TB的数据从PostgreSQL传输到S3,而此前则需要两天时间,从而节省了大量资源。

整个平台重新设计了 Azure、Amazon S3、BigQuery 和 ClickHouse 的连接器,速度可提升高达十倍。

S3 数据湖目标连接器现已支持 Apache Polaris 目录集成,支持 Iceberg 格式,并可自动管理目录。因此,数据写入 S3 的同时,表也会自动注册到 Polaris 中。这使得 S3 数据可在所有数据湖工具(包括 Fink、Spark 和 Trino)中查询和发现。

Airbyte 的首席执行官兼联合创始人 Michel Tricot 就这些最新进展评论道:“数据是人工智能和分析的燃料,能够帮助企业改进决策,而企业自身拥有的、与其客户和市场相关的第一方数据,其重要性无可比拟。我们正在帮助企业以前所未有的便捷性和速度获取数据。”

随着时间的推移,这些最新的优化原则,如直接加载、计算调优和智能批处理,将应用于更多 Airbyte 目标连接器,而不仅仅是 Snowflake。

Airbyte Plus 计划定价

全新的 Airbyte Plus 套餐为中小企业提供固定年费,并包含专家支持。结合 Airbyte 的服务法律协议,这让企业对其重要数据运营的支持充满信心。

Airbyte Plus 专为需要完全托管的云软件、单点登录 (SSO) 和核心功能的专业人士和小团队而设计。该方案还为客户提供基于容量的预测性年度计费。

与此同时,Airbyte Pro 专为需要治理、可扩展性和完全托管的云托管的大型组织而设计,并且采用基于容量的定价模式。

成本取决于并行运行的管道数量,从而确保定价具有可扩展性和可预测性。Airbyte 的标准方案将继续采用传统的基于流量的定价模式,非常适合工作量不太稳定的小型团队和个人用户。

人工智能驱动的连接器构建

Airbyte 的另一项更新体现在其连接器构建器上,该构建器现在包含 AI 辅助功能。这些功能旨在帮助用户更轻松地创建自定义数据连接器,从而确保 AI 工作流程和分析能够获得正确的数据。

Airbyte Cloud 和 Airbyte Flex 的用户将受益于自动更新,这些更新会发送到使用全新连接器构建器创建的任何连接器。当 Airbyte 改进连接器、提升性能或提供新功能时,更新就会出现。

简化数据传输

Airbyte 的全新升级和功能旨在简化在各种数据源和目标之间传输数据的过程。因此,企业可以确信其数据安全、准确、及时更新,并已做好人工智能应用的准备。

凭借全新的简化本地部署、用于人工智能和分析的安全数据以及可预测的定价,客户能够更好地轻松管理其数据管道,同时确保合规性、可靠性和成本控制。

赞(0)
未经允许不得转载;国外VPS测评网 » Airbyte的最新更新使数据传输速度更快、更可靠
分享到