Amazon Data Firehose 是将流数据可靠加载到各种数据湖、数据存储和分析工具中的一种最轻松的方式。它可以捕获、转换流数据并将其加载到 Amazon S3、Amazon Redshift、Amazon OpenSearch Service(前身为 Amazon Elasticsearch Service)、通用 HTTP 终端节点以及 Datadog、New Relic 和 MongoDB 之类的服务提供商。它是一项完全托管式服务,可以自动扩展以匹配数据吞吐量,并且无需持续管理。它还可以在加载数据前对其进行批处理、压缩、转换和加密,从而最大程度地减少目标使用的存储量,同时提高安全性。
您可以从亚马逊云科技管理控制台中轻松创建 Firehose 流,单击几下对其进行配置,然后开始从数十万个数据来源向流发送要持续加载到亚马逊云科技的数据,而这些工作只需几分钟即可完成。您还可以将 Firehose 流配置为先自动将传入数据转换为 Apache Parquet 和 Apache ORC 等列式格式,然后再传输至 Amazon S3,从而实现经济高效的存储和分析。
使用 Firehose,您只需为您通过该服务传输的数据量付费,如果适用,还需支付数据格式转换费用和 VPC 传输费用。没有最低费用,也没有设置成本。