云存储

与云存储交互

无论使用 RDD/WriteClient API 还是 Datasource，以下信息都有助于配置对云存储的访问。

• AWS S3
  S3 与 Hudi 协同工作所需的配置。
• Google Cloud Storage
  GCS 与 Hudi 协同工作所需的配置。
• 阿里云 OSS
  OSS 与 Hudi 协同工作所需的配置。
• Microsoft Azure
  Azure 与 Hudi 协同工作所需的配置。
• 腾讯云对象存储
  COS 与 Hudi 协同工作所需的配置。
• IBM Cloud Object Storage
  IBM Cloud Object Storage 与 Hudi 协同工作所需的配置。
• 百度云对象存储
  BOS 与 Hudi 协同工作所需的配置。
• JuiceFS
  JuiceFS 与 Hudi 协同工作所需的配置。
• Oracle Cloud Infrastructure
  OCI 与 Hudi 协同工作所需的配置。
• KS3 File System
  KS3 FS 与 Hudi 协同工作所需的配置。
• 腾讯云 GooseFS
  GooseFS 与 Hudi 协同工作所需的配置。

note

许多云对象存储系统（例如 Amazon S3）允许你设置生命周期策略，例如 S3 生命周期，以便管理对象。其中一种策略与对象过期有关。如果你的组织已配置了此类策略，请确保排除 Hudi 表（或为其设置更长的过期时间）。