OSS ツール - CLI、GUI、移行、マウントツール - Object Storage Service

Object Storage Service (OSS) は、ファイルのアップロード、署名付き URL の生成、データの移行、バケットのマウントを行うための管理ツールを提供しています。サードパーティのツールやコミュニティプラグインにより、OSS の機能がさらに拡張されます。

公式ツール

コマンドラインツール

ターミナルまたは自動化スクリプトを使用して OSS を管理します。

ツール	説明
ossutil 2.0 (推奨)	最新の OSS コマンドラインツールです。バケットとオブジェクトの管理を行うための複数レベルのコマンド (ハイレベルおよび API レベル) をサポートしており、同時アップロード、再開可能アップロード、ディレクトリ転送が可能です。外部認証情報、OIDC 認証情報、および Instance RAM Role 認証情報の自動ロール名取得をサポートしています。 `--output-format` オプションをサポートしており、デフォルトの raw 形式の代わりに JSON、YAML、または XML として結果を出力できます。
ossutil 1.0	OSS のコマンドライン管理ツールです。バケットとオブジェクトを管理します。ファイルの同時アップロードと再開可能アップロードをサポートしています。ディレクトリのアップロードとダウンロードをサポートしています。
Alibaba Cloud CLI	Alibaba Cloud リソースを管理するための統合 CLI で、標準化されたコマンドによる OSS データ管理が可能です。具体的な操作については、「Cloud Shell で Alibaba Cloud CLI を使用して OSS データを管理する」をご参照ください。
osscmd (非推奨)	この CLI は 2019 年 7 月 31 日以降利用できなくなりました。その機能は現在、ossutil に統合されています。バケットとオブジェクトを管理するための完全なコマンドセットを提供していました。 Windows および Linux プラットフォームをサポートしていました。制限事項： Python 2.5 から 2.7 のみと互換性がありました。低頻度アクセス (IA)、アーカイブストレージ、コールドアーカイブストレージ、ディープコールドアーカイブストレージ、クロスリージョンレプリケーション (CRR)、またはミラーリングベースのオリジンフェッチをサポートしていませんでした。

グラフィカル管理ツール

グラフィカルインターフェースを使用してオブジェクトを参照および管理します。

ツール

説明

ossbrowser 2.0 (推奨)

最新の OSS グラフィカル管理ツールです。

従来の ossbrowser のほとんどの機能をサポートしています。
Alibaba Cloud アプリ、Alipay、または DingTalk による QR コードスキャンなどのサインイン方法が追加されています。
バケットのお気に入り機能をサポートしています。
ブラウザ内でのファイル編集をサポートしています。
ファイル管理と転送を効率化する再設計された UI を備えています。

ossbrowser

グラフィカル管理ツールです。

Windows エクスプローラのようなファイル参照機能を提供します。
ファイルの直接参照をサポートしています。
ディレクトリのアップロードとダウンロードをサポートしています。
同時アップロードと再開可能アップロードをサポートしています。
RAM ユーザーに対するグラフィカルなポリシー認証をサポートしています。
Windows、Linux、および Mac プラットフォームをサポートしています。

制限事項：

ossutil よりも転送速度が遅くなります。
移動とコピーは 5 GB 未満のオブジェクトに制限されます。
単一ファイルの最大アップロードサイズは 48.8 TB です。

データ移行および同期ツール

他のソースから OSS にデータを移行または同期します。

ツール	説明
Data Online Migration (推奨)	コード不要のビジュアルオンライン移行サービスです。最小限の設定で、さまざまなソースから OSS に大規模なデータセットを安全に移行できます。 AWS S3、Tencent Cloud COS、Huawei Cloud OBS、Volcengine TOS、Google Cloud GCS、Microsoft Azure Blob、およびセルフホスト型の S3 互換ストレージをサポートしています。移行環境を構築することなく、オンラインで移行ジョブを送信および監視できます。
オフライン移行 (Data Transport)	カスタマイズされた物理 Data Transport デバイスを使用して、テラバイトからペタバイト規模のローカルデータをクラウドに移行するデータ移行サービスです。転送効率を向上させ、データセキュリティの課題に対処します。データセンターのクラウド移行や、ファイルおよび履歴画像データの企業規模のアーカイブに適しています。物理メディア転送により、パブリックネットワーク帯域幅の制限を克服します。
ossimport	OSS のデータ同期ツールです。サードパーティのデータソースから OSS にファイルを同期します。バッチ移行のための複数サーバーへの分散デプロイをサポートしています。テラバイト規模以上の移行を処理します。 Windows および Linux プラットフォームをサポートしています。 Java 7 が必要です。

ファイルシステムマウントツール

バケットをローカルディレクトリとしてマウントし、ローカルファイルとして OSS オブジェクトを管理します。

ツール

説明

ossfs 2.0 (推奨)

コンピューティング集約型アプリケーション向けに再設計されたバージョンです。POSIX セマンティクスに一部制限がありますが、大幅なパフォーマンス向上を実現しており、今後の開発における主要バージョンです。OSS SDK または OSS Connector for AI/ML が実用的でない場合に、AI トレーニング、推論、または自動運転シミュレーションで ossfs 2.0 を使用してください。

サーバー側の OSS 読み取り / 書き込み機能に重点を置いた基本的な POSIX 互換性を提供します。
エンドツーエンドの最適化により、大きなオブジェクトに対する高性能なシーケンシャル I/O を実現します。
最適化されたメタデータ管理により、小さなオブジェクトの効率的な同時読み込みを実現します。

制限事項：

ossfs 2.0 でバケットをマウントする場合、以下の制限事項が適用されます。

アクセス許可要件：AccessKey は、ターゲットバケットまたはプレフィックス関連リソースに対する完全なアクセス許可を持つ必要があります。そうでない場合、マウントが失敗するか、機能が正しく動作しない可能性があります。
ストレージクラスの制限：アーカイブストレージ、コールドアーカイブストレージ、またはディープコールドアーカイブストレージクラスのバケットのマウントはサポートされていません。
オブジェクト名の制限：オブジェクト名は 255 文字 (Linux の制限) を超えることはできません。長い名前はマウントポイントで表示されません。
書き込みの制限：ランダム書き込みはサポートされていません。書き込みはデフォルトで追記不可能なオブジェクトを作成します。デフォルトのパートサイズは 8 MiB で、最大ファイルサイズは 78.125 GiB に制限されます。upload_buffer_size マウントオプションでシャードサイズを設定してください。
名前変更操作 (非アトミック)
- ファイル：ファイルをコピーしてから、リモートソースを削除します。
- ディレクトリ：すべてのファイルをコピーしてから、ソースを一括削除します。デフォルトの制限は 200 万の子孫ファイルで、rename_dir_limit マウントオプションで設定可能です。
同時書き込みの整合性：複数のクライアントが同じファイルに同時に書き込む場合、データの整合性は保証されません。
POSIX API 互換性：部分的に互換性があります。詳細については、「POSIX API サポート」をご参照ください。

ossfs 1.0

Linux 用のバケットマウントツールです。OSS バケットをローカルファイルシステムにマウントし、OSS オブジェクトに対してローカルファイル操作を可能にします。

ほとんどの POSIX 機能をサポートしています：ファイルの読み取り / 書き込み、ディレクトリ、リンク、アクセス許可、UID/GID、および拡張属性。
大きなファイルのマルチパートアップロードをサポートしています。
データの整合性を保証するための MD5 検証をサポートしています。

制限事項：

ossfs 1.0 でバケットをマウントする場合、以下の制限事項が適用されます。

高同時実行の読み取りおよび書き込みシナリオには適していません。
説明
- 読み取りと書き込みの両方でディスクキャッシュが必要なため、高同時実行シナリオではディスクパフォーマンスがボトルネックになります。
- 同時読み取りおよび書き込みリクエストは帯域幅を奪い合います。
ハードリンクをサポートしていません。
アーカイブストレージ、コールドアーカイブストレージ、またはディープコールドアーカイブストレージのバケットのマウントをサポートしていません。
アップロードされたファイルを編集すると、ファイルが再アップロードされます。
list directory などのメタデータ操作は、リモート OSS サーバーへのアクセスが必要なため、遅くなります。
ファイルまたはフォルダの名前変更が失敗し、データの不整合が発生する可能性があります。
複数のクライアントが同じバケットをマウントする場合、同じオブジェクトへの同時書き込みを防ぐためにアクセスを調整する必要があります。

AI ツール

AI ワークフローで OSS データに効率的にアクセスおよび保存します。

ツール

説明

OSS Connector for AI/ML

PyTorch トレーニングで OSS データに効率的にアクセスするための Python ライブラリです。

トレーニング中のランダムアクセスのためのマップスタイルデータセットをサポートしています。
シーケンシャルストリームアクセスのためのイテラブルスタイルデータセットをサポートしています。
トレーニングチェックポイントを OSS に直接読み込むための OssCheckpoint オブジェクトをサポートしています。

制限事項：

オペレーティングシステム：Linux x86-64
glibc：>=2.17
Python：3.8 から 3.12
PyTorch：>=2.0
OSS Checkpoint には Linux カーネルの userfaultfd サポートが必要です。

FTP ツール

ツール

説明

ossftp

FTP ベースのオブジェクト管理ツールです。

FileZilla、WinSCP、FlashFXP などの FTP クライアントで動作します。
ファイル操作を OSS API 呼び出しにマッピングする FTP サーバーとして機能します。
Python 2.7 以降に基づいています。
Windows、Linux、および macOS プラットフォームをサポートしています。

開発および認証ツール

開発ワークフローと統合し、きめ細かいアクセス許可を管理します。

ツール

説明

RAM Policy Editor

OSS 認証ポリシーの自動ジェネレーターです。

要件に基づいてポリシーを生成し、RAM カスタムポリシーとして使用できます。
Chrome、Firefox、および Safari ブラウザをサポートしています。

サードパーティツールおよびプラグイン

OSS を一般的な開発ツールやフレームワークと統合するための、コミュニティで開発されたツールおよびプラグインです。

ツール	説明
Big Data Tools	ビッグデータワークフローで OSS を統合するための JetBrains IDE プラグインです。 OSS を含むリモートファイルシステムを参照するための UI を提供します。ファイルマネージャーと同様のファイル操作 (ファイルのコピー、移動、名前変更、削除、ダウンロード) を提供します。ファイルをプレビューできます。CSV ファイルの場合、テキストビューとテーブルビューを切り替えることができます。変更時刻などのファイルメタデータを表示します。 Parquet などのバイナリファイルをプレビューできます。複数のタブでバケットとフォルダを開くことができます。詳細については、「Big Data Tools を使用して JetBrains IDE を OSS に接続する」をご参照ください。
Hacklog Remote Attachment	ローカルサーバーの代わりに OSS に添付ファイルとメディアを保存し、読み込み速度を向上させてホストストレージを削減する WordPress プラグインです。詳細については、「WordPress でリモート添付ファイルを OSS に保存する方法」をご参照ください。
FileZilla	ローカルファイルを OSS にアップロードし、ローカルストレージの負担を軽減する FTP クライアントです。詳細については、「FileZilla を使用してローカルサイトファイルを OSS にアップロードする方法」をご参照ください。