このトピックでは、MaxComputeのサービス通知について2024説明します。 これらのサービス通知には、プロジェクト開発の効率化に役立つ、MaxComputeの新機能、新しい構文、権限の更新に関する詳細情報が記載されています。
12月23、2024年 (UTC + 8): MaxFrameによる中国以外の新しいリージョンのサポートに関するお知らせ
MaxComputeユーザー様、
Alibaba Cloudは、12月23日 (月曜日) 、2024日 (UTC + 8) から、シンガポール、日本 (東京) 、インドネシア (ジャカルタ) のリージョンを含むようにサポートを拡大します。
MaxFrameは、Alibaba Cloudによって開発された分散コンピューティングフレームワークです。 Pythonプログラミングインターフェイスをサポートし、MaxComputeのコンピューティングリソースとデータインターフェイスを直接利用します。 MaxFrameは、PandasおよびXgboostインターフェイスとの互換性を維持しながら、分散処理も自動的に実装します。 これにより、MaxComputeを使用するPython開発者は、大規模なデータ処理、機械学習 (ML) およびAIデータの前処理、およびモデル開発をより効率的かつ便利に実行できます。 詳細については、「概要」をご参照ください。
ご不明な点がございましたら、MaxCompute Developer Community DingTalkグループ (ID: 11782920) 、プライベートDingTalkグループ、または公式MaxFrameユーザーサポートDingTalkグループ (ID: 37130012987) からテクニカルサポートにお問い合わせください。
ご協力ありがとうございます。
2024年11月28日 (UTC + 8): MaxCompute SLAアップデートに関するお知らせ
MaxComputeユーザー様、
Alibaba Cloudは、MaxComputeのサービスレベル契約 (SLA) を更新します。 次のコンテンツは、更新の詳細を説明しています。
セクション1.1〜1.10は、サービスの利用不能定義に関連する用語を提供するために追加される。
例外項 (k) 、(l) および (m) がセクション1.11に追加される。
SLAの詳細については、「MaxComputeサービスレベル契約」をご参照ください。
新しいSLAは、1月1日 (水曜日) 、2025 (UTC + 8) からMaxComputeに適用されます。 ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年11月14日 (UTC + 8): MaxCompute LogViewのセキュリティアップグレードに関するお知らせ
MaxComputeユーザー様、
Alibaba Cloudは、以下のリージョンでMaxCompute LogViewのセキュリティアップグレードを実行する予定です。12月2日 (月曜日) の14:00 2024 (UTC + 8):中国 (香港) 、China East 2 Finance、China North 2 Finance (招待プレビュー) 、China North 2 Ali Gov 1、China South 1 Finance、日本 (東京) 、シンガポール、マレーシア (クアラルンプール) 、インドネシア (ジャカルタ) 、ドイツ (フランクフルト) 、英国 (ロンドン) 、米国 (シリコンバレー) 、米国 (バージニア) 、アラブ首長国連邦 (ドバイ) 、およびSAU (リヤド-パートナーリージョン). セキュリティアップグレード後、DataWorks DataStudioおよびDataAnalysisのスケジューリング用に共有リソースグループを使用して送信されたジョブに対して生成されたLogView URLは、MaxComputeコンソールにリダイレクトされます。 次の両方の要件が満たされている場合にのみ、ジョブが属するプロジェクトのLogView URLにアクセスできます。
実名検証に合格した有効なAlibaba Cloudアカウントがあること。
ジョブが属するMaxComputeプロジェクトのメンバーです。 メンバーでない場合は、プロジェクト管理者にメンバーとして追加するように依頼できます。
DataWorksワークスペースで設定されたMaxComputeデータソースにアクセスするためのIDがユーザーIDと異なる場合、ユーザーはジョブが属するMaxComputeプロジェクトのメンバーではないため、ジョブのLogView URLにアクセスできないことがあります。 たとえば、DataWorksワークスペースは標準モードです。 開発環境のジョブを本番環境に送信しました。 実稼働環境のMaxComputeプロジェクトのメンバーでない場合、実稼働環境のプロジェクトに属している、送信したジョブのLogView URLにアクセスすることはできません。
上記の問題を防ぐには、次の両方の要件が満たされていることを確認する必要があります。
LogView URLにアクセスする必要があるすべてのチームメンバーがAlibaba Cloudアカウントを作成し、実名検証を完了しました。
チームメンバーがMaxComputeプロジェクトのメンバーとしてタイムリーに追加され、指定されたオブジェクトに必要な権限がメンバーに付与されます。
説明ユーザー管理および権限付与操作の詳細については、「ユーザーの計画と管理」および「MaxCompute権限」をご参照ください。
アップグレードされたLogviewは、デフォルトでジョブ実行結果を表示しません。
アップグレード中またはアップグレード後に、LogViewのアクセスとアクセス許可の設定について質問がある場合、またはテクニカルサポートが必要な場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年11月13日 (UTC + 8): MaxComputeジョブのインテリジェント診断機能のリリースに関するお知らせ
MaxComputeユーザー様、
MaxComputeジョブのインテリジェント診断機能は、11月13日 (水曜日) 、2024日 (UTC + 8) からさまざまなリージョンでリリースされます。 この機能により、ジョブの詳細な実行情報に基づいてSQLジョブをインテリジェントに診断できます。
失敗したジョブ: この機能により、システムはエラー情報に基づいて考えられる原因とカテゴリを一致させ、関連するエラーの説明と解決策を提供できます。
低速実行ジョブ: この機能を使用すると、ジョブのリソース使用状況と実行の詳細に基づいて、リソース不足、データスキュー、データ膨張、モードロールバックなどのジョブの例外を診断し、原因と解決策を提供できます。
この機能は、ジョブエラーや実行速度の遅いジョブなどの問題を特定し、問題を分析して解決するのに役立ちます。 この機能とその使用方法の詳細については、「ジョブのインテリジェント診断」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年10月30日 (UTC + 8): MaxCompute Tunnelのアップグレードとクロスリージョントラフィックガバナンスの実装に関するお知らせ
MaxComputeは、トンネルサービスをアップグレードし、11月18日 (月曜日) 、2024日 (UTC + 8) からリージョン間のトラフィックガバナンスを実行します。 以下の内容で詳細を説明します。
Tunnelの読み書きパフォーマンスとトラフィック制御
Streaming Tunnelでは、単一スロットデータ書き込みの最大速度が1メガバイト/秒から10メガバイト/秒に増加し、1秒あたりの単一スロット書き込み要求の最大数が10から100に増加します。 バッチトンネルでは、単一スロットデータ書き込みの最大速度は10メガバイト/秒です。
ストリーミングトンネルで使用されるスロットの数を計算する方法が最適化される。 最適化の前に、StreamUploadSessionインターフェイスを作成するときに指定されたスロットの数は、使用されるスロットの数と見なされます。 最適化の後、レコードがRecordPackオブジェクトに書き込まれるたびに1つのスロットが使用されます。 書き込み動作が完了した後、スロットは解放される。 最適化された方法は、バッチトンネルにも適用されます。 詳細については、「データ転送サービスの概要」をご参照ください。
リージョン間のトラフィックガバナンス
プロジェクトがデプロイされていないリージョンのエンドポイントを使用して、MaxComputeプロジェクトに接続することはできません。 プロジェクトが展開されるリージョンのエンドポイントまたはトンネルエンドポイントを設定する必要があります。 サポートされているエンドポイントについては、「エンドポイント」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
10月28日2024 (UTC + 8): UPDATE、DELETE、およびMERGE into操作の動作に対するすべてのDML操作の動的パーティションから静的パーティションへの変換の影響
MaxComputeユーザー様、
10月24日 (木曜日) 、2024日 (UTC + 8) 以降、動的パーティションを静的パーティションに変換する機能は、MaxComputeで実行されるすべてのDML操作に対してデフォルトで有効になります。 この機能は、クエリのパフォーマンスを向上させます。 実装により、UPDATE、DELETE、およびMERGE INTO操作の動作が変更されます。 存在しないパーティションに対してUPDATE、DELETE、またはMERGE INTO操作を実行すると、次のエラーメッセージが表示されることがあります。
ODPS-0110061: ddltaskの実行に失敗しました-操作DELETEターゲットパーティションは存在しますが、オブジェクトは見つかりません。ODPS-0422141: パーティションが見つかりません-パーティション 'projectName.tableName(pt=xxx)'は存在しません。
この場合、セッションレベルの設定SET odps.optimizer.cbo.ru le.filter.black=re; を追加して、実装を無効にすることができます。 その後、期待どおりにUPDATE、DELETE、またはMERGE INTO操作を実行できます。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年10月22日 (UTC + 8): MaxCompute SDK for Goのリリースに関するお知らせ
MaxComputeユーザー様、
MaxCompute SDK for Goは10月22日 (火曜日) 、2024 (UTC + 8) にリリースされました。 MaxCompute SDK for Goは、Goプログラミング用の一連のAPI操作です。 これらのAPIを呼び出して、Goで記述されたリクエストを送信し、MaxComputeを管理できます。 たとえば、プロジェクトへのアクセスと管理、データテーブルの処理、データの転送などができます。 詳細については、「Go用SDKの概要」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年10月15日 (UTC + 8): Alibaba Cloudクラシックネットワーク接続モードの廃止とMaxComputeのエンドポイントの更新に関するお知らせ
MaxComputeユーザー様、
MaxComputeのAlibaba Cloudクラシックネットワーク接続モードは、11月30日 (土曜日) 、2024日 (UTC + 8) に廃止され、代わりにクラウドサービスを接続するための内部ネットワークが使用されます。 停止日までに、仮想プライベートクラウド (VPC) またはクラウドサービスに接続するための内部ネットワークからMaxComputeサービスにアクセスできることを確認してください。 これにより、ネットワークの切断がビジネスに影響するのを防ぎます。 Alibaba Finance cloudリージョン、Alibaba Gov Cloudリージョン、および中国本土以外のリージョンのクラウドサービスを接続するためのVPCまたは内部ネットワークからのアクセスに使用されるエンドポイントが更新されます。 関連する設定をできるだけ早く更新することを推奨します。 サポートされているエンドポイントについては、「エンドポイント」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年10月14日 (UTC + 8): 同じリージョンの同じAlibaba CloudアカウントのMaxComputeの複数のレベル1サブスクリプションコンピューティングクォータの購入に関するお知らせ
MaxComputeユーザー様、
MaxComputeでは、10月14日 (月曜日) 、2024日 (UTC + 8) から、同じリージョンの同じAlibaba Cloudアカウントに対して複数のレベル1のサブスクリプションコンピューティングクォータを購入できます。 異なるレベル1のサブスクリプションコンピューティングクォータのリソースは、互いに独立しています。
この機能は、次のシナリオに適しています。
Alibaba Cloudアカウントの場合、異なるビジネスパッケージのサブスクリプションコンピューティングリソースを強力に分離する必要があります。
Alibaba Cloudアカウントの場合、ビジネスごとに請求書を分割するために異なる金融アカウントが必要です。 この機能が導入される前は、MaxComputeのサブスクリプションコンピューティングリソースを使用する場合、レベル2のクォータを使用して請求書を分割することはできません。 この機能を有効にすると、複数のレベル1クォータを購入して注文ごとに請求書を分割できます。
MaxComputeのクォータの詳細については、「MaxComputeコンソールでのコンピューティングリソースのクォータの管理」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年9月27日 (UTC + 8): MaxComputeのストレージコスト最適化機能のリリースに関するお知らせ。
MaxComputeユーザー様、
MaxComputeのストレージコスト最適化機能は、9月27日 (金曜日) 、2024日 (UTC + 8) から中国本土のパブリッククラウドリージョンでリリースされます。 この機能を使用すると、既定の最適化ポリシーとテーブルまたはパーティションの最終アクセス時間に基づいて、テーブルまたはパーティションのストレージ階層を標準ストレージから低頻度アクセス (IA) または長期ストレージに変更できるかどうかを判断できます。 既定の最適化ポリシーでは、過去30日以内にアクセスされなかったテーブルまたはパーティションの標準ストレージ層をIAストレージ層に変更し、過去180日以内にアクセスされなかったテーブルまたはパーティションの標準ストレージ層を長期ストレージ層に変更することを推奨しています。 ストレージ層が変更された後、ストレージコスト削減 (カタログ価格) を見積もることができます。 これにより、階層ストレージポリシーを設定できます。
機能と機能の使用方法の詳細については、「ストレージコストの最適化」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年9月20日 (UTC + 8): MaxComputeコンソールでのRAM権限管理に関するお知らせ
MaxComputeユーザー様、
セキュリティを確保するために、MaxComputeは10月8日 (火曜日) 、2024日 (UTC + 8) からコンソールの特定の機能のRAM権限管理を提供します。 デフォルトでは、Alibaba Cloudアカウントには、コンソールのすべての機能にアクセスまたは管理する権限があります。 RAMユーザーは、必要な権限が付与された後にのみ機能にアクセスできます。 次の表に、RAM権限管理が追加される機能と関連する権限アクションを示します。
モジュール | 特徴 | 権限アクション |
Workspace> ノートブック | ノートブック |
|
テナント> 外部サーバー |
| |
トンネル> MMA | MMA |
|
権限アクションの詳細については、「RAM権限」をご参照ください。
コンソールの機能を正常に使用するには、10月8日 (火曜日) 、2024 (UTC + 8) より前に、関連するモジュールのRAMユーザーにRAM権限を付与する必要があります。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年9月19日 (UTC + 8): Apsara Conference 2024でリリースされた新しいMaxCompute機能の招待プレビューに関するお知らせ
MaxComputeユーザー様、
Apsara Conference 2024では、招待プレビュー用にMaxComputeのいくつかの新機能がリリースされています。 新機能には、OpenLakeに基づくデータレイクハウスのソリューション2.0、オブジェクトテーブル内の非構造化データのSQLベースまたはMaxFrameベースの処理、Delta Table (増分テーブル形式) 、増分具体化ビューに基づく増分コンピューティング、MaxComputeクエリアクセラレーション (MCQA) 2.0。 この機能は、パブリッククラウドの中国 (杭州) 、中国 (上海) 、中国 (北京) 、および中国 (深セン) リージョンでのトライアルで利用できます。 機能を詳しく知りたい場合は、アプリケーションフォームに新しい機能の招待プレビューを入力してください。
アプリケーションが承認されたら、次のいずれかの方法を使用して新しい機能を試すことができます。
MaxComputeコンソール: MaxComputeコンソールでプロジェクトを作成するときに、[project Type] パラメーターに [Project for Invitational Preview of New Features at Apsara Conference] を選択します。
DataWorksコンソール: 招待プレビュー用の新しいバージョンのDataWorks Data StudioのワークスペースにMaxComputeコンピューティングリソースを関連付ける場合、ワークスペースの作成プロセス中にワークスペースの [Participate in Public preview of DataStudio of new version] をオンにします。
機能のトライアルは、Apsara Conference 2024の招待プレビューに使用される新しいプロジェクトでのみ使用できます。 これらの機能はまだ改善のために繰り返されています。 招待プレビュー中は、関連するプロジェクトと機能を運用できない場合があります。 したがって、主要なデータとビジネスにはプロジェクトと機能を使用しないことをお勧めします。
招待プレビューが完了すると、招待プレビューに使用されるプロジェクトは自動的に一般的な運用プロジェクトに変更され、プロジェクト内のデータと構成情報は失われません。 MaxComputeは、招待プレビューの結果に基づいて機能を改善および反復します。 ただし、一部の機能は一般的なプロジェクトでは使用できない場合があります。
2024年9月5日 (UTC + 8): MaxComputeコンソールのクォータ管理用に最適化されたUIに関するお知らせ
MaxComputeユーザー様、
MaxComputeコンソールでのサブスクリプションコンピューティングリソースのクォータ管理のUIが最適化されています。 新しいUIは、9月11日 (水曜日) 、2024 (UTC + 8) からすべてのリージョンで利用可能になります。 このUIは、時間ベースのスケーリングの使用に基づいて最適化されます。 クォータの時間ベースのスケーリング機能を使用する必要がない場合は、[基本設定] タブでサブスクリプションコンピューティングリソースのクォータを直接設定および管理できます。 クォータの時間ベースのスケーリング機能を使用する必要がある場合は、[基本設定] タブで設定を行った後、[スケーリング設定] タブでスケーリング設定を行うことができます。
次の変更は、MaxComputeコンソールのクォータページのサブスクリプションコンピューティングリソースのクォータ管理のUIで発生します。
[クォータテンプレート] タブの名前が [基本設定] に変更されました。 [基本構成] タブでは、次の操作を実行できます。
[基本設定の編集] をクリックして設定を変更します。 たとえば、レベル2クォータを作成し、Exclusive or Not、1つのジョブの最大CU数、Enable Priority、Non-reserved CU、Scheduling Policyパラメーターなど、レベル2クォータの基本パラメーターを設定できます。 [Reserved CU [minCU,maxCU]] および [Elastically Reserved CU] パラメーターを設定することもできます。 ただし、2つのパラメーターは、有効なクォータリソース構成プラン (以前はクォータプランと呼ばれていました) にのみ適用されます。 時間ベースのスケーリングを使用する場合は、[スケーリング設定] タブで [予約済みCU [minCU,maxCU]] および [Elastically予約済みCU] パラメーターを設定することを推奨します。
[基本設定] タブのクォータリストで、レベル2のクォータを削除します。 削除ロジックは、元の [クォータテンプレート] タブでの最適化前と同じです。
元の [Quota Plans] タブと [Time Plans] タブは [Scaling Configuration] タブに結合され、[Reserved CU [minCU,maxCU]] および [Elastically Reserved CU] パラメーターのみが保持されます。 [スケーリング設定] タブでは、次の操作を実行できます。
クォータリソース構成プランの作成: この操作は、[プランの追加] 機能と同じです。 クォータの予約CU [minCU,maxCU] および [Elastically Reserved CU] パラメーターを設定できます。
クォータリソース構成プランのリストを表示する: クォータリソース構成プランのリストと各プランの詳細を表示できます。 これは、プラン構成を比較するのに役立ちます。
タイムプランの管理: タイムプラン機能によって提供される機能は変更されません。
時間ベースのスケーリングのプレビュー: これは新機能です。 レベル2のクォータを選択すると、さまざまな期間のコンピューティングユニット (CU) 割り当てのトレンドチャートを表示できます。
グローバルスケーリング設定の表示: これは新機能です。 すべてのクォータリソース構成計画の詳細を表に表示できます。 これにより、すべてのクォータのCUの最小数と最大数、およびさまざまな期間の弾力的に予約されたCUの数を表示できます。
クォータ管理の詳細については、「MaxComputeコンソールでのコンピューティングリソースのクォータの管理」をご参照ください。 ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートにお問い合わせください。MaxFrameテクニカルサポートのDingTalkグループ (ID: 37130012987) に参加するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加します。
ご協力ありがとうございます。
2024年8月29日 (UTC + 8): MaxComputeコンソールでのRAM権限管理に関するお知らせ
MaxComputeユーザー様、
セキュリティを確保するために、MaxComputeは9月10日 (火曜日) 、2024日 (UTC + 8) からコンソールの特定の機能のRAM権限管理を提供します。 デフォルトでは、Alibaba Cloudアカウントには、コンソールのすべての機能にアクセスまたは管理する権限があります。 RAMユーザーは、必要な権限が付与された後にのみ機能にアクセスできます。 次の表に、RAM権限管理が追加される機能と関連する権限アクションを示します。
モジュール | 特徴 | 権限アクション |
ワークスペース> プロジェクト | odps:ListOutboundInternetAddress | |
ワークスペース> プロジェクト | odps:UpdateUsersToRole | |
ワークスペース> クォータ |
| |
ワークスペース> リソースの観察 |
| |
odps:ListTopJobInfo | ||
| ||
ワークスペース> 仕事 | odps:ListJobSnapshotInfos | |
ワークスペース> マテリアライズド・ビュー |
| |
テナント> ネットワーク接続 |
| |
テナント> 画像 |
|
権限の詳細については、「RAM権限」をご参照ください。
コンソールの機能を正常に使用するには、9月10日 (火曜日) 、2024 (UTC + 8) より前に、関連するモジュールのRAMユーザーにRAM権限を付与する必要があります。 たとえば、RAMユーザーにクォータの管理権限を付与する場合は、RAMユーザーに次のポリシーをアタッチする必要があります。
{
"Version": "1",
"Statement": [
{
"Effect": "Allow",
"Action": [
"odps:UpdateQuota",
"odps:UpdateQuotaPlan",
"odps:UpdateSubQuotas",
"odps:UpdateQuotaSchedule",
"odps:CreateQuotaPlan",
"odps:DeleteQuotaPlan",
"odps:CreateQuotaSchedule",
"odps:ListQuotaRoutingRules",
"odps:CreateQuotaRoutingRule",
"odps:GetQuotaRoutingRule",
"odps:RemoveQuotaRoutingRule",
"odps:UpdateQuotaRoutingRule"
],
"Resource": "*"
}
]
}ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年8月19日 (UTC + 8): MaxComputeのリソース監視機能のアップグレードに関するお知らせ
MaxComputeユーザー様、
MaxComputeが提供するリソース監視機能には、ストレージリソースとジョブパフォーマンスに関連するメトリックが追加されます。
ストレージリソースに関連するメトリック
これらのメトリックを使用すると、ストレージリソース使用量とストレージ使用量分布の変更を表示できます。 選択したリージョンのさまざまなストレージタイプの合計ストレージ使用率とストレージ使用率を表示できます。 また、プロジェクトと選択した時間範囲に基づいて、さまざまなストレージタイプのストレージ使用率の傾向と、詳細なテーブルまたはパーティションのストレージ情報を表示することもできます。 これにより、ストレージ使用量が予期せず急上昇したかどうかを判断できます。 スパイクが発生した場合、最も早い機会に最も多くのストレージリソースを消費する上位N個のプロジェクト、テーブル、またはパーティションを最適化できます。
ジョブのパフォーマンスに関連するメトリック
これらのメトリクスを使用すると、選択したフィルター範囲内の最高の合計CPU時間、最高の平均CPU時間、最高の合計メモリ時間、および最高の平均メモリ時間に基づいてランク付けされたジョブの上位10のシグネチャとExtNodeIdsを表示できます。
これらのメトリックを使用すると、最も長い期間を持つ上位10のジョブと、最長の合計期間と最長の平均期間に基づいてランク付けされたジョブの上位10のシグネチャとExtNodeIdを表示できます。
これらのメトリクスを使用すると、一定期間内にジョブによってスキャンされたデータ量の傾向を表示できます。
これらのメトリックを使用すると、一定期間内にCU時間ごとにジョブによってスキャンされるデータ量の傾向を表示できます。
上記のメトリックを使用すると、最も多くのリソースと時間を消費するジョブをすばやく特定し、できるだけ早い機会にジョブを管理できます。 また、CU時間ごとにスキャンされるデータ量を比較して、特定の期間にパフォーマンスが低下するかどうかを判断することもできます。 特定の期间でパフォーマンスが低下した场合は, ジョブ管理机能を使用して原因を特定し, できるだけ早い时期に问题を解决できます。
機能と機能の使用方法の詳細については、「リソース監視の使用」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年7月31日 (UTC + 8): PyTorchアルゴリズムコンポーネントの廃止に関するお知らせ
MaxComputeユーザー様、
以前のバージョンのPyTorchアルゴリズムコンポーネントは、システム全体のアップグレードにより、Platform for AI (PAI) のすべてのクラスターで8月30日 (UTC + 8) に正式に廃止されます。 pai -name pytorch100/pytorch131/pytorch151 PAIコマンドを使用してMaxComputeに送信されたPyTorchジョブの場合、停止日より前にジョブを移行することを推奨します。 また、Deep Learning Containers (DLC) を使用してPyTorchジョブを送信することを推奨します。 詳細については、「トレーニングジョブの送信」をご参照ください。 2024年8月31日 (UTC + 8) 以降、以前のバージョンのPyTorchアルゴリズムコンポーネントを使用する既存のジョブは、PAIサービスレベル契約 (SLA) によって保証されなくなります。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年7月18日 (UTC + 8): 特定のAPI操作の中止に関するお知らせ
MaxComputeユーザー様、
MaxComputeの特定のAPI操作は、7月31日 (水曜日) 、2024 (UTC + 8) に中止されます。 以下の内容で詳細を説明します。
廃止されたAPI操作と新しいAPI操作の置き換え
廃止されたAPI操作のバージョンと名前
新しいAPI操作のバージョンと名前
バージョン
API操作名
2019-06-12
CreateProject
2022-01-04: CreateProject
DeleteProject
なし
GetProject
2022-01-04: GetProject
OpenMaxComputeService
なし
中止の理由
バージョン2019-06-12のAPI操作は、MaxComputeでは使用できなくなりました。 これは、機能の実装方法が変更され、長期的なシステム検出結果が外部の顧客からの呼び出しがないことを示しているためです。
クォータに関する詳細情報を提供するために、Alibaba CloudはMaxComputeが提供するバージョン2022-01-04のGetQuota操作のレスポンスコンテンツを変更する予定です。 長期的なシステム検出結果は、外部の顧客からの電話がないことも示しています。 上記の理由により、GetQuota操作はサービスを提供しなくなりました。
影響
API操作が中止されると、コードに関連するAPI操作の呼び出しに対して、
InvalidApi.NotFoundまたはInvalidAction.NotFoundエラーコードが返されます。置換または実装の推奨事項
コード実行が、特定の要求、応答、またはSDK内の関連コードなど、中断されたAPI操作のSDKに依存する場合、SDKのその後のアップグレード中に依存関係が見つからない場合があります。 この問題に対処するには、代わりに新しいメソッドを提供するか、関連する機能を削除します。 コードが中断されたAPI操作に直接依存している場合は、代わりに新しいメソッドを指定するか、関連する機能を削除します。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年7月4日 (UTC + 8): [ジョブ] ページの [開始時間] 、[待機時間] 、および [実行期間] パラメーターの可用性に関するお知らせ
MaxComputeユーザー様、
MaxComputeは、[ジョブ] ページで次のパラメーターを提供します。
開始時刻: ジョブがコンピューティングリソースの最初のバッチを受信した時刻。 DDLステートメントを含むジョブなど、短期間実行されるジョブやコンピューティングリソースを消費しないジョブの場合は、代わりにジョブ送信時間が使用されます。
待機時間: ジョブが送信されてからジョブの実行が開始されるまでの時間。
実行期間: ジョブの開始時刻から終了時刻までの期間。
デフォルトでは、上記のパラメーターは [ジョブ] ページで非表示になります。 これらのパラメーターは、[表示フィールドの選択] ダイアログボックスで選択して、パラメーターを表示できます。 上記のパラメーターに基づいて、リソース割り当ての待機時間が長い場合にジョブの実行が遅くなるかどうかをすばやく判断できます。 さらに、パラメーターとジョブ分析結果に基づいて、スロージョブがリソース不足によるものか、複数のジョブ間のリソース競合によるものかを判断できます。 その後、ビジネスシナリオに基づいて、ジョブの実行の最適化、ジョブの優先順位の調整、コンピューティングリソースの管理を行うことができます。
機能と機能の使用方法の詳細については、「ジョブの管理」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年7月3日 (UTC + 8): MaxFrame機能のリリースに関するお知らせ
MaxComputeユーザー様、
分散コンピューティングフレームワークMaxFrameは、7月3日 (水曜日) 、2024日 (UTC 8) に、中国 (上海) 、中国 (北京) 、中国 (ウランカブ) 、中国 (深セン) 、中国 (成都) で正式にリリースされます。 MaxFrame機能は、他のリージョンでまもなく利用可能になります。
MaxFrameは、Alibaba Cloudによって開発された分散コンピューティングフレームワークです。 MaxFrameはPythonプログラミングインターフェイスをサポートしており、MaxComputeのコンピューティングリソースとデータインターフェイスを直接使用できます。 これにより、Python開発者は大量のデータを処理し、より効率的で便利な方法でAIモデルを開発できます。 MaxFrameはPandasインターフェイスと完全に互換性があり、分散処理を自動的に実装します。 MaxComputeの膨大なコンピューティングリソースとデータを、より身近で効率的な方法で使用して、データの処理、データの探索の視覚化、機械学習 (ML) とAIに基づく科学的コンピューティングと開発を実行できます。
MaxFrameの機能と使用方法の詳細については、「概要」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートにお問い合わせください。MaxFrameテクニカルサポートのDingTalkグループ (ID: 37130012987) に参加するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加します。
ご協力ありがとうございます。
2024年7月1日 (UTC + 8): 4つのリージョンでのコンピューティングコスト最適化の可用性に関するお知らせ
MaxComputeユーザー様、
MaxComputeのコンピューティングコスト最適化機能は、中国 (香港) 、シンガポール、インドネシア (ジャカルタ) 、ドイツ (フランクフルト) の各リージョンで利用できます。 この機能を使用して、実際のジョブリクエスト数と予想されるリソース構成に基づいて、レベル1のサブスクリプションクォータでコンピューティングリソースのリソース構成最適化プランを生成できます。 この機能を使用して、従量課金制のコンピューティングリソースをサブスクリプションのコンピューティングリソースに変更するプロジェクトのリソース構成最適化プランを生成し、推定される最適化効果を表示することもできます。 これにより、コンピューティングコストをさらに削減し、リソース使用率を向上させることができます。 リリース後、この機能は次の10のリージョンで使用できます。中国 (杭州) 、中国 (上海) 、中国 (北京) 、中国 (張家口) 、中国 (深セン) 、中国 (成都) 、中国 (香港) 、シンガポール、インドネシア (ジャカルタ) 、ドイツ (フランクフルト) 。
機能と機能の使用方法の詳細については、「コンピューティングコストの最適化」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年5月17日 (UTC + 8): MaxCompute LogViewのセキュリティアップデートに関するお知らせ
MaxComputeユーザー様、
MaxComputeは、中国 (成都) 、中国 (張家口) 、中国 (深セン) 、中国 (北京) 、中国 (上海) 、中国 (杭州) 、中国 (ウランカブ) の各リージョンで、14:00の6月3日 (月曜日) 、2024 (UTC + 8) からLogViewのセキュリティアップデートを実行する予定です。 セキュリティ更新後、DataWorks、DataStudio、およびDataAnalysisの共有リソースグループを使用して送信されたジョブに対して生成されたLogView URLは、MaxComputeコンソールにリダイレクトされます。 次の両方の要件が満たされている場合にのみ、ジョブが属するプロジェクトのLogView URLにアクセスできます。
実名検証に合格した有効なAlibaba Cloudアカウントがあること。
ジョブが属するMaxComputeプロジェクトのメンバーです。 メンバーでない場合は、プロジェクト管理者にメンバーとして追加するように依頼してください。
DataWorksワークスペースで設定されたMaxComputeエンジンにアクセスするためのIDがユーザーIDと異なる場合、ユーザーはジョブが属するMaxComputeプロジェクトのメンバーではないため、送信されたジョブのLogView URLにアクセスできない場合があります。 たとえば、DataWorksワークスペースは標準モードです。 開発環境のジョブを本番環境に送信しました。 実稼働環境のMaxComputeプロジェクトのメンバーでない場合、実稼働環境のプロジェクトに属している、送信したジョブのLogView URLにアクセスすることはできません。
上記の問題を防ぐには、次の両方の要件が満たされていることを確認する必要があります。
LogView URLにアクセスする必要があるすべてのチームメンバーがAlibaba Cloudアカウントを作成し、実名検証を完了しました。
チームメンバーはMaxComputeプロジェクトのメンバーとしてすぐに追加され、指定されたオブジェクトに必要な権限がメンバーに付与されます。
説明ユーザー管理および権限付与操作の詳細については、「ユーザーの計画と管理」および「MaxCompute権限」をご参照ください。
アップグレード中またはアップグレード後に、LogViewのアクセスとアクセス許可の設定について質問がある場合、またはテクニカルサポートが必要な場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。 ご協力ありがとうございます。
May 13, 2024 (UTC + 8): MaxComputeでのetcd証明書のアップグレードに関するお知らせ
MaxComputeユーザー様、
{}
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年5月8日 (UTC + 8): MaxComputeのジョブパフォーマンス監視機能のリリースに関するお知らせ
MaxComputeユーザー様、
MaxComputeのジョブパフォーマンス監視機能は、20:00 on May 8 (Wednesday) 、2024 (UTC + 8) にリリースされます。 この機能を使用すると、指定した期間中のジョブ数、CU使用量、ジョブ実行時間の変化の傾向を表示できます。
前述のすべてのメトリクスは、時間範囲、プロジェクト、またはクォータでフィルタリングできます。 ジョブの種類、実行時のステータス、プロジェクト、またはクォータごとにジョブの統計を収集することもできます。
メトリックを使用して、ジョブ数またはリソース使用量が急増しているかどうかを確認できます。 これにより、できるだけ早い機会に問題を解決できます。 システムは、さまざまな期間のジョブ実行時間を比較し、ジョブの実行が遅く、ジョブのパフォーマンスが低下しているかどうかを判断します。
機能と機能の使用方法の詳細については、「リソース監視の使用」トピックの「ジョブパフォーマンス」セクションを参照してください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年4月30日 (UTC + 8): MaxComputeのストレージアップグレードに関するお知らせ
MaxComputeユーザー様、
MaxComputeは
中国 (香港) リージョンのクラスターのストレージアップグレードを10:00から16:00、5月15日 (水曜日) 、2024 (UTC + 8) に実行します。 このようなアップグレードはリスクの低い変更です。 ほとんどの場合、アップグレードプロセスはジョブに影響しません。 アップグレード中にジョブが失敗した場合は、ジョブを再実行します。 この問題は非常に低い確率で発生します。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
April 23, 2024 (UTC + 8): 中国本土以外のリージョンでのMaxComputeプロジェクトのライフサイクル変更に関するお知らせ
MaxComputeユーザー様、
4月25日 (木曜日) 、2024 (UTC + 8) から、従量課金サービスは、中国 (香港) 、日本 (東京) 、シンガポール、マレーシア (クアラルンプール) 、インドネシア (ジャカルタ) 、ドイツ (フランクフルト) 、英国 (ロンドン) 、米国 (シリコンバレー) 、米国 (バージニア) 、UAE (ドバイ) 、およびSAU (リヤド-パートナー地域) 。 リージョン内のすべてのプロジェクトのライフサイクルは、従量課金制サービスのライフサイクルと一致しています。 リージョン内のプロジェクトのストレージおよびダウンロードリソースの使用に対して生成される従量課金サービスの請求書の場合、[課金詳細] タブの [製品詳細] は [MaxCompute (従量課金)] に変更され、[使用記録] タブの [課金対象項目] は [MaxCompute(Postpay)] に変更されます。 リージョン内のプロジェクトのサブスクリプションリソースを購入した場合、サブスクリプションリソースのライフサイクルのみがサブスクリプションインスタンスのライフサイクルと一致します。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年4月7日 (UTC + 8): サブスクリプションMaxComputeサービスに適用される新しい割引に関するお知らせ
MaxComputeユーザー様、
サブスクリプションMaxComputeサービスのサブスクリプションリソースには、2024年4月7日10:00 (UTC + 8) に新しい割引が適用されます。 新しい割引は、標準のコンピューティングリソースやトンネルサービスなどのサブスクリプションリソース仕様に基づいて提供されます。 新しい割引ルール:
1年間のサブスクリプションで15% 割引、2年間のサブスクリプションで30% 割引、3年間のサブスクリプションで50% 割引を利用できます。
.
2024年3月14日 (UTC + 8): ActionTrailイベントデータのMaxComputeへの移行に関するお知らせ
MaxComputeユーザー様、
MaxComputeでは、ActionTrailを使用してトレイルを作成し、ActionTrailイベントをMaxComputeに移行できます。
ActionTrailサービスを使用すると、過去90日間のAlibaba Cloudアカウントのイベントデータを追跡および記録できます。 より長い期間前に生成されたイベントデータを分析する場合は、ActionTrailを使用してトレイルを作成し、イベントデータをMaxComputeに配信できます。 その後、イベントデータを照会および分析できます。
機能の詳細と機能の使用方法については、「ActionTrailイベントデータのMaxComputeへの移行」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年2月29日 (UTC + 8): DataWorks専用リソースグループのPyODPSノードのアップグレードに関するお知らせ
MaxComputeユーザー様、
PyODPSノードが実行されるDataWorksの排他的リソースグループは、PyODPSのサポートを強化するために、4月8日 (月曜日) 、2024 (UTC + 8) から5月30日 (木曜日) 、2024 (UTC + 8) まで各リージョンでアップグレードされます。 次の表に、各リージョンのアップグレード計画を示します。 アップグレード後、PyODPSノードのパッケージバージョンは変更されません。
項目 | リージョン | アップグレード期間 |
| 中国 (成都) と中国 (張家口) | 2024年4月8日から2024年4月11日まで |
中国 (深セン) | 2024年4月15日から2024年4月18日 | |
中国 (北京) | 2024年4月22日から2024年4月25日まで | |
中国 (上海) | 2024年5月6日から2024年5月9日まで | |
中国 (杭州) | 2024年5月13日から2024年5月16日まで | |
中国 (香港) および中国以外の地域 | 2024年5月20日から2024年5月23日 | |
中国東部1ファイナンスおよび中国東部2ファイナンス | 2024年5月27日から2024年5月30日 |
アップグレード中、進行中のPyODPSジョブが影響を受ける可能性があります。 排他的リソースグループを使用するPyODPSジョブが失敗した場合、またはその他の関連する問題が発生した場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
February 28, 2024 (UTC + 8): MaxComputeシングルノード障害のドリルに関するお知らせ
MaxComputeユーザー様、
サービスアクセスの信頼性に関する訓練は、中国 (張家口) および中国 (成都) リージョンで、15:00から16:00まで2024年2月28日 (UTC + 8) に実施されます。 ほとんどの場合、仕事はドリルの影響を受けません。 ドリルのためにジョブが失敗した場合は、ジョブを再実行してください。 この問題は非常に低い確率で発生します。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。
2024年1月25日 (UTC + 8): MaxComputeのコンピューティングコスト最適化機能のリリースに関するお知らせ
MaxComputeユーザー様、
コンピューティングコスト最適化機能は、MaxComputeのコンピューティングリソース最適化機能に代わる1月25日 (木曜日) 、2024 (UTC + 8) にリリースされます。
コンピューティングコスト最適化機能は、コンピューティングリソース最適化機能に基づいて開発される。 コンピューティングリソース最適化機能は、レベル1サブスクリプションクォータでコンピューティングリソースのリソース構成最適化プランを生成することができる。 コンピューティングリソース最適化機能と比較して、コンピューティングコスト最適化機能は、プロジェクトの従量課金制コンピューティングリソースをサブスクリプションコンピューティングリソースに変更するためのリソース構成最適化プランを生成することもできます。 これにより、コンピューティングコストをさらに最適化し、リソース使用率を向上できます。 詳細については、「コンピューティングコストの最適化」をご参照ください。
ご質問がある場合は、プライベートDingTalkグループのテクニカルサポートに連絡するか、MaxComputeテクニカルサポートのDingTalkグループ (ID: 11782920) に参加してください。
ご協力ありがとうございます。