MaxCompute:MaxCompute kullanım detaylarını analiz edin

Parametreler

• Time Period: Bir başlangıç ve bitiş zamanı seçmek için tıklayın.

  Bir iş iki gün arasında çalışıyorsa, örneğin 1 Aralık'ta başlayıp 2 Aralık'ta sona eriyorsa, indirilen kullanım kayıtlarında işi bulmak için başlangıç zamanını 1 Aralık olarak ayarlamanız gerekir. Ancak, işin maliyetleri 2 Aralık faturasına dahil edilir.

• Commodity Name:

  • MaxCompute(Subscription)

  • MaxCompute(Pay-as-you-go)

• Billable Item: İhtiyaçlarınıza göre bir öğe seçin.

• Billable Item

  • ODPSDataPlus:

    • Bu seçenek, bir bölgede yalnızca abonelik projeleri satın aldığınızda ve kullandıkça öde projesi bulunmadığında geçerlidir. Bu seçenek, abonelik projeleri içindeki depolama ve indirme gibi kullandıkça öde faturalandırılabilir öğeleri için kullanım kayıtları sağlar.

    • 25 Nisan 2024 tarihinden önce, Çin (Hong Kong) bölgesinde veya Çin anakarası dışındaki başka bir bölgede hem abonelik hem de kullandıkça öde projeleriniz etkinleştirilmişse, bu durum varsayılan olarak abonelik hesaplama kotaları kullanan projelerdeki depolama ve indirme faturalandırılabilir öğeleri için kullanım kayıtlarına uygulanır. Bu senaryoda varsayılan olarak kullandıkça öde kotaları kullanan projeler için kullanım kayıtlarını sorgulamak üzere MaxCompute(Pay-as-you-go) seçeneğini belirlemeniz gerekir.

  • ODPS_QUOTA_USAGE: Hesaplama ve özel Tunnel için esnek ayrılmış kaynakların kullanım detayları.

  • MaxCompute(Pay-as-you-go): hesaplama, depolama ve indirme gibi kullandıkça öde faturalandırılabilir öğeleri için kullanım kayıtları.

• Time Unit: Varsayılan değer Saattir.

SQL maliyetlerini analiz edin

SQL işleri, MaxCompute kullanıcılarının %95'inden fazlası tarafından kullanılır ve genellikle harcamaların büyük bir bölümünü oluşturur.

• Yöntem 1: Elektronik tablo ile analiz

  Kullanım kayıtları tablosunda ComputationSql olarak kategorize edilen verileri analiz edin. Belirli SQL işlerinin maliyetinin beklentileri aşıp aşmadığını veya çok sayıda SQL görevi olup olmadığını kontrol edin. Bir SQL işinin maliyeti aşağıdaki formül kullanılarak hesaplanır: SQL/Interactive Analytics Read Volume (Bytes) / 1024 / 1024 / 1024 × SQL Complexity × SQL Unit Price.

  Örneğin, veri okuma miktarı 7352600872 bytes olan bir standard SQL görevi için maliyet SQL data read (7352600872 bytes / 1024 / 1024 / 1024) × SQL complexity of 1 × 0.0438 USD/(GB × complexity) = 0.292 USD şeklindedir.

  Faturanız aniden artarsa, öncelikle abonelik kaynak paketinizin tükenip tükenmediğini kontrol edin. Kaynak paketinizdeki hesaplama kotası tükendiğinde, aşan kullanım otomatik olarak kullandıkça öde bazında faturalandırılır (birim fiyat GB başına 0,0438 USD × karmaşıklık), bu da ani bir maliyet artışına neden olabilir.

  Yüksek maliyetli bir SQL işini bulmak için şu adımları izleyin:

  1. Kullanım detayları CSV dosyasında, veri kategorisi ComputationSql olan kayıtları filtreleyin ve en büyük okuma hacmine sahip kaydı bulmak için SQL/Interactive Analytics Read Volume (Bytes) (computationsqlinput alanı) alanına göre azalan sırada sıralayın.

  2. Girişin ölçüm bilgisi kimliğini (yani feeid alanını) kaydedin.

  3. MaxCompute istemcisinde (odpscmd) veya DataWorks'te Logview URL'sini almak için wait <instanceid>; komutunu çalıştırın. SQL içeriğini görüntülemek ve yüksek maliyetli işi bulmak için URL'yi tarayıcınızda açın.

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

• -- Analyze SQL consumption, ranked by sqlmoney.
  SELECT  to_char(endtime,'yyyymmdd') as ds,feeid as instanceid
          ,projectid
          ,computationsqlcomplexity  -- Complexity
          ,SUM((computationsqlinput / 1024 / 1024 / 1024)) as computationsqlinput  -- Data input (GB)
          ,SUM((computationsqlinput / 1024 / 1024 / 1024)) * computationsqlcomplexity * 0.0438 AS sqlmoney
  FROM    maxcomputefee
  WHERE   TYPE = 'ComputationSql'
  AND to_char(endtime,'yyyymmdd') >= '20190112'
  GROUP BY to_char(endtime,'yyyymmdd'),feeid
           ,projectid
           ,computationsqlcomplexity
  ORDER BY sqlmoney DESC 
  LIMIT   10000
  ;

İş büyüme eğilimlerini analiz edin

Maliyet artışları genellikle tekrarlanan yürütmelerden veya yanlış yapılandırılmış zamanlama özelliklerinden kaynaklanan iş sayısındaki artıştan dolayı meydana gelir.

• Yöntem 1: Elektronik tablo ile analiz

  kullanım kayıtlarınızda veri türü ComputationSql olan verileri analiz edin. Her proje için günlük iş sayısını sayın ve herhangi bir projedeki iş sayısının önemli ölçüde dalgalanıp dalgalanmadığını kontrol edin.

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze job growth trends.
  SELECT  TO_CHAR(endtime,'yyyymmdd') AS ds
          ,projectid
          ,COUNT(*) AS tasknum
  FROM    maxcomputefee
  WHERE   TYPE = 'ComputationSql'
  AND     TO_CHAR(endtime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(endtime,'yyyymmdd')
           ,projectid
  ORDER BY tasknum DESC
  LIMIT   10000
  ;

  Çalıştırma sonuçları, 12'sinden 14'üne kadar MaxCompute'e gönderilen başarılı iş sayısındaki dalgalanmayı gösterir.

Depolama maliyetlerini analiz edin

• Elektronik tablo kullanarak 0,00001 USD depolama ücretinin nedenini analiz edin:

  MaxCompute'ü deneme kullanımı için etkinleştirirsiniz ve aktif bir iş olmasa bile günlük 0,00001 USD ücret görürsünüz. Bu durum genellikle MaxCompute'de 0,5 GB'dan az bazı verilerin depolanmış kalmasından kaynaklanır.

  Data type sütunundaki Storage faturalandırılabilir öğesini görüntüleyin. Örneğin, maxcompute_doc projesi 508 bayt veri içerir. [maliyet kuralları] faturalandırma kurallarına göre, 512 MB'a kadar veri depolama için 0,00001 USD ücretlendirilirsiniz. Dışa aktarılan CSV dosyasındaki kullanım detayları Project ID (maxcompute_doc), Billing information ID, Data type (Storage) ve Storage (bytes) sütunlarını gösterir. Her kayıt 508 baytlık bir depolama miktarını gösterir ve bu da küçük miktarda kalan verinin maliyet oluşturduğunu doğrular. Bu veriler yalnızca test amaçlıysa, bu sorunu aşağıdaki yollardan biriyle çözebilirsiniz:

  • Tablo verileri artık kullanılmıyorsa, projedeki tablo verilerini silmek için Drop Table ifadesini yürütün.

  • Proje artık gerekli değilse, projeyi MaxCompute konsolundaki Projects sayfasından silin .

• Bir günden az süreli depolama maliyetlerini elektronik tablo kullanarak analiz edin:

  1. Data type sütunundaki Storage faturalandırılabilir öğesini görüntüleyin. alian (örnek proje adı) projesinde 333.507.833.900 bayt verinin depolandığını varsayalım. Veriler saat 08:00'de yüklendiğinden, depolama ücretleri toplam 15 saat boyunca saat 09:07'den itibaren ölçümlenir.

     Günlük ölçüm periyodu günün sonunda sona erer, bu nedenle son kayıt 4 Nisan faturasına dahil edilmez.

  2. [faturalandırma kuralları] göre, önce 24 saatlik ortalama depolamayı hesaplayın ve ardından maliyeti faturalandırma formülünü kullanarak hesaplayın.

     -- Calculate average storage.
     333,507,833,900 bytes × 15 / 1024 / 1024 / 1024 / 24 = 194.127109076362103 GB
     
     -- The storage cost for one day is calculated as follows, with the result rounded to four decimal places.
     194.127109076362103 GB × USD 0.0006/GB/day = USD 0.1165/day

• Depolama maliyetlerinin dağılımını SQL kullanarak analiz edin

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze storage costs.
  SELECT  t.ds
          ,t.projectid
          ,t.storage
          ,CASE    WHEN t.storage < 0.5 THEN t.storage*0.0015     -- When the actual data storage of the project is greater than 0 MB and less than or equal to 512 MB, the unit price is USD 0.0015/GB/day.
                   WHEN t.storage >= 0.5  THEN t.storage*0.0006  -- When the actual data storage of the project is greater than 512 MB, the unit price is USD 0.0006/GB/day.
          END storage_fee
  FROM    (
              SELECT  to_char(starttime,'yyyymmdd') as ds
                      ,projectid
                      ,SUM(storage/1024/1024/1024)/24 AS storage
              FROM    maxcomputefee
              WHERE   TYPE = 'Storage'
              and to_char(starttime,'yyyymmdd') >= '20190112'
              GROUP BY to_char(starttime,'yyyymmdd')
                       ,projectid
          ) t
  ORDER BY storage_fee DESC
  ;

  Aşağıdaki yürütme sonucu yalnızca gösterim amaçlıdır. Sorgu, storage_fee alanına göre azalan sırada sıralanmış üç kayıt döndürür: 2019-01-13 tarihinde depolama yaklaşık 8.467 GB idi ve maliyeti yaklaşık 73,31 CNY idi; 2019-01-12 tarihinde depolama yaklaşık 4.527 GB idi ve maliyeti yaklaşık 40,22 CNY idi; ve 2019-01-14 tarihinde depolama yaklaşık 2.672 GB idi ve maliyeti yaklaşık 24,63 CNY idi. Yürütme sonuçlarından aşağıdaki sonuçlar çıkarılabilir:

  • Depolama 12'sinde arttı ve 14'ünde azaldı.

  • Depolama optimizasyonu için, tablolar için yaşam döngüsü ayarlamanızı ve kullanılmayan geçici tabloları silmenizi öneririz.

• Arşiv depolama, seyrek erişim depolama, arşiv depolama erişimi ve seyrek erişim depolama erişiminin dağılımını SQL kullanarak analiz edin

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze archive storage costs.
  SELECT  to_char(starttime,'yyyymmdd') as ds
          ,projectid
          ,SUM(storage/1024/1024/1024)/24*0.0011 AS longTerm_storage
    FROM  maxcomputefee
   WHERE  TYPE = 'ColdStorage'
     and  to_char(starttime,'yyyymmdd') >= '20190112'
  GROUP BY to_char(starttime,'yyyymmdd')
           ,projectid;
  -- Analyze infrequent access storage costs.
  SELECT  to_char(starttime,'yyyymmdd') as ds
          ,projectid
          ,SUM(storage/1024/1024/1024)/24*0.0011 AS lowFre_storage
    FROM  maxcomputefee
   WHERE  TYPE = 'LowFreqStorage'
     and  to_char(starttime,'yyyymmdd') >= '20190112'
  GROUP BY to_char(starttime,'yyyymmdd')
           ,projectid;
  -- Analyze archive storage access costs.
  SELECT  to_char(starttime,'yyyymmdd') as ds
          ,projectid
          ,SUM(computationsqlinput/1024/1024/1024)*0.522 AS longTerm_IO
    FROM  maxcomputefee
   WHERE  TYPE = 'SqlLongterm'
     and  to_char(starttime,'yyyymmdd') >= '20190112'
  GROUP BY to_char(starttime,'yyyymmdd')
           ,projectid;
  -- Analyze infrequent access storage access costs.
  SELECT  to_char(starttime,'yyyymmdd') as ds
          ,projectid
          ,SUM(computationsqlinput/1024/1024/1024)*0.522 AS lowFre_IO
    FROM  maxcomputefee
   WHERE  TYPE = 'SqlLowFrequency'
     and  to_char(starttime,'yyyymmdd') >= '20190112'
  GROUP BY to_char(starttime,'yyyymmdd')
           ,projectid;

İndirme maliyetlerini analiz edin

MaxCompute, genel internet üzerinden veya bölgeler arasında indirilen veriler için indirme hacmine göre ücretlendirir.

• Yöntem 1: Elektronik tablo ile analiz

  Veri türü DownloadEx, genel indirmeler için faturalandırılabilir öğeyi temsil eder.

  1. İndirme ücretleri (kullandıkça öde) fiyatlandırmasına göre, yaklaşık 0,036 GB (38.199.736 bayt) giden genel trafik (38.199.736 bayt/1024/1024/1024) × 0,1166 USD/GB = 0,004 USD ücrete neden olur.

  2. İndirme optimizasyonu örneği: Genel ağ uç noktası kullanımı nedeniyle maliyet oluşup oluşmadığını görmek için Tunnel hizmeti ayarlarınızı kontrol edin. Daha fazla bilgi için bkz. Uç Noktalar. Çin (Şanghay) bölgesinden o bölgenin dahili ağı dışındaki bir konuma (örneğin Suzhou'daki şirket içi bir sunucuya) büyük miktarda veri indiriyorsanız, dahili ağ trafiğinden yararlanmak için verileri önce Çin (Şanghay) bölgesindeki bir ECS sanal makinesine (VM) indirebilirsiniz.

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze download consumption details.
  SELECT  TO_CHAR(starttime,'yyyymmdd') AS ds
          ,projectid
          ,SUM((download/1024/1024/1024)*0.1166) AS download_fee
  FROM    maxcomputefee
  WHERE   type = 'DownloadEx'
  AND     TO_CHAR(starttime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(starttime,'yyyymmdd')
           ,projectid
  ORDER BY download_fee DESC
  ;

MapReduce iş maliyetlerini analiz edin

• Yöntem 1: Elektronik tablo ile analiz

  kullanım kayıtlarınızda veri türü MapReduce olan verileri analiz edin. MapReduce işlerinin maliyetlerini hesaplama kaynağı teknik özelliklerine göre hesaplayın ve sıralayın. MapReduce işi maliyetini hesaplama formülü (MapReduce/Spark işi hesaplama (çekirdek*saniye) / 3600) × Birim fiyat (0,0690 USD).

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze MapReduce job consumption.
  SELECT  TO_CHAR(starttime,'yyyymmdd') AS ds
          ,projectid
          ,(cu_usage/3600)*0.0690 AS mr_fee
  FROM    maxcomputefee
  WHERE   type = 'MapReduce'
  AND     TO_CHAR(starttime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(starttime,'yyyymmdd')
           ,projectid
           ,cu_usage
  ORDER BY mr_fee DESC
  ;

Dış tablo iş maliyetlerini analiz edin (Tablestore ve OSS)

• Yöntem 1: Elektronik tablo ile analiz

  kullanım kayıtlarınızda veri türü ComputationSqlOTS veya ComputationSqlOSS olan verileri analiz edin. SQL dış tablo işlerinin hesaplama maliyetlerini sıralayın. Maliyet şu formül kullanılarak hesaplanır: (SQL/interaktif analiz okuma hacmi (bayt) / 1024 / 1024 / 1024) × Birim fiyat (0,0044 USD).

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze Tablestore external table SQL job consumption.
  SELECT  TO_CHAR(starttime,'yyyymmdd') AS ds
          ,projectid
          ,(computationsqlinput/1024/1024/1024)*1*0.0044 AS ots_fee
  FROM    maxcomputefee
  WHERE   type = 'ComputationSqlOTS'
  AND     TO_CHAR(starttime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(starttime,'yyyymmdd')
           ,projectid
           ,computationsqlinput
  ORDER BY ots_fee DESC
  ;
  
  -- Analyze OSS external table SQL job consumption.
  SELECT  TO_CHAR(starttime,'yyyymmdd') AS ds
          ,projectid
          ,(computationsqlinput/1024/1024/1024)*1*0.0044 AS oss_fee
  FROM    maxcomputefee
  WHERE   type = 'ComputationSqlOSS'
  AND     TO_CHAR(starttime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(starttime,'yyyymmdd')
           ,projectid
           ,computationsqlinput
  ORDER BY oss_fee DESC
  ;

Spark hesaplama maliyetlerini analiz edin

• Yöntem 1: Elektronik tablo ile analiz

  kullanım kayıtlarınızda veri türü Spark olan verileri analiz edin. İş maliyetlerini sıralayın. Maliyet şu formül kullanılarak hesaplanır: (MapReduce/Spark işi hesaplama (çekirdek*saniye) / 3600) × Birim fiyat (0,1041 USD).

• Yöntem 2: SQL ile analiz

  Bu yöntem için Adım 2 adımını tamamlamış ve maxcomputefee tablosunu oluşturmuş olmanız gerekir:

  -- Analyze Spark job consumption.
  SELECT  TO_CHAR(starttime,'yyyymmdd') AS ds
          ,projectid
          ,(cu_usage/3600)*0.1041 AS spark_fee
  FROM    maxcomputefee
  WHERE   type = 'spark'
  AND     TO_CHAR(starttime,'yyyymmdd') >= '20190112'
  GROUP BY TO_CHAR(starttime,'yyyymmdd')
           ,projectid
           ,cu_usage
  ORDER BY spark_fee DESC
  ;