PAI-AI加速器主要用於訓練加速和推理加速,通過多種手段如資料集加速、計算加速等,提高了AI訓練和推理的速度、易用性和穩定性,全面提升了AI計算的效率。本文為您介紹AI加速器的功能亮點。
AI加速器功能簡介
AI加速器支援的技術手段及對應的功能如下:
技術手段 | 功能概覽 |
EPL(大規模分布式訓練架構) |
|
Rapidformer(Transformer訓練加速) | 最佳化PyTorch版Transformer模型訓練,融合多種最佳化技術,無縫對接Transformer模型庫。 |
PAI-Blade(通用推理最佳化) |
|
使用AI加速器
您可以參考以下文檔連結快速接入AI加速器並體驗加速效果:
EPL(大規模分布式訓練架構)
高效易用的分布式模型訓練架構,實現低成本、高效能分布式模型訓練。更多資訊,請參見AI加速:使用EPL實現AI訓練加速。
Rapidformer(Transformer訓練加速)
一款PyTorch版的針對Transformer系列模型的訓練最佳化工具,通過加速開關組合最佳化技術,最佳化PyTorch版Transformer模型的訓練過程,提高訓練速度和效率。更多資訊,請參見訓練加速(Rapidformer)概述。
PAI-Blade(通用推理最佳化)
通用推理最佳化工具,結合多種最佳化技術,最佳化訓練完成的模型,以達到最優推理效能。更多資訊,請參見推理加速(Blade)概述。