Hugging Face Blog·· 23 時間前
Hugging Face、TorchNeuronを公開 AWS Trainiumでのモデル実行を簡素化
TorchNeuron: running HF models on AWS Trainium is easier than ever
AI による要約
Hugging Faceは、AWS Trainium上でPyTorchを動かすためのネイティブバックエンドTorchNeuronを発表した。Transformers、Diffusers、Kernelsがネイティブにサポートし、10月20日から公開ベータとして提供を開始する。pip install torch-neuronxでインストールできる。
入選の記録
基準 60公式・一次情報1 回目 582 回目 62
入選二回の合計 120 ≥ 基準の 2 倍 120
- 情報源の区分
- 公式・一次情報、この区分の基準は 60 点
- 予備審査
- 通過:介绍在AWS Trainium上运行HF模型的AI后端与用法
- 推薦理由
- Trainium向けネイティブバックエンドがTransformers、Diffusers、TRLでどこまで対応し、どう移行するかがわかり、既存の学習・推論スクリプトに必要な変更量を判断できる。
採点はモデルが同じ基準で独立に二回行い、満点は 100。二回の合計が基準の 2 倍に届いたものだけが入選します。基準は情報源の区分ごとに決めています。
情報源:Hugging Face Blog · huggingface.co