Megatron-LMで言語モデルを訓練する方法
Hugging FaceがMegatron-LMを使った大規模言語モデルの訓練方法を解説しました。
AI&Tech、もう追いかけなくていい。
30秒で読めるニュースダイジェスト
研究
2808件
OpenRAIL: オープンで責任あるAIライセンスフレームワークに向けて
Hugging FaceがAIモデルの責任ある利用を促すための新しいライセンスフレームワーク「OpenRAIL」を発表し…
N
アライメント研究へのアプローチ
OpenAIは、AIシステムが人間からのフィードバックから学習し、AI評価を支援する能力を向上させています。
Hugging Face Spacesでタンパク質を可視化
Hugging Face Spaces上でタンパク質の3D構造を簡単に可視化できるツールが公開されました。
Hugging Face TransformersとHabana GaudiでBERTを事前学習
Hugging Face TransformersライブラリとHabana Gaudiアクセラレータを用いてBERTモデルの事前学習が効率的…
深掘り：Hugging Face Optimum Graphcore上のVision Transformers
Hugging Face Optimum GraphcoreでVision Transformer (ViT) モデルを効率的に実行する方法が解説されまし…
Hugging Faceのtransformers、accelerate、bitsandbytesを用いた大規模Transformer向け8ビット行列乗算のやさしい入門
大規模Transformerモデルのメモリ効率を大幅に向上させる8ビット行列乗算が導入されました。
Skopsの紹介
Hugging Faceが機械学習モデルのデプロイを簡素化するライブラリ「Skops」を発表しました。
Hugging FaceのTensorFlow哲学
Hugging FaceがTensorFlowコミュニティへの継続的なコミットメントを表明しました。
Hugging Face ViTをKubernetesとTF Servingでデプロイ
Hugging FaceのVision Transformer (ViT) モデルをKubernetes上でTensorFlow Servingを使ってデプロイする…
Sentence Transformersモデルの訓練とファインチューニング
Hugging FaceがSentence Transformersモデルの訓練とファインチューニングに関するガイドを公開しました。
近接方策最適化 (PPO)
強化学習アルゴリズムの一つであるPPOについて解説しています。