PyTorch FSDPを用いたLlama 2 70Bのファインチューニング
PyTorch FSDPを活用し、大規模言語モデルLlama 2 70Bのファインチューニング手法が公開されました。
AI&Tech、もう追いかけなくていい。
30秒で読めるニュースダイジェスト
研究
2815件
🤗 Transformersにおけるネイティブサポートされる量子化スキームの概要
Hugging Face Transformersライブラリが、ネイティブでサポートする量子化スキームについて解説しました。
T2I-AdaptersによるSDXLの効率的な制御可能生成
Hugging FaceがSDXL向けにT2I-Adaptersを導入し、より効率的で制御可能な画像生成を可能にしました。
翼を広げよう：Falcon 180Bが登場
Hugging Faceが大規模言語モデルFalcon 180Bを公開しました。
AudioLDM 2がさらに高速化⚡️
Hugging FaceがAudioLDM 2の推論速度を大幅に向上させる最適化を発表しました。
AutoGPTQとTransformersでLLMを軽量化
Hugging FaceがAutoGPTQとTransformersライブラリを統合し、LLMの量子化を容易にしました。
IDEFICSの紹介：最先端の視覚言語モデルのオープンな再現
Hugging Faceが、最先端の視覚言語モデルIDEFICSをオープンソースで公開しました。
🤗 Transformers を用いた Bark の最適化
Hugging FaceがBarkモデルの推論速度とメモリ効率を大幅に改善しました。
Hugging FaceモデルをBentoMLでデプロイ：DeepFloyd IFの実践
Hugging FaceのDeepFloyd IFモデルをBentoMLを使って効率的にデプロイする方法が紹介されました。
DPOでLlama 2をファインチューニング
Hugging FaceがLlama 2モデルをDPO（Direct Preference Optimization）でファインチューニングする手法を…
FHEを用いた暗号化大規模言語モデルに向けて
完全準同型暗号（FHE）を使って、暗号化されたLLMの推論を可能にする研究が進んでいます。
N
AIのための信頼醸成措置：ワークショップ議事録
AIの安全性と信頼性を高めるための国際的な信頼醸成措置に関するワークショップが開催されました。