Llama 3.1 Swallow
Llama 3.1の日本語能力を強化した大規模言語モデル (8B, 70B)
岡崎 直観
東京科学大学 教授
全体の統括、事前学習コーパスチームのリーダー、ウェブ開発者
プロジェクト
Llama 3 Swallow
Llama 3の日本語能力を強化した大規模言語モデル (8B, 70B)
Swallow on mistral
Mistral 7BおよびMixtral 8x7Bの日本語能力を強化した大規模言語モデル
Swallow
Llama 2の日本語能力を強化した大規模言語モデル (7B, 13B, 70B)
日本語LLM評価
Swallowチームで実施した日本語の大規模言語モデルの評価
Blog記事
View allLlama 3.1 Swallowに関するライセンスおよび利用規約の修正について
Llama 3.1 Swallowの公開に際し、「Llama 3.1 SwallowはMeta Llama 3.1コミュニティライセンスに従う限...
Regarding the License and Terms of Use Amendment for Llama 3.1 Swallow
In conjunction with the release of Llama 3.1 Swallow, we initially state...
大規模言語モデルSwallowを公開
Llama 2に対する継続事前学習で日本語を強化した大規模言語モデルSwallowを公開しました。詳しくは、Swallowをご覧ください。
横田 理央
東京科学大学 教授
学習チームのリーダー
水木 栄
産総研／東京科学大学 非常勤研究員
指示チューニングのリーダー、評価チームのリーダー
藤井 一喜
東京科学大学 修士課程学生
大規模言語モデルの事前学習、指示チューニング
中村 泰士
東京科学大学 修士課程学生
大規模言語モデルの事前学習、指示チューニング、大規模言語モデルの評価
馬 尤咪
東京科学大学 助教
大規模言語モデルの評価
前田 航希
東京科学大学 博士課程学生
大規模言語モデルの評価
服部 翔
東京科学大学 修士課程学生
事前学習コーパスの構築、大規模言語モデルの評価
大井 聖也
東京科学大学 修士課程学生
大規模言語モデルの評価
岡本 拓己
東京科学大学 修士課程学生
指示チューニング
石田 茂樹
東京科学大学 修士課程学生
大規模言語モデルの評価
塩谷 泰平
東京科学大学 修士課程学生
大規模言語モデルの評価
齋藤 幸史郎
東京科学大学 学部生
大規模言語モデルの評価、トークン化の検討
高村 大也
産総研 AIRC チーム長
マネージャー
Mengsay Loem
東京工業大学 修士課程修了
大規模言語モデルの評価
平井 翔太
東京工業大学 修士課程修了
事前学習コーパスの構築
飯田 大貴
東京工業大学 博士課程修了
大規模言語モデルにおけるトークン化