バイトレベル言語モデル– tag –

Ai2のBolmo研究がNatureに掲載。既存LLMの中核を引き継ぎ、UTF-8のバイト列を扱う二段階の学習方法を解説します。文字理解とコード評価の違い、日本語で試す際の出力長・速度の確認点も整理します。