IBMはHugging Face公式ブログにて、最新のオープンソース大規模言語モデルファミリー「Granite 4.2」のアーキテクチャおよび学習パイプラインの詳細を公開した。

Granite 4.2は、きめ細かなMixture-of-Experts（MoE）構造と長文脈コンテキスト処理の最適化を導入し、企業向け推論タスクやコーディングタスクにおいて大幅な計算効率の向上とレイテンシ削減を実現している。

また、モデルの事前学習から事後学習におけるデータキュレーション手法や量子化適応技術についても技術仕様が詳述されている。

https://huggingface.co/blog/ibm-granite/granite-4-2