这次开源了一个 405B 的 model. 并且之后据说还会放出多模态版本。

Language model post-training.

Multi-modal encoder pre-training.

Vision adapter training.