Bagel 34B v0.2

An experimental fine-tune of Yi 34b 200k using bagel. This is the version of the fine-tune before direct preference optimization (DPO) has been applied. DPO performs better on benchmarks, but this version is likely better for creative writing, roleplay, etc.

Bagel 34B v0.2 のコンテキストウィンドウは 200,000 トークンです。

Bagel 34B v0.2 は 2024年1月5日 にリリースされました。知識のカットオフ日は 2023年6月30日 です。