Goliath 120B

A large LLM created by combining two fine-tuned Llama 70B models into one 120B model. Combines Xwin and Euryale. Credits to - @chargoddard for developing the framework used to merge the model - mergekit. - @Undi95 for helping with the merge ratios. #merge

Goliath 120B のコンテキストウィンドウは 6,144 トークンです。

Goliath 120B は 2023年11月10日 にリリースされました。知識のカットオフ日は 2023年12月31日 です。