Aya Expanse 8B
Cohere Labs · Canada · 2024
Model wielojęzyczny Cohere Labs o 8 mld parametrów dla 23 języków, w tym polskiego - mniejsza połowa pary Aya Expanse z października 2024, wydany na licencji niekomercyjnej i za bramką.
Aya Expanse 8B to jeden z dwóch modeli, które Cohere Labs opublikowało 24 października 2024 jako trzeci etap programu Aya. Pierwszy etap, Aya 101, rozkładał pojemność na 101 języków; drugi, Aya 23, zawęził zestaw do 23 i pogłębił każdy z nich; Aya Expanse zachowało te 23 języki i przebudowało przepis wokół trzech technik, które laboratorium nazywa arbitrażem danych, treningiem preferencji z wielojęzycznymi sędziami oraz łączeniem osobno trenowanych checkpointów. Wariant 8B waży 8 028 033 024 parametry - dokładnie tyle samo co Aya 23 8B, co stawia oba modele na tym samym szkielecie i sprowadza różnice między nimi wyłącznie do treningu. Czego w tym wydaniu nie ma, to hostowanego dostępu. Własna dokumentacja Cohere wymienia jako model API wyłącznie większe rodzeństwo 32B; wersja 8B istnieje jako same wagi i nic ponadto, przez co o jej przydatności decyduje licencja. Wagi objęte są CC BY-NC 4.0 wraz z zasadami dopuszczalnego użycia laboratorium, więc użytek komercyjny nie jest objęty zgodą w żadnej skali, a repozytorium jest za bramką: przed pobraniem trzeba mieć konto i zaakceptować warunki. Mimo to po dwóch latach model ma największe wzięcie w całej rodzinie - 13 596 pobrań w ciągu trzydziestu dni do 18 sierpnia 2026 i 443 polubienia, więcej niż jakiekolwiek inne repozytorium Aya, wliczając nowsze modele wizyjne.
▸Wideo
Brak materiałów wideo.
▸Recenzje
Brak recenzji. Bądź pierwszy!