12 Ekim'de KLCII, Aquila Aquila büyük dil modeli serisinin tamamen Aquila2'ye yükseltildiğini ve 34 milyar parametre Aquila2-34B'nin eklendiğini duyurdu. Yeni modelin çıkarım ve genellemede iyi performans gösterdiği ve ajanlar, kod oluşturma ve literatür erişimi gibi senaryolarda bir dizi başarı elde ettiği bildiriliyor.
Aynı zamanda KLCII, Aquila2 model serisi, anlamsal vektör modeli BGE'nin yeni bir sürümü, FlagScale verimli paralel eğitim çerçevesi ve FlagAttention yüksek performanslı dikkat hesaplama alt kümesi dahil olmak üzere açık kaynaklı bir aile paketi de yayınladı. Bu açık kaynak projeleri, büyük model araştırmalarında işbirlikçi yeniliği teşvik edecektir.
View Original
This page may contain third-party content, which is provided for information purposes only (not representations/warranties) and should not be considered as an endorsement of its views by Gate, nor as financial or professional advice. See Disclaimer for details.
KLCII: Aquila büyük dil modellerinin Aquila ailesi, 34 milyar parametre Aquila2-34B'nin eklenmesiyle tamamen yükseltildi
12 Ekim'de KLCII, Aquila Aquila büyük dil modeli serisinin tamamen Aquila2'ye yükseltildiğini ve 34 milyar parametre Aquila2-34B'nin eklendiğini duyurdu. Yeni modelin çıkarım ve genellemede iyi performans gösterdiği ve ajanlar, kod oluşturma ve literatür erişimi gibi senaryolarda bir dizi başarı elde ettiği bildiriliyor.
Aynı zamanda KLCII, Aquila2 model serisi, anlamsal vektör modeli BGE'nin yeni bir sürümü, FlagScale verimli paralel eğitim çerçevesi ve FlagAttention yüksek performanslı dikkat hesaplama alt kümesi dahil olmak üzere açık kaynaklı bir aile paketi de yayınladı. Bu açık kaynak projeleri, büyük model araştırmalarında işbirlikçi yeniliği teşvik edecektir.