ByteDance trenira največji model umetne inteligence doslej

Slo-Tech – ByteDance, ki ga poznamo kot lastnika TikToka, pripravlja veliki jezikovni model, s katerim želi preseči tudi veliki Anthropicov Mythos. Dosedanji največji kitajski model je Moonshotov Kimi K3, ki ima 2800 milijard parametrov, novi ByteDanceov model pa bo imel trikrat več parametrov, torej 10.000 milijard. Po poročanju virov blizu podjetja so nedavno začeli prvo fazo priprave (pre-training), ki traja od tri do šest mesecev, ki ji potem sledi še fino prilagajanje (fine tuning). Več na Slo-Techu.