Google zinspeelt op volgende grote stap voor LLM’s met Infini-attention

Google-onderzoekers beweren dat ze LLM’s een eindeloze eetlust voor nieuwe data kunnen geven. In een onderzoekspaper introduceren ze ‘Infini-attention’, een techniek waarmee modellen oneindig lange invoer kunnen verwerken zonder dat ze last krijgen van het AI-equivalent van brandend maagzuur. Het vermogen om méér informatie te verwerken levert in de hypercompetitieve wereld van AI een voorsprong […]
techzine
17-04-2024 11:32