Które tokeny lepiej przewidują modele hybrydowe?

Badanie Allen Institute analizuje zdolności predykcyjne hybrydowych modeli językowych dla różnych typów tokenów. Wyniki wskazują na specjalizację hybrydowych podejść w przetwarzaniu tekstu.