DeepSeek V4: Million-Token Context That Actually Works

DeepSeek V4 bietet einen tatsächlich nutzbaren Kontext von 1 Million Token, indem es das GPU-Speicherproblem mit einer hybriden Aufmerksamkeitsarchitektur löst, die den KV-Cache um fast das Neunfache komprimiert. Dies macht es im Gegensatz zu vielen anderen Modellen zu einer praktischen Lösung für die Langkontext-Inferenz.