Together ermöglichte eine effiziente Inferenz für MiniMax-M3, wodurch ein 1M-Token-Kontext und Multimodalität freigeschaltet wurden. Dies wurde durch KV-block-major sparse attention, paged MSA decode, optimiertes Index-Scoring und ein Rust-basiertes multimodales Gateway erreicht.
Este trabalho apresenta um framework automatizado para comparar documentos de política de segurança de IA usando LLMs e uma taxonomia compartilhada, avaliando a estabilidade e validade da análise.
ReVEL propõe um framework híbrido que integra LLMs como raciocinadores multi-turno dentro de algoritmos evolutivos para evoluir heurísticas eficazes para problemas de otimização NP-difíceis. O método utiliza agrupamento de perfis de desempenho e reflexão guiada por feedback para que o LLM analise comportamentos e gere refinamentos direcionados.
Grandes modelos de linguagem (LLMs) falham em raciocínio sistemático e frequentemente alucinam, expondo uma lacuna epistêmica. Pramana é uma nova abordagem que ensina metodologia epistemológica explícita a LLMs, através de fine-tuning na lógica Navya-Nyaya, um framework de raciocínio indiano milenar.
Este artigo introduz uma nova estrutura de governança baseada em energia para LLMs, que conecta a dinâmica de inferência de transformers a modelos de satisfação de restrições, desafiando métodos atuais de segurança de IA. A pesquisa identifica uma janela de pré-comprometimento de 57 tokens em Phi-3-mini-4k-instruct, demonstrando que tais sinais existem, mas são específicos do modelo, tarefa e configuração, e propõe uma taxonomia de comportamento de inferência.
Este artigo investiga sistematicamente as dinâmicas de aprendizado do Pré-treinamento Contínuo de Contexto Longo (LCCP) usando o modelo industrial Hunyuan-A13B, rastreando sua evolução por 200 bilhões de tokens. Ele propõe uma estrutura hierárquica para analisar o LCCP em níveis comportamental, probabilístico e mecanicista, abordando as limitações das metodologias atuais de avaliação e pré-treinamento.
Este estudo empírico investiga o aprendizado em contexto (ICL) de muitos exemplos para tradução automática de inglês para dez idiomas de baixo recurso. Os achados mostram que o ICL se torna mais eficaz com o aumento do número de exemplos, e a recuperação baseada em BM25 melhora substancialmente a eficiência dos dados.
Dieser Inhalt analysiert, wie sich 'Kobold-Ausgaben' oder persönlichkeitsbedingte Eigenheiten in KI-Modellen wie GPT-5 verbreiten. Er beschreibt die Zeitlinie, die Ursache und die Korrekturen für diese Verhaltensweisen.
ThermoQA ist ein neuer dreistufiger Benchmark mit 293 Problemen der Ingenieurthermodynamik, der zur Bewertung des thermodynamischen Denkvermögens von LLMs eingeführt wurde. Führende LLMs wie Claude Opus 4.6 und GPT-5.4 erzielen hohe Punktzahlen, doch die tierübergreifende Verschlechterung bestätigt, dass das Auswendiglernen von Eigenschaften kein thermodynamisches Denkvermögen bedeutet; der Datensatz und Code sind Open-Source.
Diese Arbeit untersucht den Einsatz großer Sprachmodelle (LLMs) für Aufgaben in Smart Cities, indem sie Fernerkundungsbilder zur Charakterisierung der gebauten Umgebung auf mehreren räumlichen Skalen nutzt. Die Ergebnisse zeigen das Potenzial der Integration von Fernerkundung mit LLMs zur Unterstützung von Smart Cities und Entscheidungsfindung.
Diese Forschung schlägt ein Berechnungsmodell vor, das ein großes Sprachmodell und einen Planungsagenten verwendet, um Erklärungen in Aktionspläne für die Navigation unter Unsicherheit umzuwandeln. Experimente zeigen, dass höher bewertete Erklärungen die menschliche Navigation erheblich verbessern und als hilfreicher empfunden werden.
Diese Forschungsarbeit stellt eine kontrollierte Invarianzmethodologie zur Erkennung von Halluzinationen in großen Sprachmodellen vor. Mittels Orakeltests wie extsc{Force} und extsc{Remove} wird untersucht, ob Detektionsmethoden das Denken oder lediglich Oberflächenkorrelate der finalen Antwort bewerten.
Diese Studie verwendet große Sprachmodelle, um Debatten auf Reddits r/ChangeMyView zu analysieren, wo Meinungsänderungen öffentlich signalisiert werden. Die Forschung zeigt, dass rhetorische Strategien wie Konzessionen und empathische Ausrichtung die Wahrscheinlichkeit einer Meinungsänderung erheblich erhöhen.
Dies ist die Ankündigung von Gemini Omni, einer neuen Iteration der KI-Modellfamilie von Google.
NVIDIA stellt Nemotron 3 Nano Omni vor, ein neues multimodales KI-Modell mit langem Kontext. Es bietet Intelligenz für Dokumente, Audio- und Video-Agenten.
DeepSeek V4 AI hat Berichten zufolge teure, etablierte KI-Systeme übertroffen und ist kostenlos verfügbar. Diese Entwicklung unterstreicht Fortschritte in zugänglicher und leistungsstarker künstlicher Intelligenz.
Diese Forschung stellt IC3-Evolve vor, eine neuartige Methode zur Hardware-Modellprüfung. Sie nutzt eine durch Beweise/Zeugen gesteuerte Offline-LLM-getriebene heuristische Evolution, um die Effizienz des IC3-Algorithmus zu verbessern.
"Knowledge Packs" stellt eine Methode zur "Zero-Token"-Wissensbereitstellung für große Sprachmodelle (LLMs) vor, indem Informationen direkt in den KV-Cache injiziert werden. Diese Technik zielt darauf ab, die LLM-Leistung zu verbessern und Inferenzkosten zu senken, indem externes Wissen effizient ohne Kontext-Tokens integriert wird.
Dieser Inhalt des Hugging Face Journal Clubs erörtert eine "beschämend einfache" Methode der Selbst-Destillation, die die Codegenerierung erheblich verbessert. Er beleuchtet Fortschritte bei der Nutzung großer Sprachmodelle für Programmieraufgaben.
O conteúdo aborda o potencial do Aprendizado por Reforço (RL) em escala para aprimorar o desempenho e as capacidades de raciocínio de modelos de IA, superando métodos convencionais. A pesquisa explora especificamente o impacto do RL na inteligência de Grandes Modelos de Linguagem (LLMs), citando exemplos como o DeepSeek R1.