← heapsort-ai

self-supervised learning

10 items

RESEARCH↑ trendingReddit r/MachineLearning·4/17/2026

Low accuracy (~50%) with SSL (BYOL/MAE/VICReg) on hyperspectral crop stress data — what am I missing? [R]

Der Inhalt beschreibt ein anhaltendes Problem mit geringer Genauigkeit (~50%) bei der hyperspektralen Pflanzenstresserkennung mittels selbstüberwachter Lernmethoden wie BYOL, MAE und VICReg. Trotz verschiedener Techniken bleibt die Leistung für drei Klassen kaum besser als zufällig, was zu Zweifeln an der Datenseparierbarkeit oder der Eignung der SSL-Methoden führt.

42
RESEARCHDEV.to AI·vor 3T

Self-Supervised Temporal Pattern Mining for bio-inspired soft robotics maintenance with zero-trust governance guarantees

Der Artikel befasst sich mit der Wartung bio-inspirierter Soft-Robotik und der nicht-linearen Materialdegradation, die traditionelle Wartungspläne in Frage stellt. Die Forschung konzentriert sich auf Self-Supervised Temporal Pattern Mining, um Vorläufersignale von Fehlern zu identifizieren und Zero-Trust-Governance-Garantien zu integrieren.

31
RESEARCHarXiv CS.CL·vor 4T

Predict and Reconstruct: Joint Objectives for Self-Supervised Language Representation Learning

Dieser Artikel stellt ein hybrides Vor-Trainingsziel für Text-Encoder vor, das einen JEPA-ähnlichen Verlust für die Vorhersage im latenten Raum mit einem Standard-Masked Language Modelling (MLM)-Ziel kombiniert. Dieser neue Ansatz zielt darauf ab, Repräsentationen zu fördern, die an tiefere semantische Strukturen gebunden sind, anstatt nur an die oberflächliche Token-Identität, und zeigt deutlich uniformere Embeddings.

30
ARTICLEDEV.to AI·vor 23T

Self-Supervised Temporal Pattern Mining for planetary geology survey missions under multi-jurisdictional compliance

Dieser Artikel behandelt das selbstüberwachte Mining temporaler Muster für geologische Vermessungsdaten von Planeten und die damit verbundenen multi-jurisdiktionalen Compliance-Herausforderungen. Er beschreibt eine persönliche Entdeckung bei der autonomen Analyse von Satellitenbildern und Rover-Telemetrie für Weltraummissionen.

27
RESEARCHarXiv CS.CL·4/10/2026

Lexical Tone is Hard to Quantize: Probing Discrete Speech Units in Mandarin and Yor\`ub\'a

O artigo investiga como as unidades discretas de fala (DSUs), derivadas de modelos SSL, codificam o tom lexical, descobrindo que elas o fazem de forma menos confiável do que a estrutura segmental. Embora as representações latentes do SSL codifiquem o tom, a quantização tende a priorizar a estrutura fonética, um problema demonstrado em mandarim e iorubá que persiste com vários métodos.

27
RESEARCHarXiv CS.AI·vor 27T

RankQ: Offline-to-Online Reinforcement Learning via Self-Supervised Action Ranking

RankQ ist ein Offline-zu-Online-Reinforcement-Learning-Ziel, das die Stichprobeneffizienz durch die Nutzung vorab gesammelter Datensätze verbessert. Es begegnet der Herausforderung, einen genauen Kritiker in großen Zustands-Aktions-Räumen mit begrenzter Datenabdeckung zu lernen, indem es einen selbstüberwachten Mehrterm-Ranking-Verlust verwendet, der eine strukturierte Aktionsordnung erzwingt und die Q-Funktion zu höherwertigen Aktionen lenkt.

27
RESEARCHarXiv CS.LG·4/8/2026

PRIME: Prototype-Driven Multimodal Pretraining for Cancer Prognosis with Missing Modalities

PRIME é um novo framework de pré-treinamento multimodal auto-supervisionado projetado para prognóstico de câncer, que aborda o desafio de modalidades de dados ausentes em coortes clínicas. Ele integra imagens de histopatologia, expressão gênica e relatórios patológicos, aprendendo representações robustas por meio de imputação semântica no espaço latente e objetivos de alinhamento intermodal.

27
RESEARCHarXiv CS.LG·4/6/2026

UI-Oceanus: Scaling GUI Agents with Synthetic Environmental Dynamics

UI-Oceanus é uma estrutura que escala agentes GUI generalistas, focando em dominar a física da interação através de feedback ambiental em vez de imitar trajetórias. O sistema utiliza exploração autônoma e predição de dinâmicas futuras para construir um modelo de mundo interno robusto, superando limitações de dados e supervisão.

27