← heapsort-ai

Docker

21 items

DOC↑ trendingReddit r/LocalLLaMA·4/11/2026

Run Qwen3.5-397B-A13B with vLLM and 8xR9700

Dieses Dokument beschreibt die optimierte Ausführung des Qwen3.5-397B-A17B-MXFP4-Modells mittels vLLM auf RDNA4-GPUs, wie 8xR9700. Es enthält ein Dockerfile mit Triton-Patches und Anweisungen zum Herunterladen des Modells sowie zum Starten des Inferenz-Containers.

42
DOC↑ trendingReddit r/LocalLLaMA·vor 27T

llama.cpp docker images to run MTP models

Dieser Inhalt beschreibt die Erstellung von Docker-Images für `llama.cpp`, um die Ausführung von MTP-Modellen nach zahlreichen Verbesserungen und Fehlerbehebungen zu vereinfachen. Es wird auch erwähnt, dass Unsloth neue MTP-Modelle für Qwen 3.6 veröffentlicht hat, wodurch frühere Versionen obsolet werden.

41
ARTICLEDEV.to AI·vor 23T

How I Built a Completely Free Local AI Stack — Inspired by a 60-Second YouTube Short

Inspiriert von einem YouTube Short, tauchte der Autor tief in den Aufbau eines völlig kostenlosen lokalen KI-Stacks ein und verband ein lokales KI-Modell mit Claude Code ohne API-Schlüssel oder Abonnements. Dieser Beitrag dokumentiert den Lernprozess, einschließlich Tools wie Ollama, Gemma4, Docker und Open WebUI, um KI vollständig auf eigener Hardware auszuführen.

28
ARTICLEDEV.to AI·4/18/2026

I let Claude AI decide whether to patch my Docker vulnerabilities — here's what it found

Der Autor integrierte Claude KI in eine Docker-Verwaltungsplattform, um die Begründung für das Patchen von Schwachstellen zu automatisieren und dabei über das Angebot traditioneller Scanner hinauszugehen. Diese KI-Ebene hilft, CVE-Berichte zu kontextualisieren, indem sie die Ausnutzbarkeit, die Sicherheit der Fehlerbehebung und potenzielle Nebenwirkungen bewertet.

28
ARTICLEDEV.to AI·5/3/2026

CLAUDE.md for Docker: 8 Rules That Stop AI From Creating Insecure Containers

Dieser Artikel erläutert, wie KI-Modelle wie Claude standardmäßig unsichere Docker-Container erstellen können, indem sie Bilder wie `node:latest` verwenden oder API-Schlüssel offenlegen. Er schlägt vor, eine `CLAUDE.md`-Datei mit Regeln zu erstellen, wie z.B. das Festlegen von Image-Versionen für Sicherheit und Reproduzierbarkeit, die KI-Assistenten respektieren werden.

27
CASEDEV.to AI·4/15/2026

How We Ran 28 AI Agents on a Single Server (And What Broke)

Dieser Artikel beschreibt ein Experiment, bei dem ein Unternehmen 28 KI-Agenten, jeweils isoliert in Docker-Containern auf einem einzigen Server, einsetzte, um jeden menschlichen Mitarbeiter zu unterstützen. Das Setup umfasste einen Controller-Agenten zur Verwaltung der Flotte und eine gemeinsame Wissensdatenbank, doch das Experiment sah sich schnell Herausforderungen wie Speicherüberlauf aufgrund redundanter Langzeitspeicherung gegenüber.

27
ARTICLEDEV.to AI·4/10/2026

Docker for TypeScript Developers Building AI Agents in 2026

Engenheiros de frontend estão construindo sistemas de orquestração de IA complexos com TypeScript, que integram LLMs, bancos de dados vetoriais e outros serviços, mas enfrentam desafios de ambiente e dependências. Docker emerge como uma ferramenta crucial para gerenciar essas complexidades, assegurando a consistência na execução dos agentes de IA.

24
ARTICLEDEV.to AI·4/14/2026

How to Use OpenClaw MCP Servers With Docker

Dieser Leitfaden erklärt, wie MCP-Server (Model Context Protocol) mit Docker verwendet werden, um KI-Codierungsagenten mit externen Tools und Datenquellen zu erweitern. Er behandelt containerisierte MCP-Server-Setups, Docker-Compose-Konfigurationen, Netzwerk und bewährte Sicherheitspraktiken zur Lösung von Problemen wie Abhängigkeitskonflikten und Umgebungskonsistenz.

23
ARTICLEDEV.to AI·4/15/2026

Repo Truth Production Truth: A Container-First Troubleshooting Pattern for Runtime Drift

Dieser Inhalt beschreibt das verbreitete Betriebsproblem des „Laufzeit-Drifts“, bei dem bereitgestellte Features nicht dem Repository-Code entsprechen und dies zu verschwendeter Fehlerbehebungszeit führt. Es wird ein „Container-First“-Ansatz in Docker-Umgebungen vorgeschlagen, um die aktuelle Laufzeitwahrheit zu überprüfen, wie beispielsweise bei einem Problem im AI Back Office Pack.

19
DOCDEV.to AI·4/21/2026

Building Scalable Microservices with Node.js and Docker - A Practical Implementa

Dieser praktische Leitfaden beschreibt den Aufbau skalierbarer Microservices mit Node.js und Docker, einschließlich der Erstellung schlanker Dienste, Fehlerbehandlung und strukturierter Protokollierung. Er behandelt die Optimierung von Docker-Images mit Multi-Stage-Builds und die Implementierung von Health Checks sowie Skalierungsstrategien mit Docker Swarm oder Kubernetes.

6