[Session 2026-06-16] Jervais: Pivot zu Brille/Coach + Recherche #116

New issue

Open

opened 2026-06-16 19:15:27 +00:00 by orbitalo · 0 comments

orbitalo commented

2026-06-16 19:15:27 +00:00

Owner

Was wurde gemacht

Jervais-Pivot dokumentiert (#103 kommentiert): Brillen-Einblendung ist der KERN, Uebersetzung zweitrangig. Spaeter sogar: Uebersetzung komplett raus, Phase 1 = deutscher Gespraechs-Coach / Intelligenzverstaerker.
Recherche MentraOS (= das "Betriebssystem-Repo", Mentra-Community/MentraOS, MIT): unterstuetzt Even Realities G1+G2, fertige Captions/Translation-Apps, TS-SDK, Mini-Apps laufen auf dem Handy (iPhone ok). G1-vs-G2: fuer Text-HUD klar G2 (75% groesseres Display, 1200 nits, 48h, 599$). Self-Hosting moeglich (eigener Relay, STT->CT201, LLM->Hermes), aber Cloud-Teile proprietaer. In #103 + OpenMemory gesichert.
Validierungsstrategie definiert: Stufe 1 = Text/Transkript + Frage an LLM (testet das Gehirn isoliert, 0 Hardware), Stufe 2 = Audio->Whisper(CT201), Stufe 3 = live Mikro. Beurteilung gegen selbst-bekannte "richtige Einsicht" (Mini-Eval-Set, Lehre aus Khmer).
Hermes-Webseite geklaert: = eingebautes hermes dashboard (Port 9119, CT151), aktuell nicht laufend (lief wohl nur im Vordergrund). Dashboard = Text-Chat + Admin, KEIN Audio-Input. Telegram-Voice loest den ambient-Coach NICHT (rundenbasiert vs. dauerhaftes Mithoeren).
Schluessel-Erkenntnis: Coach-Qualitaet haengt stark vom Modell ab (Hermes laeuft auf DeepSeek). -> Erst Konzept mit STARKEM Modell testen (Decke), dann lokal (Self-Hosting-Preis messen).

Aenderungen an Infrastruktur

Keine aktiven CT-Aenderungen in dieser Session (nur Forgejo-Doku #103 + OpenMemory). CT201 (jervais-translate, RTX-3080-Passthrough) und CT200-Backup bestehen aus frueherer Session unveraendert.

Erkannte Probleme

Viele Fehlannahmen/Rueckschlaege durch widerspruechliche, selbstbewusst-falsche Antworten externer Modelle (ChatGPT zur Brille/Audio, Hermes/DeepSeek zu "keine Webseite"/"Telegram reicht") + dreifach verschobene Zielsetzung -> ermuedend, User hat fuer den Tag abgebrochen.
CT151 von der Cursor-Umgebung aus nicht direkt erreichbar (kein Key/PW fuer pve-mu-3 hier) -> Hands-on bleibt Cline-Job.
CT999-Doku zu CT151 veraltet: hermes-dashboard ist nicht dokumentiert. Doku-Update faellig.

Naechste Schritte

Frage-Modus testen (Telegram, Co-Pilot-Rollen-Prompt + 2-3 echte Transkripte): taugt der Kern ueberhaupt?
Modellvergleich: gleicher Prompt + gleiche Transkripte durch starkes Cloud-Modell (Claude/GPT/Gemini) vs. lokales Qwen/DeepSeek (100.84.255.83:11434) -> Self-Hosting-Preis schwarz auf weiss.
Wenn Konzept traegt: CT201-Ambient-Bruecke bauen (Mikro -> faster-whisper DE -> Puffer -> Hermes) fuer Beobachter-/Coach-Modus. Ausgabe-agnostisch bauen (Tipp-String, Senke austauschbar: Ohr/Text/Brille).
Optional: hermes-dashboard als systemd-Service auf CT151 (ACHTUNG Binary-Pfad verifizieren: vermutlich /opt/hermes-agent/.venv/bin/hermes, NICHT /usr/local/bin/hermes).
Jervais-Brillen-Hardware-Gate (G2 ~599 EUR) bleibt geparkt bis Konzept validiert.
CT999-Doku ct-151 um hermes-dashboard ergaenzen.

Betroffene Systeme

CT151 (hermes-mu, pve-mu-3), CT201 (jervais-translate, pve-jervais), CT999 (docs), Forgejo #103

## Was wurde gemacht - **Jervais-Pivot dokumentiert** (#103 kommentiert): Brillen-Einblendung ist der KERN, Uebersetzung zweitrangig. Spaeter sogar: Uebersetzung komplett raus, **Phase 1 = deutscher Gespraechs-Coach / Intelligenzverstaerker**. - **Recherche MentraOS** (= das "Betriebssystem-Repo", Mentra-Community/MentraOS, MIT): unterstuetzt Even Realities G1+G2, fertige Captions/Translation-Apps, TS-SDK, Mini-Apps laufen auf dem Handy (iPhone ok). G1-vs-G2: fuer Text-HUD klar G2 (75% groesseres Display, 1200 nits, 48h, 599$). Self-Hosting moeglich (eigener Relay, STT->CT201, LLM->Hermes), aber Cloud-Teile proprietaer. In #103 + OpenMemory gesichert. - **Validierungsstrategie definiert**: Stufe 1 = Text/Transkript + Frage an LLM (testet das Gehirn isoliert, 0 Hardware), Stufe 2 = Audio->Whisper(CT201), Stufe 3 = live Mikro. Beurteilung gegen selbst-bekannte "richtige Einsicht" (Mini-Eval-Set, Lehre aus Khmer). - **Hermes-Webseite geklaert**: = eingebautes `hermes dashboard` (Port 9119, CT151), aktuell nicht laufend (lief wohl nur im Vordergrund). Dashboard = Text-Chat + Admin, **KEIN Audio-Input**. Telegram-Voice loest den ambient-Coach NICHT (rundenbasiert vs. dauerhaftes Mithoeren). - **Schluessel-Erkenntnis**: Coach-Qualitaet haengt stark vom Modell ab (Hermes laeuft auf DeepSeek). -> Erst Konzept mit STARKEM Modell testen (Decke), dann lokal (Self-Hosting-Preis messen). ## Aenderungen an Infrastruktur - Keine aktiven CT-Aenderungen in dieser Session (nur Forgejo-Doku #103 + OpenMemory). CT201 (jervais-translate, RTX-3080-Passthrough) und CT200-Backup bestehen aus frueherer Session unveraendert. ## Erkannte Probleme - **Viele Fehlannahmen/Rueckschlaege** durch widerspruechliche, selbstbewusst-falsche Antworten externer Modelle (ChatGPT zur Brille/Audio, Hermes/DeepSeek zu "keine Webseite"/"Telegram reicht") + dreifach verschobene Zielsetzung -> ermuedend, User hat fuer den Tag abgebrochen. - CT151 von der Cursor-Umgebung aus **nicht direkt erreichbar** (kein Key/PW fuer pve-mu-3 hier) -> Hands-on bleibt Cline-Job. - **CT999-Doku zu CT151 veraltet**: hermes-dashboard ist nicht dokumentiert. Doku-Update faellig. ## Naechste Schritte - **Frage-Modus testen** (Telegram, Co-Pilot-Rollen-Prompt + 2-3 echte Transkripte): taugt der Kern ueberhaupt? - **Modellvergleich**: gleicher Prompt + gleiche Transkripte durch starkes Cloud-Modell (Claude/GPT/Gemini) vs. lokales Qwen/DeepSeek (100.84.255.83:11434) -> Self-Hosting-Preis schwarz auf weiss. - Wenn Konzept traegt: **CT201-Ambient-Bruecke** bauen (Mikro -> faster-whisper DE -> Puffer -> Hermes) fuer Beobachter-/Coach-Modus. Ausgabe-agnostisch bauen (Tipp-String, Senke austauschbar: Ohr/Text/Brille). - Optional: `hermes-dashboard` als systemd-Service auf CT151 (ACHTUNG Binary-Pfad verifizieren: vermutlich /opt/hermes-agent/.venv/bin/hermes, NICHT /usr/local/bin/hermes). - Jervais-Brillen-Hardware-Gate (G2 ~599 EUR) bleibt **geparkt** bis Konzept validiert. - CT999-Doku ct-151 um hermes-dashboard ergaenzen. ## Betroffene Systeme CT151 (hermes-mu, pve-mu-3), CT201 (jervais-translate, pve-jervais), CT999 (docs), Forgejo #103