DINBRUDI / LAB SMART-GLASSES DIVISION
4 LIVE APPS · 2 PLATTFORMEN EST. 2026
01

Skills & Stack

⟨◉⟩

Sensor-Fusion

IMU-Pipelines, Heading-Calibration, Acceleration-Peak-Detection. Drift-Compensation, On-Device-Filter, Pattern-Recognition für Bewegungs-getakteten Content.

⟨♫⟩

Voice-Pipelines

Whisper-STT, OpenAI-TTS, Web Speech API für hands-free Interfaces. Wake-Word-Recognition, Streaming-Transkription, Multi-Sprach-Support (DE/EN/Schweizerdütsch).

⟨◫⟩

Display-Constrained UI

600 × 600 px Lens-Stage, D-Pad EMG via Neural Band, monochromer Dark-Mode. Information-Hierarchie, die in 2-Sekunden-Blicken erfassbar ist.

⟨⇆⟩

Companion-Sync

Brille ↔ Phone ↔ Web. QR-Pairing per fb-viewapp Deep-Link, WebSocket-Sessions, Token-Auth, Bookmark- und State-Sync zwischen den Geräten.

⟨⌬⟩

AI-Integration

Claude, OpenAI, Apertus (ETH Zürich) hinter einer Provider-Abstraktion. Tool-Use, MCP-Server für Backend-Orchestration, on-device Models via Gemma 3 / MLX.

⟨↻⟩

Iteration auf Hardware

Hot-Deploy auf die Brille via Vercel/Railway-Staging. Sensor-Log-Pipeline für offline-Analyse, Debug-Overlays direkt im Lens-View, A/B auf realen Sessions.

02

Hardware-Plattformen

META

Ray-Ban Display

PRODUKTIV

Display in der rechten Linse, Neural-Band für D-Pad EMG. Apps laufen als Web-View im 600 × 600 px Frame.

  • Web-Apps mit DeviceMotion + Geolocation
  • Mikrofon + Lautsprecher für Voice
  • QR-Pairing via fb-viewapp Deep-Link
  • 4 Apps in Produktion (siehe unten)
ROKID

AR Glasses (iOS)

IN ARBEIT

Native iOS-App mit Rokid SDK. Tiefere Sensor-APIs als Web, CoreMotion 100 Hz, Apple Watch + HealthKit Sync.

  • iOS-App "DinBrudi" (Branch platform-integration)
  • Voice-Notizen hands-free
  • CoreMotion + Watch-Triangulation für Sport-Tracking
  • HealthKit-Workouts, Background-Mode
03

Apps in Produktion

Vier Live-Apps für die Meta Ray-Ban Display. Alle hands-free per D-Pad, alle mit Sync zur DinBrudi-Plattform.

01 LIVE

News Reader

Hands-free Newsfeed direkt im Sichtfeld. Schweizer und internationale Quellen, Bookmark-Sync zurück zum Web-Reader.

02 LIVE

Brudi Chat

Voice-First Conversation direkt über die Brille. Whisper-STT für Input, OpenAI-TTS für Antworten, Markdown-Rendering.

03 LIVE

Presenter Remote

Zweiter Bildschirm für Präsentationen. Slide-Vorschau auf der Brille, Nav-Commands per D-Pad zum Laptop via WebSocket.

Pairing nötig
04 LIVE

Surfskate Coach

BPM-getakteter Trainings-Coach. PUMP, SLALOM, BOTTOM-TURN, CUTBACK. Sensor-Fusion mit Accelerometer + Heading für echtes Carve-Tracking.

04

Was als Nächstes kommt

JETZT
Sensor-Tuning auf Hardware
Surfskate-Carve-Detection mit echten IMU-Logs von der Brille, Achsen-Mapping verifizieren, Threshold tunen.
NÄCHSTES QUARTAL
iOS-Companion mit Rokid SDK
Native CoreMotion 100 Hz für deutlich bessere Pattern-Erkennung. Watch-Integration für Heart-Rate während Carve-Sessions.
EXPLORE
ML-trainierte Pattern-Recognition
Sensor-Log-Pipeline sammelt Real-World-Daten. CreateML / TensorFlow Lite für personalisierte Carve-Models statt Threshold-Heuristik.

Smart-Glasses-Projekt im Sinn?

Wir bauen End-to-End — von Hardware-Pairing über Sensor-Pipeline, Voice und UI bis zur Cloud-Sync. Sag was du vorhast.