ASCENTA.
01
Sieht, ohne zu senden.
Die Kamera erfasst das Sichtfeld, ein FOMO-Netz auf Basis von MobileNetV2 rastert jedes Bild direkt am STM32H747 — in Echtzeit. Kein einziges Bild verlässt die Brille, gestreamt werden nur Koordinaten.
240×240 pxint8F1 80 %
Smart Glasses für sehbeeinträchtigte Menschen
Sehen wird hörbar.
Ascenta erkennt Personen, misst Distanzen auf den Millimeter und sagt Ihnen, was vor Ihnen liegt — komplett offline, direkt am Körper.
Der weiße Langstock ertastet Stufen und Kanten. Aber alles auf Kopf- und Rumpfhöhe bleibt stumm — die wartende Person, der entgegenkommende Passant. Ascenta schließt diese Lücke: eine Kamera auf Augenhöhe, ein neuronales Netz im Rahmen und eine Stimme im Ohr.
80,0 %F1-Score der Personenerkennung
0Cloud-Anfragen im Betrieb
10 sHeartbeat — selbstheilende Verbindung
Die Technik
Vier Sinne. Ein Rahmen.
02
Misst auf den Millimeter.
Der Time-of-Flight-Sensor liefert zu jeder Erkennung die exakte Distanz. Die App fusioniert Bildkoordinaten und Tiefe — und macht daraus eine Ansage, der man vertrauen kann.
mm-genau<1 m Warnzone<40 cm Override
03
Bedienung ohne Knopf.
Der Beschleunigungssensor im Rahmen erkennt den Doppeltipp am Bügel über den Ruck Δg. Gehbewegungen fallen durchs Raster, ein bewusstes Tippen nicht — freihändig, unauffällig, sofort.
Δg > 1,75 G100–600 msLSM6DSOX
04
Zwei Akkus, ein Port.
Je ein 620-mAh-LiPo in jedem Bügel, parallel geschaltet hinter der TP4056-Schutzschaltung. Geladen wird über USB-C, den Ladestand meldet der Fuel-Gauge aufs Prozent — trotz flacher LiPo-Kurve.
1240 mAh3,7 VUSB-C
Live-Simulation
Testen Sie Ascentas Blick.
Ziehen Sie die Person durchs Sichtfeld — direkt im Bild oder per Regler. Unter einem Meter warnt Ascenta, unter 40 cm überstimmt die Kollisionswarnung jede Sprechpause. lohnt sich.
FOMO · 240×240 · INT8
LIVE
TelemetrieUC-A · Kollision
Distanz (ToF)
1400
mm
- Label
- person
- Konfidenz
- 0.00
- Status
- Beobachten
- Sprech-Cooldown
- bereit
Interaktion
Zweimal tippen. Mehr nicht.
So startet man an der echten Brille eine Sprachabfrage. Probieren Sie die originale IMU-Logik aus der Firmware — inklusive Zeitfenster und Schwellenwert.
IMU → Vosk → TTS
— warte auf Eingabe —
Der Ablauf
Von Licht zu Sprache.
Eine „Split-Brain“-Architektur: Die Brille sieht, misst und filtert — das Smartphone denkt, versteht und spricht. Dazwischen: ein TCP-Stream auf Port 5005.
01
Doppeltipp
Der IMU-Interrupt am Bügel startet die Audioaufnahme. Δg > 1,75 G, freihändig.
02
Edge-AI
FOMO rastert das 240×240-Bild direkt am Mikrocontroller und lokalisiert Personen.
03
TCP-Stream
Koordinaten, Distanz und Audio gehen als Präfix-Pakete in eine einzige Verbindung.
04
Datenfusion
Die App verrechnet KI-Koordinaten mit der ToF-Tiefe zu präzisen Raumpunkten.
05
Vosk
„Befindet sich jemand vor mir?“ wird lokal am Smartphone zu Text. Keine Cloud.
06
Antwort
„Person in einem Meter Entfernung erkannt.“ — diskret über den Kopfhörer.
Protokoll-Evolution
Drei Anläufe zum stabilen Stream.
01 · BLEGATT · 20-Byte-MTU
128.000 Byte Audio, gedrosselt auf 15-ms-Intervalle: mehrere Sekunden Latenz pro Sprachnachricht.
02 · UDPverbindungslos, schnell
In Bewegung gingen Pakete verloren: korrupte JPEGs, zerrissene Audio-Chunks, keine Fehlerkorrektur.
03 · TCPPort 5005 · Präfix-Protokoll
Verlustfrei dank Prüfsummen und Paketwiederholung. Heartbeat alle 10 s, BLE bleibt nur fürs WLAN-Provisioning.
Fertigung
Direkt aus dem Drucker.
Jedes Bauteil ist selbst konstruiert und 3D-gedruckt: Rahmen, Bügel, Abdeckungen, Scharniere. Alles lässt sich einzeln tauschen, die Brille klappt beidseitig ein — und nebenan dreht sich kein Rendering, sondern das echte Fertigungs-STL aus der Produktion.
- 01Arduino Nicla VisionWahrnehmung & Edge-AI
- 02TP4056 + USB-CLaden, Tiefentlade- & Überlastschutz
- 032× 620-mAh-LiPoparallel — je einer pro Bügel
- 04Gehäuse, 3D-gedrucktmodular & beidseitig einklappbar
Bügel_v14.stl · 7.520 Dreiecke · Originaldatei
ziehen zum Drehen
0mAh
Akkukapazität — 2× 620 mAh parallel
0%
F1-Score — FOMO · MobileNetV2 · int8
0h
dokumentierte Projektzeit des Teams
0Cloud
Anfragen — alle Kernfunktionen offline
Nichts verlässt den Nutzer.
Kamera und Mikrofon am Kopf eines Menschen verlangen Zurückhaltung. Ascenta ist deshalb nicht nachträglich abgesichert — es gibt schlicht keinen Pfad, über den Video oder Audio das lokale System verlassen könnte.
- 01FOMO läuft am Mikrocontroller
- 02Vosk läuft am Smartphone
- 03BLE schließt nach dem Provisioning
- 04TCP nur im lokalen, verschlüsselten WLAN
Ausblick
Vom Prototyp zum Produkt.
Zero-UI
App ohne Oberfläche
TalkBack-Integration, auditive Einrichtung, Setup per NFC.
Leitstrahl
Akustische Zielführung
Tonhöhe und Taktrate führen den Kopf zum Objekt — in der Demo schon zu hören.
Objektklassen
Mehr als Personen
Treppen, Ampeln, Zebrastreifen, Türen, Fahrzeuge.
Rechenleistung
Stärkere Hardware
Größere Netze, mehr Klassen parallel — samt neuem Gehäuse.
Transparenz
Plexiglas-Abdeckungen
Näher an der gewohnten Brille; Elektronik wandert in die Bügel.
Photovoltaik
PV-Folie am Glas
Lädt den Akku bei Sonnenlicht nach — mehr Laufzeit draußen.
Hinter Ascenta
Zwei Köpfe. Eine Vision.
01Liam Vendel
02Madison Hollard
Kontakt
Sprechen wir über Ascenta.
