Arvutiteaduse instituut
  1. Kursused
  2. 2025/26 sügis
  3. Arvutigraafika projekt (MTAT.03.328)
EN
Logi sisse

Arvutigraafika projekt 2025/26 sügis

  • Main
  • Projects
  • Topics
  • Results and Schedule
  • Formatting Hints
  • Links

AR Subtitles

Andre Ahuna

AR Subtitles is a project to help people communicate across language barriers and hearing disabilities.

The aim is to develop an app for Meta Quest 3 which shows the user's surroundings with the device's onboard passthrough cameras and composites speech-to-text subtitles onto it. The user has the ability to pick a language the processed text will translated to. All in-app menus will support hand tracking.

A possible additional feature is locating speaker(s). With this, subtitles could be positioned more helpfully and individual speaker audios may be possible to isolate from background chatter. These features are still in R&D.

Platform: Meta Quest 3
Technology: Unity

Milestone 1 (07.10)

  • Feature 1 - OpenXR Unity Scene setup
  • Feature 2 - Hand tracking setup + a mock menu

Milestone 2 (21.03)

  • Feature 1 - Implement cloud-based speech-to-text. Required supported languages: English, Estonian, German, French, Spanish.
  • Arvutiteaduse instituut
  • Loodus- ja täppisteaduste valdkond
  • Tartu Ülikool
Tehniliste probleemide või küsimuste korral kirjuta:

Kursuse sisu ja korralduslike küsimustega pöörduge kursuse korraldajate poole.
Õppematerjalide varalised autoriõigused kuuluvad Tartu Ülikoolile. Õppematerjalide kasutamine on lubatud autoriõiguse seaduses ettenähtud teose vaba kasutamise eesmärkidel ja tingimustel. Õppematerjalide kasutamisel on kasutaja kohustatud viitama õppematerjalide autorile.
Õppematerjalide kasutamine muudel eesmärkidel on lubatud ainult Tartu Ülikooli eelneval kirjalikul nõusolekul.
Courses’i keskkonna kasutustingimused