Facultatea de Automatică, Calculatoare, Inginerie Electrică şi ElectronicăSpecializarea

- Calculatoare şi Tehnologia Informaţiei

PROIECT LA ACHIZIȚIA ȘI
PRELUCRAREA DATELOR
REALITATEA
AUGMENTATĂ

Profesor Coordonator: Student:

Ș.l. dr. Ing. Cătălin Anghel Mititelu Andrei Cristian

Grupa: 22C21 B
 Cuprins

Introducere ............................................................ 3
Istorie ..................................................................... 4
Componente și modul de funcționare .................. 5
Tipuri de dispozitive RA ....................................... 8
Utilizare ...................................................................9

2
Introducere

Realitatea augmentată(RA) este una din tehnologiile care prezintă un interes în

continuă creștere. Ne putem referi la realitate augmentată ca orice tehnologie care adaugă
diferite elemente în lumea reală. Aceasta îmbogățeste realitatea din jurul nostru prin
adăugarea conținutului digital precum imagini sau informații și diferă față de ralitatea
virtuală care construiește o nouă lume. Îmbogățirea spațiului poate fi făcută de diferite
dispozitive care captează obiectele în timp real cu o cameră iar interacțiunea dintre om și
noua versiune a realității este una dinamică.
Realitatea augmentată nu este un lucru rar întâlnit comparativ cu realitatea
virtuală care poate fi folosită doar prin purtarea unor ochelari virtuali. Simpla deținere a
unui smartphone îți permite să modifici realitatea din jur prin adăugarea a noi elemente
vizuale prin diferite aplicații. Acest lucru este folosit în viața de zi cu zi ca o formă de
amuzament însă nu reprzintă doar un produs pentru divertimentul oamenilor, multe
companii au adoptat această tehnologie ca un instrument pentru rezolvarea diferitelor
probleme și este răspândită într-o gamă larga de domenii.

3
Istoria

Prima apariție a unui dispozitiv care să se aproprie de conceptul realității

augmentate a fost Senzorama creată de Morton Heiling. Dispozitivul trimitea imagini,
sunete, vibrații și mirosuri către privitor însă nu era controloat de un computer.
Cel care a reușit să creeze realitatea augmentată a fost Ivan Sutherland, un
om de știință în domeniul calculatoarelor. Acesta a propus ecranul final în 1965 și a reușit
să îl creeze în 1968. Acest dispozitiv a fost denumit „Sabia lui Damocles” și era agățat de
perete peste capul lui Ivan. Dispozitul deținea head trackers de asemenea aveai libertatea
de mișcare.

Sabia lui Damocles, Ivan Sutherland, 1968

Din păcate această idee a existat doar ca și concept pentru câteva decenii până ca
ascesta să fie realizabil. Până în 1990 realitatea augmentată a existat ca și subiect de
cercetare și dezvoltare sau în anumite condiții de fabrică însă odată cu apariția ARToolKit
lucrurile au început să se schimbe. Acesta a fost prima platformă software open source
pentru realitate augmentată și caracteriza o librărie de urmărire 3D care se folosea de foi

4
care aveau printate pe ele în alb și negru diferite forme. Aceste foi sunt numite fudiciali 1și
sunt folosite poziționarea, orientarea și scalarea unui obiect digital în raport cu ele.

Exemple de fiduciali folosiți însoftware-ul de Realitatea augmentată

Odată cu incorporarea camerei în dispozitive mobile la începutul anilor 2000

realitatea augmentată a început să fie din ce în ce mai mult la îndemăna oamenilor. În
același an a apărut primul joc AR care putea fi jucat afară.

Componente și modul de funcționare

Realitatea augmentat este compusă din două părți. Partea hardware compusă din
componentele fizice care permit funcționarea și partea software care modelează această
funcționare.
Hardware

Componente hardware sunt următoarele:

1. Procesorul
2. Unitatea de Procesare Grafică (UPG)
3. Senzorii
4. Display-ul

1
Fiducials în engleză. Nu am găsit un echivalent în română așa că o să folosesc fiducial, fiduciali
pentru un mai mare comfort.

5
 1. Procesorul este creierul și asigură administrarea funcțiilor dispozitivului. Acesta
determină viteza de funcționare a dispozitivului și dacă este capabil să utilizeze funcția de
realitate augmentă.

2. Unitatea de Procesare Grafică(UPG) se ocupă de prelucrarea imaginii ce va fi

afisată pe display. Realitatea augmentată are nevoie de un GPU cu o performanță înaltă
pentru a putea crea și suprapune cât mai bine conținutul digital.

3. Sezorii sunt componentele care permit dispozitivului să înțeleagă mediul

încojurător. De obicei RA are nevoie de următorii senzori:

- Senzorul de adâncime: Pentru măsurarea distanței și a adâncimii

- Giroscopul: Pentru detectarea unghiului și a poziției dispozitivului
- Senzorul de proximitate: Pentru a măsura cât de departe și cât de
aproape este un lucru
- Accelometrul: Pentru a detecta schimbări în mișcare, viteză și rotație
- Senzorul de lumină: Pentru a măsura intezitatea și strălucirea luminii

4. Display-ul are scopul de afișare a conținutului digtal dorit. În principiu

telefoanele și monitoare pot să afișeze fără nicio problemă conținutul digital pe care își
oferă RA. Însă există multe alte tipuri de dispozitive de realitate augmentată precum cele
eyetap care manipulează razele de lumină pentru a modifica imaginea, sau cele de realitate
virtuală spațială care proiectează imaginea pentru a modifica spațiul.

Partea software

Există diferite metode de implementare a realității augmentate. Fiecare tehnologie

RA are aplicați diferiți algoritmi astfel încât dispozitivul să profite cât mai bine de
componentele hardware pe care le are. Toate trebuie să atingă câteva obiective pentru
manipularea spațiului. Aceste obiective care trebuie atinse sunt:
1. Înțelegerea mediului: Pentru a putea plasa obiectele virtuale în spațiul dorit
cu cât mai multă acuratețe este nevoie ca sistemul să detecteze punctele
caracteristice proeminente și suprafețele plane a împrejurimii.
2. Urmărirea mișcării: Dispozitivul determină poziția sa în mediul astfel încât
să poată plasa obiectele virtuale în punctele dorite.
3. Aprecierea luminii: Dispozitivul percepe condiția luminii pe care o are
mediul și plasează obiectul virtual sub aceleași condiții astfel încât să fie cât
mai realist.

6
 Toate aceste obiective sunt făcute de viziunea computerizată2. Prima dată viziunea
computerizată se ocupă de înțelegerea mediului. Acest lucru se face prin două aspecte
diferite diferite care răspund la întrebarea “ce?” și întrebarea “unde?”.
Primul aspect este semantica. Acest aspect răspunde la întrebarea “ce?” adică
recunoaște spațiul în care trebuie plasat obiectul virtual. Identifică obiectele prezente și
dacă vreunul din acele obiecte este locul de plasare. Semantica recunoaște spațiul sau
obiectul de plasare folosindu-se de deep learning și nu trebuie să intre în amănunt a
caracteristicilor fizice regăsite în imagine.
Al doilea aspect care se regăsește în înțelegerea mediului este geometria 3D. Acest
aspect răspunde la întrebarea “unde?” și se ocupă cu caracteristicile fizice mai amănunțite.
Geometria 3D determină poziția și orientarea unui anumit spațiu. Pentru acest lucru este
important unghiul la care se găsește imaginea sau spațiul. Cu ajutorul acestuia se
construiește proiecția obiectului virtual astfel încât acesta să fie cât mai bine contopit cu
mediul. Fără geometria 3D contopirea dintre mediu și obiectul virtual nu este posibilă.
Afișarea se face în momentul în care o anumită suprafață este recunoscută. În
sistemele live RA, în momentul recunoașterii modulul de randare afișează informația
relevantă. Pentru acest lucru putem spune că viziunea computerizată înțelege lumea 3D
printr-o perspectivă 2D. Astfel poate fi posibilă afișarea unui conținut digital 3D pe un
ecran 3D.

Principiile funcționării realității augmentate

În general există 3 feluri în care RA pate funcționa:

1. Mark-base AR: Pentru acest tip de funcționare este nevoie de un
marker vizual sau o imagine distinctă care deține informații despre
obiect și sunt recunoscute de cameră. Un exemplu de astfel de
markeri ar fi fiducialii precizați în partea de istorie a realității
augmentate însă mai poate fi folosit și un cod QR. Acest tip poate
funcționa doar prin intermediul unei aplicații care recunoaște
modelul markerului sau imaginea.
2. Markless AR: Acest tip nu are nevoie de un marker pentru a adăuga
obiectul virtual în lumea reală. Adăugarea se poate face folosind o
amplicație simplă de telefon. Ca și exemplu ar fi funcția de cameră de
pe aplicația messenger în care poți adăuga diferite efecte vizuale.
3. Proiecții RA: Tipul acesta folosește proiectoare avansate specifice
pentru lucrul cu realitatea augmentată.

2
Computer vision în original.

7
Tipuri de dispozitive RA

Există 4 tipuri de dipozitive RA. Fiecare tip își găsește folosința în particularitățile
pe care le deține. Aceste tipuri de dispozitive sunt:

1. Head up display (HUD)

2. Display holografic
3. Ochelari inteligenți
4. Dispozitevele portabile

1. Head up display(HUD) este un ecran transparent pe care apare anumite

informații de interes pentru utilizator. Informația proiectată este colimată, adică
razele de lumină ce reprezintă acea informație sunt paralele. Componentele
principale pe care le are HUD sunt: un proiector, un display și un computer
denumit generator de semne. Un dispozitiv de acest tip ar fi cele HMD (Helmet
Mounted Display) care sunt de fapt o cască cu display.
2. Display-ul holografic se folosește de difracția luminii pentru a genera formele
tridimensionale ale unui obiect în lumea reală. Acest tip de dispozitiv are ca și
avantaj faptul ca nu are nevoie de vreo unealtă pentru a putea vedea obiectul
virtual.
3. Ochelarii inteligenți precum reiese din nume sunt ochelari care adaugă
conținutul digital. Aceștia sunt de două tipuri: optici și și video.
- Ochelarii inteligenți de tip optic permit utilizatorului să vadă realitatea
direct prin componente optice. Aceste componente pot fi unde holografice
și alte sisteme care pot suprapune elemente grafice peste realitate. Un
exemplu de acest tip de dispozitiv ar fi ochelarii google.
- Ochelarii inteligenți de tip video permit utilizatorului să vadă realitatea
printr-un display. Ochelarii combină realitatea capturată de o cameră cu
imaginea generată de computer.
4. Dispozitivele portabile sunt în principiu smartphone-uri sau tablete. Acestea pot
folosi diverse aplicații pentru a avea accces la realitatea augmentată. Pentru
aceste aplicații sunt folosiți diferiți algoritmi sofisticați de viziune computerizată.
Algoritmii sunt implementați în diferite librării precum ARKit, ARCore sau
MRKit.

8
Utilizare

Militar

Realitatea augmentată joacă un rol important în domeniul militar. Aviația militară

se folosește de dispozitivele HUD. Această tehnologie ușurează munca piloților display-ul
fiind așezat în fața lor. Acesta afișează date esențiale precum viteza vântului sau altitudinea.
Astfel piloții pot fi mai atenți nemaifiind nevoie să se uite la alte instrumente ale avionului
amplasate mai jos.
Altă aplicație tot a aceleiași tehnologii s-a găsit pentru trupele de teren. Soldații se
folosesc de HMD pentru a ști locația inamicului aflat sau alte informații cruciale. HMD se
mai folosește și în antrenamente și afișează informațiile în câmpul vizual al soldatului.

Medicină

Medicina a adoptat realitatea augmentată pentru practica chirurgiei de către

studenți. Tehnologia îmbunățește percepția senzorială a chirurgilor acest lucru reducând
riscurile operațiilor. Realitatea augmentată combinată cu raze X sau MRI poate oferi toate
informațiile doritite dintr-o singură privire.
Cea mai mare importanță a realității augmentate se găsește în neurologie. Datorită
capacității tehnologiei de a proiecta 3D creierul uman cu toate coordonatele sale este
ușurată munca chirurgilor.

Transport

Realitatea augmentată a devenit foarte folositoare în cadrul transportului. Există

diferite aplicații pentru transport care adaugă obiecte din realitate cu multe îndrumări.
Aceste îndrumări includ și informații despre clădiri și rute.
GPS-urile au adoptat realitatea augmentată astfel încât să conducă utilizatorul cu o
mai mare ușuriță din punctul A în punctul B. Cu ajutorul camerei unui smartphone
utilizatorul poate vedea ruta pe care a ales-o în real.

9
 Întreținere și reparare

Realitatea augmentată poate ușura repararea și întreținerea unui obiect prin afișare
suprapusă a unor informații relevante. Aceste informații pot fi instrucțiuni care îți prezintă
pas cu pas cum poate fi reparat sau întreținut obiectul respectiv. Pentru acest lucru se pot
folosi dispozitive asemănătoare cu ochelarii care să afișeze datele printr-un display. De
exemplu un mecanic care repară un motor poate să vadă strategia de reparare într-un colț
al display-ului și imaginile zonelor vitale pot să explice specific etapele pe care trebuie să îi
facă mecanicul.
Procedurile complexe de reparare pot fi împărțite într-un anumit număr de pași
elementari care tebuie urmați. Cu ajutorul acestei tehnologii se pot folosi simulări pentru
pregătirea tehnicienilor. Acest lucru poate să reducă costul instruirii, erorile umane precum
și durata de executare a mentenanței.

Turism

Turismul este alt domeniu care are avantaje de pe urma acestei tehnologii.
Realitatea augmentată îmbunătățește experiența utilizatorului prin introducerea de
elemente interactive în hoteluri permițându-le clienților să obțină informațiile de care au
nevoie.

Jocuri

Dezvoltările tehnologice precum și puterea de procesare a computerelor a permis ca

realitatea augmentă să intre și în industria jocurilor. RA îmbunătește experiența jucătorilor
datorită creșterii numărului de dispozitive portabile tot mai ieftine și a puterii de procesare
care devine din ce în mai portabilă.
Un exemplu ar fi jocul Pokemon Go lansat în 2016 și care a devenit un trend. În
acest joc, jucătorul trebuie să găsească și să captureze characterele Pokemon. Aceste
caractere apăreau în lumea reală și puteau fi găsite locuri.

10
Viitorul Realității augmentate

Jessica Louis, un designer UX, care scrie pentru Next Web spune că RA este viitorul
design-ului. Telefoanele mobile care sunt deja o parte esențială a vieții noastre ar putea
deveni o extensie a corpului într-un fel sau altul. Având în vedere că tehnologia se poate
integra în viețile noastre este posibil ca realitatea augmentată să aducă diferite oportunități
care să îmbunătățească experiența utilizatorului și mai mult.
RA vine la pachet cu multe avantaje și vor trebui găsite în continuare metode de
îmbunățire a vieții. De aceea designerii UX din domeniul realității augmentate trebuie să
vadă cum experiența tradițională poate fi îmbunătățită prin RA.
În concluzie realitatea augmentată este o tehnilogie care a intrat natural în viețile
noastre. Utilitatea ei este destul de mare în momentul actual și este posibil ca această
tehnologie să devină mai esențială pentru viața oamenilor.

Documentație

1. https://smartteksas.com/augmented-reality-ar-
work/#:~:text=Augmented%20Reality%20(AR)%20adds%20digital,a%20physical%20world%20around%20y
ou.&text=In%20turn%2C%20AR%20changes%20reality,%2C%20sounds%2C%20videos%2C%20graphics.
2. https://www.techslang.com/how-does-augmented-reality-work/
3. https://www.analyticssteps.com/blogs/what-augmented-reality-introduction-applications-and-threats
4. https://medium.com/deemaze-software/augmented-reality-a-simple-technical-introduction-83d5e77206b9
5. https://enterprisersproject.com/article/2019/10/ar-augmented-reality-explained-plain-
english#:~:text=%E2%80%9CAugmented%20reality%20(AR)%20is,real%2Dworld%20objects.%E2%80%9D
%20%E2%80%93
6. https://www.interaction-design.org/literature/article/augmented-reality-the-past-the-present-and-the-future
7. https://www.blippar.com/blog/2018/08/21/what-is-augmented-reality-and-how-does-augmented-reality-work
8. https://www.constructdigital.com/insight/how-does-augmented-reality-ar-work

11