FAC.

DE INGINERIE MECANICA

REFERAT DE PRACTICA

Tema: Studiu privind utilizarea tehnologiilor

de Realitate Augmentata pentru mentenanţa de
la distantă a autovehiculelor

Student:Bărăscu Octavian Marian

Profesor:Turea Nicolae

Grupa:1LF172

Specializare:Autovehicule Rutiere

1
 CUPRINS

1) Prezentarea tehnologiilor de Realitate Augmentată

-Realitate augmentata introducere...................................pg.3
-Definitie...........................................................................pg.4
-Utilizari generale...........................................................pg.4-5

2) Prezentarea principalelor programe de Realitate

Augmentată pentru operații de mentenanţă a
autovehiculelor și avantajele
-Optimizarea procesului de proiectare a vehiculului.........pg.6
-Servicii de service inovatoare.............................................pg.7-8
-Showroom-uri digitale......................................................pg.8
-Siguranta in timpul condusului......................................pg.9
-Manual de utilizare si suport pentru intretinere...........pg.10

3) Prezentarea programului TeamViewer Pilot......pg.11-13

4) Exemplu de realizare a unei operații de mentenantă a

autovehiculului de la distanta asistată de Realitate
Augmentată utilizând programul TeamViewer
Pilot....................................................................... pg.14-19

5) Bibliografie.......................................................... pg.20

2
Realitate augmentată

Realitatea augmentată, în engleză Augmented Reality (AR), este una dintre noile
tehnologii ce încep să acapereze cât mai mult teren în domeniul IT și de Business.
Aceasta reprezintă o experiență interactivă bazată pe combinarea lumii reale cu
elemente din lumea virtuală, astfel creând o lume reală augmentată de către
informația generată virtual, bazată pe o dimensiune senzorială umană ce poate să
fie fundamentată de senzorii vizuali, auditivi, olfactivi și/sau somatosenzoriali.
Realitatea augmentată poate să fie definită ca și un sistem ce îndeplinește trei
activități de bază: combinația dintre lumea reală și virtuală, interacțiunea în timp
real și înregistrarea 3D exactă a obiectelor virtuale și reale.

Realitate augmentată (AR) este un live, un direct sau indirect, de vedere fizică, în
lumea reală de mediu, ale cărei elemente sunt completate de către calculator,
generate de intrări senzoriale, cum ar fi de sunet, video, grafice sau date GPS.
Acesta este legat de un concept mai general numit realitate mediată, în care o
vedere a realității este modificată (eventual, chiar sau diminuată, mai degrabă decât
augmentată) de către un calculator. Ca rezultat, funcțiile tehnologiei de percepția
creșterii curentă a realității. Prin contrast, realitatea virtuală înlocuiește lumea
reală, cu una simulată.

Mărirea este convențională, în timp real și, în context, semantică, cu elemente de

mediu, cum ar fi scoruri sportive la TV în timpul unui meci. Cu ajutorul
tehnologiei avansate AR (de exemplu, adăugarea de viziune pe calculator și
recunoașterea obiectului), informațiile despre lumea reală înconjurătoare de
utilizator devine digitală interactivă și manevrabilă. Informații despre mediul
înconjurător artificial și obiectele sale pot fi suprapuse în lumea reală. Termenul
Augmented Reality este considerat a fi fost inventat în 1990 de către Thomas
Caudell..

Cercetare explorează aplicarea de imagini generate de calculator, în Live-video de

fluxuri ca o modalitate de a spori percepția din lumea reală. AR, este tehnologia
care include HMD și afișe virtuale retiniene, pentru scopuri de vizualizare, precum
și de construcție de medii controlate conținând senzori și actuatori.

3
Definiție

Realitatea augmentată este considerată ca o extensie a realității virtuale. Realitatea

virtuală (VR) este un spațiu virtual în care jucătorul se afundă și depășește limitele
de realitatea fizică. În Realitatea Virtuală de timp, legile fizice și proprietățile de
material nu mai dețin, în contrast cu lumea reală din acest mediu. În loc de a
considera AR și VR ca și concepte exacte opuse, Milgram pretinde o realitate
virtuală (RV) continuă (Milgram, Takemura, Utsumi și Kishino, 1994).

Ronald Azuma a oferit o definiție în 1997 , un sondaj de prezență a realității

augmentată. Realitatea augmentată, este sporind despre mediul înconjurător, cu
lumea reală virtuală de informare, prin îmbunătățirea simțurilor oamenilor și ale
competențelor. AR amestecă personaje virtuale cu lumea reală. Există trei
caracteristici comune ale scenei AR: combinație de mediu din lumea reală cu
personajele din calculatoar, scene interactive, și scene în 3D (Azuma, 1997;
Azuma et al, 2001.). Un Continuum pe axa Virtualității (V), include realitatea
augmentată cu informații suplimentare, precum și realitatea virtuală, care a crescut
cu realitatea(Augmented Virtualitate sau AV). Simulările nemijlocite AV sunt
limitate pentru a se potrivi lumii reale comportamentală, dacă nu în conținut.

Utilizări generale
Publicitate: Utilizarea realității augmentate pentru a promova produsele prin
intermediul aplicațiilor interactive, pentru a deveni comune. De exemplu, Nissan
(2008 LA Auto Show), Best Buy (2009) și altele, au folosit webcam-AR pentru a
conecta baza de modele 3D cu materiale imprimate. Există numeroase exemple de
conectare mobile cu realitate augmentată pentru publicitatea outdoor.

Suport de activitate: activități complexe, cum ar fi asamblare, întreținere, și o

intervenție chirurgicală poate fi simplificată prin introducerea de informații
suplimentare în câmpul de vedere. De exemplu, etichetele pot fi afișate pe
componentele unui sistem pentru a clarifica instrucțiunile de utilizare, pentru un
mecanic care efectuează întreținere sistemului.Realitatea augmentată poate include
imagini de obiecte ascunse, care pot fi deosebit de eficiente pentru diagnosticul

4
medical sau chirurgie. Exemplele includ virtuale X-rays de vedere bazat pe
tomografie, înaintea imaginii în timp real de la sondele cu ultrasunete și de
microscopie confocale sau deschiderea RMN în dispozitive. AR poate îmbunătăți
vizualizarea unui făt în interiorul uterului mamei.

Navigare: AR poate spori eficacitatea dispozitivelor de navigare. De exemplu,

construirea de navigare poate fi îmbunătățită pentru a ajuta la menținerea
instalațiilor industriale. În aer liber, navigarea poate fi majorată pentru operațiuni
militare sau de gestionare a dezastrelor. Head-up display sau ochelari de afișare în
automobile pot oferi navigarea și informații de trafic. Head-up display sunt folosite
în prezent în avioane de luptă. Aceste sisteme includ interactivitate completă,
inclusiv urmărirea priviri. Acestea sunt, de asemenea, utilizate în prezent de către
producătorii de automobile ca BMW, Corvette și GM, în parbrize, mai ales pentru
a afișa informații la metru, informații despre traffic.

Industrial: AR poate fi folosit pentru a compara machetele digitale fizice cu

machetele pentru găsirea eficientă a diferențelor dintre ele. Se pot proteja datele
digitale, împreună cu prototipurile existente reale, și, astfel, reduce numărul de
prototipuri reale de îmbunătățirea calități produsului final.

Serviciile militare și de urgență: realitatea

augmentată portabilă, poate oferi astfel de informați
și instrucțiuni, hărți, locații inamice, și celule de
incendiu.

ARC4(USA)

5
Realitatea augmentata va avea un impact rapid
asupra industriei auto

AR nu numai ca va influenta modul in care masinile vor fi construite dar va avea

impact si asupra felului in care vom conduce masinile, devenind un factor
important pentru siguranta auto.

In ciuda faptului ca piata realitatii augmentate este relativ mica, exista destule
motive pentru a crede ca va exista o crestere a industriei in urmatorii ani.

În continuarea o sa prezint cele mai mari avantaje ale

aplicatiilor AR in domeniul autovehiculelor:

Optimizarea procesului de proiectare a vehiculului

Realitatea augmentata poate juca un rol crucial in faza de proiectare a unui vehicul.
Ofera producatorilor avantajul suplimentar de a face produsele lor mai bune si mai
eficiente. Utilizarea tehnologiilor virtuale inseamna ca un numar considerabil de
variante poate fi prezentat, modificat si evaluat intr-o faza foarte timpurie a
procesului, reducand astfel timpul si costurile necesare procesului general.
Producatorii vor avea imaginea exacta a modului in care masina va functiona odata
ce ajunge pe drum.

Volkswagen foloseste realitatea augmentata pentru a proiecta date virtuale asupra

modelelor reale, permitand astfel analiza componentelor. Acest lucru economiseste
timpul si costurile necesare dezvoltarii produsului, deoarece modelele pot fi
acceptate sau respinse fara a trebui sa se produca un prototip fizic.

6
Servicii de service inovatoare

Vehiculele de astazi se caracterizeaza printr-o complexitate tot mai mare. Acest

lucru inseamna ca angajatii service-ului vor avea nevoie de un sprijin suplimentar
in intretinerea vehiculelor noi si a functiilor inovatoare ale acestora.

Acest lucru necesita dezvoltarea avansata a instructiunilor clasice de reparatii, care

arata angajatului cum sa indeplineasca sarcinile specifice postului, pas cu pas, cu
informatii suplimentare relevante, cum ar fi instrumentele care trebuie utilizate,
configuratiile de asamblare si specificatiile de testare. Pentru a atinge aceste
obiective, Volkswagen a dezvoltat un nou sistem de afisare a informatiilor de

7
service, care arata angajatului serviciului pasii necesari pentru a efectua diferite
lucrari.

Acest lucru ii poate ajuta in special atunci cand lucreaza la vechicule complexe sau
de valoare inalta.

Showroom-uri digitale
Companiile de automobile pot folosi de asemenea realitatea augmentata pentru a
crea showroom-uri digitale, permitandu-le sa prezinte cat mai multe variante de
automobile. Audi City, de exemplu, este un showroom digital de masini care
utilizeaza tehnologia AR pentru a utiliza inteligent spatiul. In prezent, Audi are 51
de modele diferite, iar acestea vor ajunge la 60 in perioada urmatoare. Prin
utilizarea tehnologiilor AR, clientii isi pot configura masina si o pot vedea sau auzi
in acest spatiu augmentat.

8
Siguranta in timpul condusului
Realitatea augmentata aduce multe avantaje industriei auto, in special in domeniul
sigurantei. Un numar de producatori ofera deja sau au in curs de dezvoltare
aplicatii AR, ceea ce ar putea face conducerea mai sigura. Aceste afisaje digitale
pot evidentia riscurile in mediul inconjurator sau pot avertiza asupra eventualelor
probleme ce pot aparea in trafic. Aceste display-uri (HUD) ofera o pozitie mai
sigura a elementelor din bord, cum ar fi vitezometrul si gps-ul, eliminand nevoia ca
soferii sa privească in jos si sa-si ia ochii de la drum. Asistenta in materie de
siguranta, inclusiv actualizarile meteo, conditiile de condus sau rapoartele de trafic,
asistenta in timpul sederii pe timp de noapte, au ca scop reducerea accidentelor
rutiere.

Una din companiile de top din domeniul realitatii augmentate din inudstria auto,
este compania elvetiana – WayRay.

Solutiile WayRay pentru industria automobilelor includ:

 Navion, un sistem de navigatie AR;

 Holographic AR Display, o solutie integrata pentru producatorii de masini;
 True AR SDK, o solutie dedicata dezvoltatorilor pentru a crea aplicatii AR
pentru masini;
 Element, un tracker care te ajuta sa conduci inteligent prin urmarirea:
stilului de condus, a consumului de carburant, etc. In ultimii ani, WayRay a
realizat proiecte de succes cu producatorii de automobile precum Honda,
Porsche si Rinspeed

9
Manual de utilizare si suport pentru intretinere
Realitatea augmentata ofera, de asemenea, o alternativa interesanta pentru
manualul de instructiuni clasic, cu care este prevazut un vehicul. In astfel de
manuale, chiar daca instructiunile sunt furnizate prin scheme sau imagini, punerea
in practica a acestor instructiuni pe vehiculul real nu este neaparat intuitiva.
Furnizand aceste instructiuni direct pe vehicul, realitatea augmentata ajuta la
evitarea confuziilor.

Daimler AG si IBM au dezvoltat impreuna asistentul virtual “Ask Mercedes”,

bazat pe tehnologia AI – IBM Watson si pe IBM Cloud. Chatbot-ul ii ajuta pe
soferi sa primeasca raspunsuri imediate la intrebarile despre masinile lor. Scopul
aplicatiei este acela de a se asigura ca toti soferii pot sa acceseze rapid si usor
informatii exacte despre vehiculele lor.

In noua clasa Mercedes E si S, comenzile si afisajele pot fi scanate utilizand o

camera de smartphone. Odata ce obiectele au fost identificate vizual, cu ajutorul
realitatii augmentate este furnizata o explicatie a functiei corespunzatoare.

10
Prezentarea programului TeamViewer Pilot

Pilot TeamViewer

TeamViewer Pilot este o soluție de asistență de la distanță, alimentată de o realitate

mărită, care vă permite să vă conectați la solicitanții de asistență și să vedeți care
sunt problemele pe camerele lor de smartphone live în fluxul computerului sau
dispozitivului dvs. mobil în timp ce vă permite să desenați, să adăugați text sau să
etichetați obiecte din lumea reală cu Markeri 3D pentru referință. Chiar dacă
aparatul foto se îndepărtează de obiectele etichetate, aceste adnotări se lipesc de
ele, permițându-vă să colaborați eficient și să îndrumați oamenii prin rezolvarea
problemelor, rezolvarea problemelor, configurarea produsului sau pașii de
întreținere eficient - ca și cum ați fi acolo.

Beneficii pentru afaceri:

Randamentul investițiilor

-Reduceți operațiunile de întreținere cu până

la 40%

-Minimizați cerințele de călătorie pentru experții dvs. calificați

-Creșteți timpul de funcționare al mașinii cu o întreținere la distanță

11
Ochelari inteligenti

- Susținut de ochelarii inteligenti și

producătorii de căști purtabile RealWear,
Epson și Vuzix

-Conduce productivitatea păstrând

conștientizarea situației

-Comoditatea de a lucra cu mâinile libere fără distragere

Securitate

-Mențineți-vă private sesiunile de asistență la

distanță, protejând secretele comerciale și
informațiile sensibile

-Toate sesiunile la distanță TeamViewer Pilot sunt

securizate printr-o criptare de 256 biți de la capăt la
capăt

Este potrivit pentru industria mea?

Raspunsul scurt: da!

De ce? Cu TeamViewer Pilot instalat pe smartphone-ul tau sau ochelarii inteligenți

ai tehnicienului dvs. de serviciu pe teren, îi puteți ghida de la distanță de la un
computer sau smartphone folosind realitatea augmentată. Doar asta este util?NU!

12
Deoarece Pilot este mult mai mult decât o aplicație de apel video în direct. Este un
instrument de asistență la distanță securizat, ușor de utilizat, sigur pentru
profesioniștii din MRO (întreținere, reparații și operațiuni), aviație și producție,
printre alte industrii.
Puteți plasa markere, desena, evidenția și anota fluxul video live partajat de camera
tehnicianului de service. Folosind urmărirea obiectelor 3D, acești markeri se lipesc
de obiectele din lumea reală afișate pe ecran, nu lasă nicio ghicire despre ce
pârghia trebuie să tragă, ce fir să se miște sau care buton să apese în situații critice
în timp.

Inginerie Mecanică

Ajută-ți clienții să configureze, să funcționeze și să-ți mențină utilajele la distanță

cu TeamViewer Pilot - creșterea timpului de funcționare și a satisfacției clienților.
Pentru activități de întreținere preventivă periodică, de exemplu, experții dvs.
apreciați nu trebuie să călătorească de fiecare dată cu clientul. Aceștia pot ghida
operatorii de mașini la fața locului în timp real prin configurarea unei conexiuni cu
aplicația smartphone Pilot sau cu ochelarii inteligenti preîncărcați.

13
Exemplu de realizare a unei operații de
mentenantă a autovehiculului de la distanta
asistată de Realitate Augmentată utilizând
programul TeamViewer Pilot

General

Soluția Reality Augmented TeamViewer (= TeamViewer Pilot) vă permite să

remediați problemele la fața locului prin asistarea de la distanță a personalului sau
a clienților de pe site prin depanare, rezolvarea problemelor, configurarea
produsului și multe altele.

Cu TeamViewer Pilot este posibil să vă conectați la imaginea camerei de pe un

dispozitiv mobil și să-i transmiteți imaginea la un computer în timp real, în timp ce
puteți discuta între ei prin VoIP și interacționa cu adnotări 3D pentru a ajuta
utilizatorul pe mobil dispozitiv care să rezolve problemele din lumea reală prin
desenarea și evidențierea pe ecran a obiectelor din lumea reală

Noțiuni de bază

1. Partajați ID-ul dvs. TeamViewer Pilot cu tehnicianul de asistență

1. Deschide aplicația TeamViewer Pilot pe dispozitivul tău mobil

2. Apăsând pe ID-ul dvs., îl puteți copia în memoria cache a dispozitivului

dvs. mobil. Puteți utiliza apoi orice aplicație de mesagerie pentru a partaja
ID-ul dvs. TeamViewer Pilot cu prietenii sau partenerii.

3. În mod alternativ, puteți partaja ID-ul TeamViewer utilizând butonul

„Share ID” din mijlocul ecranului.

14
4. Puteți utiliza apoi diferite moduri de a partaja ID-ul TeamViewer:

1. Prin mesaj
2. Prin email
3. Adăugarea la note

15
2. Stabilirea unei sesiuni
1. Imediat ce partenerul de asistență a primit ID-ul dvs., se poate stabili o
conexiune.

2. Partenerul dvs. de asistență trebuie să pornească Aplicația desktop

TeamViewer pe un dispozitiv Windows sau Mac.

3. Prin inserarea ID-ului TeamViewer în câmpul său ID de partener și cu

ajutorul butonului de conectare, sesiunea va fi stabilită.

16
 4. De îndată ce partenerul dvs. atinge butonul de conectare, veți primi un apel
primit pentru a accepta sau a refuza conexiunea.

3. Folosiți TeamViewer Pilot

1. Imediat ce a fost stabilită o conexiune, imaginea camerei de pe
dispozitivul dvs. mobil este transmisă în timp real partenerului
dvs. de asistență în fața unui computer Windows sau Mac.

17
2. Ambii parteneri de conexiune pot discuta între ei prin
intermediul VoIP.

3. Apăsând pe ecranul mobil, respectiv clic stânga pe mouse, ambii

parteneri de conectare pot plasa săgeți 3D care se lipesc de obiecte
reale. Pentru a distinge cine a plasat săgețile, acestea au culori
diferite.

4.Vă puteți gestiona sesiunea printr-un meniu de navigare de pe

ecran.

1. Coșul de gunoi -icon: Ștergeți toate săgețile 3D.

2. Săgeata înapoi -icon: Ștergeți ultima săgeată 3D.
3. Microfon -icon: Silentizează / dezactivează microfonul.
4. Sus-săgeată -icon: Afișează / ascunde meniul.
5. Telefon roșu -icon: Închidere conexiune.

18
Creare tutorial
 Persoana care folosește aplicația Pilot pentru smartphone / tabletă poate crea
tutoriale video, fără a stabili o conexiune la distanță.
 În cadrul videoclipului, este posibil să plasați săgeți 3D care se lipesc de
obiecte reale.
 După înregistrarea videoclipului, inclusiv un voiceover, dacă doriți, este
posibil să salvați sau să partajați direct video cu altcineva.
 Navigarea este aceeași ca într-o sesiune reală de TeamViewer Pilot.

19
BIBLIOGRAFIE

https://www.immersiv.ro/avantaje-pe-care-realitatea-
augmentata-le-ofera-industriei-auto/

https://ro.wikipedia.org/wiki/Realitate_augmentat%C4%83

https://www.teamviewer.com/en/solutions/teamviewer-pilot-
repair-and-maintenance/

https://community.teamviewer.com/t5/Pilot-Knowledge-
Base-EN/How-do-I-use-TeamViewer-Pilot/ta-p/46456

Teza de abilitate/ Utilizarea tehnologiilor de Realitate Virtuală

(RV)şi Realitate Augmentată (RA)în aplicaţii din inginerie,
medicină şi patrimoniu/ Domeniul:Inginerie mecanică,
mecatronică şi robotică- Autor: conf.dr.ing. Silviu Luis Butnariu
Universitatea Transilvania din Braşov

20