Utilizaţi acest identificator pentru a cita sau a face link la acest document:
https://dspace.upt.ro/xmlui/handle/123456789/9255| Titlu: | Aplicație pentru manipularea roboților prin gesturi |
| Autori: | Kristof, Robert Bădescu, Sebastian Ovidiu |
| Data publicării: | iun-2026 |
| Editura: | Universitatea Politehnica Timișoara, Facultatea de Mecanică, Departamentul Mecatronică și Robotică |
| Citare: | Bădescu, Sebastian Ovidiu; Kristof, Robert; Aplicație pentru manipularea roboților prin gesturi. Timişoara: Editura Politehnica, 2026. |
| Abstract: | Această lucrare de disertație prezintă dezvoltarea unui sistem de teleoperare în timp real, care permite controlul unui braț robotic (Universal Robots) folosind exclusiv mișcările mâinii în aer, captate prin camere web obișnuite. Am pornit de la ideea că, deși roboții industriali și colaborativi sunt tot mai prezenți în jurul nostru, modul în care interacționăm cu ei a rămas destul de rigid, bazându-se pe ecrane tactile, joystick-uri sau scrierea de cod. Prin acest proiect, mi-am dorit să creez o interfață mult mai naturală și intuitivă, eliminând bariera dispozitivelor fizice de control. Sistemul pe care l-am construit funcționează ca o punte directă între cinematica brațului uman și cea a robotului. Provocarea principală a fost reconstruirea mișcării 3D folosind imagini 2D. Pentru a rezolva acest lucru, am implementat o soluție bazată pe computer vision folosind două camere: o cameră principală (frontală), care urmărește coordonatele palmei în plan orizontal (axele X și Y), și o cameră laterală, care citește structura brațului pentru a extrage corect înălțimea (axa Z). Cu ajutorul algoritmilor de inteligență artificială (MediaPipe) pentru recunoașterea scheletului uman, scriptul meu extrage aceste coordonate de zeci de ori pe secundă. Partea centrală a lucrării o reprezintă matematica de calibrare: sistemul preia poziția mâinii din spațiul virtual al pixelilor, o transformă în coordonate fizice reale (metri) și o transmite instantaneu prin rețea către mediul Universal Robots (URSim). Acolo, robotul preia aceste date și își mișcă efectorul final (TCP-ul) urmărind fidel traiectoria mâinii mele. Dincolo de provocarea tehnică a sincronizării dintre computer vision și controlul robotic, scopul final al acestui proiect este să demonstreze că programarea și operarea roboților pot deveni mult mai umane și accesibile. O astfel de interfață de control vizual deschide noi posibilități, de la operarea în siguranță a roboților de la distanță în medii periculoase, până la ghidarea rapidă a coboților în fabrici de către persoane care nu au cunoștințe avansate de programare. |
| URI: | https://dspace.upt.ro/xmlui/handle/123456789/9255 |
| Colecţia: | Lucrări de diplomă/Dissertations |
Fişierele documentului:
| Fişier | Descriere | Mărime | Format | |
|---|---|---|---|---|
| BUPT_DIPL_BADESCU Sebastian Ovidiu_f.pdf Restricted Access | 3.55 MB | Adobe PDF | Vizualizare/Deschidere Request a copy |
Documentele din DSpace sunt protejate de legea dreptului de autor, cu toate drepturile rezervate, mai puţin cele indicate în mod explicit.