Brat robotic mobil JetAuto Pro

Brat robotic mobil JetAuto Pro este un robot ROS (Robot Operating System) cu brat robotic de viziune, alimentat de Jetson Nano si compatibil cu mapare SLAM/navigare si Python.

• Alimentat de NVIDIA Jetson Nano (inclus) si bazat pe ROS
• Brat robotic FPV pentru selectie, sortare si transport
• Camera de adancime si Lidar pentru mapare si navigare
• Ecran tactil de 7 inch pentru monitorizare si depanare parametri
• Optional, dispune de un array de 6 microfoane pentru interactiune vocala
• Sursa deschisa, ample materiale PDF si tutoriale disponibile

Brat robotic mobil JetAuto Pro – functionalitati si aplicatii:

• Controlul miscarii robotului
• Mapare si navigare
• Planificare de traseu
• Urmarire si evitare a obstacolelor
• Conducere autonoma
• Prehensiune inteligenta
• Simulare cu MoveIt
• Interactiune somatosenzoriala
• Interactiune

Brat robotic mobil JetAuto Pro este un robot ROS complet 2 in 1, creat special pentru invatarea ROS-ului. Este echipat cu NVIDIA Jetson Nano, un brat robotic cu viziune AI, motoare cu codificatori de inalta performanta, Lidar, camera de adancime 3D si ecran de 7 inch, care extind functionalitatile sale. Poate realiza controlul miscarii robotului, mapare si navigare, planificare de traseu, urmarire si evitare a obstacolelor, conducere autonoma, selectie inteligenta, simulare cu MoveIt, interactiune somatosenzoriala si interactiune vocala!

Combinatia diversa de hardware face din JetAuto Pro o platforma ideala pentru invatarea si verificarea functiei de mapare SLAM robotica, precum si pentru dezvoltarea in ROS. Sunt furnizate ample materiale de invatare ROS si tutoriale pentru a va ajuta sa incepeti rapid!

Sistem de control Jetson Nano

NVIDIA Jetson Nano poate rula framework-uri de invatare profunda de baza, cum ar fi TensorFlow, PyTorch, Caffe/Caffe2, Keras, MXNet. Ofera putere de calcul puternica pentru proiecte AI masive. Cu Jetson Nano, JetAuto Pro poate implementa recunoasterea imaginii, detectarea si pozitionarea obiectelor, estimarea pozitiei, segmentarea semantica, analiza inteligenta si alte functii puternice.

Mapare si navigare 2D Lidar

JetAuto Pro este echipat cu un Lidar de inalta performanta care suporta maparea cu diverse algoritmi, inclusiv Gmapping, Hector, Karto si Cartographer. In plus, poate realiza planificarea traseelor, navigarea la punct fix si evitarea obstacolelor in timpul navigatiei.

Navigare cu un singur punct, navigare cu mai multe puncte

JetAuto Pro foloseste Lidar pentru a detecta mediul in timp real si poate realiza atat navigarea cu un singur punct, cat si navigarea cu mai multe puncte.

Planificare traseu TEB, evitare obstacole

Aceasta suporta planificarea traseelor TEB si poate monitoriza obstacolul in timp real in timpul navigatiei. Prin urmare, poate reface traseul pentru a evita obstacolul si a continua deplasarea.

Harta de explorare autonoma RRT

Adoptand algoritmul RRT, JetAuto Pro poate finaliza cartografierea explorarii, salva harta si reveni la punctul de plecare autonom, fara necesitatea controlului manual.

Urmarire Lidar

Prin scanarea obiectului in miscare din fata, Lidar face ca robotul sa fie capabil sa urmareasca tinta.

Paza cu Lidar

Pazeste mediul inconjurator si declanseaza alarma cand detecteaza un intrus.

Mapare si navigare 3D RTAB-VSLAM

Camera de adancime sustine maparea 3D in doua moduri, viziune pura RTAB si fuziune de viziune si Lidar, ceea ce permite JetAuto Pro sa navigheze si sa evite obstacolele in harta 3D, precum si sa se localizeze global.

ORBSLAM2 + ORBSLAM3

ORB-SLAM este un cadru open-source pentru mapare si localizare simultana in timp real pentru camere monoculare, binoculare si RGB-D, care poate calcula traiectoria camerei in timp real si reconstituie mediul 3D. Si in modul RGB-D, se poate obtine dimensiunea reala a obiectului.

Date harta adancime, nor de puncta

Prin intermediul API-ului corespunzator, bratul robotic mobil JetAuto Pro poate obtine date de adancime, imagine color si nor de puncte ale camerei.

Dezvoltare MediaPipe, interactiune AI imbunatatita

Bazat pe cadru MediaPipe, JetAuto Pro poate efectua recunoasterea corpului uman, detectarea varfurilor degetelor, detectarea fetei, detectarea 3D si multe altele.

Cadru AI pentru invatare profunda

Foloseste algoritmul YOLO si biblioteca de modele pentru invatare profunda pentru a recunoaste obiectele.

Urmarire tinta KCF

Bazandu-se pe algoritmul de filtrare KCF, robotul poate urmari tinta selectata.

Recunoastere si urmarire culori/etichete

JetAuto Pro poate recunoaste si urmari culorile desemnate si poate recunoaste mai multe etichete April si coordonatele lor in acelasi timp.

Realitate augmentata (AR)

Dupa ce selectati modelele pe aplicatie, acestea pot fi suprapuse pe eticheta April.

Harta ROS robot APP

Utilizati aplicatia pentru a controla JetAuto Pro pentru a cartografia si naviga si pentru a vizualiza imagini.

Control miscare corp

Recunoaste si analizeaza membrele si structura corpului dvs. cu ajutorul camerei de adancime, apoi efectueaza actiuni corespunzatoare in functie de pozitia dvs.

Brat robotic cu viziune inteligenta

Echipat cu un brat robotic cu viziune de 5 DOF, JetAuto Pro poate prelua si sorta obiectele. In plus, combinatia dintre Lidar si bratul robotic permite JetAuto Pro sa se deplaseze cu inteligenta in timpul navigatiei.

Navigare autonoma

Recunoastere tinta

Recunoastere destinatie

Model cinematic URDF de simulare

Simulare si controlul traiectoriei cu MoveIt

Recunoastere gesturi

Sortare dupa culori

Urmeaza linia pentru a elimina obstacolele

Sortare deseuri

Array de microfoane la distanta

Acest array de 6 microfoane este priceput la localizarea sursei de sunet la distanta, recunoasterea vocii si interactiunea vocala. In comparatie cu un modul de microfon obisnuit, poate implementa functii mai avansate.

Control vocal pentru navigare

Localizare sursa de sunet

Control vocal pentru bratul robotic

Recunoastere vocala pentru recunoasterea culorii

Convoy motorizat

Navigare multi-vehicul

Prin comunicarea multi-masina, JetAuto Pro poate realiza navigare multi-vehicul, planificare a traseelor si evitare inteligenta a obstacolelor.

Formatie inteligenta

O serie de masini JetAuto Pro pot mentine formatia, inclusiv linie orizontala, linie verticala si triunghi, in timpul deplasarii.

Control in grup

Un grup de masini JetAuto Pro poate fi controlat cu un singur maner wireless pentru a efectua actiuni uniforme si simultane.

Sistemul de operare ROS pentru roboti

Cadru global popular de comunicare robotica

ROS este un sistem de operare meta open-source pentru roboti. Furnizeaza servicii de baza, cum ar fi abstractizarea hardware-ului, controlul dispozitivelor la nivel inalt, implementarea functionalitatilor folosite frecvent, transmiterea mesajelor intre procese si gestionarea pachetelor. De asemenea, ofera instrumentele si functiile de biblioteca necesare pentru a obtine, compila, scrie si rula cod pe calculatoare. Scopul sau este de a oferi suport pentru reutilizarea codului in cercetarea si dezvoltarea robotica.

Simulare Gazebo

JetAuto Pro foloseste cadru ROS si suporta simularea Gazebo. Gazebo ofera o abordare noua pentru controlul JetAuto Pro si verificarea algoritmilor intr-un mediu simulat, ceea ce reduce cerintele de experimentare si imbunatateste eficienta.

Control simulare JetAuto Pro

Algoritmul cinematic poate fi verificat in simulare pentru a accelera iterarea algoritmului si a reduce costurile experimentelor.

Date vizuale

RViz poate vizualiza rezultatele de mapare si navigare, facilitand depanarea si imbunatatirea algoritmului.

Diverse metode de control

Aplicatie WonderAi

Aplicatie Map Nav (disponibila doar pe Android)

Maner wireless

Structura produsului

Lidar de inalta performanta

Doua optiuni de Lidar: editia personalizata SLAMTEC A1 si Lidarul EAI G4

Camera de adancime ORBBEC Astra Pro

Modul array de microfoane la distanta iFLYTEK

Ecran tactil LCD de 7 inch HD

Brat robotic cu viziune

Accesorii de baza

Placa de expansiune multifunctionala

Placa de expansiune are un senzor IMU incorporat care poate detecta pozitia robotului in timp real. Pe placa se afla 2 canale PWM, doua taste, un LED, un buzzer, 9 interfete seriale pentru servo, doua porturi de expansiune GPIO si doua interfete IIC.

Driver motor cu codificator

JetAuto Pro este echipat cu un driver motor cu codificator cu 4 canale, ceea ce face mai usoara controlul motorului.

Motor cu reductor si codificator Hall

Motorul de 520 vine cu un codificator de inalta precizie si ofera forta si performanta ridicate. Codificatorul Hall incremental de faza AB incorporat se remarca prin precizia sa ridicata si capacitatea sa de a rezista la interferente.

Baterie Lipo de 11,1V 6000mAh

Aceasta baterie Lipo cu capacitate mare poate alimenta mai bine robotul si prelungi durata de functionare a acestuia.