Prepoznavanje objektov v delovnem prostoru industrijskega robota s pomočjo globinske kamere

Bratina, Matic (avtor), Vrabič, Rok (mentor), Bračun, Drago (komentor)

V okviru magistrske naloge je bil nadgrajen projekt, ki združuje načrtovanje robotovega gibanja in prepoznavanje objekta z uporabo globinske kamere. Z globinsko kamero zajemamo barvno in globinsko sliko delovnega okolja robota. Na zajetih slikah uporabimo naučen model konvolucijske nevronske mreže, s katerim zaznamo ciljni objekt. Prepoznano območje analiziramo in določimo položaj ter orientacijo predmeta v prostoru. Z uporabo konvolucijskega modela Dex-Net na prepoznanem objektu določimo potencialna prijemna mesta in njihovo primernost. Lokacije prijemov in položaj predmeta so uporabljeni za načrtovanje gibanja. Načrtovanje gibanja robota Franka Emika Panda je izvedeno s pomočjo programskega paketa MoveIt in razčlenjeno na niz podnalog. Če načrtovalec gibanja najde rešitev za prijemanje in premikanje predmeta, je to realizirano v virtualnem okolju z robotskim simulatorjem Gazebo.

• Jezik: Slovenski jezik
• Ključne besede: prepoznavanje objektov, industrijski roboti, robotski vid, pobiranje objektov v razsutem stanju, konvolucijske nevronske mreže, robotski operacijski sistem (ROS), MoveIt, Gazebo
• Vrsta gradiva: Magistrsko delo/naloga
• Tipologija: 2.09 - Magistrsko delo
• Organizacija: FS - Fakulteta za strojništvo
• Kraj izida: Ljubljana
• Založnik: [M. Bratina]
• Leto izida: 2021
• Št. strani: XX, 72 str.
• PID: 20.500.12556/RUL-124539
• UDK: 007.52:004.932:004.896(043.2)
• COBISS.SI-ID: 51334915
• Datum objave v RUL: 30.01.2021

BRATINA, Matic, 2021, Prepoznavanje objektov v delovnem prostoru industrijskega robota s pomočjo globinske kamere [na spletu]. Magistrsko delo. Ljubljana : M. Bratina. [Dostopano 3 april 2025]. Pridobljeno s: https://repozitorij.uni-lj.si/IzpisGradiva.php?lang=slv&id=124539

Sekundarni jezik

• Jezik: Angleški jezik
• Naslov: Object recognition in the workspace of an industrial robot using a depth camera

Izvleček

The master's thesis presents a project that combines industrial robotmotion planning and object recognition using a depth camera. The depth camera captures a colour-and-depth image of the robot's workspace. A convolutional neural network is then used to detect the target object in the captured images. The identified area is analyzed and the position and orientation of the object in space are determined. Using the Dex-Net convolution model, potential gripping points and grip probabilities are determined and evaluated. The locations of the grips and the position of the object are communicated to the motion planner. Motion planning of Franka Emika Panda robot is performed using the MoveIt software framework and broken down into a series of subtasks. If the motion planner finds a solution for the pick and-place movement, the movement is realized in a virtual environment based on Gazebo robotic simulator.

• Ključne besede: object recognition, industrial robots, robot vision, bin picking, convolutional neural networks, robot operating system (ROS), MoveIt, Gazebo