How Does Robotic Vision Work?

Cobots “see” via one or more integrated cameras. At least one robot vision camera will be
mounted on the robotic arm itself, literally serving as the eye of the machine. In some cases,
additional cameras are installed in strategic locations in the cobot’s working cell. This set-up
allows the camera to have a wider visual angle and capture as much visual data as it needs to
perform its function in collaboration with human workers.
[Jak działa wizja robota?
Coboty „widzą” przez jedną lub więcej zintegrowanych kamer. Co najmniej jedna kamera
wizyjna robota zostanie zamontowana na samym ramieniu robota, dosłownie służąc jako
oko maszyny. W niektórych przypadkach dodatkowe kamery są instalowane w
strategicznych miejscach w komórce roboczej cobota. Taka konfiguracja pozwala kamerze
mieć szerszy kąt widzenia i rejestrować tyle danych wizualnych, ile potrzebuje do
wykonywania swojej funkcji we współpracy z pracownikami.]
Before the machine is deployed, it is first programmed and taught to identify the objects with
which it should interact. The cobot’s camera will take 2D or 3D scans of the object. The image
will then be stored in the cobot’s database and programmed to trigger the machine to move and
perform specific tasks.
Once the programming is complete, the cobot can finally be installed in the assembly line.
[Przed wdrożeniem maszyna jest najpierw programowana i uczona identyfikowania
obiektów, z którymi powinna wchodzić w interakcje. Kamera cobota wykona skany 2D lub
3D obiektu. Obraz zostanie następnie zapisany w bazie danych cobota i zaprogramowany
tak, aby uruchamiał ruch maszyny i wykonywał określone zadania.
Po zakończeniu programowania cobot może wreszcie zostać zainstalowany na linii
montażowej.]
The Process
There are three segments in a robot vision system:
[Proces
System wizyjny robota składa się z trzech segmentów:]
Image capture
The cameras capture footage of the objects that enter a cobot’s workspace. If the set-up is
halfway through the assembly line, there is a good chance that conveyor systems will deliver the
products directly before the cobots. The camera/s will start capturing visual data from a
calculated distance. Afterward, the machine will analyze the images or footage and enhance it to
produce a clear picture.
[Przechwytywania obrazu
Kamery rejestrują materiał filmowy obiektów wchodzących w obszar roboczy cobota. Jeśli
konfiguracja jest w połowie linii montażowej, istnieje duża szansa, że systemy
przenośników dostarczą produkty bezpośrednio przed cobotami. Kamery zaczną
rejestrować dane wizualne z obliczonej odległości. Następnie maszyna przeanalizuje obrazy
lub materiał filmowy i poprawi je, aby uzyskać wyraźny obraz.]
Image processing
The picture will go through further processing and analyzed by pixel. The system will
compare the colors and apparent shape of the object with the image programmed in its
database.
[Przetwarzanie obrazu
Obraz zostanie poddany dalszej obróbce i przeanalizowany w pikselach. System porówna
kolory i pozorny kształt obiektu z obrazem zaprogramowanym w swojej bazie danych.]
Connectivity and response
Once the machine recognizes that the object in the picture matches the pre-programmed image,
it will perform a corresponding action onto the object before it.
This entire process happens in quick succession within seconds.
[Łączność i reakcja
Gdy maszyna rozpozna, że obiekt na obrazie pasuje do zaprogramowanego obrazu,
wykona odpowiednią akcję na obiekcie przed nim.
Cały ten proces odbywa się w krótkich odstępach czasu w ciągu kilku sekund.]
[To put things into context: one good example of this process would be a robot vision system for
the icing and decorating line of a cake factory. Two custom cobot arms are stationed on either
end of this assembly line: one spreads buttercream frosting on the entire cake, while the other
pipes complex icing designs on top.A conveyor belt brings in the cakes and gets them frosted
first before conveying them to the decorating arm (meanwhile, the frosting arm gets started on
the next cake). Both arms have cameras (eyes) that scan each cake that comes before it. Every
time the frosting arm registers an un-iced cake, it releases its icing nozzle and scraper, which
spreads the buttercream evenly on the top and sides of the cake. The same goes with the
decorating arm: the sight of an iced cake, whose frosting matches the image of the model cake
programmed into its system, would trigger the machine to create the corresponding icing design.
[Aby umieścić rzeczy w kontekście: dobrym przykładem tego procesu może być system
wizyjny robota dla linii lukrowania i dekorowania w fabryce ciast. Dwa niestandardowe
ramiona cobota znajdują się na obu końcach tej linii montażowej: jedno rozprowadza
krem maślany na całym torcie, podczas gdy inne układają lukier na wierzchu. Przenośnik
taśmowy przenosi ciasta i najpierw je zamraża, zanim przeniesie je do ramię do
dekorowania (w międzyczasie ramię do lukieru zaczyna się na następnym torcie). Oba
ramiona mają kamery (oczy), które skanują każde ciasto, które się przed nim pojawia. Za
każdym razem, gdy ramię do mrożenia wykryje niezamrożone ciasto, zwalnia dyszę do
polewania i skrobak, który równomiernie rozprowadza krem maślany na wierzchu i
bokach ciasta. To samo dotyczy ramienia dekorującego: widok mrożonego ciasta, którego
lukier pasuje do obrazu zaprogramowanego w jego systemie wzorcowego ciasta,
uruchomiłby maszynę do stworzenia odpowiedniego projektu lukru.]
In this scenario, the cake factory can mass-produce cakes with impressive speed and precision.
The cobots in this factory are clearly recipe-driven, which means the bakery can easily change
cake designs or even produce more than one cake style from a single decorating line.
[W tym scenariuszu fabryka ciast może masowo produkować ciasta z imponującą
szybkością i precyzją. Coboty w tej fabryce są wyraźnie zorientowane na przepisy, co
oznacza, że piekarnia może z łatwością zmieniać projekty ciast, a nawet produkować więcej
niż jeden styl ciasta z jednej linii do dekorowania.]