Průmysl 4.0 podle Y Softu: Roboruka s umělou inteligencí ovládá tiskárnu i mobil

  • Brněnský Y Soft vyvíjí robota pro testování UI
  • Díky kameře vidí, co se před ním odehrává
  • Může testovat třeba ovladač tiskárny nebo mobilní aplikaci

Loni jsme navštívili výrobní buňku 4.0, experimentální prototyp fabriky zítřka, jak si ji představují inženýři z jihomoravské laboratoře Intermac (JIC). Výrobní buňku tvoří shluk automatizovaných strojů, robotických rukou a měřících stanic, takže celý proces výroby může být rychlejší… A bez lidí.

Tento týden jsme navštívili další laboratoř. Také byla plná robotických rukou, ty však tentokrát neměly rozměry gauče, ale byly to drobné strojky s několika malými servomotorky. Přesto se nejednalo o hračky pro kutily, ale „zaměstnance,“ kteří nahradili skutečnou lidskou sílu.

Vyrazili jsme se totiž podívat do brněnského Y Softu, který okupuje dvě budovy v blízkosti kampusu zdejšího VUT. Y Soft vyvíjí softwarové podnikové systémy pro správu tisku a stejně jako každá jiná firma potřebuje testery, kteří zkoušejí, jestli programy fungují přesně tak, jak mají.

Robotická ruka pro testery

Y Soft má také svoji laboratoř Y Soft Labs, kde si pohrává s IoT, novými přístupy a systémem RQA – robotickou rukou s kvalitní průmyslovou kamerou a hlavně napojením na síť a strojové učení. Ve středu nám jej v akci předvedl Jakub Pavlák z robotického týmu a jeho vývojáři.

Klepněte pro větší obrázek
Jakub Pavlák a jeho tým demonstrují své robotické ruky. Zatímco jedna testuje ovládací software kancelářské tiskárny, druhá aplikaci na telefonu.

I když má Y Soft ambice nabízet RQA jako komerční řešení pro další společnosti, sám jej vyvíjí pro účely vlastního testování. Robotická paže totiž zastoupí skutečného testera z masa a kostí, kterého musíte vykrmovat kávou a tučnou pizzou.

Takže jak to celé funguje? Dejme tomu, že budete studio, které vyvíjí novou mobilní aplikaci a potřebuje neustále testovat, jestli její GUI správně funguje. Základní logiku sice můžete otestovat ve virtuálním prostředí na emulátoru, ovšem jak aplikace reaguje na skutečném telefonu, vyzkoušíte jen v reálných podmínkách.

Klepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázek
Robotické ruky nahradí lidského testera, který má dle scénáře vyzkoušet ovladač tiskárny, anebo mobilní aplikaci. Software ruky díky kamerám rozpoznává objekty na displejích a klepá na správné místo. Na nástěnné obrazovce se poté vypisují provozní informace o aktuálním testování.

Možností je hromada počínaje veřejným betatestem a konče interními testery, kdybyste ale měli ysoftí ruku, prostě pod ní položíte telefon, na které bude vaše aplikace, v jednoduchém prostředí sestavíte sadu instrukcí, které má ruka vykonat, načež ta to bude provádět třeba celou noc stále dokola.

Díky strojovému vidění klepe tam, kam opravdu má

Řešení z Brna je přitom unikátní zejména v tom, že do hry vstupuje inteligentní rozpoznávání obrazu, takže robotická paže do jisté míry připomíná člověka. Nejprve tedy software naučíte, co který symbol na displeji znamená, a pak můžete napsat sadu instrukcí nikoliv ve smyslu: klepni na pozici X,Y, ale: klepni na tlačítko OK.

Robotická ruka a rozpoznávání obrazu:

Drobný detail? Ani náhodou! Představte si například, že v rámci vývoje přesunete nějaký prvek někam jinam. Kdybyste měli hloupou ruku, která prostě jen klepá na přesné místo na displeji, museli byste její testovací program zcela přepsat, což by se u malých projektů nejspíše vůbec nevyplatilo.

Naše chytrá ruka se ale díky kameře stejně jako člověk dívá a hledá, na co má dle instrukci klepnout. Principiálně se tedy opravdu neliší od brigádníka, který dorazí na noční směnu a dostane štos s body, které má s mobilem provádět.

Robotická ruka se přihlásí, vybere a vytiskne dokument:

Díky tomuto přístupu se dokáže software vypořádat i s nejrůznějšími nečekanými překážkami, o kterých poté zaznamená podrobný report. Když se tedy na obrazovce telefonu objeví třeba něco jiného, co tam v daný okamžik nemá vůbec být (třeba nečekaný chybový dialog), paže nebude dále hloupě klepat na displej, ale po několika krocích díky analýze obrazu zjistí, že realita na displeji neodpovídá zadání. Testovací sekvence poté může začít od začátku, skončit a tak dále, jak si to budete přát.

Software a podobný chytrý hardware možná jednou leckomu sebere práci

Robotická ruka z laboratoře Y Softu je zároveň ukázkou toho, že se automatizace nemusí týkat jen klasických fabrik, ale i sofistikovaných technologických profesí.

Robotická ruka a nečekaný problém:

Ostatně analytici z Deloitte nedávno zveřejnili zprávu, že jen v Česku může Průmysl 4.0 nahradit až 51 % pracovních pozic. Automatizace, robotizace a internetizace firem nicméně podle stejné zprávy zároveň do roku 2033 zvýší potenciál české ekonomiky až o 78 %.

Postavte si vlastní robotickou ruku

S primitivní robotickou rukou můžete experimentovat i sami, na trhu je totiž hromada programovatelných paží pro děti i zkušené kutily. Jednu z nich jsme čtenářům představili v únorovém vydání časopisu Computer.

Klepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázek
Robotická ruka v únorovém Computeru

Diskuze (12) Další článek: Stále častěji budeme telefonovat s roboty. Microsoft překvapil, jeho technologie je dál než Google

Témata článku: Byznys, Umělá inteligence, Mobilní aplikace, Roboti, Strojové učení, IoT, Neuronová síť, Brno, Průmysl 4.0, Robotická paže, Jednoduché prostředí, Drobný detail, Celá noc, Y Soft, Podrobný report, Reálná podmínka, Nečekaný problém, Ovládací software, Pracovní pozice, Komerční řešení, Stejná zpráva, Deloitte, Česká republika, Tiskárna, Nový přístup


Určitě si přečtěte

Našli jsme 22 schopných internetových prohlížečů: Vyberte si, který vám nejvíc sedne

Našli jsme 22 schopných internetových prohlížečů: Vyberte si, který vám nejvíc sedne

** Není jen Chrome, Firefox, Edge či Opera. Na výběr máte mnohem více! ** Internetové prohlížeče se liší funkcemi, zaměřením i designem. Našli jsme 22 použitelných prohlížečů pro Windows ** Vyberte si prohlížeč, který vám bude nejvíce vyhovovat

Karel Kilián | 32

Šmírovačka kamerami Googlu: Koukněte se, co nového zachytily na Street View

Šmírovačka kamerami Googlu: Koukněte se, co nového zachytily na Street View

Google stále fotí celý svět do své služby Street View. A novodobou zábavou je hledat v mapách Googlu vtipné záběry. Podívejte se na výběr nejlepších!

redakce | 43

Šéf amerického Red Hatu: Odpojte Brno od internetu a zhroutíme se

Šéf amerického Red Hatu: Odpojte Brno od internetu a zhroutíme se

** V Česku najdete hromadu skvělých vývojářů ** Mnozí z nich přispívají do open-source ** Třeba v brněnském Red Hatu

Jakub Čížek | 51

WALL-E vyfotil Zemi ze vzdálenosti 1 milionů km

WALL-E vyfotil Zemi ze vzdálenosti 1 milionů km

** Malá sonda s přezdívkou WALL-E pořídila fotografii Země a Měsíce ze vzdálenosti 1 milionů km ** CubeSat letí se sondou InSight k Marsu ** InSight přistane na Marsu 26. listopadu

Petr Kubala | 4

Proč autopilot Tesly bourá? Test dává odpověď: může za to řidič!

Proč autopilot Tesly bourá? Test dává odpověď: může za to řidič!

** Britové otestovali Teslu v režimu autopilota ** Skončilo to nárazem Tesly do stojícího auta ** Kdo je na vině? Řidič

Karel Kilián | 55

Porno insider: Jak virtuální realita vstupuje do filmů pro dospělé

Porno insider: Jak virtuální realita vstupuje do filmů pro dospělé

** Pornografie údajně představuje třetinu internetové obsahu a je technologický tahounem ** Do erotického obsahu postupně zasahuje i virtuální realita ** Kromě vizuálního vjemu se pracuje také na virtuálním uspokojení toho hmatového

Jan Dudek | 28