Průmysl 4.0 podle Y Softu: Roboruka s umělou inteligencí ovládá tiskárnu i mobil

  • Brněnský Y Soft vyvíjí robota pro testování UI
  • Díky kameře vidí, co se před ním odehrává
  • Může testovat třeba ovladač tiskárny nebo mobilní aplikaci

Loni jsme navštívili výrobní buňku 4.0, experimentální prototyp fabriky zítřka, jak si ji představují inženýři z jihomoravské laboratoře Intermac (JIC). Výrobní buňku tvoří shluk automatizovaných strojů, robotických rukou a měřících stanic, takže celý proces výroby může být rychlejší… A bez lidí.

Tento týden jsme navštívili další laboratoř. Také byla plná robotických rukou, ty však tentokrát neměly rozměry gauče, ale byly to drobné strojky s několika malými servomotorky. Přesto se nejednalo o hračky pro kutily, ale „zaměstnance,“ kteří nahradili skutečnou lidskou sílu.

Vyrazili jsme se totiž podívat do brněnského Y Softu, který okupuje dvě budovy v blízkosti kampusu zdejšího VUT. Y Soft vyvíjí softwarové podnikové systémy pro správu tisku a stejně jako každá jiná firma potřebuje testery, kteří zkoušejí, jestli programy fungují přesně tak, jak mají.

Robotická ruka pro testery

Y Soft má také svoji laboratoř Y Soft Labs, kde si pohrává s IoT, novými přístupy a systémem RQA – robotickou rukou s kvalitní průmyslovou kamerou a hlavně napojením na síť a strojové učení. Ve středu nám jej v akci předvedl Jakub Pavlák z robotického týmu a jeho vývojáři.

Klepněte pro větší obrázek
Jakub Pavlák a jeho tým demonstrují své robotické ruky. Zatímco jedna testuje ovládací software kancelářské tiskárny, druhá aplikaci na telefonu.

I když má Y Soft ambice nabízet RQA jako komerční řešení pro další společnosti, sám jej vyvíjí pro účely vlastního testování. Robotická paže totiž zastoupí skutečného testera z masa a kostí, kterého musíte vykrmovat kávou a tučnou pizzou.

Takže jak to celé funguje? Dejme tomu, že budete studio, které vyvíjí novou mobilní aplikaci a potřebuje neustále testovat, jestli její GUI správně funguje. Základní logiku sice můžete otestovat ve virtuálním prostředí na emulátoru, ovšem jak aplikace reaguje na skutečném telefonu, vyzkoušíte jen v reálných podmínkách.

Klepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázek
Robotické ruky nahradí lidského testera, který má dle scénáře vyzkoušet ovladač tiskárny, anebo mobilní aplikaci. Software ruky díky kamerám rozpoznává objekty na displejích a klepá na správné místo. Na nástěnné obrazovce se poté vypisují provozní informace o aktuálním testování.

Možností je hromada počínaje veřejným betatestem a konče interními testery, kdybyste ale měli ysoftí ruku, prostě pod ní položíte telefon, na které bude vaše aplikace, v jednoduchém prostředí sestavíte sadu instrukcí, které má ruka vykonat, načež ta to bude provádět třeba celou noc stále dokola.

Díky strojovému vidění klepe tam, kam opravdu má

Řešení z Brna je přitom unikátní zejména v tom, že do hry vstupuje inteligentní rozpoznávání obrazu, takže robotická paže do jisté míry připomíná člověka. Nejprve tedy software naučíte, co který symbol na displeji znamená, a pak můžete napsat sadu instrukcí nikoliv ve smyslu: klepni na pozici X,Y, ale: klepni na tlačítko OK.

Robotická ruka a rozpoznávání obrazu:

Drobný detail? Ani náhodou! Představte si například, že v rámci vývoje přesunete nějaký prvek někam jinam. Kdybyste měli hloupou ruku, která prostě jen klepá na přesné místo na displeji, museli byste její testovací program zcela přepsat, což by se u malých projektů nejspíše vůbec nevyplatilo.

Naše chytrá ruka se ale díky kameře stejně jako člověk dívá a hledá, na co má dle instrukci klepnout. Principiálně se tedy opravdu neliší od brigádníka, který dorazí na noční směnu a dostane štos s body, které má s mobilem provádět.

Robotická ruka se přihlásí, vybere a vytiskne dokument:

Díky tomuto přístupu se dokáže software vypořádat i s nejrůznějšími nečekanými překážkami, o kterých poté zaznamená podrobný report. Když se tedy na obrazovce telefonu objeví třeba něco jiného, co tam v daný okamžik nemá vůbec být (třeba nečekaný chybový dialog), paže nebude dále hloupě klepat na displej, ale po několika krocích díky analýze obrazu zjistí, že realita na displeji neodpovídá zadání. Testovací sekvence poté může začít od začátku, skončit a tak dále, jak si to budete přát.

Software a podobný chytrý hardware možná jednou leckomu sebere práci

Robotická ruka z laboratoře Y Softu je zároveň ukázkou toho, že se automatizace nemusí týkat jen klasických fabrik, ale i sofistikovaných technologických profesí.

Robotická ruka a nečekaný problém:

Ostatně analytici z Deloitte nedávno zveřejnili zprávu, že jen v Česku může Průmysl 4.0 nahradit až 51 % pracovních pozic. Automatizace, robotizace a internetizace firem nicméně podle stejné zprávy zároveň do roku 2033 zvýší potenciál české ekonomiky až o 78 %.

Postavte si vlastní robotickou ruku

S primitivní robotickou rukou můžete experimentovat i sami, na trhu je totiž hromada programovatelných paží pro děti i zkušené kutily. Jednu z nich jsme čtenářům představili v únorovém vydání časopisu Computer.

Klepněte pro větší obrázekKlepněte pro větší obrázekKlepněte pro větší obrázek
Robotická ruka v únorovém Computeru

Diskuze (12) Další článek: Stále častěji budeme telefonovat s roboty. Microsoft překvapil, jeho technologie je dál než Google

Témata článku: Byznys, Umělá inteligence, Strojové učení, Mobilní aplikace, Roboti, IoT, Neuronová síť, Brno, Průmysl 4.0, Výrobní buňka, Deloitte, Nový přístup, Jednoduché prostředí, Robotická paže, Computer, GUI, Stejná zpráva, Tester, Celý proces, Česká republika, Aplikace, Virtuální prostředí, Základní logika, Ovládací software, Malý projekt


Určitě si přečtěte

Tohle tak jednou zažít: Nová vzducholoď Airlander 10 s prosklenou podlahou

Tohle tak jednou zažít: Nová vzducholoď Airlander 10 s prosklenou podlahou

** Airlander 10 nabídne plavby vzduchem v interiéru s prosklenou podlahou ** Luxusní vzducholoď byla původně vyvíjena pro vojenské účely ** Počítá se s třídenními „kochacími“ výlety za poznáním

Karel Kilián | 7

Nový iPhone a další novinky Applu: sledujte, na co se zase budou stát fronty

Nový iPhone a další novinky Applu: sledujte, na co se zase budou stát fronty

** Apple dnes představuje nové produkty v čele s novými iPhony ** Nemusí zůstat jen u telefonů, čekají se i další novinky ** Úvodní přednáška začíná v 19:00 našeho času

David Polesný | 57

Vyzkoušeli jsme eObčanku a přihlásili se s ní na weby úřadů. Vážně to funguje!

Vyzkoušeli jsme eObčanku a přihlásili se s ní na weby úřadů. Vážně to funguje!

** Máme eObčanku, máme čtečku, vyzkoušeli jsme přihlášení na weby úřadů. ** Objevily se drobné problémy, podařilo se nám je vyřešit. ** Používání eObčanky pro online identifikaci je velmi pohodlné.

Marek Lutonský | 35

Pojďme programovat elektroniku: Když už vás ten chumel součástek prostě nebaví

Pojďme programovat elektroniku: Když už vás ten chumel součástek prostě nebaví

** Levné cetky z Asie stojí dolar ** Postavíte s nimi skoro vše od teploměru po spínač zavlažování ** Má to ale jeden háček. Bude to ošklivé a povětšinou nekvalitní

Jakub Čížek | 22


Aktuální číslo časopisu Computer

Jak vytvořit a spravovat vlastní web

Velký test herních klávesnic a DVB-T2 tunerů

Vše o formátu RAW

Vybíráme nejlepší základní desku