Didieji duomenys: pamatyti daugiau, įžvelgti tiksliau

„Rūbų ar batų prekybos tinklai nuolaidų korteles dalija ne iš draugiškumo – taip renkami duomenys apie jus“, – primena Švedijos įmonių „Entropics Asset Management AB“ ir „FM Försäkringsmatematik“ rizikos analitikė Agnė Burauskaitė-Harju.

Pirkėjų elgsenos realiu laiku stebėjimas. Pirkinių krepšelių analizė. Geografinių koordinačių fiksavimas. Naršymo internete sekimas. Tai tik nedidelė kasdien verslo renkamų duomenų dalis, toli gražu neatspindinti didžiųjų duomenų („Big Data“) aprėpčių ir potencialo.

Švedijoje rizikos analitike dirbančios Kauno technologijos universiteto (KTU) absolventės A. Burauskaitės-Harju karjeros kelyje – tokie darbo su didžiųjų duomenų analitika pavyzdžiai, kaip modelių, skirtų prognozuoti, kurie klientai, greitu laiku gali atsisakyti banko paslaugų, kūrimas ar darbas su gamtos katastrofų nuostolių prognozavimo modeliais, grįstais didžiaisiais duomenimis.

Tai ne fantastika. Tai didžiųjų duomenų panaudojimas

„Bendradarbiavimas su ekstremalių įvykių modeliavimo kompanija, integruotos orų prognozės, atstatymo sąnaudų prognozavimo programos ir dirbtinio intelekto algoritmai leidžia greitu, beveik realiu laiku prognozuoti nuostolių mastą po gamtos sukeltų katastrofų. Tai, savo ruožtu, įgalina efektyviau paskirstyti išteklius, informuoti draudėjus ir apdraustuosius“, – apie didžiųjų duomenų panaudojimą draudimo sektoriuje pasakoja A. Burauskaitė-Harju.

Pavyzdžiu Agnė pateikia JAV kompaniją „Geomni“, neseniai pradėjusią taikyti naują strategiją – nuotoliniu būdu rinkti duomenis apie gamtos katastrofų žalą. Uraganas Irma, nusiaubęs Floridos krantus, šiai kompanijai tapo pirmu rimtu išbandymu. Panašu, kad įmonė susidorojo su išsikeltais tikslais – preliminarūs žalos nustatymo rezultatai pateikti jau kitą rytą po uragano.

Kaip tai pavyko? „Kompanija turi įspūdingą oro laivyną – daugiau nei 125 lėktuvus ir malūnsparnius, kurie iš 15 strategiškai dislokuotų taškų gali pasiekti bet kurią JAV vietą per valandą. Oro laivyno surinkti duomenys centralizuotai apdorojami moderniomis technologijomis, vaizdo atpažinimo algoritmais, analizės programomis, – pasakoja A. Burauskaitė-Harju. – Dar prieš katastrofą kompanija sukaupė didelę bazę pastatų infrastruktūros ir panašaus tipo duomenų, kurie gamtos katastrofos atveju lyginami su naujomis nuotraukomis, analizuojami skirtumai ir nustatoma žala“.

Tokie duomenys naudojami ne tik draudimo įvykių analizei ir išmokų po draudiminio įvykio nustatymui, bet ir galimų išmokų ateityje prognozei.

Skamba mistiškai, kaip iš kino filmo? Didžiųjų duomenų analitikos entuziaste save vadinanti Agnė teigia, kad praktikoje naudojami analitikos metodai matematiškai yra paprasti. Labai retai ir tik labai siauroms problemoms spręsti būtini sudėtingi metodai.

Didžiųjų duomenų iššūkiai – kiekis, greitis, patikimumas

Didžiaisiais duomenimis grindžiama vis daugiau verslo strategijų – „Uber“, „Amazon“, „Spotify“ ir kt. Nepaisant to, tyrimai rodo, kad vienas iš trijų vadovų nepasitiki duomenimis grįstais sprendimais, nes nėra tikras dėl duomenų kokybės. Kodėl?

„Didieji duomenys sudėtingi ir sunkūs įvairiomis prasmėmis, – teigia rizikos analitikė. – Jų ne tik daug. Problema gali būti labai greiti duomenų srautai, kuomet duomenis reikia apdoroti čia ir dabar, nes visų išsaugoti neįmanoma ar nėra prasmės. Be to, didžioji dalis (apie 90 proc.) sukuriamų duomenų yra nestruktūrizuoti – foto, video, teksto dalys ir pan. Prieš taikant analizę, juos būtina apdoroti, struktūrizuoti. O tai užima daug laiko, kyla rizika prarasti dalį vertingos informacijos“.

Kitas iššūkis – duomenų patikimumas. „Dėl didelio duomenų kiekio, dažnai naudojami ne visi duomenys, o jų dalis arba apibendrinti duomenys. Neretai kintamųjų pasirinkimą modelyje riboja technologiniai ypatumai, o pats modelis kuriamas remiantis jau pasenusiais duomenimis. Tad susiduriama su rizika, jog duomenimis grįstas rizikos vertinimo modelis įdiegus gali būti ne(be)aktualus,“ – aiškina KTU absolventė.

Netikrų priklausomybių įžiūrėjimo rizika

Burauskaitė-Harju nuomone, didieji duomenys atveria plačias erdves įžiūrėti netikras priklausomybes ir atrasti tai, ko nori. „Duomenų yra tiek daug, o technologijos tokios įvairios, kad duomenimis pagrįstų blogų sprendimų galima priimti tiek pat, kiek ir gerų. Tad analitikui būtinas gebėjimas tiksliai ir savikritiškai aprašyti prielaidas, o rezultatus įvertinti platesniame kontekste“, – pataria rizikos analitikė.

Klasikinis pavyzdys: analizuodami pirkinių krepšelius, prekybos tinklai nustato, kokie produktai perkami kartu. Siekiant didinti pardavimus, tokie produktai paprastai sudėliojami netoli vienas kito. Vieno prekybos tinklo duomenys parodė, kad dažnai kartu perkamos sauskelnės ir alus. Tiesmuka rezultatų interpretacija negalima, būtinas platesnis konteksto suvokimas. Paaiškėjo, kad sauskelnės kartu su alumi perkamos tik vakarais, kuomet į parduotuvę sauskelnių keliauti tenka vyrams.

Gausu neetiško duomenų panaudojimo galimybių

„Surenkama vis daugiau ir vis įvairesnių duomenų. Aplink – begalė įvairių įrenginių ir sensorių, kurie fiksuoja labai asmeniškus duomenis. Net šunų savininkus lengva identifikuoti iš geografinių koordinačių – jų judėjimo trajektorija dažnai nenuosekli. Neišvengiamai kyla verslo etikos ir žmogaus teisės į privatumą klausimas“, – su didžiųjų duomenų bumu susijusius iššūkius komentavo A. Burauskaitė-Harju.

Rizikos analitikės manymu, su naujomis technologijomis atsiranda naujos galimybės panaudoti duomenis ne tik gerais, bet ir blogais tikslais. Pavyzdžiui, analizuojant duomenis, lengva nustatyti nemokius asmenis, kuriems lengva įsiūlyti paskolą ir kurie vėliau ilgus metus mokėtų dideles palūkanas. Arba panaudojant interneto naršymo istorijos duomenis, lošimų internete svetainėse pasiūlyti individualizuotus, lengvai įtraukiančius, lošti skatinančius sprendimus.

Kompiuteriai pakeis analitikus?

Ir taip, ir ne. A. Burauskaitės-Harju nuomone, situacija primena XX amžių, kuomet automatizuoti procesai fabrikuose išstūmė rankų darbą. Tam tikrose srityse didžiųjų duomenų technologijos, dirbtinis intelektas (angl. „artificial intelligence“) ir kompiuterio mokymasis (angl. „machine learning“) konkuruos su profesionaliomis žiniomis ir specialistais.

„Drąsiai galima teigti, kad repetityvaus, rutininio darbo analitikams ir specialistams bus mažiau, o jų darbo pobūdis radikaliai keisis“, – įžvalgomis dalijasi rizikos analitikė.

„Įmonėms ir specialistams lieka prisitaikyti prie esamų ir laukiamų permainų, siekti naujų žinių ir mokytis dirbti naujai – kartu su technologijomis, o ne prieš jas ar vietoje jų. Šiandien kalbama apie žmogaus ir įrenginio kooperaciją, apie darbą kartu“, – teigia A. Burauskaitė-Harju.

Duomenų analitikai labiau patenkinti savo darbu?

Agnės teigimu, socialiniuose tinkluose sklandantis juokelis, kad analitikai 80 proc. laiko tvarko duomenis, o 20 proc. skundžiasi dėl to – netoli realybės. Pasak jos, duomenų „išplovimui“ (tvarkymui) analitikai vidutiniškai skiria apie 90 proc. darbo laiko, tik 10 proc. laiko lieka tikrajai analitikai ir matematiniam modeliavimui.

Nepaisant to, dalindamasi profesine patirtimi su KTU studentais, A. Burauskaitė-Harju pabrėžė, kad duomenų analitiko darbas savaime motyvuoja: užduočių daug ir įvairių, erdvė asmeniniam tobulėjimui – plati. Gerai nuteikia ir darbo autonomiškumas bei kompetentingi kolegos, su kuriais aptariami nauji metodai ar technologijos.

Studentams: imkite, kiek galite ir kiek duoda

Burauskaitė-Harju susidomėjimo matematika ir informacinėmis technologijomis pradžia įvardija KTU gimnaziją, kur „buvo puiki aplinka kūrybinei minčiai“. Stiprias matematikos žinias Agnė gavo studijuodama taikomąją matematiką KTU. Ji pastebi, kad apie lietuvių analitikų matematinį pasirengimą, darbštumą ir sumanumą švedai atsiliepia tik gerais žodžiais

Didžiuosius duomenis pamilo A. Burauskaitė-Harju doktorantūros studijų Linšiopingo universitete metu. „Daugiausia su didžiaisiais duomenimis teko dirbti SAS institute: nuo klientų duomenų analizės, klientų elgesio ir pardavimų prognozavimo iki sukčiavimo atpažinimo sistemų bankinėse operacijose“.

Šiandien Agnė dirba draudimo srityje, kur mato dideles, kol kas dar nepanaudotas šių duomenų analitikos taikymo galimybes. Viena iš šiandien įdomiausių užduočių Agnė įvardija darbą su gamtos katastrofų rizikos vertinimo modeliais. Anot jos, tai džiuginantis sugrįžimas prie studijų KTU ir Lundo universitetuose nagrinėtos matematinių ekstremumų tematikos.

Visiems Kauno technologijos universitete studijuojantiems matematiką ir didžiųjų verslo duomenų analitiką absolventė pataria: „Imkite, kiek galite ir kiek duoda“. Nes šiandien duomenų analitikai ypatingai reikalingi.

• Ekonominiai ciklai: ar žinote, kaip jais pasinaudoti jūsų naudai?
• Pavasaris – vagišių darbymetis: neša kepsnines, net ir sunešiotus batus.
• Žvilgsnis į ateitį – „airBaltic“ išbandė „SpaceX“ internetą „Starlink“.
• Pensijos tolsta, darbuotojai sensta. Keisti požiūrį privalės ir darbdaviai.
• Žengsime į vasaros laiką − kodėl šis metas itin pavojingas vairuotojams?
• Seimas spręs, ar leisti gyventojams pasitraukti iš pensijų kaupimo.
• Daugiau nei ketvirtadalis vairuotojų vėluoja laiku atlikti techninę apžiūrą.
• Pasiūlymas internete lėmė prarastą laisvę: kaip atskirti verbavimą?
• Stalo žaidimai šeimai: linksmybės ir mokymosi derinys.
• Taip įdarytų kiaušinių dar neragavote: nustebinsite visą šeimą.
• Kaip keičiasi vairavimo įpročiai persėdus į elektromobilį?
• 4 išmanūs sprendimai, leidžiantys efektyviai taupyti elektrą.
• Žinomas treneris: trys klaidos, kurias daro tėvai mokydami vaikus plaukti.
• Delsimas mažinti naftos degalų vartojimą kainuoja 1 mln. eurų per darbo dieną.
• Sinchronizuotas palūkanų karpymas Europoje ir nerimo ženklai JAV.
• „Tele2“ tinkle jau veikia nauji dvylikaženkliai numeriai: numerių pakaks.
• Vandens someljė atsakė į amžiną klausimą: ar sveika gerti mineralinį vandenį?
• Finansinių apgavysčių mastai auga: kieno naudai veikia dirbtinis intelektas?
• Kaip atskirti alergiją nuo peršalimo ligų ir gripo?
• Atakuojami Ukrainos televizijos kanalai palydove „Eutelsat Hotbird“.
• Pasitikrinkite dar kartą: primena, kaip telefone įsijungti saugos pranešimus.
• Ilgesnės dienos – mažesnės elektros sąskaitos: kokie įpročiai jas dar sumažins?
• Vairuotojų išbandymas duobėtais keliais, gatvėmis: nuostoliai siekia tūkstančius.
• ES reguliavimas „ChatGPT“ ir dirbtiniam intelektui: pliusų daugiau, nei minusų?
• Skrendame dažnai, suprantame mažai: 9 keisti faktai apie aviaciją.
• Lietuvoje pasirinktas 5G diegimo būdas gerina ne visus kokybės parametrus.
• Odos niežulį gali sukelti net patiriamas stresas ar įtampa.
• Žvejyba – ar tikrai verta?
• Skelbiami „Auksinių scenos kryžių“ nominantai.
• FM siūlo reikšmingai didesnes baudas ir daugiau saugiklių azartiniams lošimams.
• Amžiui nepavaldus kelionių troškimas: kur dažniausiai keliauja senjorai?
• „Bitė“ nutraukia 4G namų maršrutizatorių prekybą.
• Įpročiai iš vaikystės: 5 smagūs būdai, padėsiantys vaikams gyventi tvariau.
• Atkreipia dėmesį į dažniausias vaistų nuo skausmo vartojimo klaidas.
• Tenusišypso Jums Viešpats, Maestro Rimai Tuminai.
• „Elektrum Lietuva“ pajamos augo 1,7 karto, pelnas – 5 kartus.
• Pajamų deklaravimas ir įmokos „Sodrai“: ką svarbu žinoti.
• Šį delikatesą valgė dar pirmykščiai žmonės: jis turi unikalią dietinę savybę.
• Palygino Baltijos šalių gyventojų taupymo ir apsipirkimo įpročius.
• Mūsų augintiniams tai nepatiks: MWC parodoje pristatyti net du šunys-robotai.

Šio sąrašo naujienos detaliau

Daugiau ankstesnių naujienų:  1  2  3  4  5  6  7  8  9  10  11  12  13  14  15  16  17  18  19  20  21  22  23  24  25  26  27  28  29  30  31  32  33  34  35  36  37  38  39  40  41  42  43  44  45  46  47  48  49  50  51  52  53  54  55  56  57  58  59  60  61  62  63  64  65  66  67  68  69  70  71  72  73  74  75  76  77  78  79  80  81  82  83  84  85  86  87  88  89  90  91  92  93  94  95  96  97  98  99  100  101  102  103  104  105  106  107  108  109  110  111  112  113  114  115  116  117  118  119  120  121  122  123  124  125  126  127  128  129  130  131  132  133  134  135  136  137  138  139  140  141  142  143  144  145  146  147