elitemadzone.org - Drugar iz Dubai-a, on je tamo Data Scientist

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
..2:92c4:80:7d0c:fb70:60b9:c18

+7177 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{27.10.2023. u 10:14 - pre 6 meseci}

Citat:

Living Light:
https://startit.rs/data-science-u-praksi/

Kažeš "Maher za podatke".

Živ nisam ako ja razumem šta taj stvarno radi :-)

Primenjuje matematiku na podatke i sa tim izvlaci korisne informacije za poslodavca.

DigiCortex (ex. SpikeFun) - Cortical Neural Network Simulator:
http://www.digicortex.net/node/1 Videos: http://www.digicortex.net/node/17 Gallery: http://www.digicortex.net/node/25
PowerMonkey - Redyce CPU Power Waste and gain performance! - https://github.com/psyq321/PowerMonkey

Odgovor na temu

Living Light

Član broj: 331540
Poruke: 6714

+1159 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 01:44 - pre 6 meseci}

Voleo bi da vidim (za primer) jedan takav rad,
gde neko izvlaci podatke i objavljuje "Šta je našao" i do kojeg zakljucka je dosao.

Kako rezultat tog rada izgleda?
Kako neko to (taj rad) ocenjuje i ko je taj koji ocenjuje tog Data Scienist-a?

Toliko mnogo knjiga, toliko malo vremena...

Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:a212:92c4:80:160:6456:3..

+7177 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 07:35 - pre 6 meseci}

To je jako siroko polje - od medicine, logistike, marketinga, berze, detekcije prevara u finansijama i sl.

Npr. kad koristis kreditnu karticu, prilikom pokusaja transakcije se ona poredi statisticki sa ogromnom kolicinom podataka kako bi se procenilo da li je u pitanju kriminalna transakcija ili ne. Ako je skor takav da je vrlo verovatna krimnalna transakcija, ona ce biti blokirana ili ce te nazvati telefonom da potvrde. Samo jedan primer.

Ili, optimizacija ruta za dostavu paketa / hrane / itd. na osnovu podataka o dosatavama gde je rezultat optimizovana ruta koja trosi manje goriva ili zahteva manje resursa ili smanjuje vreme dostave, stagod.

Ako si jako veliki igrac - tipa velika korporacija, drzava i sl. ogromna kolicina podataka o procesima moze da ti sluzi kao izvor saznanja, ako se nad tim podacima primene adekvatne transformacije.

Citat:

Voleo bi da vidim (za primer) jedan takav rad,
gde neko izvlaci podatke i objavljuje "Šta je našao" i do kojeg zakljucka je dosao.

Google - "data science examples", ima ih pun Q.

Ako pricamo o komercijalnoj upotrebi, ti podaci su ne samo interni za firme, vec su u slucaju velikih firmi jeda od najvrednijih informacija.

Ekstremni primer su mega-korporacije poput Google-a, gde su ti podaci zapravo vrednost firme u najvecoj meri.

Vise srece ces imati sa nalazenjem podataka koji kace javni sektor i nauku.

Citat:

Kako rezultat tog rada izgleda?

Na milion nacina, od jednostavnog "DA / NE" odgovora ili neke vrste skora u finansijskim aplikacijama, do slike koju zoves vremenska prognoza :-)

Citat:

Kako neko to (taj rad) ocenjuje i ko je taj koji ocenjuje tog Data Scienist-a?

Obicno imas neku metriku koja prati uspeh kakvog-god procesa da modelira buducnost / realnost.

U slucaju finansijske upotrebe, to ce biti neko poredjenje sa onim sto se stvarno desilo ili direktna mera profita u slucaju atomatske trgovine i sl.

U slucaju medicine, npr. ako imas algoritme koji predvidjaju bolest npr. tumor, poredices ga sa ishodima za pacijente.

U slucaju logistike, merices koliko je algoritam ustedeo goriva ili smanjio vreme dostave ili sta je vec bio cilj.

Itd.

Odgovor na temu

baresi
Maribor

Član broj: 66006
Poruke: 1675
*.ipv4.telemach.net.

+243 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 10:04 - pre 6 meseci}

Tih scientista ima i sada puno, pogotovo prije "demokratskih" izbora, kada počnu gnjaviti narod telefonom. Gledajući program te naše privatne akademije koja je navodno medju boljima u svetu, nekako mi se čini da će proizvesti brdo inženjera za na burzu rada. Svi predavači, tako ih zovu jer to nisu profesori, su zaposleni po nekim firmama i na predavanjima pričaju svoje anegdote. Sve je nešto općenito, samo nešto mute, takve scientiste koriste političari u svojim savetnim timovima. Recimo, istražiš koliko dobrih klavijaturista živi na kućnom broju 68 i onda iz toga naprave znanost. Zbog takvih analitičara izmedju ostalog nazaduje i zdravstvo, bilo bi još puno gore da ih ne spašava razvoj elektroinike, odnosno instrumente za dijagnozu.
To je moje mišljenje o tim super kadrovima.

lp
baresi

Odgovor na temu

B3R1
Berislav Todorovic
NL

B3R1
Član broj: 224915
Poruke: 804

+636 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 11:42 - pre 6 meseci}

Hajde ovako ... dok se ne pojavi cika-Nedeljko da mi izvuce usi, a on to voli da radi, narocito na forumu Matematika. @Nedeljko - nedostajes nam ovde puno ... :-)

Verovatnoca i statistika su ozbiljne matematicke discipline, a tek o stvarima poput teorije slucajnih procesa da i ne govorimo. Ljudi sve to izucavaju na univerzitetima, ponekad i po nekoliko godina. I poput svake druge oblasti matematike i to zahteva onu jezivu formalnost tipa: definicija => aksioma => lema (+dokaz) => korolar (+dokaz) => teorema (+dokaz) ... i tako u krug. Mnogi iz toga ne izvuku nikakvo znanje, takvi sve to zaborave par godina posto dobiju diplomu i odu da se bave necim deesetim, a neki retki, koji steknu taj carobni osecaj kako sve to funkcionise ispod haube cesto nastave ka doktorskim studijama, pa postdoc, pa radovi, clanci, sci-lista, impakt-faktori, M-oznake ... i tome slicno ... e sad ...

Stigle su 2000-te, a s njima i Internet, mobilni telefoni, (a)socijalne mreze, IoT, e-uprave, e-banking, pametne kuce i gradovi ... Zivoti su se ubrzali, poslovanje takodje, a s tim se pojavila i kolicina podataka neuporediva sa onim od pre 20-30 godina. Pojavila se potreba za ljudima koji ce od tih podataka napraviti neki smisao. Posto su studije profesionalnih matematicara-statisticara skupe, dugacke i komplikovane, a pojavila se hronicna nestasica statisticara, neko se dosetio da napravi "digest" studije statistike.

Znaci, umesto da te neko gnjavi dosadnom teorijom 10 godina, obara te usput na ispitima dok ne smatra da si zasluzio sesticu itd. - upises kursic ili neku skolicu, tamo ti smandrljaju sve to sto ljudi uce godinama - u godinu dana, nabiflas svu tu teoriju onako povrsno, ofrlje, bez ikakvog reda ... i tako postanes povrsni statisticar ili ti na engleskom "data scientist". :-)

I da se ne lazemo - nijedan "data scientist" ne moze da izadje na crtu diplomiranom statisticaru starog kova. Ali u povrsnim vremenima potrosackog drustva u kome zivimo, u kome se sve radi na brzinu i gde kvalitet vies ne igra nikakvu ulogu vec samo kvantitet, gde je opsta filozofija drpaj sirotinju sto pre, gd god mozes i dokle mozes - povrsni statisticari se idealno uklapaju u takvu sliku! A uostalom, sta ce ti strucnjak za statistiku tamo gde i rezultat njegovog rada ne vredi previse?

Uzgred - samo da ne bude zabune - hedge fondovi, brokerske kuce, velike banke itd. svakako nece u svoje kriticne timove birati "data scientists". Mozda ces ih videti da rade tu i tamo neke poslice, ali one kljucne poslovne analize rade - pazi sad - pravi matematicari, a cesto i fizicari! Zasto fizicari? Paaaa, zato sto su ih tokom studija maltretirali gomilom matematike i statistike i zato sto fizicari osecaju kako stvari rade ispod haube. Moj drugar iz razreda je doktorirao teorijsku fiziku u Bostonu, ali tek sto je zavrsio sve to vec ga je ugledala jedna brokerska kuca sa Vol Strita. I ponudili su mu posao. Posto je covek voleo fiziku, u pocetku se neckao ... ali jbg, para vrti gde burgija nece. I tako - hocu-necu, evo ga sada, 30 godina kasnije, lik je vodeci finansijski konsultant tamo preko bare!

Dok "data scientists" sasvim fino rade npr. u upravnim zgradama velikih lanaca supermarketa, gde analiziraju koje proizvode kupci najvise/najmanje kupuju itd. Tu ti zaista nije potreban neko s fakultetskom diplomom - zar ne? Srazmerno tome, i manje kosta.

P. S. Za nekoliko godina ocekujte da se pojave i "wellfeeling scientists"! Ideja ce biti slicna - umesto da za svaki gripic/prehladicu trcis kod nekoga ko je gulio klupu i knjigu na medicini 15-20 godina - ti odes kod nekoga koga su svemu tome naucili za godinu dana, a ko ce samo pokrenuti neki AI-softver ... i prepisati ti lekove. Nesto poput devojke na salteru na ovom videu:

Odgovor na temu

Living Light

Član broj: 331540
Poruke: 6714

+1159 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 12:02 - pre 6 meseci}

Nema ono:

- Aaaa, pa tebi knjižica nije osigurana!

... idi prvo produži!

Toliko mnogo knjiga, toliko malo vremena...

Odgovor na temu

djoka_l
Beograd

Član broj: 56075
Poruke: 3453

Jabber: djoka_l

+1462 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 12:38 - pre 6 meseci}

OK, sada malo ozbiljno.
Berijev post me malo podseća na nešto što bismo i mi stari ETF-ovci rekli o "novim" inženjerima.
Mi smo studirali sa pretpostavkom da elektroinženjer ne može da bude kompletan ako ne zna jedanaestu tezu o Fojerbahu ili da je neobično potrebno da neko ko se bavi programiranjem mora obavezno da zna

predmete.
U stvari, u realnosti je to malo drugačije.

Data scientist je mešavina programera i statističara. Običan statističar može da bude loš data scientist, a isto važi i za običnog programera.

Dakle, kao što je već rečeno, data scientist je osoba koja iz gomile podataka pronalazi neki smisao. On je mešavina programera i statističara.

Prvo, podaci koje treba obraditi se nalaze u različitim formatima. Zato je potreban programerski pristup da se oni iščupaju iz raznih SQL, NoSQL baza, Excel šitova, i gomile nestrukturisanih fajlova.
Tako "iščupani" podaci moraju da se istreba od "korova" i da se normalizuju za neku analizu. Radi se statistička analiza, nalaze relevantni parametri satatističkog modela, a za to je potreba jak statističar.
Data scientist mora da zna jako dobro Python, Matlab pomaže, ali se najviše radi u Pythonu, s tim da je obavezno da se poznaju biblioteke kao što su NumPy, ScyPy, TensorFlow i gomila drugih.

Kada napravi programe koji rade sa pažljivo odabranim podskupom sirovih podataka, onda je potrebno da se dobro poznaju alati za vizualizaciju podataka.

Ja poziciju data scientist više vidim kao programerski posao nego kao posao za statističara/matematičara, ali taj programer mora jako dobro da poznaje statistiku, verovatnoću, algebru, da bi se uopšte snašao u svemu tome.

Odgovor na temu

test1234
Branislav B. Rakic

Član broj: 146636
Poruke: 4619
*.dynamic.isp.telekom.rs.

+312 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 12:44 - pre 6 meseci}

Znači Snouden plus Ćuruvija…

Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:a212:92c4:80:9d73:39bb:..

+7177 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 13:26 - pre 6 meseci}

Kao i u svakom drugom zanimanju, imas sve od ubica do blefera, gde su bleferi obicno solidan %.

Nije to nista specijalno za "data science". Isto kao i u drugim segmentima industrije - neko radi PhD-ove na novim algoritmima, neko ih implementira u framework-e i, na kraju, neko te framework-e koristi za svoj posao. Neki uce druge, neki se*uckaju i tako dalje i tako blize..

Citat:

djoka_l
Mi smo studirali sa pretpostavkom da elektroinženjer

Kakav bi bio inzenjer da ne ume da napravi taj racunar od nule... ono, pesak -> silicijumski ingot -> wafer -> cip -> PCB -> hw -> microcode -> firmware -> OS -> aplikacija... od kvantne elektrodinamike, fizike poluprovodnika, elektronike, VHDL-a, digitalne obrade signala pa sve do asemblera, C-a (OK, Rust-a danas) sve do JavaScripta.

Bez toga, to je samo priuceni zanatlija bogati :-)

Odgovor na temu

kosmopolita
Balkan

Član broj: 257864
Poruke: 123

+21 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 13:55 - pre 6 meseci}

Za Sangajsku listu se računaju radovi... To nema veze sa onim sto me zanima.

Posle 90-tih je pao kriterijum vrednovanja znanja zbog raznih razloga.
Bilo bi interesantno da neko napise sta se sad dogadja.

Odgovor na temu

nkrgovic
Nikola Krgović
Beograd

Član broj: 3534
Poruke: 2807

ICQ: 49345867
Sajt: https://www.twinstarsyste..

+655 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 14:28 - pre 6 meseci}

Citat:

B3R1:
I da se ne lazemo - nijedan "data scientist" ne moze da izadje na crtu diplomiranom statisticaru starog kova. Ali u povrsnim vremenima potrosackog drustva u kome zivimo, u kome se sve radi na brzinu i gde kvalitet vies ne igra nikakvu ulogu vec samo kvantitet, gde je opsta filozofija drpaj sirotinju sto pre, gd god mozes i dokle mozes - povrsni statisticari se idealno uklapaju u takvu sliku! A uostalom, sta ce ti strucnjak za statistiku tamo gde i rezultat njegovog rada ne vredi previse?

Imam poznanika, drugara koji radi data science. Prvo je doktorirao na tome, pa je krenuo da radi - jer je skontao da ze mesec-dva u industriji zaradi ono sto zaradi za godinu dana od drzave. Pitam ja njega "Koja je razlika u tvom poslu da li koristi Python ili neki C/++ i neke namunjene biblioteke za matematiku"?

Kaze covek "jedno 6 meseci".

Super je to da znas sve na ruke, da znas teoriju i da znas sve sam. Jos je bolje da pratis naucna istrazivanja da nadjes optimalne algoritme, da obrazlazes zasto je bolje racunati determinante sparse matrica ovako ili onako - ali dok taj "starog kova", sve to odradi i izracuna, ovaj sto mu se ti podsmevas kao "priuceni" je to odradio, zavrsio, testirao, pustio u produkciju i vec mesecima se zaradjuje od toga. Nista poslodvac nema od toga sto "strucnjak starog kova" bolje razume, siroko dostupne biblioteke su dovoljno dobre, cena cloud-a za 30% losiji racun se zaradi za 2 dana u produkciji - a to da napravis brze, e to zaradi dosta.

Please do not feed the Trolls!

Blasphemy? How can I blaspheme? I'm a god!'

Odgovor na temu

Ivan Dimkovic

Administrator
Član broj: 13
Poruke: 16687
2a02:a212:92c4:80:9d73:39bb:..

+7177 Profil

Re: Drugar iz Dubai-a, on je tamo "Data Scientist" - molim???

^{28.10.2023. u 14:48 - pre 6 meseci}

Ima poslova gde ti trebaju ubice, ima poslova gde ti trebaju sljakeri.

Ako poslodavac ima konfuziju oko toga, propasce mu posao. Ako radnik ima konfuziju oko toga, nece dobro proci u profesionalnom zivotu.

Sva filozofija.

Sto se radova / Sangaja / itd. tice, tako nesto ima vrednosti samo za akademski put, znaci neko juri profesuru preko doktorata. Neki broj ljudi posle doktorata predju u industriju (ili ostanu kao jeftina akademska radna snaga na faksu kao postdoc, sto je kriminal modernog doba ako mene neko pita a ne pita :-) raditi za 1/4 kinte u industriji kao rob je cisto iskoriscavanje tih ljudi), obicno na zahtevnije pozicije ali to je prilicno finansijski upitno - za ljude iz nasih krajeva je to 90-tih bila precica za vizu za "zapad", i dan danas ima uvek dovoljno "municije" iz istocne Evrope, Indije i sl. za takav put - ali u razvijenijim ekonomijama vecina klinaca nece ici tako teskom lestvicom vec ce direktno posle nekog koledza ili lakseg faksa ici u industriju i na kraju zavrsiti sa vecom kintom kad se saberu godine koje su otisle na PhD onima koji nisu nastavili ka profesuri vec presli u industriju.

Odgovor na temu