Kokemuksia tekstianalytiikasta rahoitushakemuksien luokittelussa
Kokemuksia tekstianalytiikasta ja rahoitushakemusten automaattisesta luokittelusta.
Kategoria: Tietotekniikka
Data science tarkoitta ongelmien ratkontaa yhdistelemällä dataa, tilastoja ja tietotekniikkaa toisiinsa. Olen tehnyt esimerkiksi maanjäristysdataan perustuvia visualisointeja ja kuvitteellisiin tilanteisiin perustuvia ongelmanratkaisutehtäviä.
Pyrin hyödyntämään blogissani mahdollismman paljon videoita ja pitämään asian yksinkertaisen kaiken tasoisille lukijoille. Koska olen blogissani päättänyt lähteä data science-kärki edellä tietotekniikan sijaan, saattaa osa artikkeleista sisältää myös yleisempää koodausasiaa. Data science kategoriasta löydät videoita, demoja, oppaita, visualisointeja, analyyseja ja tutoriaaleja sekä muuta materiaalia teeman ympäriltä. Kurkkaa ja tutustu täysin ilmaiseen sisältöön.
Web-sovellus pilvessä data edellä – Tekninen toteutus
Tekninen kuvaus data edellä tehdystä web-sovelluksesta, jonka toteutuin AWS-pilvialustalle harrasteprojektina.
Web-sovellus pilvessä data edellä – Sovelluksen esittely
Tein harrasteprojektina pilveen mobiilioptimoidun web-sovelluksen, jossa olennaista oli datan monipuolinen hyödyntäminen. Katso demo video.
Pipedrive-kampanjakoodi – Pidennetty ilmainen kokeilujakso
Lunasta Pipedrive-kampanjakoodi ja hyödynnä pidennetty ilmainen kokeilujakso. Sivulla ohjeet kampanjakoodin käyttöön.
Videokurssin tekeminen nettiin – Työkalut ja käytännöt
Tämän postauksen aiheena ovat opetusvideoiden tekemiseen soveltuvien ohjelmistojen, laitteiden ja menetelmien arviointi. Asiaa tarkastellaan erityisesti ruudun tallentamisen näkökulmasta.
Esimerkki koneoppimisen soveltamisesta liiketoimintaan
Sain vihdoin julkaistua pöytälaatikossani muutaman kuukauden muhineen blogikirjoituksen teemalla ”Konkreettinen esimerkki koneoppimisesta ja liiketoimintahyödyistä”. Tarve yhdistää liiketoiminta ja koneoppiminen vaikuttaa olevan kova.
Elämme koneoppimisen ja pilven aikakautta, mutta mikä Excelin rooli nykyään on?
Ennen oli Excel. Nykyään on mobiilisovellukset, pilvi, IoT ja koneoppinen. Tässä blogissa kerron näkemykseni Excelin roolista suhteessa muihin työkaluihin. Pohdintaa myös Excelin tulevaisuudesta.
Doing Data Science – Data Science on datan soveltamista käytäntöön
Kirjassa annetaan useita määritelmiä termille data science ja pohditaan data scientistin työssä vaadittavia taitoja. Kirja oli konkreettinen ja sopivan helppolukuinen myös aihetta vähemmän tuntevalle.
PhantomJS ja automatisoitu tietojen haku – Asiakasprojekti
Yritykseni kautta tehty asiakasprojekti, jossa automatisoin tietojen hakua netistä simuloimalla käyttäjän toimintoja PhantomJS-työkalulla.
Mikä on Hackathon ja miten se voitetaan?
Hackathon on kilpailu, jossa ratkaisu koostuu tietotekniikan ja liiketoiminnan yhdistämisestä. Lue ratkaisustamme Hiabin Hackathonissa.
R in a Nutshell – Kokemuksia R-ohjelmoinnista
Luin kirjan tilastolliseen laskentaan käytetystä R-kielestä. Kerron kokemukseni kirjan sisällöstä ja käyttämistäni oppimismenetelmistä.
Oppitunti 16 – Excel-makrot ja VBA
Mitä ovat Excel-makrot? Entä mitä tarkoittaa VBA? Opetellaan perusteet makrojen tekemiseen ja tutustutaan muokkausnäkymään.
Oppitunti 15 – Tietomallinnus ja Excel PowerPivot
Tällä oppitunnilla opit mallintamaan datan oikeanlaisiin taulukoihin raportteja varten käyttäen Excel PowerPivot työkalua.
Oppitunti 14 – Kehittyneet datatyökalut – Excel PowerQuery
Excel PowerQueryna tunnettu datatyökalu on äärettömän monipuolinen vaihtoehto datan yhdistämiseen ja muokkaamiseen.
Oppitunti 13 – Pivot-taulukot Excelissä
Pivot-taulukot on tarkoitettu kategorisen datan summamiseen ja raportointiin. Pivot-taulukot ovat paras työkalu kaavasotkun välttämiseen.
Oppitunti 12 – Datan visualisointi Excelin kuvaajilla
Kaaviot ovat yksi eniten pään vaivaa tuottava osa-alue Excelissä. Tällä oppitunnilla opit tärkeimmät asiat kuvaajista.
Oppitunti 11 – Ehdollinen muotoilu Excelissä
Ehdollinen muotoilu tarkoittaa sääntöjä, joita voit tehdä muotoillaksesi soluja niiden arvojen mukaan.
Oppitunti 10 – Datatyökalujen perusteet Excelissä
Yksinkertaiset datatyökalut Excelissä. Opi, erottamaan teksti solusta omiin sarakkeisiinsa ja poistamaan datasta duplikaattiarvoja.
Oppitunti 9 – Hakukaavat ja hallintanäkymät Excelissä
Hakukaavat nimensä mukaisesti hakevat arvoja solualueista. Oppitunnilla esitellään esimerkiksi PHAKU() ja KESKIARVO.JOS() kaavat.
Ilmainen Excel-kurssi netissä
Ilmainen Excel-verkkokurssi. Laadukkaat opetusvideot etenevät johdonmukaisesti. Lataa myös harjoitustehtävät liitetiedostoina.
Sarakkeet riveiksi Excel PowerQuerylla
Sarakkeiden muuttaminen riveiksi Excel PowerQuery-työkalun avulla. Katso 30 sekunnin video, kuinka se onnistuu ilman kaavoja.
Algorithms to Live by – Tietotekniikkaa sovellettuna arkielämään
Tietokoneiden uumenista löytyy vastaus esimerkiksi siihen, missä iässä olet todennäköisesti löytänyt ihannekumppanisi.
Csv tiedostojen kentät listaksi Pythonilla
Python-koodi, jolla voi automaattisesti listata CSV-tiedostojen otsikkokentät. Alunperin tarvitsin koodia tietovaraston dokumentaatioon.
Etunimen, sukunimen ja yrityksen parsiminen sähköpostiosoitteesta Excelissä – Lataa Excel-pohja
Etunimen, sukunimen ja yrityksen parsiminen sähköpostiosoitteesta Excelissä. Lataa liittenä oleva Excel-tiedosto.
Amazon Audible – Johtava sovellus äänikirjojen kuunteluun
Amazon Audible on johtava sovellus äänikirjojen kuunteluun. Pienellä kikalla saat ilmaisen kuukauden lisäksi 3 kuukautta puoleen hintaan.
Algoritmiongelma – Osaatko ratkaista älytehtävän todellisesta asiakasprojektista?
Algoritmiongelma tuli alunperin vastaan todellisessa asiakasprojektissa, jossa tuotteen kulkua tuotantolinjalla täytyi pystyä seuraamaan.
Tampere ES Data Science Meetup
Tampere ES Data Science Meetupissa puheenvuorot koneoppimiskilpailuista ja nettisivujen asiakaspalvelun automatisoinnista.
Any.do – Älykäs tehtävälista, joka pitää kurissa
Any.do ei ole vain lista tehtävien säilömiseen. Sovelluksessa on älykkäitä ominaisuuksia, jotka tekevät tehtävien suorittamisesta hallittua.
Taulukkomuotoisen datan organisointi Excel Power Querylla – Asiakasprojekti
Pääasiassa Suomessa toimiva asiakkaani oli hankkinut myyntidataa toisen alueen markkinoilta. Data piti saada selkeämpään muotoon, sillä nyt se oli miten sattuu Excel-tiedoston useissa eri välilehdissä. […]
Yhteystietojen hakeminen nettisivulta Excel-taulukkoon automatisoidusti – Asiakasprojekti
Asiakkaan motiivi oli tietenkin siirtää yhteystiedot asiakastietojärjestelmään myyjien työn helpottamiseksi.
Mobilepay – Vihdoinkin kaverisi saa maksettua taksin välittömästi
MobilePay on Danske Bankin kehittämä mobiilisovellus, jolla voit maksaa ja vastaanottaa rahaa ystäviesi kanssa.
Evernote vs Google Keep – Mitä muistiinpanosovellukselta vaaditaan?
Tallennan muistiinpanosovellukseen ideoita, havaintoja, matkalippuja ja velkoja, jotka pitää olla nopeasti luettavissa ja löydettävissä.
Toggl – Työtuntien kirjaaminen ja raportointi ei ole ikinä ollut näin nautinnollista
Toggl on mobiilisovellus työtuntien kirjaamiseen yrityksille. Sovellus ei ole poikkeuksellinen, mutta se on yksinkertainen ja visuaalinen.
Oppitunti 8 – Tekstikaavat ja kehittyneet funktiot Excelissä
Excelin tekstikaavat ovat tehokas keino merkkijonojen manipulointiin. Oppitunnilla opit VAIHDA(), POIMI.TEKSTI(), ETSI() ja PITUUS() kaavat.
Oppitunti 7 – Taulukot, suodata ja lajittele Excelissä
Excelin taulukoissa lajittelu, suodattaminen ja summaaminen on helpompaa.
Oppitunti 6 – Soluviittaukset ja nimetyt alueet Excelissä
Mikä on absoluuttinen ja suhteellinen soluviittaus? Kuinka solualueita voidaan nimetä?
Oppitunti 5 – Numeromuotoilut, päivämäärät ja aika Excelissä
Opi lukumuotoilut sekä Excelin päivmäärillä ja ajalla laskeminen.
Oppitunti 4 – Kopioi ja liitä Excelissä
Kopioi ja liitä esimerkiksi pelkät arvot, kaavat tai muotoilut.
Oppitunti 3 – Kaavojen perusteet Excelissä
Lyhyt johdatus, kuinka kirjoitetaan ensimmäinen Excel-kaava.
Oppitunti 2 – Solujen muotoileminen Excelissä
Vaihda fontin väri, säädä sarakkeen leveys automaattisesti, yhistä soluja, lihavoi ja aseta reunaviivat.
Oppitunti 1 – Johdatus Exceliin
Työkirja, laskentataulukko, tallentaminen, avaaminen, asetukset Excelissä.
Ensimmäisen Android-sovelluksen tekeminen – Kauanko se kestää?
Android-sovelluksen tekeminen on ollut tehtävälistallani jo pitemmän aikaa, mutta nyt päätin ottaa ratkaisevan askeleen. Kauanko se kesti?
Vedonlyönti – Voiko sillä elää? – Lue Opas
Vedonlyönti – sillä on mahdollista elättää itsensä. Blogia ei ole sponsoroitu, vaan ajatukset ovat täysin omiani. Vedonlyönti erityisesti urheilun parissa herättää paljon myyttejä ja uskomuksia, joista osa […]
Maanjäristysdatan visualisointi ja klusterointi
Visualisointi toteutettiin analysoimalla R-studion sisäänrakennettua quakes tietoaineistoa, joka sisälsi 1000 kirjausta Fijin maanjäristyksistä vuodesta 1964 määrittämättömään vuoteen asti. Visualisoinnin kannalta oleellisia muuttujia olivat karttakoordinaatit, järistyksen syvyys ja voimakkuus. […]
Splitwise – Kulujen jakaminen helpoksi
Splitwise ratkaisee erittäin yksinkertaisella tavalla ongelman, joka kohdataan jokaisessa kaveriporukassa – haasteena kun usein on kulujen jakaminen. Splitwisessa pystyy luomaan ryhmiä, kuten Kesäfutaajat tai Mallorcan reissu, […]
Wunderlist – Yksinkertainen ja toimiva tehtävälista
Muutamia eri tehtävälistoja kokeilleena Wunderlist tarjoaa mielestäni yksinkertaisimman vaihtoehdon, joka toimii mutkattomasti. Tehtävät voi kategrisoida kansioihin ja niihin voi asettaa tarvittaessa muistutuksia. Lisäksi tehtäviin voi […]
Excel Power-lisäosat esittelyssä
Seuraavaksi kerron hyvin lyhyesti, kuinka Microsoft Excel Power BI-perheen lisäosat liittyvät toisiinsa. Tarkoituksena on saada nopeasti käsitys, sopivatko ne sinun tarpeisiisi. Lisäosien ryhmittymään kuuluvat Power […]
Virusongelma – Tilastollinen pulmapähkinä
Virusongelma on pulmatehtävä, ei todellinen tilanne. Maailmalla leviää virus, joka tappaa ilman hoitoa. Virukseen on olemassa lääke, joka parantaa sairaan, mutta tappaa terveen ihmisen. Testausmenetelmää ei […]
Arjen tilastotiedettä – Myyntiharjoittelijan palkkaaminen
Data-kategorian blogeissa analysoidaan todelliseen elämään pohjautuvia pulmia, joita voidaan ratkoa datan ja tilastojen avulla. Tilanne Olet palkannut viisi uutta myyntiharjoittelijaa, joilla suoritetaan 100 myyntipuhelun mittainen […]
Data science ja business intelligence – Termistö haltuun
Työnhaussa ja internetin palstoja lukiessa törmää usein erilaisiin termeihin, kuten data science, big data ja niin edelleen. Kokosin yleisimmät termit ja määrittelin ne omien käsitysteni ja […]