Tagi: "mapreduce"

MapReduce on Googlen kehittämä laskentamalli ja ohjelmistokehys rinnakkaislaskennalle. Se mahdollistaa suurien tietomäärien helpon käsittelyn esittämällä ohjelmointimallin jonka ohjelmat ovat rinnakkaistettavia ja tarjoamalla valmiin alustan näiden rinnakkaistettavien ohjelmien suorittamiselle. Noudattamalla tätä mallia kehittäjä säästyy rinnakkaislaskennassa toistuvista päänsäryistä, ja pystyy keskittyä varsinaiseen sovellukseen. MapReduce-malliin sopivia sovelluksia ovat muun muassa suurien tietomäärien lajittelu, haku, tilastointi [...]

Jatka lukemista

Google keittää kahvia

13.10.2010 Kirjoittanut

Olen viime aikoina tutustunut Googlen uuteen datatyökaluun Percolatoriin. Se onkin erikoinen kone, vahvasti C-luokkaa.

Mennään ajassa kuusi vuotta taaksepäin. Google julkaisee MapReduce-laskentamallin ja kertoo toteuttaneensa indeksointijärjestelmänsä sen päälle. Sen lisäksi M/R luikertelee osaksi lähes jokaista Googlen merkittävää tuotetta. Googleplexin ulkopuolella MapReduce todetaan skaalautuvuudeltaan hyväksi ja avoimen lähdekoodin mullasta ponnistaa Hadoop — MapReduce meille [...]

Jatka lukemista