Sivustot

Yahoo auttaa IIT Bombayin perustaa Hadoop Cluster Lab

Shamanic Meditation Music, Relaxing Music, Meditation, Healing, Sleep, Chakra, Stress Relief, ☯3675

Shamanic Meditation Music, Relaxing Music, Meditation, Healing, Sleep, Chakra, Stress Relief, ☯3675
Anonim

Yahoo on auttanut Intian teknologiainstituutin Bombayta luomaan Hadoop-klusterilaboratorion Mumbaissa lahjoittamalla avoimen lähdekoodin Hadoop-ohjelmiston suorittavien palvelinten klusterin.

Apache Hadoop on avoimen lähdekoodin hajautettu tietojenkäsittelyprojekti Apache-ohjelmistosäätiö, jonka Yahoo tukee.

Yahoo suorittaa suuren määrän kriittisiä toimintojaan Hadoopilla, eikä se voi tehdä kaikkia Hadoop-yrityksen ympärille tarvittavia tutkimuksia, sanoo Yahoo Labsin varatoimitusjohtaja Prabhakar Raghavan. puhelinkeskustelu torstaina.

Yahoo ilmoitti viime vuoden kesäkuussa omasta Hadoop-jakelustaan ​​kiinnittäen huomiota Apache Hadoop -yhteisöön siitä, että se julkaisee Hadoop-version, joka testejä ja käyttöönottoja omilla suurilla klustereilla.

Klusteri laboratorio M: ssä umbai auttaa tutkijoita instituutissa tutkimusalueilla, kuten haku- ja ranking-tekniikoilla, tiedonhankinnalla ja luonnollisella kielenkäsittelyllä.

Akateemiset tutkijat, jotka haluavat tutkia verkkoihin liittyviä ongelmia, eivät yleensä ole voineet päästä käsiksi laskentaresursseihin ja teratavuihin jotka ovat välttämättömiä "Web-mittakaavan ongelmien" tutkimiseen, Raghavan sanoi.

Aloittamalla Hadoop-tutkijoiden tarjoamisesta Carnegie Mellonin yliopistossa, jossa on 4000 prosessorin supertietokone 2007, Yahoo on auttanut muita yliopistoja Yhdysvalloissa luomaan Hadoop

Raghavan ei antanut lisätietoja IIT: n asentamasta klusterista vain sanomalla, että palvelimia, joissa on satoja suorittimia ja kyky käsitellä teratavuisia tietoja, on otettu käyttöön.

IIT Bombay, Yahoo auttaa rakentamaan samanlaisia ​​klustereita Saksan ja Singaporen akateemisissa laitoksissa, Raghavan sanoi. Nämä ovat kolme ensimmäistä akateemista laitosta Yhdysvaltojen ulkopuolella, missä Yahoo auttaa luomaan tällaisia ​​klustereita, hän lisäsi.

Yahoo aikoo myöhemmin verkottaa joitain klustereita ympäri maailmaa luomaan "suuremman hyödyllisyyden". Ennen tätä Hadoopin järjestelmänhallintaratkaisuja on vahvistettava, jotta yksi oppilaiden oppilaita ei voisi rikkoa työtä toisessa laitoksessa, Raghavan sanoi.

Yahoo osallistui vuonna 2008 Computational Research Laboratories (CRL) Tata Group, tarjoavat supertietokoneita Intian akateemisille laitoksille, jotka tutkivat laaja-alaista tietojenkäsittelyä erityisesti Hadoopilla. Yhteistyö jatkuu, mutta keskittyy korkean suorituskyvyn supertietokoneisiin, Raghavan sanoi.

Yhteistyö akateemisten laitosten kanssa Hadoopissa auttaa Yahooa rakentamaan Hadoop-alustalle perehtynyt insinöörien joukko Raghavanin mukaan. Jotkut niistä ovat jopa palkanneet Yahoo, hän lisäsi.

Yahoo on myös hyötynyt ideoista, jotka ovat tulleet akateemisista laitoksista tekemässä tutkimusta käyttäen Hadoopia, Raghavan sanoi. Hän ei kuitenkaan antanut erityisiä ideoita, jotka otettiin tästä yhteistyöstä akateemisten laitosten kanssa.