Apache Hive

Apache Hive oli ensimmäinen kehitetty Apache Hadoop osahankkeen tarjota Hadoop järjestelmänvalvojat helppokäyttöinen, taitavia kyselyn kieli tietonsa.
Tämän vuoksi Hive kehitettiin alusta alkaen toimimaan valtavia määriä tietoa kunkin kyselyn ja on sopeutunut täydellisesti suuren mittakaavan tietokantojen ja liiketoimintaympäristössä.
Työkalut ovat mukana helposti latautuu, talteen ja muuttaa tietoja, kun taas custom tietorakenteita voidaan pakottaa laaja joukko tiedostomuotoja.
Koska se Hadoop liittyvä projekti HDFS ja HBase hankkeita myös automaattisesti tuettuja.
HiveQL on luultavasti paras osa hanketta, joka tarjoaa yksinkertaisen, innovatiivinen ja tehokas kyselyn kieli, samalla myös mahdollisuus käsitellä kartoittajia ja -laskijat tilanteissa, joissa syntyperäinen SQL-syntaksi voi saada haluamasi tiedot.

Mikä on uusi tässä julkaisussa:

• Tuki korreloimattomia alikyselyä WHERE
• Lisää NULL käsittämään tarvittaessa ROW muotomäärittelyä
• Ccreate / drop tietokanta tulee kansoittavat tuloa / lähtöä ja tarkistaa samanaikaisuuden ja käyttöoikeus
• Tuki jossa määritellään laajuus ja tarkkuus Hive desimaalin tyyppi
• Tulkoon Tez
• räjähtää toiminto, joka sisältää kohteen asema array
• Lisää char tietotyyppi
• Luo kerätä UDF ja tehdä arvioija uudelleenkäytettäviä
• Laajenna ennätys kirjailija ja ORC lukija / kirjoittaja käyttöliittymät tilastoja
• Toteuta tilastot tarjoavat ORC kirjailija ja lukija rajapinnat
• Tekstitä pesää operaattori puu tilastojen metastore
• Anna raita taso sarake tilastojen ORC
• alikysely tuki: evätä pesintää alikyselyä
• alikysely tuki: sallia alikysely ilmaisuja ottaa lauseke
• alikysely tuki: lisää testejä
• Native Parketti Tukea pesää
• Hive pitäisi pystyä Ohita otsikko ja alatunnisterivien luettaessa tiedostoa varten pöytä
• Lisää DATE, TIMESTAMP, DECIMAL, CHAR, VARCHAR tyypit tukevat vuonna HCat
• Käytä karttaa-liittymään vihje välimuistiin välitulosta
• Lisää UDF laskea etäisyys maantieteelliset koordinaatit

Mikä on uusi versiossa 1.2.0:

• Tuki korreloimattomia alikyselyä WHERE
• Lisää NULL käsittämään tarvittaessa ROW muotomäärittelyä
• Ccreate / drop tietokanta tulee kansoittavat tuloa / lähtöä ja tarkistaa samanaikaisuuden ja käyttöoikeus
• Tuki jossa määritellään laajuus ja tarkkuus Hive desimaalin tyyppi
• Tulkoon Tez
• räjähtää toiminto, joka sisältää kohteen asema array
• Lisää char tietotyyppi
• Luo kerätä UDF ja tehdä arvioija uudelleenkäytettäviä
• Laajenna ennätys kirjailija ja ORC lukija / kirjoittaja käyttöliittymät tilastoja
• Toteuta tilastot tarjoavat ORC kirjailija ja lukija rajapinnat
• Tekstitä pesää operaattori puu tilastojen metastore
• Anna raita taso sarake tilastojen ORC
• alikysely tuki: evätä pesintää alikyselyä
• alikysely tuki: sallia alikysely ilmaisuja ottaa lauseke
• alikysely tuki: lisää testejä
• Native Parketti Tukea pesää
• Hive pitäisi pystyä Ohita otsikko ja alatunnisterivien luettaessa tiedostoa varten pöytä
• Lisää DATE, TIMESTAMP, DECIMAL, CHAR, VARCHAR tyypit tukevat vuonna HCat
• Käytä karttaa-liittymään vihje välimuistiin välitulosta
• Lisää UDF laskea etäisyys maantieteelliset koordinaatit

Mikä on uusi versiossa 1.1.0:

• Tuki korreloimattomia alikyselyä WHERE
• Lisää NULL käsittämään tarvittaessa ROW muotomäärittelyä
• Ccreate / drop tietokanta tulee kansoittavat tuloa / lähtöä ja tarkistaa samanaikaisuuden ja käyttöoikeus
• Tuki jossa määritellään laajuus ja tarkkuus Hive desimaalin tyyppi
• Tulkoon Tez
• räjähtää toiminto, joka sisältää kohteen asema array
• Lisää char tietotyyppi
• Luo kerätä UDF ja tehdä arvioija uudelleenkäytettäviä
• Laajenna ennätys kirjailija ja ORC lukija / kirjoittaja käyttöliittymät tilastoja
• Toteuta tilastot tarjoavat ORC kirjailija ja lukija rajapinnat
• Tekstitä pesää operaattori puu tilastojen metastore
• Anna raita taso sarake tilastojen ORC
• alikysely tuki: evätä pesintää alikyselyä
• alikysely tuki: sallia alikysely ilmaisuja ottaa lauseke
• alikysely tuki: lisää testejä
• Native Parketti Tukea pesää
• Hive pitäisi pystyä Ohita otsikko ja alatunnisterivien luettaessa tiedostoa varten pöytä
• Lisää DATE, TIMESTAMP, DECIMAL, CHAR, VARCHAR tyypit tukevat vuonna HCat
• Käytä karttaa-liittymään vihje välimuistiin välitulosta
• Lisää UDF laskea etäisyys maantieteelliset koordinaatit

Mikä on uusi versiossa 1.0.0:

• Tuki korreloimattomia alikyselyä WHERE
• Lisää NULL käsittämään tarvittaessa ROW muotomäärittelyä
• Ccreate / drop tietokanta tulee kansoittavat tuloa / lähtöä ja tarkistaa samanaikaisuuden ja käyttöoikeus
• Tuki jossa määritellään laajuus ja tarkkuus Hive desimaalin tyyppi
• Tulkoon Tez
• räjähtää toiminto, joka sisältää kohteen asema array
• Lisää char tietotyyppi
• Luo kerätä UDF ja tehdä arvioija uudelleenkäytettäviä
• Laajenna ennätys kirjailija ja ORC lukija / kirjoittaja käyttöliittymät tilastoja
• Toteuta tilastot tarjoavat ORC kirjailija ja lukija rajapinnat
• Tekstitä pesää operaattori puu tilastojen metastore
• Anna raita taso sarake tilastojen ORC
• alikysely tuki: evätä pesintää alikyselyä
• alikysely tuki: sallia alikysely ilmaisuja ottaa lauseke
• alikysely tuki: lisää testejä
• Native Parketti Tukea pesää
• Hive pitäisi pystyä Ohita otsikko ja alatunnisterivien luettaessa tiedostoa varten pöytä
• Lisää DATE, TIMESTAMP, DECIMAL, CHAR, VARCHAR tyypit tukevat vuonna HCat
• Käytä karttaa-liittymään vihje välimuistiin välitulosta
• Lisää UDF laskea etäisyys maantieteelliset koordinaatit

Mikä on uusi versiossa 0.8.1:

• Työkalut jotta helppo tiedot ote / muuttaa / kuorma (ETL).
• mekanismi asettaa rakenteen eri tiedostomuotoja.
• Pääsy tiedostot tallennetaan joko suoraan Apache HDFS (TM) tai muiden tietojen varastointiin, kuten Apache HBase (TM).
• kyselyn toteuttamisen kautta MapReduce.

Mikä on uusi versiossa 0.8.0:

• Työkalut jotta helppo tiedot ote / muuttaa / kuorma (ETL)
• mekanismi asettaa rakenteen eri tietomuotojen
• Pääsy tiedostot tallennetaan joko suoraan Apache HDFS (TM) tai muiden tietojen varastointiin, kuten Apache HBase (TM)
• kyselyn toteuttamisen kautta MapReduce

Mikä on uusi versiossa 0.7.1:

• Bugs:
• Poikkeus ikkunoissa käytettäessä JDBC-ajuri. & Quot; IOException: Järjestelmä ei löydä määritettyä polkua & quot;.
• Schema luominen skriptit ovat puutteellisia, koska ne jättävät pois taulukoita, jotka ovat ominaisia ​​DataNucleus.
• parannukset:
• Paranna sekalaiset virheilmoituksia.
• Palauta oikea Major / Minor versionumerot JDBC Hive Kuljettajan.
• Lisää HivePreparedStatement täytäntöönpanoa perustuvat tämänhetkisiin HIVE tukee tietojen tyyppi.
• Tehtävät:
• Hive Maven.
• Anna Metastore päivityskomentosarjat ja oletus skeemat PostgreSQL.

Mikä on uusi versiossa 0.7.0:

• Uusi ominaisuus:
• Lupa infrastruktuurin Hive
• Toteuta indeksointi pesää
• Lisää heijastaa () UDF varten heijastava vetoaminen Java menetelmiä
• Hive TypeInfo / ObjectInspector tukemaan liiton (paitsi struct, array, ja kartta)
• Toteuta GenericUDF str_to_map
• Patch tukea OTTAA lausekkeen pesää
• Seuraa liittyy joita ollaan muunnetaan kartta-liittymään automaattisesti
• Soita toistuvuus ja kesto mittarit HiveMetaStore kautta JMX
• Pidä lastAccessTime vuonna metastore
• Improvement:
• Anna mahdollisuus viedä HEADER
• Tuki eri valinta kahden tai useamman saraketta
• Kuvaile laajennettu pöytä / osio lähtö on kryptinen
• puuttuu joitakin JDBC toimintoja kuten getTables, getColumns ja HiveResultSet.get * perustuvia menetelmiä sarakkeen nimeä.
• Kierteen lokit lapsiprosesseja
• Tuki suodatin pushdown vastaan ​​ei ole syntyperäinen taulukot
• Korvaa riippuvuudet HBase vanhentunut API
• Lisää queryid kun lukitus
• Päivitä transident_lastDdlTime vain jos ei määritetty
• Lisää enemmän debug tietoa pesää lukitus
• HiveInputFormat tai CombineHiveInputFormat aina synkronoida korttelin ohjetiedostoa kahdesti
• Näytä aika paikallisen tehtävän ottaa
• Luo uusi zookeeper esimerkiksi kun yritetään uudelleen lukko, ja lisätietoa debug
• Lisää vaihtoehto ajaa tehtäväksi tarkistaa kartta-liittyä mahdollisuus ei-paikallinen tila
• Lisää virheenkorjaus lukitsemiseen
• Lisää vaihtoehto dynaamisessa osio lisää heittää virheen, jos 0 osiot on luotu
• Bugs:
• & quot; LOAD DATA LOCAL INPATH & quot; epäonnistuu, kun pöytä on jo tiedot samanniminen
• NULL ei käsitellä oikein liittyä
• HiveInputFormat.getInputFormatFromCache & quot; nielee & quot; syy poikkeus kun heittää IOExcpetion
• Lisää edistystä liittyä ja groupby
• Yksinkertainen UDAFs yli 1 parametri onnettomuudessa tyhjä rivi kyselyn
• UDF kenttä () ei toimi
• Dynaamiset osio insertit vasemmalle tyhjiä tiedostoja puhdistamattomien vuonna Hadoop 0,17 paikallisohjaustilassa
• Siirry vasta päivityksen, kun RunningJob.getCounters () palauttaa null

Mikä on uusi versiossa 0.5.0:

• Anna käyttäjä määrittää serde varten mukautettuja komentosarjoja.
• Lisää UDF unhex.
• Poista lzocodec tuontia FileSinkOperator.
• Kuljettajan NullPointerException soitettaessa getResults ensin kokoaminen.
• Suorituskyky parannus ohjetiedostoa ja ColumnarSerDe sisään pesää.