Wat is een datameer in Hadoop?
Wat is een datameer in Hadoop?

Video: Wat is een datameer in Hadoop?

Video: Wat is een datameer in Hadoop?
Video: Wat is er 'Big' aan 'Big Data'? | BIG DATA 2024, November
Anonim

EEN Hadoop data lake is een gegevens beheerplatform bestaande uit een of meer Hadoop clusters. Het wordt voornamelijk gebruikt om niet-relationele te verwerken en op te slaan gegevens , zoals logbestanden, internet clickstream-records, sensor gegevens , JSON-objecten, afbeeldingen en posts op sociale media.

Wat is in dit opzicht het verschil tussen een datawarehouse en een datalake?

Datameren en gegevens magazijnen worden beide veel gebruikt voor het opslaan van grote; gegevens , maar het zijn geen uitwisselbare termen. EEN data lake is een enorme poel van raw gegevens , waarvan het doel nog niet is gedefinieerd. EEN datawarehouse is een opslagplaats voor gestructureerde, gefilterde gegevens die al voor een bepaald doel is verwerkt.

Bovendien, wat is een data lake-architectuur? EEN Data Lake is een opslagplaats die grote hoeveelheden gestructureerde, semi-gestructureerde en ongestructureerde gegevens . In tegenstelling tot een hiërarchisch Dataware-huis waar: gegevens wordt opgeslagen in Bestanden en Map, Datameer heeft een flat architectuur.

Wat wordt in dit verband bedoeld met data lake?

EEN data lake is een opslagplaats die een enorme hoeveelheid onbewerkte gegevens in zijn oorspronkelijke formaat totdat het nodig is. Terwijl een hiërarchische gegevens magazijn winkels gegevens in bestanden of mappen, a data lake gebruikt een platte architectuur om op te slaan gegevens . De voorwaarde data lake wordt vaak geassocieerd met Hadoop-georiënteerde objectopslag.

Is Elasticsearch een datameer?

EEN data lake is gewoon een plek om je. te parkeren gegevens totdat je het nodig hebt, en het kan HDFS (meest voorkomende), objectopslag, NAS-boxen of iets anders omvatten. Fundamenteel, Elastisch zoeken is een hulpmiddel voor indexering gegevens , niet voor de opslag van gegevens zelf.

Aanbevolen: