Is Spark SQL een database?
Is Spark SQL een database?

Video: Is Spark SQL een database?

Video: Is Spark SQL een database?
Video: Spark SQL Beyond Official Documentation 2024, April
Anonim

Spark-SQL stelt u in staat om dataframes te gebruiken in Python, Java en Scala; lezen en schrijven van gegevens in verschillende gestructureerde formaten; en bevraag Big Data met SQL . Het biedt een DataFrame abstractie in Python, Java en Scala om het werken met gestructureerde datasets te vereenvoudigen. DataFrames zijn vergelijkbaar met tabellen in een relationele database.

Gezien dit, is Spark een database?

Vonk wordt vaak gebruikt met gedistribueerde gegevensopslag zoals MapR XD, Hadoop's HDFS en Amazon's S3, met populaire NoSQL databases zoals MapR Database , Apache HBase, Apache Cassandra en MongoDB, en met gedistribueerde berichtenwinkels zoals MapR Event Store en Apache Kafka.

welke database gebruikt Spark? MongoDB

Wat is dus Spark SQL?

Spark-SQL is een Vonk module voor gestructureerde gegevensverwerking. Het biedt een programmeerabstractie genaamd DataFrames en kan ook fungeren als een gedistribueerde SQL query-engine. Hiermee kunnen ongewijzigde Hadoop Hive-query's tot 100x sneller worden uitgevoerd op bestaande implementaties en gegevens.

Is Spark SQL ANSI-compatibel?

Vanaf Vonk 2.0, Vonk is ANSI-SQL :2003 meewerkend , wat betekent Spark-SQL ondersteunt SQL bewerkingen die niet beschikbaar zijn in andere dialecten.

Aanbevolen: