มีอะไรใหม่ใน Spark?
มีอะไรใหม่ใน Spark?

วีดีโอ: มีอะไรใหม่ใน Spark?

วีดีโอ: มีอะไรใหม่ใน Spark?
วีดีโอ: มือถือ 4,000 ที่ให้สเปกเหมือน 40,000 - รีวิว TECNO Spark 10 Pro (แบบสั้นๆ) 2024, ธันวาคม
Anonim

นอกจากการแก้ไขข้อผิดพลาดแล้ว ยังมี2 ใหม่ คุณสมบัติใน Spark 2.4: SPARK -22239 ฟังก์ชั่นหน้าต่างที่ผู้ใช้กำหนดด้วย Pandas UDF SPARK -22274 ฟังก์ชันการรวมที่ผู้ใช้กำหนดด้วย pandas udf เราเชื่อสิ่งเหล่านี้ ใหม่ ฟีเจอร์ต่างๆ จะปรับปรุงการนำ Pandas UDF ไปใช้งานต่อไป และเราจะปรับปรุง Pandas UDF ต่อไปในรุ่นถัดไป

ในทำนองเดียวกัน Spark เวอร์ชันล่าสุดคืออะไร?

ประวัติศาสตร์

เวอร์ชั่น วันที่วางจำหน่ายเดิม รุ่นล่าสุด
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
ตำนาน: เวอร์ชันเก่า เวอร์ชันเก่า ยังคงรักษาเวอร์ชันล่าสุด เวอร์ชันตัวอย่างล่าสุด

ด้านบนเป็นไปตามมาตรฐาน spark SQL ANSI หรือไม่ ณ Spark 2.0, Spark เป็น ANSI SQL :2003 สอดคล้อง , ซึ่งหมายความว่า Spark SQL สนับสนุน SQL การดำเนินการที่ไม่มีในภาษาถิ่นอื่น

ในที่นี้ spark รองรับ Java 11 หรือไม่

สกาล่าและ Java ผู้ใช้สามารถรวม Spark ในโครงการของพวกเขาโดยใช้พิกัด Maven และผู้ใช้ Python สามารถติดตั้งได้ Spark จาก PyPI Spark วิ่งบน Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ และ R 3.1+

spark SQL รองรับการอัปเดตหรือไม่

2 คำตอบ Spark SQL ไม่ สนับสนุน UPDATE งบยัง. รังผึ้งเริ่มขึ้นแล้ว สนับสนุนUPDATE ตั้งแต่ไฮฟ์เวอร์ชัน 0.14 แต่ถึงแม้จะใช้ Hive ก็เถอะ รองรับการอัพเดท /ลบเฉพาะในตารางเหล่านั้นที่ สนับสนุน ธุรกรรมมีการระบุไว้ในเอกสารกลุ่ม

แนะนำ: