สารบัญ:
วีดีโอ: ฉันสามารถเรียกใช้ spark ในเครื่องได้หรือไม่
2024 ผู้เขียน: Lynn Donovan | [email protected]. แก้ไขล่าสุด: 2023-12-15 23:54
หัวเทียน เป็น วิ่ง โดยใช้ตัวกำหนดเวลาคลัสเตอร์แบบสแตนด์อโลนในตัวใน ท้องถิ่น โหมด. ซึ่งหมายความว่า. ทั้งหมด Spark กระบวนการคือ วิ่ง ภายใน JVM เดียวกันอย่างมีประสิทธิภาพ อินสแตนซ์เดียวแบบมัลติเธรดของ Spark.
ในเรื่องนี้ ฉันจะรัน Apache spark ในเครื่องได้อย่างไร
ขั้นตอนต่อไปนี้แสดงวิธีการติดตั้ง Apache Spark
- ขั้นตอนที่ 1: ตรวจสอบการติดตั้ง Java
- ขั้นตอนที่ 2: ตรวจสอบการติดตั้ง Scala
- ขั้นตอนที่ 3: ดาวน์โหลด Scala
- ขั้นตอนที่ 4: การติดตั้ง Scala
- ขั้นตอนที่ 5: ดาวน์โหลด Apache Spark
- ขั้นตอนที่ 6: การติดตั้ง Spark
- ขั้นตอนที่ 7: การตรวจสอบการติดตั้ง Spark
นอกจากนี้ เราสามารถเรียกใช้ spark โดยไม่มี Hadoop ได้หรือไม่? ตามที่ Spark เอกสาร, Spark สามารถทำงานได้โดยไม่ต้อง Hadoop . คุณ อาจ วิ่งมัน เป็นโหมดสแตนด์อโลน ปราศจาก ผู้จัดการทรัพยากรใด ๆ แต่ถ้า คุณ ต้องการที่จะ วิ่ง ในการตั้งค่าหลายโหนด คุณ ต้องการตัวจัดการทรัพยากรเช่น YARN หรือ Mesos และระบบไฟล์แบบกระจายเช่น HDFS , S3 เป็นต้น ใช่ ประกายไฟวิ่งได้โดยไม่ต้องใช้ฮาดูป.
ด้านบนนี้ ฉันจะเรียกใช้ spark ในโหมดสแตนด์อโลนได้อย่างไร
ติดตั้ง โหมด Spark แบบสแตนด์อโลน คุณเพียงแค่วาง. เวอร์ชันที่คอมไพล์แล้ว Spark ในแต่ละโหนดบนคลัสเตอร์ คุณสามารถรับเวอร์ชันที่สร้างไว้ล่วงหน้าของ Spark ด้วยการเปิดตัวแต่ละครั้งหรือสร้างมันขึ้นมาเอง
spark สามารถรันบน Windows ได้หรือไม่?
NS Spark แอปพลิเคชัน สามารถ เป็น Windows -shell script หรือ it สามารถ เป็นโปรแกรมที่กำหนดเองในภาษา Java, Scala, Python หรือ R ที่คุณต้องการ Windows ไฟล์ปฏิบัติการที่ติดตั้งบนระบบของคุณไปยัง วิ่ง แอปพลิเคชันเหล่านี้
แนะนำ:
ฉันสามารถเรียกใช้ Windows และ Mac บนพีซีเครื่องเดียวกันได้หรือไม่
หากคุณเป็นเจ้าของ Mac ที่ใช้ Intel คุณสามารถใช้งานทั้ง OS X และ Windows บนคอมพิวเตอร์เครื่องเดียวกันได้ คอมพิวเตอร์พีซีส่วนใหญ่ใช้ชิปที่ใช้ Intel ซึ่งหมายความว่าขณะนี้คุณสามารถเรียกใช้ระบบปฏิบัติการ Windows และ OS X บนคอมพิวเตอร์ Mac ได้
ฉันสามารถเรียกใช้ Python บน Hadoop ได้หรือไม่
ด้วยตัวเลือกระหว่างภาษาการเขียนโปรแกรม เช่น Java, Scala และ Python สำหรับระบบนิเวศ Hadoop นักพัฒนาส่วนใหญ่ใช้ Python เนื่องจากไลบรารีที่รองรับสำหรับงานวิเคราะห์ข้อมูล การสตรีม Hadoop อนุญาตให้ผู้ใช้สร้างและรันงาน Map/Reduce ด้วยสคริปต์ใดๆ หรือปฏิบัติการได้ในฐานะ mapper หรือ/และ reducer
ฉันสามารถเรียกใช้ Malwarebytes และ McAfee พร้อมกันได้หรือไม่
ใช่ Mcafee ให้การป้องกันที่แข็งแกร่ง แต่การมีมัลแวร์ไบต์น่าจะใช้ได้ดีหากคุณคิดว่ามีบางสิ่งที่อาจแอบผ่าน mcafee หรือผลิตภัณฑ์ที่คุณติดตั้ง ทำงานขณะสแกนเท่านั้น
ฉันสามารถเรียกใช้ MS Office บน Linux ได้หรือไม่
ผู้ใช้ Linux สามารถใช้ LibreOffice, GoogleDocs และแม้แต่ Office Web Apps ของ Microsoft แต่บางคนยังต้องการหรือเพียงแค่ต้องการ Microsoft Office เวอร์ชันเดสก์ท็อป โชคดีที่มีวิธีเรียกใช้ Microsoft Office บน Linux เห็นได้ชัดว่า Microsoft ไม่รองรับสิ่งนี้ แต่ก็ยังใช้งานได้ค่อนข้างดี
ฉันสามารถเรียกใช้ Docker บน Windows Server 2016 ได้หรือไม่
ติดตั้ง Docker Engine - Enterprise บนเซิร์ฟเวอร์ Windows Docker Engine - Enterprise เปิดใช้งานคอนเทนเนอร์ Docker ดั้งเดิมบน Windows Server รองรับ Windows Server 2016 และเวอร์ชันที่ใหม่กว่า แพ็คเกจการติดตั้ง Docker Engine - Enterprise มีทุกสิ่งที่คุณต้องการเพื่อเรียกใช้ Docker บน Windows Server