Azure Data Lake Storage สำหรับวิศวกรรมข้อมูลบนคลาวด์ (Cloud Data Engineering)

องค์กรสมัยใหม่ต้องจัดการกับข้อมูลหลากหลายประเภทในปริมาณมหาศาล ซึ่งต้องการมากกว่าฐานข้อมูลแบบดั้งเดิม Azure Data Lake Storage Gen2 มอบรากฐานที่จำเป็นสำหรับการวิเคราะห์ที่มีประสิทธิภาพสูง โดยรวมความสามารถในการปรับขนาดของ object storage เข้ากับระบบไฟล์แบบลำดับชั้น หลักสูตรนี้จะสอนวิธีสร้างและจัดการที่เก็บข้อมูลที่แข็งแกร่ง ซึ่งรองรับภาระงานข้อมูลขนาดใหญ่ที่มีความต้องการสูงที่สุด คุณจะได้เรียนรู้ตั้งแต่การทำความเข้าใจแนวคิดพื้นฐานของการจัดเก็บข้อมูล ไปจนถึงการนำวงจรชีวิตข้อมูลที่ซับซ้อนมาใช้ เมื่อจบคอร์สนี้ คุณจะสามารถออกแบบ data lake ที่ปลอดภัย ผสานรวมเข้ากับเอนจิ้นการประมวลผลที่มีประสิทธิภาพ และเพิ่มประสิทธิภาพทั้งด้านสมรรถนะและความคุ้มค่า สิ่งที่คุณจะได้เรียนรู้: - ทำความเข้าใจสถาปัตยกรรมพื้นฐานของ Data Lake Storage และบทบาทในระบบนิเวศคลาวด์สมัยใหม่ - นำเข้าข้อมูลที่มีโครงสร้างและไม่มีโครงสร้างจากแหล่งต่างๆ โดยใช้รูปแบบการผสานรวมที่เป็นมาตรฐานอุตสาหกรรม - ประมวลผลชุดข้อมูลขนาดใหญ่โดยใช้เวิร์กโฟลว์ที่ใช้ Spark บน Databricks และ HDInsight - กำหนดค่าความปลอดภัยแบบหลายชั้น รวมถึงการจัดการข้อมูลประจำตัว (identity management), firewalls และรายการควบคุมการเข้าถึงแบบละเอียด (fine-grained access control lists) - นำรูปแบบ Delta Lake มาใช้เพื่อให้มั่นใจในความน่าเชื่อถือ ความสอดคล้อง และ ACID transactions ของข้อมูล - ประยุกต์ใช้นโยบายการจัดการวงจรชีวิต (lifecycle management policies) เพื่อจัดเก็บข้อมูลโดยอัตโนมัติและเพิ่มประสิทธิภาพต้นทุนการจัดเก็บ - ตรวจสอบความสมบูรณ์ของระบบและใช้เทคนิคการปรับแต่งประสิทธิภาพสำหรับภาระงานระดับองค์กร หลักสูตรนี้เริ่มต้นด้วยคำศัพท์ที่จำเป็นและหลักการจัดเก็บข้อมูลที่เป็นรากฐาน ก่อนที่จะก้าวไปสู่การเคลื่อนย้ายข้อมูลเชิงปฏิบัติ ตรรกะการประมวลผล และการกำหนดค่าความปลอดภัยขั้นสูง คุณจะได้อ่านคำอธิบายโดยละเอียดและตัวอย่างเชิงปฏิบัติที่ออกแบบมาเพื่อสร้างความมั่นใจทางเทคนิคของคุณ หลักสูตรนี้ออกแบบมาสำหรับผู้เริ่มต้นและวิศวกรข้อมูลที่ต้องการทำความเข้าใจการจัดเก็บข้อมูลขนาดใหญ่บนคลาวด์ ไม่จำเป็นต้องมีประสบการณ์กับ Azure มาก่อนเพื่อเริ่มต้น เริ่มสร้างความเชี่ยวชาญในสถาปัตยกรรมข้อมูลบนคลาวด์สมัยใหม่ได้แล้ววันนี้