Spark ve Scala ile Büyük Veri İşleme

Veri hacmi üstel olarak büyürken, geleneksel işleme yöntemleri çoğu zaman modern iş ihtiyaçlarını karşılamamaktadır.Bu kurs, dağıtılmış hesaplamanın Spark ve Scala programlama dilinin gücünü kullanarak bu sorunları nasıl çözdüğünü anlamaya açık bir yol sağlar. Yüksek performanslı çerçeveler kullanarak ham verileri harekete geçirilebilir içgörülere dönüştürmek için gerekli becerileri kazanacaksınız.Bu kursun sonunda, herhangi bir veri odaklı ortamda güvenilirlik ve hızı sağlayan kümeler arasında ölçeklenebilir veri işleme mantığını tasarlayacak ve uygulayabileceksiniz. Ne öğreneceksin: - Spark mimarisini ve miras MapReduce modellerini nasıl geliştirdiğini anlayın - Büyük veri mühendisliği için özel olarak tasarlanmış Scala programlama temellerini öğrenin - Master Dayanıklı Dağıtılmış Veri Setler (RDDs) ve modern Spark DataFrames - Spark SQL'yi yapısal ve yarı yapısal verilerde karmaşık sorgular yürütmek için uygulayın - Dağıtılmış iş yükünün yürütülmesi için Spark kümelerini yapılandır ve yönet - Gerçek zamanlı veri beslemelerini yönetmek için Spark Structured Streaming'i keşfedin - Boru hattı performansını iyileştirmek için veri optimizasyon tekniklerini uygulama Kurs, temel terminoloji ve dağıtılmış sistemlerin temel ilkeleriyle başlar. Daha sonra, temel veri manipülasyonundan gelişmiş SQL entegrasyonu ve akış işlemesine kadar her şeyi kapsayan yazılı açıklamalar ve kod tabanlı egzersizler yoluyla ilerleyeceksiniz. Bu kurs, yeni başlayanlar, umut vadeden veri mühendisleri ve büyük veri rollerine geçiş yapmak isteyen analistler için tasarlanmıştır. Başlamak için Spark veya Scala ile önceden tecrübe gerekmez. Büyük veri mimarisi konusunda uzmanlığınızı bugünden inşa etmeye başlayın.