Change Data Capture và Thu thập dữ liệu với Debezium và MySQL

Các doanh nghiệp hiện đại dựa trên dữ liệu yêu cầu truy cập ngay lập tức vào các thay đổi cơ sở dữ liệu khi chúng xảy ra. Thu thập dữ liệu thay đổi (CDC) cho phép bạn truyền trực tiếp các cập nhật này ngay lập tức mà không làm quá tải cơ sở dữ liệu chính của bạn, cho phép phân tích thời gian thực và đồng bộ hóa dữ liệu liền mạch. Khóa học này cung cấp nền tảng vững chắc trong việc sử dụng Debezium để thu hẹp khoảng cách giữa cơ sở dữ liệu MySQL của bạn và hệ sinh thái dữ liệu rộng lớn hơn của bạn. Bạn sẽ có được các kỹ năng để cấu hình, quản lý và mở rộng các đường ống CDC cho môi trường sẵn sàng sản xuất. Bằng cách đọc các giải thích thực tế và các ví dụ dựa trên mã, bạn sẽ chuyển đổi từ người mới bắt đầu thành một người thực hành có khả năng xử lý các quy trình thu thập dữ liệu phức tạp. Những gì bạn sẽ học: - Hiểu các nguyên tắc cơ bản của Thu thập dữ liệu thay đổi và kiến trúc dựa trên sự kiện. - Cấu hình các trình kết nối Debezium để giám sát binlog của MySQL và thu thập các thay đổi ở cấp độ hàng. - Chuyển đổi và lọc các luồng dữ liệu để đảm bảo chỉ thông tin có liên quan đến người tiêu dùng của bạn. - Triển khai các phương pháp quan sát hiện đại để giám sát sức khỏe và độ trễ của các đường ống dữ liệu của bạn. - Áp dụng các chiến lược tiến hóa lược đồ để xử lý các thay đổi cơ sở dữ liệu mà không làm hỏng các dịch vụ hạ nguồn. - Triển khai Debezium trong cả môi trường độc lập và container hóa để thu thập dữ liệu có thể mở rộng. Khóa học bắt đầu với các định nghĩa cốt lõi và kiến trúc của luồng dữ liệu phân tán. Sau đó, bạn sẽ tiến tới các yêu cầu kỹ thuật của MySQL cho CDC và đi vào chi tiết triển khai thực tế, bao gồm cả việc điều chỉnh hiệu suất và xử lý lỗi. Khóa học này được thiết kế cho các kỹ sư dữ liệu đầy tham vọng, quản trị viên cơ sở dữ liệu và nhà phát triển phần mềm mới làm quen với Thu thập dữ liệu thay đổi. Không yêu cầu kinh nghiệm trước đó với Debezium, mặc dù hiểu biết cơ bản về SQL và các khái niệm cơ sở dữ liệu là hữu ích. Bắt đầu xây dựng luồng dữ liệu thời gian thực đầu tiên của bạn ngay hôm nay.