Đề cương khóa học
Giới thiệu về hệ sinh thái Big Data
- Tổng quan về công nghệ và kiến trúc Big Data
- Xử lý theo lô (batch) so với xử lý thời gian thực
- Chiến lược lưu trữ dữ liệu để mở rộng quy mô
Xử lý dữ liệu nâng cao với Apache Spark
- Tối ưu hóa việc thực hiện tác vụ Spark để tăng hiệu suất
- Các phép biến đổi và hành động nâng cao
- Thực hiện truyền trực tiếp dữ liệu có cấu trúc (structured streaming)
Học máy quy mô lớn
- Kỹ thuật huấn luyện mô hình phân tán
- Điều chỉnh siêu tham số trên các bộ dữ liệu lớn
- Triển khai mô hình trong môi trường Big Data
Học sâu cho Big Data
- Tích hợp TensorFlow và PyTorch với Spark
- Các đường ống huấn luyện học sâu phân tán
- Các trường hợp sử dụng trong phân tích hình ảnh, văn bản và chuỗi thời gian
Phân tích thời gian thực và truyền trực tiếp dữ liệu
- Apache Kafka cho việc thu thập dữ liệu truyền trực tiếp
- Các khung xử lý luồng (stream processing)
- Giám sát và cảnh báo trong các hệ thống thời gian thực
Quản trị dữ liệu, bảo mật và đạo đức
- Yêu cầu về quyền riêng tư dữ liệu và tuân thủ quy định
- Điều khiển truy cập và mã hóa trong các hệ thống Big Data
- Các cân nhắc đạo đức trong phân tích quy mô lớn
Tích hợp Big Data với Trí tuệ doanh nghiệp
- Hình ảnh hóa dữ liệu và tạo bảng điều khiển (dashboard) cho Big Data
- Kết nối các đường ống Big Data với các công cụ BI
- Thúc đẩy kết quả kinh doanh bằng phân tích nâng cao
Tóm tắt và các bước tiếp theo
Yêu cầu
- Hiểu biết vững chắc về các khái niệm phân tích dữ liệu và mô hình thống kê
- Kinh nghiệm làm việc với các công cụ xử lý dữ liệu và ngôn ngữ lập trình như Python, R hoặc Scala
- Quen thuộc với các khung tính toán phân tán như Hadoop hoặc Spark
Đối tượng tham gia
- Các nhà khoa học dữ liệu muốn làm chủ xử lý dữ liệu quy mô lớn và phân tích dự đoán
- Các nhà phân tích cấp cao tìm cách thiết kế và triển khai các quy trình phân tích nâng cao
- Các chuyên gia R&D tập trung vào các giải pháp dựa trên dữ liệu sáng tạo
Đánh giá (3)
Tìm hiểu rằng QGIS là một công cụ mà có thể được sử dụng bởi các chuyên gia khác nhau như nhà đo đạc
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Khóa học - QGIS for Geographic Information System
Dịch thuật bằng máy
Cách sử dụng dữ liệu vệ tinh mở cho các ứng dụng thực tế
Tshering Dorji - Druk Holding and Investments
Khóa học - Advanced Geographic Information Systems (GIS)
Dịch thuật bằng máy
Những ví dụ thực hành đã giúp chúng tôi cảm nhận được cách thức hoạt động của chương trình. Giải thích tốt và tích hợp các khái niệm lý thuyết với cách áp dụng vào thực tế.
Ian - Archeoworks Inc.
Khóa học - ArcGIS Fundamentals
Dịch thuật bằng máy