Big data thường được xác định bằng 3 chữ V: greater variety, volumes, and velocity (đa dạng, khối lượng và tốc độ lớn hơn). Do ba chữ V, big data đặt ra những thách thức về quản lý dữ liệu mà cơ sở dữ liệu truyền thống không thể giải quyết được. Không chỉ vậy, việc cố gắng khắc phục những vấn đề này có thể dẫn đến các vấn đề về quy mô, tắc nghẽn và chi phí tăng theo chiều hướng tăng lên.

Để giải quyết vấn đề này, bạn cần xem xét toàn bộ quy trình quản lý dữ liệu. Đừng lo lắng, AWS cung cấp nhiều công cụ và phương pháp hay nhất để giúp bạn xây dựng kiến trúc tốt hơn cho những thách thức này. Trong bài đăng này, chúng tôi chia sẻ thông tin chi tiết về cách xây dựng và quản lý big data pipelines trong kiến trúc của bạn.

Mọi thứ bạn cần biết về big data: Từ nguyên tắc kiến trúc đến các phương pháp hay nhất

Có rất nhiều công cụ, khuôn khổ và dịch vụ cho big data. Bạn có thể choáng ngợp khi không biết bắt đầu từ đâu để áp dụng các phương pháp hay nhất.

Video này chắt lọc các phương pháp hay, kiến trúc và nguyên tắc tốt cho hệ thống big data thành các chủ đề và hướng dẫn dễ dàng.

Manos Samatas trình bày các mô hình tinh thần cho kiến trúc big data

Hội thảo AWS về big data

Phương pháp thực hành này sẽ cho bạn thấy những gì có thể đối với các dịch vụ big data trên AWS.

Nếu bạn là builder, danh mục hội thảo AWS này bao gồm một số khóa học về big data và phân tích. Những nguồn này cung cấp những ý tưởng mới và cách hiện thực hóa chúng trong thực tế.

Các hội thảo AWS có thể giúp bạn tìm hiểu các dịch vụ về cloud và các mẫu kiến trúc được đề xuất

Chia sẻ an toàn dữ liệu của bạn qua các tài khoản AWS bằng AWS Lake Formation

Amazon.com là khách hàng của AWS giống như bất kỳ khách hàng nào khác. Tuy nhiên, như bạn có thể tưởng tượng, Amazon.com có bộ dữ liệu rất lớn và rất phức tạp với hàng chục nghìn giao dịch cùng một lúc.

Video này trình bày về cách Amazon.com sử dụng các công nghệ AWS để điều hành doanh nghiệp của họ thành công và cách bạn có thể thêm các kiến trúc và nguyên tắc tương tự cho mình.

Các kiến trúc kho dữ liệu có thể được sử dụng để chạy các truy vấn trên một lượng lớn dữ liệu từ các nguồn dữ liệu khác nhau

Hẹn gặp lại các bạn trong lần sau!

Cảm ơn bạn đã tham gia cuộc thảo luận của chúng tôi về kiến trúc big data! Hẹn gặp lại bạn sau hai tuần để biết thêm hướng dẫn và các phương pháp hay nhất về kiến trúc.

Các bài viết khác trong loạt bài này

• Let’s Architect! Architecting for Sustainability
• Let’s Architect! Architecting for Machine Learning
• Let’s Architect! Architecting for Security
• Let’s Architect! Tools for Cloud Architects
• Let’s Architect! Architecting for Blockchain
• Let’s Architect! Architecting microservices with containers
• Let’s Architect! Using open-source technologies on AWS
• Let’s Architect! Serverless architecture on AWS
• Let’s Architect! Creating resilient architecture
• Let’s Architect! Architecting for governance and management
• Let’s Architect! Architecting for front end
• Let’s Architect! Understanding the build versus buy dilemma
• Let’s Architect! Architecting for DevOps
• Let’s Architect! Designing Well-Architected systems

Tìm kiếm thêm nội dung kiến trúc?

AWS Architecture Center cung cấp các sơ đồ kiến trúc tham khảo, các giải pháp kiến trúc đã được hiệu chỉnh, các phương pháp hay nhất được kiến trúc tốt nhất, các mẫu, biểu tượng và hơn thế nữa!

---

Bài được dịch từ bài viết trên AWS Blogs, bạn có thể xem bài viết gốc tại đây.