SPARK OR HADOOP FOR BIG DATA

SPARK OR HADOOP FOR BIG DATA

Tham gia chủ đề SPARK OR HADOOP FOR BIG DATA tại Vietnam Web Summit 2017

Đối với các lập trình viên, Big Data thường gắn liền với Apache Hadoop – công nghệ dựa trên GFS (Google File System) và MapReduce của Google. Tháng 4/2008, Hadoop trở thành hệ thống nhanh nhất để sắp xếp (sort) 1 terabyte dữ liệu, khi mất 209 giây chạy trên cluster gồm 910 nodes. Tháng 11/2008, Google thông báo hệ thống MapReduce chỉ cần 68 giây để sắp xếp 1 terabyte dữ liệu. Đến tháng 5/2009, Yahoo sử dụng Hadoop chỉ cần 62 giây để làm việc tương tự. Từ đó đến nay, Hadoop dần trở thành nòng cốt để giải quyết những bài toán về dữ liệu lớn.

Tuy nhiên, vào năm 2015, Apache Spark (gọi tắt Spark) nổi lên là 1 trong những dự án mã nguồn mở sôi động nhất trong lĩnh vực Big Data, thường xuyên được cập nhật bởi hơn 800 lập trình viên từ 200 công ty trên khắp thế giới, được cho rằng sẽ là sự thay thế Apache Hadoop trong tương lai. Chính cha đẻ của Spark cũng xác định Spark vừa hữu ích cho học máy lẫn xử lý luồng dữ liệu hoàn chỉnh. Đặc biệt, các dev có thể viết ứng dụng Spark bằng nhiều ngôn ngữ khác nhau, từ Scala, Java, Python, đến R. Nhờ những ưu điểm đó mà có rất nhiều hãng lớn đã dùng Spark cho các sản phẩm của mình như Yahoo, ebay, IBM, Cisco, Tencent, Alibaba… với cả petabyte dữ liệu.

Vậy, Hadoop và Spark, đâu mới là lựa chọn thích hợp để phát triển các dự án Big Data? Sau thời gian phát triển lâu dài, thể hiện tính hữu ích trong nhiều sản phẩm, liệu hệ sinh thái Hadoop có thể bị thay thế hoàn toàn bởi Spark? Cùng đến với topic SPARK OR HADOOP FOR BIG DATA do diễn giả Ông Xuân Hồng – Research Enginner của Trusting Social tại Vietnam Web Summit 2017 để cập nhật những kinh nghiệm làm việc với Big Data thiết thực nhất.

Chỉ cần đăng kí tại: https://meetup.vn/detail/Vietnam-Web-Summit-2017-191 bạn sẽ tiếp cận được gần 100 topics đặc sắc khác tại Vietnam Web Summit năm nay và nhận được toàn bộ slide của các diễn giả sau sự kiện. Tại sao bạn còn chần chừ?

=======================

Thời gian & địa điểm:

– 01/12/2017 tại Grand Palace, 142/18 Cộng Hòa, P.4, Q. Tân Bình, Tp.HCM

– 08/12/2017 tại Trung tâm Hội nghị Forevermark, 614 Lạc Long Quân, Q. Tây Hồ, Hà Nội

Thông tin chi tiết:

– Website: https://vietnamwebsummit.com

– Event page:

HCM: https://www.facebook.com/events/897273157088258

HN: https://www.facebook.com/events/303631870103105

Hotline/ Liên hệ hợp tác & đặt booth

– Mr Bình: binh@applancer.net | 0904 392 888

– Event team: event@applancer.net | 08 6273 3497