Khoa học dữ liệu đang bùng nổ, nhưng không phải vị trí nào trong ngành cũng tăng trưởng cùng tốc độ. Kỹ thuật dữ liệu đang nhanh chóng tăng tốc. Theo Báo cáo Công nghệ 2020 của DICE, kỹ sư dữ liệu là công việc công nghệ phát triển nhanh nhất, vượt qua các vị trí dữ liệu truyền thống khác như nhà khoa học dữ liệu hay các vai trò liên quan đến đám mây. Công việc này cũng góp mặt trong Báo cáo Công việc Mới Nổi 2020 của LinkedIn Hoa Kỳ trong top 15 công việc mới nổi bật nhất của 5 năm qua.
Nguồn: DICE
Nhưng nhu cầu gia tăng này dẫn đến cạnh tranh khốc liệt giữa các công ty để thu hút nhân tài. Kỹ sư dữ liệu là vị trí tương đối mới và vẫn còn khan hiếm trên thị trường lao động.
Làm sao để đảm bảo công ty bạn tuyển được ứng viên mạnh? Bản mô tả công việc có thể tạo khác biệt lớn. Một bản mô tả công việc được viết tốt sẽ thiết lập bộ kỳ vọng rõ ràng để nhà tuyển dụng truyền đạt tới ứng viên, từ đó tăng cơ hội tìm được người phù hợp.
Hãy tiếp tục đọc hướng dẫn toàn diện về các thực tiễn tốt nhất để viết một bản mô tả công việc kỹ sư dữ liệu tạo được dấu ấn. Dù bạn đang cố gắng tìm ứng viên phù hợp hay hy vọng trở thành kỹ sư dữ liệu, bài viết này sẽ giúp bạn hiểu những yêu cầu trong vai trò này.
Vai Trò và Trách Nhiệm của Kỹ Sư Dữ Liệu
Kỹ sư dữ liệu chịu trách nhiệm đặt nền móng cho việc thu thập, lưu trữ, biến đổi và quản lý dữ liệu trong tổ chức. Họ phụ trách phát triển và duy trì kiến trúc cơ sở dữ liệu và các hệ thống xử lý dữ liệu. Hạ tầng này là chìa khóa để đảm bảo các ứng dụng dữ liệu cấp cao, như trực quan hóa dữ liệu, và việc triển khai mô hình học máy được thực hiện một cách trơn tru, an toàn và hiệu quả.
Vì độ phức tạp của các nhiệm vụ này, kỹ sư dữ liệu là những chuyên gia dữ liệu mang tính kỹ thuật cao, làm việc ở giao điểm giữa khoa học dữ liệu và phát triển phần mềm. Chúng tôi đã có một bài viết riêng trình bày kỹ sư dữ liệu làm gì, nhưng dưới đây là một số điểm tóm lược.
Dù trách nhiệm và công nghệ mà kỹ sư dữ liệu sử dụng khác nhau giữa các công ty, công việc của họ về cơ bản xoay quanh các nhiệm vụ sau:
- Quy trình ETL. ETL bao gồm tập hợp các quy trình và thủ tục để trích xuất, biến đổi và nạp dữ liệu từ nhiều nguồn, và di chuyển dữ liệu giữa các môi trường khác nhau. Kỹ sư dữ liệu đảm bảo khối lượng dữ liệu lớn thu thập từ nhiều nguồn trở thành nguyên liệu thô sẵn sàng cho các chuyên gia dữ liệu khác, như nhà phân tích dữ liệu và nhà khoa học dữ liệu. Quy trình ETL thường được thực hiện thông qua pipeline dữ liệu, cho phép tự động hóa, lập lịch và mở rộng các tác vụ khác nhau.
- Làm sạch dữ liệu. Thông thường, khả năng xảy ra lỗi trong dữ liệu tăng lên cùng với số lượng nguồn dữ liệu mà công ty cần cho hoạt động của mình. Do đó, không ngạc nhiên khi kỹ sư dữ liệu dành phần lớn thời gian để làm sạch dữ liệu, tức là sửa hoặc loại bỏ dữ liệu sai, hỏng, định dạng không đúng, trùng lặp hoặc không đầy đủ.
- Giám sát dữ liệu. Giữa giai đoạn ý tưởng và giai đoạn đưa mô hình học máy vào sản xuất là một chặng đường dài đầy rẫy trở ngại tiềm ẩn. Kỹ sư dữ liệu cũng có nhiệm vụ giám sát và tối ưu hóa kiến trúc dữ liệu và hệ thống xử lý dữ liệu.
Nếu bạn quan tâm đến việc trở thành kỹ sư dữ liệu, một cách khởi đầu tuyệt vời là Lộ trình Data Engineer với Python của chúng tôi.
Nên Bao Gồm Gì Trong Bản Mô Tả Công Việc Kỹ Sư Dữ Liệu
Trong phần này, chúng ta sẽ xem các yếu tố bạn nên đưa vào từng phần của bản mô tả công việc kỹ sư dữ liệu.
Mô tả
Phần này cung cấp phần mở đầu cho vị trí. Bạn nên bao gồm mô tả ngắn về công ty và lý do cần tuyển kỹ sư dữ liệu mới. Bạn cũng nên thêm loại nhiệm vụ và dự án mà ứng viên trúng tuyển sẽ phụ trách, cùng một số yêu cầu kỹ thuật của công việc. Cuối cùng, ở phần này, bạn nên nêu rõ mức độ kinh nghiệm mà công ty bạn tìm kiếm. Điều này sẽ giúp người tìm việc nhanh chóng quyết định có nên đầu tư thêm thời gian và công sức để chuẩn bị hồ sơ chính thức hay không.
Trách nhiệm của Kỹ sư Dữ liệu
Kỹ sư dữ liệu là một trong những hồ sơ mang tính kỹ thuật cao nhất trong ngành khoa học dữ liệu, kết hợp kiến thức và kỹ năng từ khoa học dữ liệu, phát triển phần mềm và quản trị cơ sở dữ liệu.
Dù trách nhiệm cụ thể có thể khác nhau tùy công việc, có những nhiệm vụ mà mọi kỹ sư dữ liệu đều cần có khả năng thực hiện. Dưới đây là những nội dung quan trọng nhất:
- Thiết kế kiến trúc. Dù đôi khi việc thiết kế kiến trúc dữ liệu của công ty thuộc về kiến trúc sư dữ liệu, trong nhiều trường hợp, kỹ sư dữ liệu là người phụ trách. Điều này đòi hỏi thông thạo các loại cơ sở dữ liệu, kho dữ liệu và hệ thống phân tích khác nhau.
- Quy trình ETL. Thu thập dữ liệu từ nhiều nguồn, xử lý và lưu trữ ở định dạng sẵn sàng sử dụng trong kho dữ liệu của công ty là một số hoạt động phổ biến nhất của kỹ sư dữ liệu.
- Quản lý pipeline dữ liệu. Pipeline dữ liệu là người bạn tốt nhất của kỹ sư dữ liệu. Mục tiêu tối thượng là tự động hóa càng nhiều quy trình dữ liệu càng tốt, và pipeline dữ liệu đóng vai trò then chốt. Kỹ sư dữ liệu cần thông thạo phát triển, duy trì, kiểm thử và tối ưu hóa pipeline dữ liệu.
- Triển khai mô hình học máy. Trong khi nhà khoa học dữ liệu chịu trách nhiệm phát triển mô hình học máy, kỹ sư dữ liệu chịu trách nhiệm đưa chúng vào sản xuất.
- Quản lý đám mây. Dịch vụ dựa trên đám mây đang nhanh chóng trở thành lựa chọn ưu tiên cho nhiều công ty muốn tận dụng tối đa hạ tầng dữ liệu. Khi ngày càng nhiều hoạt động dữ liệu diễn ra trên đám mây, kỹ sư dữ liệu phải có khả năng làm việc với các công cụ trên các nhà cung cấp đám mây như AWS, Azure và Google Cloud.
- Giám sát dữ liệu. Đảm bảo chất lượng dữ liệu là điều cốt yếu để mọi quy trình dữ liệu vận hành trơn tru. Kỹ sư dữ liệu chịu trách nhiệm giám sát mọi quy trình và thủ tục, đồng thời tối ưu hóa hiệu năng của chúng.
Kinh nghiệm
Kỹ thuật dữ liệu là vai trò tương đối mới trong khoa học dữ liệu. Do đó, chỉ một vài trường đại học và cao đẳng cung cấp chương trình đào tạo thuần kỹ thuật dữ liệu. Kỹ sư dữ liệu thường có nền tảng về khoa học dữ liệu, kỹ thuật phần mềm, toán học hoặc lĩnh vực liên quan đến kinh doanh.
Để mở rộng nguồn ứng viên, bạn cũng có thể cân nhắc cho phép những ứng viên dù có nền tảng giáo dục khác nhưng có thể chứng minh năng lực qua nhiều năm kinh nghiệm làm việc liên quan.
Yêu Cầu Tối Thiểu
Vì là vai trò mang tính kỹ thuật cao, kỹ sư dữ liệu phải thông thạo nhiều công cụ. Tuy nhiên, rất khó để lập danh sách chi tiết và toàn diện các công cụ, công nghệ cần cho mọi vai trò kỹ thuật dữ liệu, vì hệ sinh thái khoa học dữ liệu đang phát triển nhanh, công nghệ và hệ thống mới liên tục xuất hiện.
Vì biết hết tất cả là bất khả thi, bạn chỉ nên đưa vào các phần mềm, công nghệ và công cụ cần thiết cho công việc hoặc dự kiến sẽ áp dụng trong tương lai. Khi chuẩn bị phần này của bản mô tả công việc kỹ sư dữ liệu, hãy định khung yêu cầu cụ thể cho kỹ sư dữ liệu thay vì liệt kê kỹ năng khoa học dữ liệu chung chung. Để làm vậy, bạn nên tham khảo các thành viên trong đội nhóm mà ứng viên trúng tuyển sẽ làm việc cùng.
Bên cạnh kỹ năng kỹ thuật, ở phần này, bạn cũng nên đưa vào các kỹ năng mềm cần cho vai trò.
Dưới đây là danh sách không đầy đủ các bằng cấp và kỹ năng bạn nên đưa vào trong bản mô tả công việc:
- Kỹ năng SQL nâng cao và quản trị cơ sở dữ liệu quan hệ
- Ngôn ngữ lập trình hướng đối tượng như Python, Java và Scala.
- Kinh nghiệm với các khung tính toán phân tán như Hadoop hoặc Spark
- Pipeline dữ liệu và công cụ quản lý luồng công việc (ví dụ: Airflow)
- Giải pháp dựa trên đám mây (ví dụ: AWS, Azure, Google Cloud)
- Kỹ năng quản lý dự án và tổ chức tốt.
- Kỹ năng giải quyết vấn đề, giao tiếp và tổ chức xuất sắc.
- Khả năng làm việc độc lập và làm việc nhóm đã được chứng minh.
Mẹo Bổ Sung Để Viết Bản Mô Tả Công Việc Kỹ Sư Dữ Liệu Hấp Dẫn
Ngay cả khi bạn đã chuẩn bị hoàn hảo bộ mô tả công việc và kỳ vọng, số lượng tin tuyển dụng khổng lồ vẫn có thể khiến tin của bạn bị chìm khuất khỏi tầm mắt ứng viên. Để giữ cho mô tả công việc hấp dẫn và đủ thu hút nhấp chuột, hãy cân nhắc những điều sau:
- Đưa dải lương. Một nghiên cứu của SMART Recruit Online cho thấy khi tin tuyển dụng có bao gồm dải lương, chúng nhận được hơn 30% ứng viên nhiều hơn. Hãy cung cấp dải lương cho kỹ sư dữ liệu phù hợp với yêu cầu và thâm niên để thu hút ứng viên lý tưởng.
- Đưa phúc lợi. Ứng viên ngày càng cân nhắc kỹ điều kiện lao động và cân bằng công việc - cuộc sống. Hãy đảm bảo đưa các phúc lợi vào để vị trí hấp dẫn hơn.
- Chia sẻ về văn hóa nơi làm việc. Chia sẻ chi tiết về đội ngũ, văn hóa và giá trị của môi trường làm việc. Điều này giúp ứng viên hình dung bản thân làm việc với bạn và kiểm tra mức độ phù hợp văn hóa.
- Định nghĩa quy trình tuyển dụng với bộ phận nhân sự. Ứng viên muốn biết quy trình tuyển dụng sẽ gồm những gì để có thể chuẩn bị cho phỏng vấn và các buổi gặp.
