ข้ามไปยังเนื้อหาหลัก

บ้าน Shell

Courses

Data Processing in Shell

ระดับกลางระดับทักษะ

อัปเดตแล้ว 10/2568

Learn powerful command-line skills to download, process, and transform data, including machine learning pipeline.

เริ่มเรียนหลักสูตรฟรี

ShellData Manipulation4 ชม.13 videos46 Exercises3,550 เอ็กซ์พี22,736คำแถลงแสดงความสำเร็จ

สร้างบัญชีฟรีของคุณ

หรือ

เมื่อดำเนินการต่อ คุณยอมรับข้อกำหนดการใช้งานของเรา นโยบายความเป็นส่วนตัวของเรา และยอมรับว่าข้อมูลของคุณจะถูกจัดเก็บไว้ในสหรัฐอเมริกา

เป็นที่ชื่นชอบของผู้เรียนในบริษัทหลายพันแห่ง

ฝึกอบรมบุคคลตั้งแต่ 2 คนขึ้นไป?

ลองใช้ DataCamp for Business

คำอธิบายรายวิชา

We live in a busy world with tight deadlines. As a result, we fall back on what is familiar and easy, favoring GUI interfaces like Visual Studio and RStudio. However, taking the time to learn data analysis on the command line is a great long-term investment because it makes us stronger and more productive data people.In this course, we will take a practical approach to learn simple, powerful, and data-specific command-line skills. Using publicly available Spotify datasets, we will learn how to download, process, clean, and transform data, all via the command line. We will also learn advanced techniques such as command-line based SQL database operations. Finally, we will combine the powers of command line and Python to build a data pipeline for automating a predictive model.

ข้อกำหนดเบื้องต้น

Introduction to Shell Intermediate Python Intermediate SQL

1

Downloading Data on the Command Line

In this chapter, we learn how to download data files from web servers via the command line. In the process, we also learn about documentation manuals, option flags, and multi-file processing.

Downloading data using curl

50 เอ็กซ์พี

Using curl documentation

50 เอ็กซ์พี

Downloading single file using curl

100 เอ็กซ์พี

Downloading multiple files using curl

100 เอ็กซ์พี

Downloading data using Wget

50 เอ็กซ์พี

Installing Wget

50 เอ็กซ์พี

Downloading single file using wget

100 เอ็กซ์พี

Advanced downloading using Wget

50 เอ็กซ์พี

Setting constraints for multiple file downloads

50 เอ็กซ์พี

Creating wait time using Wget

100 เอ็กซ์พี

Data downloading with Wget and curl

100 เอ็กซ์พี

เริ่มบท

2

Data Cleaning and Munging on the Command Line

We continue our data journey from data downloading to data processing. In this chapter, we utilize the command line library csvkit to convert, preview, filter and manipulate files to prepare our data for further analyses.

Getting started with csvkit

50 เอ็กซ์พี

Installation and documentation for csvkit

100 เอ็กซ์พี

Converting and previewing data with csvkit

100 เอ็กซ์พี

File conversion and summary statistics with csvkit

100 เอ็กซ์พี

Filtering data using csvkit

50 เอ็กซ์พี

Printing column headers with csvkit

100 เอ็กซ์พี

Filtering data by column with csvkit

100 เอ็กซ์พี

Filtering data by row with csvkit

100 เอ็กซ์พี

Stacking data and chaining commands with csvkit

50 เอ็กซ์พี

Stacking files with csvkit

100 เอ็กซ์พี

Chaining commands using operators

100 เอ็กซ์พี

Data processing with csvkit

100 เอ็กซ์พี

เริ่มบท

3

Database Operations on the Command Line

In this chapter, we dig deeper into all that csvkit library has to offer. In particular, we focus on database operations we can do on the command line, including table creation, data pull, and various ETL transformation.

Pulling data from database

50 เอ็กซ์พี

Using sql2csv documentation

50 เอ็กซ์พี

Understand sql2csv connectors

50 เอ็กซ์พี

Practice pulling data from database

100 เอ็กซ์พี

Manipulating data using SQL syntax

50 เอ็กซ์พี

Applying SQL to a local CSV file

100 เอ็กซ์พี

Cleaner scripting via shell variables

100 เอ็กซ์พี

Joining local CSV files using SQL

100 เอ็กซ์พี

Pushing data back to database

50 เอ็กซ์พี

Practice pushing data back to database

100 เอ็กซ์พี

Database and SQL with csvkit

100 เอ็กซ์พี

เริ่มบท

4

Data Pipeline on the Command Line

In the last chapter, we bridge the connection between command line and other data science languages and learn how they can work together. Using Python as a case study, we learn to execute Python on the command line, to install dependencies using the package manager pip, and to build an entire model pipeline using the command line.

Python on the command line

50 เอ็กซ์พี

Finding Python version on the command line

50 เอ็กซ์พี

Executing Python script on the command line

100 เอ็กซ์พี

Python package installation with pip

50 เอ็กซ์พี

Understanding pip's capabilities

50 เอ็กซ์พี

Installing Python dependencies

100 เอ็กซ์พี

Running a Python model

100 เอ็กซ์พี

Data job automation with cron

50 เอ็กซ์พี

Understanding cron scheduling syntax

50 เอ็กซ์พี

Scheduling a job with crontab

100 เอ็กซ์พี

Model production on the command line

100 เอ็กซ์พี

Course recap

50 เอ็กซ์พี

เริ่มบท

Data Processing in Shell

หลักสูตรเสร็จสมบูรณ์

ได้รับใบรับรองความสำเร็จ

เพิ่มข้อมูลรับรองนี้ลงในโปรไฟล์ LinkedIn, ประวัติย่อ หรือเรซูเม่ของคุณ
แชร์ลงในโซเชียลมีเดียและในรายงานประเมินผลการปฏิบัติงานของคุณลงทะเบียนเลย

เข้าร่วมกับ... 19 ล้านผู้เรียน และเริ่ม Data Processing in Shell วันนี้เลย!

สร้างบัญชีฟรีของคุณ

หรือ

เมื่อดำเนินการต่อ คุณยอมรับข้อกำหนดการใช้งานของเรา นโยบายความเป็นส่วนตัวของเรา และยอมรับว่าข้อมูลของคุณจะถูกจัดเก็บไว้ในสหรัฐอเมริกา

พัฒนาทักษะด้านข้อมูลของคุณด้วย DataCamp for Mobile

พัฒนาทักษะได้ทุกที่ทุกเวลาด้วยคอร์สเรียนบนมือถือและแบบฝึกหัดเขียนโค้ดประจำวัน 5 นาทีของเรา