Bạn vừa học những kiến thức cơ bản về web cạo.
Nó khá thú vị, phải không?
Rất nhiều quyền lực trong tay bạn, trong tầm tay bạn.
Nhưng giả sử bạn muốn đi xa hơn.
Tìm hiểu thêm.
Có thể trở thành một người quét web chuyên nghiệp?
Tôi không biết.
Có lẽ đó là những gì bạn muốn làm.
Một số điều mà tôi muốn giới thiệu là gì?
Chà, làm quen nhiều hơn với món súp xinh đẹp.
Nhưng hãy ghi nhớ những gì tôi đã nói ở đầu phần này.
Lý tưởng nhất là bạn thậm chí không cần phải lau vết cạo.
Lý tưởng nhất là bạn có thể sử dụng một API.
Có thể trang web mà bạn muốn lấy dữ liệu thực sự cung cấp cho bạn một API.
Ví dụ: nếu tôi truy cập API Airbnb.
Bạn có thể thấy rằng Airbnb đã công bố một API chính thức.
Vì vậy, chúng tôi thực sự có thể đọc về dữ liệu mà Airbnb chỉ cấp cho chúng tôi quyền truy cập.
Và đó phải là điểm dừng đầu tiên của bạn.
Có lẽ nếu bạn không có điều đó, thì bạn sẽ nhìn vào món súp đẹp.
Điều tiếp theo bạn có thể muốn xem là khung này có tên là Scrappy.
Hãy coi nó như một món súp đẹp mắt, nhưng với nhiều tính năng hơn.
Một khuôn khổ về cơ bản là toàn bộ nhà bếp, toàn bộ một vành đai công cụ mà bạn có thể sử dụng để quét các trang web.
Và bạn sử dụng những thứ như lộn xộn khi bạn muốn thu thập các trang web lớn, một lượng lớn dữ liệu, một khuôn
khổ so với một thư viện.
Đó có phải là một khuôn khổ gần như dạy một ngôn ngữ mới cho chính nó.
Nó cung cấp cho bạn tất cả các công cụ cần thiết để làm mọi thứ bạn muốn.
Mặt khác, khi nói đến dữ liệu cạo, súp đẹp lại nhỏ hơn.
Đó là một thư viện, vì vậy nó cung cấp cho bạn một số công cụ tiện lợi để thực hiện những việc nhỏ như những gì chúng tôi đã làm ở đây.
Rác rạc.
Khung công tác tự nó là một thứ hoàn toàn.
Bạn có thể xem qua tài liệu và hướng dẫn của họ.
Bạn sẽ mất một chút thời gian để làm quen, nhưng nếu bạn muốn làm điều này, có thể việc làm toàn thời gian là thứ
mà bạn nên xem qua.
Cuối cùng, bạn sẽ làm gì với tất cả dữ liệu này?
Cuối cùng, bạn có thể muốn làm điều gì đó, có thể lưu trữ nó trong một tệp văn bản, trong tệp CSV, một cái gì đó mà chúng ta
đã đề cập và chúng ta sẽ nói trong khóa học.
Nhưng khi bạn thu thập ngày càng nhiều dữ liệu, có thể bằng cách sử dụng thứ gì đó như Scrappy, bạn có thể muốn bắt đầu
sử dụng cái mà chúng tôi gọi là cơ sở dữ liệu.
Và cơ sở dữ liệu cho phép chúng ta lưu trữ một lượng lớn dữ liệu và lưu nó ở đâu đó để chúng ta có thể truy cập bất cứ
khi nào chúng ta muốn.
Và có rất nhiều cơ sở dữ liệu, thứ nằm ngoài mục tiêu của khóa học này.
Nhưng bạn có thể đã nghe nói về những thứ như MongoDB, Redis, my SQL.
Đăng gress.
Đây là tất cả các cách để lưu trữ dữ liệu, lưu trữ một lượng lớn dữ liệu và truy cập nó.
Vì vậy, bạn có thể muốn tìm hiểu về cách sử dụng một khuôn khổ như Scrappy và thu thập dữ liệu đó và lưu trữ ở đâu
đó trên cơ sở dữ liệu để những người khác trong nhóm của bạn có thể truy cập.
Khả năng là vô tận, nhưng nếu có một điều mà bạn định bỏ đi, đó là hãy sống
tử tế, có đạo đức và đừng làm bất cứ điều gì bất hợp pháp bởi vì tôi không muốn gặp rắc
rối.
Và tôi chắc rằng bạn cũng không như vậy.
Hẹn gặp lại các bạn trong phần tiếp theo.
Tạm biệt.