Sử dụng 🤗 Datasets

Khi bạn đã tìm thấy một bộ dữ liệu thú vị trên Hugging Face Hub, bạn có thể tải bộ dữ liệu đó bằng 🤗 Datasets. Bạn có thể nhấp vào nút Sử dụng bộ dữ liệu này để sao chép mã tải bộ dữ liệu.

Trước tiên, bạn cần Đăng nhập bằng tài khoản Hugging Face, ví dụ bằng cách sử dụng:

hf auth login

Sau đó, bạn có thể tải một bộ dữ liệu từ Hugging Face Hub bằng

from datasets import load_dataset

dataset = load_dataset("username/my_dataset")

# or load the separate splits if the dataset has train/validation/test splits
train_dataset = load_dataset("username/my_dataset", split="train")
valid_dataset = load_dataset("username/my_dataset", split="validation")
test_dataset  = load_dataset("username/my_dataset", split="test")

Bạn cũng có thể tải các bộ dữ liệu lên Hugging Face Hub:

my_new_dataset.push_to_hub("username/my_new_dataset")

Điều này tạo ra một kho dữ liệu username/my_new_dataset chứa Dataset của bạn ở định dạng Parquet, mà bạn có thể tải lại sau này.

Để biết thêm thông tin về cách sử dụng 🤗 Datasets, hãy xem các hướng dẫn và cẩm nang có trong tài liệu 🤗 Datasets.