Hub documentation
Ví dụ & Hướng dẫn
Ví dụ & Hướng dẫn
Huấn luyện mô hình
Các lệnh khởi chạy cho Transformers, TRL, Unsloth và Axolotl nằm ở Train Models on Jobs. Mỗi lệnh đều liên kết đến hướng dẫn riêng của thư viện.
Xử lý dữ liệu ở quy mô lớn
DataTrove cung cấp JobsPipelineExecutor thử nghiệm để phân phối các pipeline xử lý dữ liệu trên một nhóm Jobs. Nó hỗ trợ giới hạn độ song song, phụ thuộc đa giai đoạn, thử lại và các lần chạy có thể tiếp tục — khi chạy lại một pipeline, các tác vụ đã hoàn thành sẽ bị bỏ qua và chỉ các tác vụ còn lại được thực thi.
Xem các ví dụ sẵn sàng để chạy cho:
UV Scripts
Tổ chức uv-scripts duy trì một bộ sưu tập các script uv tự chứa, có thể chạy trên Jobs bằng một lệnh duy nhất. Các script bao phủ OCR, suy luận hàng loạt, phân loại văn bản, phát hiện đối tượng, thống kê tập dữ liệu, trực quan hóa embedding và nhiều hơn nữa.
Unsloth cũng cung cấp các script huấn luyện sẵn sàng để chạy cho việc fine-tuning LLM và VLM trên Jobs.
Kỹ năng của Agent lập trình
Các tác tử lập trình như Claude Code, Codex và Cursor có thể gửi và theo dõi Jobs cho bạn. Cài đặt kỹ năng hf CLI, được tạo từ CLI đã cài đặt của bạn để luôn cập nhật:
hf skills add
Xem Hugging Face CLI for AI agents để biết cách thiết lập cho từng agent, và Agent Skills để tìm hiểu về kỹ năng huấn luyện và các kỹ năng quy trình làm việc khác.
Các môi trường cách ly
Tính năng expose ports của Jobs giúp chúng trở thành lựa chọn lý tưởng để xây dựng các sandbox, tức là các môi trường tự chứa tạm thời được sử dụng bởi các agent và ứng dụng LLM.
Hướng dẫn và Dự án từ Cộng đồng
- Đào tạo trên các bộ dữ liệu khổng lồ mà không cần tải xuống - Truyền trực tiếp các bộ dữ liệu trên Jobs với Unsloth, không cần bộ nhớ lưu trữ cục bộ
- Chỉnh huấn mô hình thị giác-ngôn ngữ với TRL - Chỉnh huấn Qwen2.5-VL cho các tác vụ lịch sử nghệ thuật bằng TRL và Jobs
- FreeFlow - Nền tảng chú thích mã nguồn mở với tích hợp Jobs tích hợp sẵn để huấn luyện các mô hình phát hiện đối tượng YOLOv11
- hfdask - Chạy các chương trình Dask trên các Job CPU và GPU từ một định nghĩa cụm YAML duy nhất, với mTLS giữa các nút và dọn dẹp tự động
Bạn có hướng dẫn hoặc dự án nào sử dụng Jobs không? Mở một PR để thêm nó vào đây.
Update on GitHub