TRL documentation

Tutorial Komunitas

You are viewing main version, which requires installation from source. If you'd like regular pip install, checkout the latest stable version (v1.18.0).
Hugging Face's logo
Join the Hugging Face community

and get access to the augmented documentation experience

to get started

Tutorial Komunitas

Tutorial komunitas dibuat oleh anggota aktif komunitas Hugging Face yang ingin berbagi pengetahuan dan keahlian mereka dengan orang lain. Ini adalah cara yang bagus untuk mempelajari pustaka dan fiturnya, serta memulai dengan kelas inti dan modalitas.

Model Bahasa

Tutorial

TugasKelasDeskripsiPenulisTutorialColab
Pembelajaran PenguatanGRPOTrainerPelatihan Online yang Efisien dengan GRPO dan vLLM di TRLSergio PaniegoTautanOpen In Colab
Pembelajaran PenguatanGRPOTrainerMelatih ulang LLM untuk penalaran dengan GRPO di TRLSergio PaniegoTautanOpen In Colab
Pembelajaran PenguatanGRPOTrainerMini-R1: Mereproduksi „aha moment“ Deepseek R1, tutorial RLPhilipp SchmidTautanOpen In Colab
Pembelajaran PenguatanGRPOTrainerRL pada LLaMA 3.1-8B dengan GRPO dan optimasi UnslothAndrea ManzoniTautanOpen In Colab
Penyetelan instruksiSFTTrainerFine-tuning LLM Google Gemma menggunakan format ChatML dengan QLoRAPhilipp SchmidTautanOpen In Colab
Generasi TerstrukturSFTTrainerFine-tuning Llama-2-7B untuk menghasilkan katalog produk Persia dalam JSON menggunakan QLoRA dan PEFTMohammadreza EsmaeilianTautanOpen In Colab
Optimasi PreferensiDPOTrainerSelaraskan Mistral-7b menggunakan Direct Preference Optimization untuk keselarasan preferensi manusiaMaxime LabonneTautanOpen In Colab
Optimasi Preferensiexperimental.orpo.ORPOTrainerFine-tuning Llama 3 dengan ORPO yang menggabungkan penyetelan instruksi dan keselarasan preferensiMaxime LabonneTautanOpen In Colab
Penyetelan instruksiSFTTrainerCara melakukan fine-tuning LLM terbuka di tahun 2025 dengan Hugging FacePhilipp SchmidTautanOpen In Colab
Penalaran Tingkat LangkahGRPOTrainerPembelajaran Penguatan Berpengawas (SRL) untuk penalaran langkah demi langkah dengan vLLMDeepak SwaminathanTautanOpen In Colab

Video

TugasJudulPenulisVideo
Penyetelan instruksiFine-tuning model AI terbuka menggunakan Hugging Face TRLWietse Venema
Penyetelan instruksiCara melakukan fine-tuning smol-LM dengan Hugging Face, TRL, dan Dataset smoltalkMayurji
⚠️ Deprecated features notice for "How to fine-tune a smol-LM with Hugging Face, TRL, and the smoltalk Dataset" (click to expand)

Tutorial ini menggunakan dua fitur yang tidak lagi didukung:

  • SFTTrainer(..., tokenizer=tokenizer): Gunakan SFTTrainer(..., processing_class=tokenizer) sebagai gantinya, atau cukup abaikan (akan disimpulkan dari model).
  • setup_chat_format(model, tokenizer): Gunakan SFTConfig(..., chat_template_path="Qwen/Qwen3-0.6B"), di mana chat_template_path menentukan model yang template chat-nya ingin Anda salin.

Model Bahasa Visi

Tutorial

TugasKelasDeskripsiPenulisTutorialColab
QA VisualSFTTrainerFine-tuning Qwen2-VL-7B untuk visual question answering pada dataset ChartQASergio PaniegoTautanOpen In Colab
QA VisualSFTTrainerFine-tuning SmolVLM dengan TRL pada GPU konsumenSergio PaniegoTautanOpen In Colab
Deskripsi SEOSFTTrainerFine-tuning Qwen2-VL-7B untuk menghasilkan deskripsi yang ramah SEO dari gambarPhilipp SchmidTautanOpen In Colab
QA VisualDPOTrainerPaliGemma 🤝 Direct Preference OptimizationMerve NoyanTautanOpen In Colab
QA VisualDPOTrainerFine-tuning SmolVLM menggunakan direct preference optimization (DPO) dengan TRL pada GPU konsumenSergio PaniegoTautanOpen In Colab
Grounding Deteksi ObjekSFTTrainerFine tuning VLM untuk Object Detection Grounding menggunakan TRLSergio PaniegoTautanOpen In Colab
QA VisualDPOTrainerMenyesuaikan Ulang Model Bahasa Visual dengan TRL menggunakan MPOSergio PaniegoTautanOpen In Colab
Pembelajaran PenguatanGRPOTrainerPelatihan pasca VLM untuk penalaran dengan GRPO menggunakan TRLSergio PaniegoTautanOpen In Colab

Model Bahasa Berbicara

Tutorial

TugasKelasDeskripsiPenulisTutorial
Text-to-SpeechGRPOTrainerPelatihan lanjutan Model Bahasa Ucap dengan GRPO menggunakan TRLSteven ZhengTautan

Kontribusi

Jika Anda memiliki tutorial yang ingin ditambahkan ke daftar ini, silakan buka PR untuk menambahkannya. Kami akan meninjaunya dan menggabungkannya jika relevan bagi komunitas.

Update on GitHub