huggingface-llm-trainer は何をしますか?
TRL(Transformer Reinforcement Learning)またはUnslothを使用して、Hugging Face Jobsインフラ上で言語モデルやビジョンモデルをトレーニングまたはファインチューニングします。SFT、DPO、GRPO、報酬モデリングのトレーニング手法と、ローカルデプロイ向けのGGUF変換をカバーします。TRL Jobsパッケージ、PEP 723形式のUVスクリプト、データセットの準備と検証、ハードウェア選定、コスト見積もり、Trackioモニタリング、Hub認証、モデル選定/リーダーボード、モデル永続化に関するガイダンスを含みます。クラウドGPUトレーニング、GGUF変換、またはユーザーがローカルGPUを使わずにHugging Face Jobsでのトレーニングについて言及したタスクに使用します。