PEFT documentation
PEFT türleri
Başlayın
Kılavuzlar
Yapılandırmalar ve modellerEntegrasyonlar Hafıza Verimli EğitimModel birleştirmeKantizasyonÖzel modellerUydu enjeksiyonuPEFT yöntemlerini birleştirmetorch.compilePEFT'ye katkıda bulununSorun GidermePEFT kontrol noktası biçimi
Dağıtık Eğitim
Yöntemler
API referansı
PEFT türleri
PeftType, PEFT'te desteklenen adaptörleri içerirken TaskType, PEFT tarafından desteklenen görevleri içerir.
PeftType
PEFT'teki farklı adaptör türleri için Enum sınıfı.
Desteklenen PEFT türleri:
- PROMPT_TUNING
- MULTITASK_PROMPT_TUNING
- P_TUNING
- PREFIX_TUNING
- LORA
- ADALORA
- BOFT
- ADAPTION_PROMPT
- IA3
- BEFT
- LOHA
- LOKR
- OFT
- XLORA
- POLY
- LN_TUNING
- VERA
- FROD
- FOURIERFT
- HRA
- BONE
- MISS
- RANDLORA
- SHIRA
- PACA
- C3A
- YOL
- WAVEFT
- OSF
- DELORA
- GRALORA
- ADAMSS
- SHADOW
- DEFT
TaskType
PEFT tarafından desteklenen farklı görev türleri için Enum sınıfı.
Desteklenen görev türlerinin genel bakışı:
- SEQ_CLS: Metin sınıflandırma.
- SEQ_2_SEQ_LM: Sıralıdan sıralıya dil modellemesi.
- CAUSAL_LM: Neden dil modellemesi.
- TOKEN_CLS: Token sınıflandırma.
- QUESTION_ANS: Soru cevaplandırma.
- FEATURE_EXTRACTION: Özellik çıkarımı. Aşağı akış görevlerinde gömme veya özellik olarak kullanılabilecek gizli durumları sağlar.