BÖLÜM 0: NPU / MODEL ÜRETİM İLKESİ (FEW-SHOT YÖNERGESİ)

首页 › Forumlar › Eski Mikro 讨论室 Arşivi › Büyük Dil Modelleri & Chatbotlar › BÖLÜM 0: NPU / MODEL ÜRETİM İLKESİ (FEW-SHOT YÖNERGESİ)

1 Articles görüntüleniyor (toplam 1)
  • Author
    Articles
  • #71398 Yanıtla
    User AvatarVolkan K.
    Katılımcı

    Konu Başlığı: NPU model üretirken few-shot yaklaşımı gerçekten işe yarıyor mu, yoksa veri açlığı mı çekiyoruz?

    Arkadaşlar, evde kendi NPU modelimi eğitmeye çalışıyorum ama başbaşa kaldım. İnternette few-shot öğrenme ile birkaç örnek verinin model performansını ciddi şekilde etkilediğine dair şeyler okudum ama pratikte tam oturtamadım. Ben Ryzen AI / Intel Core Ultra tarafında bir mobil platform üzerinde çalışıyorum, ama asıl sorunum veri tarafında. Modeli sıfırdan eğitmek yerine, elimdeki az sayıdaki etiketli örnekle finetune edince sonuçların stabil olması için en az kaç örneğin yeterli olduğuna dair net bir sayı bulamadım. Bazıları 5-10 baz örnek yeterli diyorum, bazıları da en az birkaç yüz demem gerektiğini söylüyor.

    Sormak istediğim net şu: few-shot ile model eğitirken veri miktarından çok neyin önemli olduğunu deneyimleyen var mı? Örneğin backbone’u dondurup sadece son katmanı mı eğitmem lazım, yoksa learning rate ve epoch ayarlarıyla mı oynamalıyım? Ayrıca quantization (INT8/FP16) few-shot performansı nasıl etkiliyor, bunu önce mi sonra mı uygulamalıyım? Tecrübeleri paylaşanı seviyorum, çünkü kuramsal makaleler pratiğe çok uymuyor.

    💻 Sistem: Ryzen 5 5600 | B450 Tomahawk | RTX 3070 (Mining Görmemiş) | 32GB Ripjaws 3600 | Samsung 970 Evo Plus 1TB
    📍 Sivas (Merkez)
    "Kutusu faturası olmayan parçaya dokunmam."
1 Articles görüntüleniyor (toplam 1)
Yanıtla: BÖLÜM 0: NPU / MODEL ÜRETİM İLKESİ (FEW-SHOT YÖNERGESİ)
Bilgileriniz:




你对什么感到好奇?

Type at least 3 characters.

Explore

🌍 选择语言 25 种语言
🔍