Concetto · 2 novità
Generalization
Pagina pubblicata il · ultima novità il
Cronologia
- Shortcut Learning in Geospatial Foundation Model Embeddings for Cross-Disaster Damage AssessmentPer gli sviluppatori che costruiscono agenti AI o sistemi di inferenza locale basati su modelli fondazionali, questo studio evidenzia la necessità rigorosa di validare i modelli su domini non visti per evitare fallimenti catastrofici in scenari reali. Inoltre, suggerisce strategie pratiche a basso costo (trasformazioni delle feature) per potenziare la robustezza dei modelli senza necessariamente ricorrere al fine-tuning completo.
- On-Policy Parameter Update Direction Underlies Generalization in LLM Post-TrainingPer gli sviluppatori che lavorano con LLM e agenti, questa tecnica offre una via per ottenere la robustezza della generalizzazione dei paradigmi on-policy mantenendo l'efficienza computazionale dell'SFT. Inoltre, permette di integrare efficacemente traiettorie ad alta qualità nei modelli locali senza compromettere le competenze pregresse.