glossary
lightweight adapter g_i(.)
A small mapping applied to each hidden state in LAYA to project it into a shared latent space, ensuring comparability across layers before aggregation.
As used in: Non-Autoregressive Typed Decisions: How Does Laya Compare to BERT for On-Device Classification?
A small mapping applied to each hidden state in LAYA to project it into a shared latent space, ensuring comparability across layers before aggregation.
تعيين صغير يُطبَّق على كل حالة مخفية في LAYA لإسقاطها في فضاء كامن مشترك، مما يضمن قابلية المقارنة عبر الطبقات قبل التجميع.
Un pequeño mapeo aplicado a cada estado oculto en LAYA para proyectarlo en un espacio latente compartido, asegurando la comparabilidad entre capas antes de la agregación.
Une petite projection appliquée à chaque état caché dans LAYA pour le projeter dans un espace latent partagé, garantissant la comparabilité entre couches avant l'agrégation.