source avatarabdel

Compartir

La penalización por idiomas no latinos al usar LLMs / flujos de trabajo agentes es tan enorme, que es loco. Hice el experimento esta vez con hebreo. Una sola ejecución de QLoRA de 6h14 casi duplicó la precisión exacta de llamadas a herramientas en hebreo, pasando del 43,4% al 83,2%, mientras que la precisión en inglés también mejoró del 70,5% al 88,4%. Detalles de la ejecución completa: - Pipeline completo: 7h14 en una GPU NVIDIA L40S - Entrenamiento: 3.662 pasos, 2 épocas, 33,96M tokens - Memoria GPU máxima: 26.608 MiB - JSON válido en hebreo: 81,0% → 99,6% - Precisión de nombres de funciones en hebreo: 74,7% → 99,2% - Diferencia hebreo-inglés: −27,6 → −5,2 puntos - Rendimiento de traducción: 16.272/17.000 filas (95,7%) - Costo: $14,11

No.0 picture
Descargo de responsabilidad: La información contenida en esta página puede proceder de terceros y no refleja necesariamente los puntos de vista u opiniones de KuCoin. Este contenido se proporciona solo con fines informativos generales, sin ninguna representación o garantía de ningún tipo, y tampoco debe interpretarse como asesoramiento financiero o de inversión. KuCoin no es responsable de ningún error u omisión, ni de ningún resultado derivado del uso de esta información. Las inversiones en activos digitales pueden ser arriesgadas. Evalúa con cuidado los riesgos de un producto y tu tolerancia al riesgo en función de tus propias circunstancias financieras. Para más información, consulta nuestras Condiciones de uso y la Declaración de riesgos.