generated from antfu-collective/vitesse
-
Notifications
You must be signed in to change notification settings - Fork 15
Commit
This commit does not belong to any branch on this repository, and may belong to a fork outside of the repository.
- Loading branch information
1 parent
9edf3a8
commit dddd118
Showing
4 changed files
with
81 additions
and
3 deletions.
There are no files selected for viewing
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Original file line number | Diff line number | Diff line change |
---|---|---|
@@ -0,0 +1,41 @@ | ||
--- | ||
title: Evaluación de Grandes Modelos de Lenguaje (LLMs) | ||
date: 2024-12-17T18:30:00.000+00:00 | ||
time: 18:30 CET | ||
duration: 1 hora | ||
cover: https://github.com/somosnlp/assets/raw/main/images/eventos/20241217_evaluacion_llm_upm.png | ||
author: María Grandury, Gonzalo Martínez, Miguel González | ||
twitter: | ||
linkedin: | ||
website: | ||
github: | ||
bio: Investigadores de NLP en la Universidad Politécnica de Madrid (UPM). | ||
--- | ||
|
||
![evaluacion-llm-upm](https://github.com/somosnlp/assets/raw/main/images/eventos/20241217_evaluacion_llm_upm.png) | ||
|
||
📣 ¿Te interesa la evaluación de LLM y estás en Madrid? Ven mañana día 17 al taller organizado por el grupo GING de la Universidad Politécnica de Madrid, Entaina, IEEE Sección España y SomosNLP 🤗 | ||
|
||
La evaluación de los LLMs es fundamental para entender sus capacidades, si son adecuados para una tarea dada y también para mejorar su rendimiento. La evaluación de LLMs es un tema muy complejo que debe medir su rendimiento en un gran número de tareas, además existen diferentes métodos de evaluación, tablas de clasificación de modelos y librerías para automatizar el proceso. | ||
|
||
En esta charla, Gonzalo Martínez (UC3M), María Grandury (SomosNLP / UPM) y Miguel González (UPM) discutirán la problemática de la evaluación de LLMs presentando los diferentes métodos de evaluación, guía de buenas prácticas, las tablas de clasificación como la La Leaderboard para LLMs en español y lenguas cooficiales de España y las librerías de evaluación como Lighteval de HuggingFace o lm-evaluation-harness de EleutherAI mostrando ejemplos de tareas concretas y como se implementan con estas librerías. | ||
|
||
En concreto trataremos: | ||
|
||
- 👋 Evaluación manual | ||
- ⚙️ Evaluación automática | ||
- 🤖 Evaluación con LLM | ||
- 👾 Evaluación de agentes | ||
- 🔴 Cómo crear tu propio benchmark | ||
|
||
|
||
¡Te esperamos! | ||
|
||
- 📍 Teleco de la Universidad Politécnica de Madrid | ||
- 🗓️ Martes 16 a las 18h30 | ||
- ✨ Gratuito y entrada libre | ||
|
||
Añade el evento a tu calendario: | ||
|
||
- [Google Calendar](https://calendar.google.com/calendar/render?action=TEMPLATE&dates=20241217T173000Z%2F20241217T183000Z&details=Lugar%3A%0AEscuela%20T%C3%A9cnica%20Superior%20de%20Ingenieros%20de%20Telecomunicaci%C3%B3n%20%28ETSIT%29%0AAv.%20Complutense%2C%2030%2C%20Edificio%20B%20Sala-B223%20%5B2%C2%AA%20planta%5D%0A%0APonentes%3A%0AGonzalo%20Mart%C3%ADnez%20%28UC3M%29%2C%20Mar%C3%ADa%20Grandury%20%28SomosNLP%20%2F%20UPM%29%2C%20Miguel%20Gonz%C3%A1lez%20%28UPM%29%0A%0ADescripci%C3%B3n%3A%0ALa%20evaluaci%C3%B3n%20de%20los%20LLMs%20es%20esencial%20para%20entender%20sus%20capacidades%2C%20adecuaci%C3%B3n%20a%20tareas%20y%20mejora%20de%20rendimiento.%0AEn%20esta%20charla%2C%20se%20analizar%C3%A1n%20m%C3%A9todos%2C%20gu%C3%ADas%2C%20tablas%20de%20clasificaci%C3%B3n%20y%20herramientas%20de%20evaluaci%C3%B3n%2C%20destacando%20su%20aplicaci%C3%B3n%20pr%C3%A1ctica.%0A%0AM%C3%A1s%20info%3A%0Ahttps%3A%2F%2Fsomosnlp.org%2Fblog%2Fevento-eval-llm-upm&location=Escuela%20T%C3%A9cnica%20Superior%20de%20Ingenieros%20de%20Telecomunicaci%C3%B3n%20%28ETSIT%29%20Av.%20Complutense%2C%2030&text=Evaluaci%C3%B3n%20de%20Grandes%20Modelos%20de%20Lenguaje%20%28LLM%29) | ||
- [Outlook Calendar](https://outlook.live.com/calendar/0/action/compose?allday=false&body=Lugar%3A%0AEscuela%20T%C3%A9cnica%20Superior%20de%20Ingenieros%20de%20Telecomunicaci%C3%B3n%20%28ETSIT%29%0AAv.%20Complutense%2C%2030%2C%20Edificio%20B%20Sala-B223%20%5B2%C2%AA%20planta%5D%0A%0APonentes%3A%0AGonzalo%20Mart%C3%ADnez%20%28UC3M%29%2C%20Mar%C3%ADa%20Grandury%20%28SomosNLP%20%2F%20UPM%29%2C%20Miguel%20Gonz%C3%A1lez%20%28UPM%29%0A%0ADescripci%C3%B3n%3A%0ALa%20evaluaci%C3%B3n%20de%20los%20LLMs%20es%20esencial%20para%20entender%20sus%20capacidades%2C%20adecuaci%C3%B3n%20a%20tareas%20y%20mejora%20de%20rendimiento.%0AEn%20esta%20charla%2C%20se%20analizar%C3%A1n%20m%C3%A9todos%2C%20gu%C3%ADas%2C%20tablas%20de%20clasificaci%C3%B3n%20y%20herramientas%20de%20evaluaci%C3%B3n%2C%20destacando%20su%20aplicaci%C3%B3n%20pr%C3%A1ctica.%0A%0AM%C3%A1s%20info%3A%0Ahttps%3A%2F%2Fsomosnlp.org%2Fblog%2Fevento-eval-llm-upm&enddt=2024-12-17T19%3A30%3A00&location=Escuela%20T%C3%A9cnica%20Superior%20de%20Ingenieros%20de%20Telecomunicaci%C3%B3n%20%28ETSIT%29%20Av.%20Complutense%2C%2030&path=%2Fcalendar%2Faction%2Fcompose&rru=addevent&startdt=2024-12-17T18%3A30%3A00&subject=Evaluaci%C3%B3n%20de%20Grandes%20Modelos%20de%20Lenguaje%20%28LLM%29) |
21 changes: 21 additions & 0 deletions
21
pages/eventos-upm-entaina-ieee/sueñan-los-directivos-con-proyectos-de-ia.md
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Original file line number | Diff line number | Diff line change |
---|---|---|
@@ -0,0 +1,21 @@ | ||
--- | ||
title: Sueñan los directivos con proyectos de IA | ||
date: 2025-01-08T18:30:00.000+00:00 | ||
time: 18:30 CET | ||
duration: 1 hora | ||
cover: https://somosnlp.github.io/assets/images/eventos/20250115_entaina_directivos_ia.png | ||
author: Agustín Cuenca, Javier Lafora y José Miguel Díez | ||
twitter: | ||
linkedin: | ||
website: | ||
github: | ||
bio: ENTAINA | ||
--- | ||
|
||
El miércoles 15 de enero a las 18:30 tendremos la segunda charla de IA generativa titulada “¿Sueñan los Directivos con Proyectos de IA?” en la ETSI de Telecomunicación de la UPM. En esta ocasión abordaremos la problemática de la adopción de la IA generativa en la empresa de la mano de ENTAINA discutiendo la perspectiva de los directivos y los retos que afrontan para abordar proyectos de IA en sus organizaciones. Después de la charla tendremos una sesión para intercambiar opiniones entre los asistentes mientras tomamos unas bebidas cortesía de ENTAINA. | ||
|
||
La asistencia al evento es abierta y gratuita pero os pedimos que os registréis en Formulario de Registro para poder dimensionar la logística. | ||
|
||
Las coordenadas de la Escuela son: [Escuela Técnica Superior de Ingenieros de Telecomunicación (ETSIT)](https://www.google.com/maps/place/Escuela+T%C3%A9cnica+Superior+de+Ingenieros+de+Telecomunicaci%C3%B3n+(ETSIT)/@40.4525869,-3.7290088,17z/data=!3m2!4b1!5s0xd422834cc2fc4a7:0xf915825d9c92c1e4!4m6!3m5!1s0xd422834b7a8fb4d:0x2a3c66a12ada73f9!8m2!3d40.4525869!4d-3.7264339!16s%2Fg%2F1q5z77y5f!5m1!1e1?entry=ttu&g_ep=EgoyMDI1MDEwMi4wIKXMDSoASAFQAw%3D%3D). | ||
|
||
![ETSIT](https://somosnlp.github.io/assets/images/eventos/20250115_entaina_directivos_ia.png) |
This file contains bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters