Alemania tiene un nuevo campeón nacional en IA, y no es una agencia gubernamental. Es una empresa privada llamada Aleph Alpha, y su nuevo modelo se llama Kolibri — alemán para colibrí. El ave es pequeña, rápida y ligera, y lo es también el modelo. Es un modelo de lenguaje grande, o LLM, construido íntegramente en suelo alemán, entrenado en Alemania y Finlandia, y lanzado bajo la licencia Apache 2.0 para que cualquiera pueda usarlo libremente. La tarjeta del modelo y su informe técnico de 189 páginas explican exactamente cómo funciona.
El Problema de Peso del Colibrí
Un modelo de lenguaje grande normal lee cada token a través de cada parámetro. Eso requiere vastas cantidades de memoria y computación. Kolibri resuelve esto dividiendo su mente en mentes más pequeñas, cada una con un trabajo especial. Tiene 50 capas, y cada capa contiene 384 expertos más un experto compartido que cada token atraviesa. El enrutador elige seis de esos 384 expertos para que procesen cada token. Eso significa que 78.1 mil millones de parámetros hacen el trabajo de un modelo mucho más pequeño — aproximadamente 3.46 mil millones por token.
La tarjeta del modelo lo dice claramente: «el modelo completo debe mantenerse en la memoria incluso aunque solo una parte de él esté activa en cualquier momento». Por lo tanto, Kolibri calcula como un modelo pequeño pero necesita la memoria de uno enorme.
El Tokenizador Que Entiende las Palabras Compuestas
Un modelo lee tokens, no palabras. Los tokens son fragmentos de texto de un vocabulario fijo, seleccionados cuando se entrena el tokenizador. El alemán une palabras en largas palabras compuestas, y un tokenizador entrenado principalmente en inglés tiende a cortarlas. El tokenizador de Kolibri, llamado UniBPE, soluciona eso. Mantiene la combinación de pares de bytes de abajo hacia arriba, o BPE, pero elige cada combinación con una regla de puntuación diferente — el objetivo Unigram — que respeta cómo el alemán construye palabras.
El resultado es un tokenizador que lee el nombre del Tribunal Constitucional Federal alemán como una palabra compuesta, mientras que un tokenizador estándar lo divide en seis tokens separados. En la Ley Básica para la República Federal de Alemania, la constitución alemana, el tokenizador de Kolibri necesitó un 15% menos de tokens que el tokenizador de GPT-5, incluso más que el propio ahorro del 11.2% que Aleph Alpha afirmó. En inglés, empató con GPT-5.
Capas Que Miran Cerca
Cuarenta de los cincuenta capas de Kolibri utilizan la atención de ventana deslizante, lo que significa que cada token solo observa los tokens cercanos. Eso reduce la memoria necesaria para mantener todo el modelo en la RAM. Las diez capas restantes probablemente manejan las conexiones de mayor alcance que las ventanas deslizantes no capturan.
Datos de Entrenamiento y Filtros
Kolibri fue entrenado desde cero en infraestructura en Alemania y Finlandia, sin control extranjero sobre la construcción. Sus datos de entrenamiento se basaron en texto web en inglés reformulado con Google’s Gemma 4, texto en alemán filtrado con Mistral-NeMo, y datos etiquetados de Qwen3-32B para filtros de calidad. Aleph Alpha filtró los datos para detectar sesgos políticos, los cuales ha medido en modelos abiertos chinos.
La tarjeta del modelo indica claramente que nada de fuera de Europa participó en su diseño, aunque algunos datos de entrenamiento provinieron de fuentes externas. La afirmación de soberanía se aplica a cómo fue construido y desplegado, no a qué datos procesó.
Lo que el Modelo Hace Bien
La propia evaluación de Aleph Alpha indica que Kolibri supera a todos los modelos comparados de su tamaño tanto en alemán como en inglés. La empresa firmó el Código de Prácticas de la Unión Europea para Inteligencia Artificial de Propósito General, que establece estándares para cómo se utilizan los sistemas de IA en toda Europa.
Ejecutando Kolibri
La tarjeta del modelo y el informe técnico son la fuente principal. El modelo se ejecuta en hardware estándar, y sus pesos están disponibles en Hugging Face para que cualquiera los descargue. El experimento del tokenizador se ejecutó utilizando la biblioteca de tokenizadores de Hugging Face y tiktoken de OpenAI.
Por Qué Importa
Kolibri es una respuesta directa a una preocupación expresada hace tres años en SmashingConf New York. Un orador dijo que la sala escuchó que «usted regula, no innova», y deseó un camino intermedio entre la innovación y la regulación en torno a la privacidad de los datos, la administración de datos, las limitaciones ambientales y los requisitos de energía. Kolibri es esa respuesta: un equipo alemán lo construyó con la Ley de IA de la UE en mente desde el principio, y brinda a los ministerios y proveedores de automóviles plena libertad para ejecutarlo en sus propios servidores sin enviar sus datos a otra parte.
El modelo también es una herramienta práctica. Menos tokens significan menos pasos para leer o escribir el mismo texto en alemán, y más alemán cabe en la misma ventana de contexto. Eso importa para documentos legales, textos constitucionales y conversaciones cotidianas.
El veredicto sobre Kolibri
Kolibri es una pieza de ingeniería inteligente. Requiere una fracción de su propio peso para realizar un trabajo real, y maneja el alemán mejor que casi cualquier otra cosa disponible. La aseveración soberana es honesta sobre sus límites — fue construido con cuidado, no con un muro alrededor de sus datos. Es un modelo que vale la pena observar, y es un modelo que vale la pena ejecutar.
Aquí está lo que destaca:
- 78.1 mil millones de parámetros, pero cada token toca solo alrededor de 3.46 mil millones de ellos
- 384 expertos por capa, con un router que elige seis para cada token
- Vocabulario de 128,000 tokens, entrenado con UniBPE
- Entrenado en Alemania y Finlandia, sin control extranjero sobre la construcción
- Puntuaciones por encima de todos los modelos comparados de su tamaño tanto en alemán como en inglés
- Pesos publicados bajo Apache 2.0 en Hugging Face
Kolibri es un modelo pequeño con una gran ambición: demostrar que la ingeniería alemana puede defenderse en suelo alemán. Lo hace.
Material fuente: ““Show HN: Germany’s new sovereign AI model Kolibri,” tej.as.
Recibe El Cuaderno.
Las mejores historias del día y cada veredicto nuevo, en español claro, en tu correo a las siete. Un correo al día, nada más.