ManzGPU

Modelos de IA

Hype-Generator 3000™: It's a game-changer

Aquí puedes encontrar un listado de modelos de IA locales de Inclusion AI, ordenados por parámetros, estimar su cuantización, etc...

Inclusion AI

Ant Group AGI

1. Modelos (por parámetros)

Texto
Imagen
Visión
Speech
Audio
Video
Omni

Los parámetros son los pesos aprendidos en un modelo de IA. Se calculan en Billions (miles de millones) Determinan cómo procesa los datos y produce resultados. Más parámetros generalmente significa mayor capacidad y mejores resultados, pero también mayores requisitos de memoria y computación. Menos parámetros hacen que el modelo sea más rápido y ligero, pero potencialmente menos preciso o capaz.

El color de cada píldora marca su nivel de tamaño. Pulsa uno de los niveles para quedarte solo con los modelos que caen dentro.

Familias (9)

12modelos

Filtrar por tamaño
Text
Ling-3.0
2
7.9B1B
124B5B
Text
Ling-2.6
1
104B7B
Speech
Ming-omni-tts
2
0.5B
17B3B
Omni
Ming-omni-2.0
1
100B6B
Text
LLaDA2.1
2
16B
102B6B
Text
Ling
1
1.0T50B
Omni
Ming-UniVision
1
16B3B
Omni
Ming-UniAudio
1
16B3B
Text
Ling-1.5
1
16B

2. Modelo seleccionado

El modelo seleccionado en el gráfico anterior aparecerá aquí con sus cuantizaciones.

3. Reduciendo tamaño (cuantización)

La cuantización es una técnica utilizada para reducir el tamaño de un modelo local de IA disminuyendo la precisión de sus pesos y cálculos (menos bits por parámetro). Esto hace que el modelo sea mucho más pequeño, rápido y fácil de ejecutar en hardware limitado, pero tiene una desventaja: la menor precisión numérica puede degradar ligeramente la exactitud y el rendimiento general en comparación con el modelo original de precisión completa.

Tus recursos de hardware (GPU, GPU Model KV-cache, RAM):