Entrega de resultados de entrenamiento
¿Cómo se envían modelos de IA, checkpoints y conjuntos de datos?
Un modelo a menudo depende de más que su archivo de pesos más grande. La configuración, los datos del tokenizador, los índices de fragmentos, las sumas de verificación y las instrucciones de ejecución deben viajar con él. Mantén esos archivos juntos al entregar el trabajo a un compañero.
Organiza los archivos del modelo, la configuración, los datos del tokenizador, los ejemplos, las sumas de verificación y la documentación en una sola carpeta. Elimina los datos y credenciales que no deban compartirse, luego envía el archivo o la carpeta completa. El receptor debe verificarlo antes de cargar el modelo.
¿Qué debe incluir la carpeta del modelo?
- Pesos o checkpoints fragmentados y sus archivos de índice.
- Configuración del modelo, datos del tokenizador, ajustes de preprocesamiento y versiones de dependencias.
- Sumas de verificación, términos de licencia, restricciones de datos y notas de origen.
- Un ejemplo mínimo de carga y los detalles requeridos de entrenamiento o cuantización.
Revisa el contenido sensible antes de la transferencia
Verifica si los datos de entrenamiento contienen información personal, secretos comerciales o material restringido, y confirma que puedes enviar tanto el modelo como el conjunto de datos. Elimina las claves API, los tokens de acceso, las credenciales de seguimiento de experimentos y las cachés locales. La transferencia punto a punto no reemplaza tu revisión de acceso.
Envía pesos grandes y carpetas de fragmentos juntos
Chrome y Edge de escritorio admiten un solo archivo de hasta 200 GB y carpetas que contienen hasta 20,000 archivos. Esto funciona para una entrega en vivo de archivos safetensors, fragmentos de checkpoint, configuración y ejemplos de prueba a un compañero que esté en línea ahora.
¿Cuándo deberías usar un registro de modelos o almacenamiento de objetos?
Usa un registro de modelos aprobado, una plataforma de datos o un almacén de objetos para el versionado, control de acceso, descargas persistentes, trabajo multiusuario o despliegue automatizado. 8ma Quick Transfer maneja una entrega única en vivo; no reemplaza un registro de modelos.