Las empresas de investigación y publicación de inteligencia artificial (IA), como OpenAI, lanzan constantemente funciones para mejorar varios aspectos de la vida y facilitar las tareas mundanas. Además de ChatGPT, DALL-E, Point-E y otras herramientas exitosas, OpenAI ha lanzado un nuevo modelo innovador.
Entonces, ¿qué es Shap-E de OpenAI y qué puede hacer por usted?
¿Qué es Shap-E de OpenAI?
En mayo de 2023, Alex Nichol y Heewon Jun, investigadores y colaboradores de OpenAI, publicaron papel anunciado Acerca de Shap-E, la última innovación de la compañía. Shap-E es un nuevo modelo entrenado en un enorme conjunto de datos de imágenes y texto 3D asociados que pueden generar modelos 3D a partir de texto o imágenes. Es similar a DALL-E, que puede generar imágenes 2D a partir de indicaciones de texto, pero Shap-E produce activos XNUMXD.
Shap-E está capacitado en modelado de propagación condicional y mapeo de activos 3D. El mapeo de activos 3D significa que Shap-E aprende a asociar texto o imágenes con los modelos 3D correspondientes de un gran conjunto de datos de objetos 3D existentes. Un modelo de propagación condicional es un modelo formativo que comienza con una versión desordenada de la salida de destino y la refina gradualmente al eliminar el ruido y agregar detalles.
Al combinar estos dos componentes, Shap-E puede crear modelos 3D realistas y diversos que coinciden con la entrada de texto o imagen y se pueden ver desde diferentes ángulos y condiciones de iluminación. Verificar Cómo convertir tu voz a texto con Whisper de OpenAI para Windows.
¿Cómo se usa Shap-E de OpenAI?
Shap-E no es tan publicitado como otras herramientas de OpenAI, pero la plantilla, el código de inferencia y las muestras están disponibles para descargar en la página de Shap-E. Forma-E GitHub.
Puede descargar el código fuente de Shap-E de forma gratuita e instalarlo usando el comando Python pip en su computadora. También necesita una GPU NVIDIA y una CPU de alto rendimiento, porque Shap-E requiere muchos recursos.
Después de la instalación, abra las imágenes 3D que cree en Microsoft Paint 3D. Del mismo modo, puede convertir imágenes en archivos STL si desea imprimirlas con una impresora 3D.
También puede informar problemas y encontrar soluciones a problemas ya planteados por otros en la página Shap-E GitHub. Verificar Factores importantes a considerar al elegir una impresora XNUMXD.
Lo que puedes hacer con Shap-E de OpenAI
Shap-E le permite describir ideas complejas utilizando una representación visual de las ideas. Los usos potenciales de esta tecnología son ilimitados, especialmente porque las imágenes suelen tener efectos de mucho más alcance que las afirmaciones textuales.
Como arquitecto, puede usar Shap-E para crear modelos 3D de edificios y estructuras basados en descripciones escritas. Puede especificar dimensiones para estructuras, materiales, colores y patrones utilizando oraciones simples. Por ejemplo, puede reclamarlo con: "Construir un rascacielos de 60 pisos con barandas de vidrio" y exportar los resultados a otras aplicaciones para realizar modificaciones adicionales si desea utilizar los resultados que obtiene.
Los animadores pueden mejorar los entornos virtuales y las experiencias visuales creando objetos y personajes 3D detallados. En ingeniería, describe los componentes, las especificaciones y las funciones de las máquinas y los equipos y obtiene los resultados en modelos 3D antes de crear prototipos reales.
Además, incluso en campos como la educación, Shap-E puede ayudar a los profesores a comunicar ideas complejas y abstractas a sus alumnos en materias como biología, ingeniería y física.
Aunque todavía es un trabajo en progreso, Shap-E está un paso adelante PUNTO-E De OpenAI, que produce nubes ráster 3D basadas en indicaciones de texto. Las nubes de puntos están limitadas en su expresividad y precisión, y a menudo producen formas borrosas o irregulares. Verificar ¿Qué es DALL-E y cómo se crean imágenes a partir de descripciones de texto?
Cree modelos 3D usando Shap-E de OpenAI
Shap-E es una demostración impresionante de la capacidad de la IA para crear contenido 3D a partir de lenguaje natural o imágenes estándar. Con él, puede crear objetos 3D para juegos de computadora, experiencias interactivas de realidad virtual, prototipos y otros fines. Aunque no hay garantías con respecto a la calidad de salida, el modelo AI le brinda una forma rápida y eficiente de crear un modelo 3D de cualquier cosa.
Además, este modelo de IA es una contribución importante al campo del aprendizaje profundo y es probable que conduzca a innovaciones y creaciones avanzadas en el futuro. Puedes ver ahora ¿Qué es el aprendizaje automático? Explicar algoritmos inteligentes..
