Devin: La primera AI Software Engineer (por cierto, completo trabajos reales)

Summary

El nuevo modelo de Inteligencia Artificial, Devin, se posiciona como un ingeniero de software autónomo capaz de resolver tareas de ingeniería con su propia consola de código y navegador. Según el script, Devin ha superado a los modelos anteriores al resolver el 13,86% de las issues de GitHub sin ayuda, un notable aumento en comparación con las tasas del 2% de las pruebas anteriores. La demostración incluye tareas como benchmark entre providers de llamadas, creación de scripts y despliegue de aplicaciones, mostrando la integración de IA en el proceso de desarrollo de software.

Takeaways

• 🤖 La nueva inteligencia artificial devin se posiciona como un ingeniero de software autónomo, capaz de resolver tareas de ingeniería con su propia consola, editor de código y navegador web.
• 🔍 Devin ha demostrado un rendimiento del 13,86% en la resolución de issues de GitHub sin ayuda humana, un notable aumento en comparación con las tasas del 2% en pruebas previas.
• 📈 El video muestra un ejemplo práctico donde devin realiza un benchmark entre tres diferentes proveedores de llamadas API, utilizando sus formatos para escribir un script de comparación.
• 🛠️ Devin planifica y ejecuta tareas en un flujo de trabajo que incluye investigación, escritura de scripts de Python, implementación, testing, análisis y documentación.
• 📚 En el video, devin utiliza documentación en tiempo real para aprender y aplicar soluciones, mostrando una integración de navegación y edición de código.
• 🌐 Se destaca la capacidad de devin para desplegar aplicaciones y trabajar con servicios como nfy, mostrando una aplicación web de comparación de servicios de llamada.
• 💡 Devin demuestra ser capaz de extraer datos autónomamente, como en el caso de hacer scraping de datos de blogs y devolverlos en formato CSV.
• 📊 Se mencionan las diferencias entre los resultados no asistidos de devin y los modelos asistidos de otras inteligencias artificiales, como GPT-4 y Cloud 2.
• 🚀 La página oficial de devin muestra que aún no hay mucho contenido disponible, pero sugiere la posibilidad de contactar para obtener más información y acceso a demos.
• 💼 Se cuestiona si el trabajo de appwork mostrado es real o no, y se sugiere que podría haber sido preparado previamente.
• 💡 A pesar de los avances y la buena impresión, se mantiene una postura cautelosa sobre la viabilidad y autenticidad del producto devin, teniendo en cuenta el hype actual en la inteligencia artificial.

Q & A

¿Qué es Devin según el anuncio?

Devin es una inteligencia artificial que se vende como un ingeniero de software autónomo, capaz de resolver tareas de ingeniería con su propia consola de código y navegador sin necesidad de la supervisión constante de un usuario.

¿Cuál es el porcentaje de ISUs de GitHub que Devin ha resuelto de forma totalmente autónoma?

Devin ha resuelto el 13,86% de las ISUs de forma totalmente autónoma, lo que es considerado un rendimiento muy alto en comparación con otras pruebas previas que solo alcanzaban un 2%.

¿Qué tipo de tareas ha completado Devin según el anuncio?

Devin ha completado entrevistas de ingeniería técnica para compañías de primer nivel y ha terminado trabajos de appwork, demostrando su capacidad para aplicarse en diferentes contextos de trabajo.

¿Cómo se describe la interfaz de usuario de Devin?

La interfaz de usuario de Devin incluye una consola de código, un navegador y un editor, permitiendo al usuario ver en tiempo real lo que está haciendo y aprender de sus acciones.

¿Qué es el benchmark que Devin realizó con providers de llamada 2?

Devin realizó un benchmark comparando tres diferentes providers de llamada 2, utilizando sus formatos de aplicación para escribir un script que envía el mismo prompt y parámetros a todos ellos.

¿Qué se revela sobre Devin al observar su funcionamiento en el video?

Aunque se describe como autónomo, en el video se observa que Devin recibe una gran cantidad de ayuda y guía a través de sugerencias y actualizaciones en pantalla, lo que pone de manifiesto que su autonomía puede no ser del todo lo que se esperaba inicialmente.

¿Qué se puede inferir sobre la financiación y el equipo detrás de Devin?

Devin está respaldado por una inversión de 20 millones de dólares y cuenta con un equipo de 10 personas, incluyendo nombres prominentes como el cofundador de Stripe y el fundador de PayPal, Peter Thiel.

¿Qué es la demostración de extracción de datos que Devin ha realizado?

Devin ha demostrado la capacidad de hacer scrapping de datos de diferentes blogs, navegar la web, ejecutar código y devolver los archivos en formato CSV, todo ello de forma autónoma.

¿Qué se puede aprender de la demostración de trabajo real de Upwork que Devin ha aplicado?

La demostración de trabajo real de Upwork muestra que Devin puede ser utilizado para encontrar y solucionar errores en repositorios de código, aunque el video sugiere que puede haber un cierto grado de preparación y no完全是 una tarea real.

¿Qué es la tecnología que Devin utiliza para su funcionamiento?

No se especifica claramente en el anuncio, pero se sugiere que podría ser un modelo de inteligencia artificial finamente ajustado (fine-tuned) que ha sido mejorado para realizar tareas específicas de ingeniería de software.

¿Cuál es la preocupación principal que se menciona en el script sobre Devin?

La preocupación principal es si todo el hype y las demostraciones son reales o si se trata de un bluff, ya que hay una gran cantidad de avances e ideas en el campo de la inteligencia artificial que pueden ser exageradas o malinterpretadas.