Es posible que Coinbase no integre ChatGPT en el proceso de revisión de seguridad debido a…

• Coinbase probó recientemente el chatbot de inteligencia artificial ChatGPT para determinar el precisión de la revisión de seguridad de su token.
• Las pruebas encontraron que ChatGPT no se ajustaba debido a su incapacidad para identificar correctamente los activos de alto riesgo.

Intercambio de criptomonedas estadounidense Coinbase probado recientemente ChatGPT, el chatbot de inteligencia artificial que se ha vuelto popular debido a sus soluciones impulsadas por IA. Coinbase estaba probando el chatbot de IA para determinar la precisión de su revisión de seguridad del token. La empresa hizo esto comparando sus resultados con los de un ingeniero de seguridad de blockchain.

ChatGPT parecía beneficioso para mejorar la productividad

De acuerdo a un entrada en el blog por Coinbase, el equipo de seguridad de la cadena de bloques del intercambio experimentó con ChatGPT dada la exageración en torno a su capacidad para detectar vulnerabilidades de seguridad. El trabajo del equipo de seguridad implica investigar las formas más eficientes y efectivas de revisar los contratos de token. Además, decide si debe cotizar activos en la bolsa.

El equipo de seguridad de blockchain del intercambio ejecutó varias indicaciones en ChatGPT. Finalmente, concluyó que el chatbot de IA no estaba listo para integrarse en su proceso de revisión de seguridad. El equipo comparó 20 puntajes de riesgo de contrato inteligente entre ChatGPT y una revisión de seguridad manual y descubrió que el bot de IA dio el mismo resultado que la revisión manual 12 veces.

La publicación del blog decía:

«De los 8 fallos, 5 de ellos fueron casos en los que ChatGPT etiquetó incorrectamente un activo de alto riesgo como de bajo riesgo, que es el peor de los casos: subestimar una puntuación de riesgo es mucho más perjudicial que sobreestimarla».

El equipo de seguridad de blockchain concluyó que ChatGPT no era capaz de reconocer cuándo carecía de contexto para realizar un análisis de seguridad completo. Esto resultó en brechas de cobertura, donde las dependencias adicionales no fueron revisadas. El equipo de Coinbase estuvo de acuerdo en que no se podía confiar únicamente en la herramienta de IA para realizar una revisión de seguridad.

Sin embargo, Coinbase reconoció que ChatGPT se mostró prometedor por su capacidad para evaluar rápidamente los riesgos de los contratos inteligentes. Esto era suficiente potencial para que continuaran investigando sus casos de uso.

Esta es una traducción automática de nuestra versión en inglés.