¿Puede Google desafiar a OpenAI con patentes de autoatención?

Concepto de derecho cibernético o derecho de Internet con renderizado 3d ai robot y escala de ley y juez de mazo

getty

El Salvaje Oeste de la Propiedad Intelectual en IA

En el pasado, los problemas de propiedad intelectual en IA generalmente se pasaban por alto. La tecnología avanzó muy rápido, la mayoría de los sistemas publicados en la literatura académica rara vez progresaron más allá de la prueba de concepto, y las plataformas de fuerza industrial dieron como resultado cambios de paradigma solo en nichos de mercado y rara vez justificaron la aplicación de patentes.

Como alguien que fundó la compañía AI en 2014 en la cúspide de la revolución del aprendizaje profundo, todavía recuerdo cómo comenzó. En 2014 y 2015, las redes neuronales profundas comenzaron a superar a los humanos en muchas tareas, incluido el reconocimiento de imágenes y los juegos de computadora básicos. Y aunque gran parte de esta investigación se publicó abiertamente, algunas de las empresas comenzaron a crear carteras sustanciales de propiedad intelectual. Recuerdo que después de la adquisición de DeepMind por parte de Google, analizamos el panorama de la propiedad intelectual, muchos de los conceptos publicados tenían patentes pendientes. Decidimos seguir su camino. En ese momento, para que una empresa de IA corroborara la valoración, los capitalistas de riesgo recomendaron patentar algunas de las tecnologías centrales y obtuvimos múltiples patentes otorgadas sobre predictores transcriptómicos, proteómicos y microbiómicos de la edad biológica, muchos conceptos generativos en química, biología e, incluso métodos que unen los dos campos. Hoy en día, incluso un estudiante de secundaria puede repetir este trabajo, pero hace una década, cuando los científicos de aprendizaje profundo eran muy escasos y costosos, participar en este tipo de investigación era muy arriesgado. Sin embargo, cuando se trataba de hacer cumplir estas patentes, se hizo evidente que no es una práctica común. Además, las infracciones son muy difíciles de probar en los sistemas industriales del lado del servidor. Sin embargo, continuamos patentando incluso para demostrar a algunos de los socios que el software que están licenciando se basa en el trabajo original. Y, hasta ahora, no hemos procesado a las partes potencialmente infractoras. El mercado de la IA en el descubrimiento de fármacos es relativamente pequeño y la mayor parte del valor no está en la PI en torno a la IA sino en las patentes en torno a programas terapéuticos específicos.

Es probable que Google también haya seguido un hilo de pensamiento similar en lo que respecta a las muchas nuevas empresas de IA. Procesar sus patentes de IA simplemente no tenía mucho sentido comercial y construir el ecosistema de IA fue un esfuerzo de la comunidad. Sin embargo, a medida que ChatGPT, DALL-E y otras herramientas de cambio de paradigma están arrasando en el mercado, desafiando a Google como el jugador dominante en IA y socavando su negocio principal: la búsqueda, la actitud de Google hacia la protección de la propiedad intelectual puede cambiar.

Google retiene IP críticas en sistemas que utilizan la autoatención

Y cuando se trata de protección de IP en IA, no conozco ninguna empresa más fuerte que Google. Recuerdo que nuestros equipos pasaron semanas asegurándose de que las arquitecturas fueran lo suficientemente únicas para evitar la posible infracción de la propiedad intelectual de Google. Incluso DeepMind, una subsidiaria de propiedad total de Alphabet, tiene una posición de IP muy fuerte en el espacio. Una simple búsqueda de la OMPI arroja más de 800 resultados.

Google también es el inventor original de los métodos centrales de autoatención utilizados en las arquitecturas de transformadores. Fueron los científicos de Google quienes lograron avances fundamentales en las redes neuronales de transformadores que allanaron el camino para GPT-3. En 2017, en la Conferencia sobre el sistema de procesamiento de información neuronal (NIPS, más tarde rebautizado como NeurIPS), los científicos de Google presentaron un artículo seminal titulado "La atención es todo lo que necesita". Para enero de 2023, este artículo fue citado más de 62 000 veces, lo que lo convierte en uno de los artículos más citados en IA.

Una captura de pantalla de un artículo seminal sobre redes neuronales de transformadores

Dr. Alex Zhavovonkov

Y una simple búsqueda de patentes de la OMPI y Google produce una patente muy completa y amplia que cubre esta poderosa metodología.

Una captura de pantalla del resultado de búsqueda de Google Patents para una de las patentes principales que cubren arquitecturas basadas en la autoatención … [+]

Dr. Alex Zhavoronkov

Está claro que la solicitud de patente se presentó el 28 de junio de 2018, aproximadamente un año después de que apareciera el artículo seminal en el servidor de preimpresión el 12 de junio de 2017 y el estado actual indica que la patente está otorgada.

OpenAI famosamente evitó patentar

OpenAI, una potencia de IA muy destacada desde sus inicios, se formó originalmente como una organización sin fines de lucro. Traté de encontrar las patentes registradas bajo OpenAI y descubrí que era una tarea desafiante. La búsqueda de la OMPI arrojó solo unos pocos resultados para OpenAI srl, que parece ser una empresa no relacionada. Una simple búsqueda en Google no arrojó ningún resultado significativo, así que le pregunté a ChatGPT.

Una captura de pantalla de los resultados de ChatGPT en las posiciones de patentes de OpenAI y DeepMind

Dr. Alex Zhavoronkov

También describió correctamente la situación de las patentes en el aprendizaje profundo. De hecho, IBM, Google, Microsoft, Samsung y Baidu tienen importantes carteras de propiedad intelectual.

ChatGPT sobre qué empresa posee la mayor cantidad de patentes en aprendizaje profundo

Dr. Alex Zhavoronkov

Y, según ChatGPT, aunque GPT utiliza la autoatención, no está claro si la patente de Google cubriría el uso de la autoatención en la arquitectura GPT.

Una captura de pantalla de la salida de ChatGPT en respuesta a una pregunta sobre si GPT está cubierto por una patente de Google

Dr. Alex Zhavoronkov

¿Google intentará probar o hacer cumplir sus patentes?

Si bien Google tiene una cartera de IP muy sólida que cubre las muchas áreas de la IA y tiene una patente otorgada sobre el uso de la transducción de secuencias basada en la atención en redes neuronales, no es conocido por mostrar su poder de IP en inteligencia artificial. Sin embargo, a medida que la IA generativa continúa arrasando en el mercado y Microsoft integra las herramientas de OpenAI en su vasto ecosistema de productos, esta posición puede cambiar rápidamente. Y ChatGPT tiene una respuesta perfecta para ello.

ChatGPT sobre si Google alguna vez intentaría usar sus patentes para desafiar a OpenAI

Dr. Alex Zhavoronkov

no seas malvado

En 2014, Elon Musk, uno de los cofundadores de OpenAI, hizo públicas todas las patentes de Tesla para evitar prácticas competitivas desleales en la industria de los vehículos eléctricos. Y la decisión de OpenAI de no perder el tiempo patentando las tecnologías centrales de IA probablemente se deba a esta filosofía.

Si bien Google fue pionero en los aspectos teóricos clave de la IA generativa y ciertamente tiene prioridad en las tecnologías de redes neuronales centrales que utilizan la autoatención, es poco probable que emprenda acciones legales contra OpenAI. Las patentes son una excelente manera de demostrar la prioridad y protegerse contra el troleo de patentes, pero demandar a otros grupos científicos en IA no es una práctica común. Especialmente considerando el hecho de que OpenAI surgió de una organización sin fines de lucro predominantemente por personas que se dedican a hacer de este mundo un lugar mejor.

Imagen generada por IA a mitad de camino con el mensaje "ilustrar una guerra de patentes entre Google representada por… [+] un Godzilla y OpenAI representado por King Kong"

Alex Zhavoronkov, PhD y Midjourney