Investigadores y periodistas demostraron rápidamente el peligro al generar escenas satelitales falsas convincentes, entre ellas:
Otras falsificaciones incluyeron un Capitolio de EE. UU. inundado, un cráter de explosión en Los Ángeles y una escena de protesta .
Henk van Ess, investigador neerlandés de inteligencia de fuentes abiertas, declaró a The Guardian que la herramienta "no rechazaba nada": generó refugiados en la frontera mexicana, una planta nuclear en Irán y una escena de un hospital en Gaza sin ningún filtro de contenido . Advirtió que la función socavaba fundamentalmente la fiabilidad de las imágenes satelitales, que durante años han sido una herramienta crucial para los investigadores de fuente abierta y los verificadores de datos .
Jake Godin, de Bellingcat, dijo a NPR que la herramienta podía "destruir fundamentalmente la credibilidad de las imágenes satelitales como prueba". Señaló que las imágenes satelitales han sido históricamente una de las pruebas de OSINT más fiables, y que esta herramienta facilitaba de manera trivial la creación de falsificaciones convincentes que requerirían un esfuerzo significativo para desmentir .
Google había incorporado marcas de agua digitales SynthID (etiquetas visibles y metadatos invisibles) en cada imagen de Nano Banana 2. La empresa inicialmente indicó a los usuarios que verificaran las imágenes sospechosas mediante Gemini o Google Lens . Sin embargo, los investigadores descubrieron varios fallos críticos:
TechTimes describió el lanzamiento como "la reversión más rápida de un producto de IA significativo impulsada por un fallo de seguridad específico": la salvaguarda que Google presentó como su protección principal simplemente no impidió que las falsificaciones circularan .
Google afirmó que retiró la función tras ver "capturas de pantalla de imágenes generadas que parecen violar nuestras políticas" . La compañía declaró que "añadiría salvaguardas más sólidas" antes de considerar relanzar la herramienta . En un comunicado en X, Google escribió: "Nos tomamos la desinformación en serio: cada imagen creada con Nano Banana en Google Earth incluye la marca de agua digital SynthID" . Pero el daño ya estaba hecho en cuestión de horas.
El incidente pone de relieve un desafío creciente para las empresas tecnológicas que compiten por integrar la IA generativa en productos en los que los usuarios confían para obtener información fidedigna. Las imágenes satelitales se han considerado durante mucho tiempo una fuente fiable de pruebas para periodistas, investigadores de derechos humanos e investigadores de fuentes abiertas. Al facilitar la creación de falsificaciones convincentes que heredan la credibilidad de la marca Google Earth, la función Nano Banana 2 convirtió brevemente una herramienta de mapas de confianza en un posible motor de desinformación.
Google no ha anunciado un plazo para relanzar la función.