Las últimas tendencias de IA presentadas por expertos
Obtenga insights curados sobre las noticias más importantes e intrigantes de la IA. Suscríbase a nuestro boletín semanal Think. Consulte la Declaración de privacidad de IBM .
Estas salvaguardas incluyen políticas, controles técnicos y mecanismos de monitorización que regulan cómo los modelos de IA—incluidos los grandes modelos de lenguaje (LLM) y otros sistemas de IA— generan resultados en casos de uso reales.
Piense en las barreras de seguridad de la IA como las barreras a lo largo de una autopista: no reducen la velocidad del automóvil, pero ayudan a evitar que se desvíe de su rumbo. En el contexto de la IA generativa, las barreras ayudan a garantizar que aplicaciones de IA como chatbots, agentes de IA y otras herramientas automatizadas ofrezcan resultados fiables , protegiendo a la vez contra vulnerabilidades como contenido dañino o exposición a datos confidenciales.
Es importante tener en cuenta que las barandillas de IA no son controles de seguridad únicos: abarcan conjuntos de datos, modelos de IA, aplicaciones y flujos de trabajo. Ese amplio alcance los convierte en fundamentales para prácticas de IA responsable y adopción a gran escala.
Obtenga insights curados sobre las noticias más importantes e intrigantes de la IA. Suscríbase a nuestro boletín semanal Think. Consulte la Declaración de privacidad de IBM .
El auge de la IA generativa ha creado una oportunidad y una urgencia sin precedentes. Las organizaciones están compitiendo para lanzar nuevas soluciones de IA, incorporación de asistentes en tiempo real, agentes de IA y toma de decisiones basada en datos en flujos de trabajo críticos. En industrias como la atención médica, las finanzas y la atención al cliente, existe una presión de alto riesgo para innovar: los resultados de los pacientes, el cumplimiento normativo y la confianza del consumidor dependen de la velocidad y la precisión.
Pero el entusiasmo conlleva riesgos. Sin salvaguardas, los modelos de IA y los chatbots pueden manipularse fácilmente. Mediante jailbreaks o la explotación de inyección de instrucciones, un LLM puede exponer información de identificación personal (PII), contribuir a la difusión de desinformación o filtrar datos confidenciales. Si no se controlan, estas vulnerabilidades pueden convertirse en estafas de phishing y contenido dañino a gran escala, amenazando el rendimiento del sistema y causando costosos incidentes de seguridad.
Según el informe de IBM sobre el costo de una filtración de datos 2025, el costo promedio de una filtración en Estados Unidos subió a un récord de USD 10.22 millones, incluso cuando los promedios globales disminuyeron.1 El aumento se debió en parte a multas regulatorias más elevadas y mayores costos de detección. Mientras tanto, casi todas las brechas relacionadas con la IA (97%) ocurrieron en un entorno sin controles de acceso, lo que destaca cómo la ausencia de salvaguardas puede dejar expuestos los despliegues de IA.2
Ahora más que nunca, se necesitan medidas de protección de la IA para transformar la experimentación en innovación ética y sostenible. Proporcionan el equilibrio entre velocidad y seguridad, ayudando a garantizar que el uso de la IA no sea imprudente, sino que esté alineado con los requisitos regulatorios, las expectativas de los stakeholders y los objetivos empresariales a largo plazo.
Existen medidas de protección en cada capa de uso de la IA, que incluyen:
Los conjuntos de datos depurados y los datos de entrenamiento validados constituyen la base de una IA segura. Al eliminar la información confidencial, reducir el sesgo y hacer cumplir las reglas de privacidad de datos, estas protecciones garantizan que los modelos se construyan sobre entradas confiables.
Los LLM y otros modelos de IA se basan en el ajuste fino, la validación y el monitoreo continuo para mantener un comportamiento seguro de la IA. Se emplean métricas como la latencia, toxicidad, precisión y robustez para medir el rendimiento en el mundo real. Estas medidas de protección también optimizan el comportamiento de la IA al ayudar a mejorar los resultados.
Las medidas de protección de la IA también pueden moldear el comportamiento de las aplicaciones de IA generativa y los chatbots. Las interfaces de programación de aplicaciones (API) pueden aplicar políticas que bloqueen el contenido dañino o generado por IA, validen datos confidenciales o restrinjan el funcionamiento de las herramientas de IA dentro de flujos de trabajo específicos. Los desarrolladores a menudo usan bibliotecas de Python para incrustar políticas de barreras de seguridad directamente en aplicaciones de IA.
Las medidas de protección de infraestructura proporcionan la base segura para la IA al imponer protecciones a nivel de nube, red y sistemas. Esto incluye prácticas como controles de acceso, cifrado, monitorización y registro. Las medidas de seguridad de la infraestructura ayudan a garantizar que las cargas de trabajo de IA se ejecuten en entornos protegidos y a reducir riesgos, como el acceso no autorizado o la fuga de datos.
Actuando como una medida de protección “cero”, la gobernanza de la IA reúne a los stakeholders para alinear el uso de la IA con los principios de la IA responsable y los requisitos reglamentarios. Respalda las salvaguardas de datos, modelos, aplicaciones e infraestructura al garantizar que se apliquen de manera coherente en todas las unidades de negocio.
La inteligencia artificial es poderosa porque puede analizar vastos conjuntos de datos para identificar patrones y hacer predicciones. En el caso de la IA generativa, puede producir combinaciones novedosas de texto, imágenes o código. Sin embargo, estas fortalezas también introducen nuevas consideraciones.
Las medidas de seguridad están diseñadas para proteger contra amenazas como:
Entradas adversarias que manipulan el comportamiento de la IA para producir resultados restringidos o inseguros.
Salidas que incluyen PII, datos patentados o información confidencial, como registros de atención médica.
Resultados generados por IA que difunden información falsa, lenguaje tóxico o perspectivas con sesgo.
Modelos de lenguaje grandes que generan resultados inesperados o inseguros sin las medidas de seguridad adecuadas.
Riesgos que surgen cuando los modelos de IA de código abierto y las API carecen de medidas de protección suficientes para un uso seguro.
Instrucciones de los usuarios finales que llevan los sistemas de IA más allá de los límites previstos, lo que conduce a resultados inseguros o dañinos.
La escala de estas amenazas ya es evidente. Aproximadamente una de cada seis infracciones (16%) involucró a atacantes que usaban IA, incluido el phishing generado por IA (37%) y la suplantación de identidad deepfake (35%).3 Incluso plataformas ampliamente utilizadas como ChatGPT han demostrado cómo entradas inesperadas del usuario pueden desencadenar salidas no intencionadas, lo que subraya la necesidad de medidas de protección que anticipen el comportamiento adversario.
Las barreras de seguridad no son la única forma en que las compañías mitigan estos riesgos. Las organizaciones están integrando cada vez más generación aumentada por recuperación (RAG, por sus siglas en inglés) en los flujos de trabajo de IA. RAG basa los resultados de la IA en conjuntos de datos confiables, lo que mejora la precisión y reduce la posibilidad de resultados engañosos, dañinos o alucinaciones. Combinado con medidas de protección, puede crear un camino más seguro para la adopción en el mundo real.
Para las compañías, las barreras de seguridad de la IA no son teorías sino imperativos operativos. Son lo que hace que la IA sea viable para entornos de misión crítica, particularmente en lo que respecta a la seguridad, los flujos de trabajo y las protecciones de contenido.
Las medidas de seguridad de la IA ayudan a defenderse contra una gama cada vez mayor de amenazas. Los equipos de gestión de vulnerabilidades los emplean para detectar y mitigar riesgos, como campañas coordinadas de desinformación.
Los controles de seguridad de IA están integrados en los flujos de trabajo para evitar violaciones de la privacidad de datos y el uso no autorizado de conjuntos de datos confidenciales. Al alinearse con prácticas de ciberseguridad más amplias, como detección y respuesta a amenazas (TDR) y confianza cero, las barreras contra amenazas pueden reducir la superficie de ataque creada por los sistemas de IA y proteger la confianza empresarial.
Ignorar estas protecciones de datos puede ser costoso. IA en la sombra, el uso de herramientas de IA sin aprobación ni supervisión formal, agregó un promedio de 670,000 dólares a los costos de las infracciones.4 Muchos de estos incidentes se originaron por el uso de herramientas no autorizadas que filtraban información personal confidencial de los clientes. Las barreras de seguridad funcionan como barreras tanto protectoras como facilitadoras, ayudando a las compañías a evitar las pérdidas mientras escalan de forma responsable.
Las empresas también confían en las medidas de seguridad para garantizar que los flujos de trabajo de IA funcionen sin problemas. La automatización inteligente y los flujos de trabajo con agentes dependen de agentes de IA en tiempo real que puedan tomar decisiones rápidas y seguras. Las medidas de seguridad de la IA proporcionan un mecanismo de equilibrio clave para ayudarles a hacerlo.
Por ejemplo, un chatbot de atención médica puede entregar información oportuna del paciente sin exponer datos confidenciales, o una aplicación financiera puede automatizar la detección de fraude sin crear falsos positivos.
Así es como funcionan las medidas de seguridad a escala: no como controles aislados, sino como funciones integradas. Al incorporar barreras de seguridad en los flujos de trabajo, las organizaciones pueden desbloquear el valor de la IA manteniendo el cumplimiento y la confianza.
Las barreras de seguridad pueden incorporarse directamente en los pipelines de modelos para filtrar contenido dañino o confidencial.
El filtrado HAP, por ejemplo, es un sistema que utiliza un modelo de clasificación para detectar y eliminar el discurso de odio, el lenguaje abusivo y las blasfemias del texto de entrada y salida de un LLM. Esto a menudo implica clasificadores que escanean tanto las entradas como las salidas, oración por oración, para detectar lenguaje riesgoso o información confidencial antes de que llegue al usuario. Si se encuentra contenido marcado, el sistema lo bloquea o lo reemplaza con un aviso, evitando que circule texto no seguro.
Los tipos comunes de filtros incluyen:
Estos filtros se pueden aplicar de diferentes maneras, a través de herramientas visuales, API o kits de desarrollo de software (SDK), y los umbrales se pueden configurar para que se ajusten a la tolerancia al riesgo de una organización. Los umbrales más bajos detectan más problemas potenciales, pero pueden sobremarcar el contenido seguro, mientras que los umbrales más altos reducen el ruido, pero pueden dejar pasar algunos riesgos.
A pesar de su importancia, las medidas de seguridad de la IA no son fáciles de implementar. Las empresas enfrentan desafíos como:
Defender la necesidad de instalar barandillas de seguridad no se trata solo de evitar riesgos. También se trata de habilitar beneficios, que incluyen:
A medida que se acelera la adopción de la IA, las medidas de protección son cada vez más importantes. Ya están tomando forma varias tendencias, entre ellas:
Las organizaciones están adoptando puntos de referencia comunes para la seguridad de la IA, incluyendo toxicidad, sesgo, latencia y precisión.
El machine learning se puede utilizar para automatizar el monitoreo de las barreras de seguridad, mejorando la escalabilidad y la capacidad de respuesta.
A medida que se expanden las herramientas de IA de código abierto, las API y los LLM, las organizaciones pueden integrar salvaguardas más sólidas directamente en estas plataformas.
Proveedores como OpenAI, Microsoft y NVIDIA continuarán incorporando medidas de seguridad en sus soluciones de IA. Sin embargo, las empresas conservarán la responsabilidad final de la gobernanza de la IA.
Los gobiernos están avanzando hacia reglas más estrictas en torno a la IA responsable, la privacidad de datos y la seguridad de la IA, lo que hace que las medidas de seguridad sean una necesidad de cumplimiento.
Los agentes de IA se emplean para gobernar otros sistemas de IA comprobando resultados, cruzando datos o corrigiendo respuestas marcadas. Si bien aún son experimentales, estos "agentes guardianes" apuntan a un futuro en el que las barreras de seguridad no sean solo filtros estáticos, sino sistemas activos y adaptativos integrados en los flujos de trabajo de IA.
A medida que las barreras de seguridad de la IA se vuelven más comunes, se enfrentan a resistencias, y los críticos afirman que son barreras para el progreso. Sin embargo, los expertos en IA argumentan que ocurre lo contrario: las barreras de seguridad de la IA son la infraestructura que hace posible la innovación segura y sostenible. Al establecer barreras de seguridad, las organizaciones pueden adoptar avances como la IA generativa, la automatización inteligente y los flujos de trabajo con agentes, manteniendo la confianza y la responsabilidad en el centro de la adopción de la IA.
Gobierne modelos de IA generativa desde cualquier lugar y despliéguelos en la nube u on-premises con IBM watsonx.governance.
Vea cómo la gobernanza de la IA puede ayudar a aumentar la confianza de sus empleados en ella, acelerar la adopción y la innovación, y mejorar la confianza de los clientes.
Prepárese para la Ley de IA de la UE y establezca un enfoque de gobernanza de la IA responsable con la ayuda de IBM Consulting.
1,2,3,4 Informe del costo de una filtración de datos 2025, IBM