El problema central que aborda Netflix con Data Projects es la fragilidad y la sobrecarga operativa inherente a la gestión de identidad y acceso a nivel de activo individual en un entorno de hyperscaler con una fuerza laboral dinámica. La causa raíz no es un fallo técnico puntual, sino una deficiencia arquitectónica en el modelo de gestión de permisos que no escala con el crecimiento organizacional y la complejidad de los datos. La dependencia de identidades humanas para la ejecución de cargas de trabajo programadas introdujo un punto de fallo crítico, donde los cambios de personal o de rol resultaban en fallos de permisos generalizados y un 'permissions whack-a-mole' insostenible.
Las salvaguardas existentes, como las ACLs por tabla y las herramientas de auto-servicio, fallaron porque su granularidad era demasiado fina. Esto llevó a dos modos de fallo principales: una carga de soporte abrumadora para actualizar permisos en masa y una tendencia a otorgar acceso excesivamente amplio para mitigar la fricción operativa, socavando el propósito de la seguridad. La falta de una identidad duradera y agnóstica al ciclo de vida humano para las cargas de trabajo asíncronas significaba que la continuidad del negocio estaba directamente ligada a la estabilidad de las identidades individuales, lo cual es inviable a escala.
Data Projects resuelve esto al introducir una abstracción de 'proyecto' que actúa como un contenedor lógico para activos relacionados y, crucialmente, como una identidad sintética y duradera. Esto eleva la granularidad de la gestión de permisos del activo individual al proyecto, reduciendo drásticamente la superficie de gestión. La identidad del proyecto, desacoplada de cualquier humano, garantiza que los workflows críticos no fallen debido a cambios organizacionales. El concepto de 'gravity' asegura que los nuevos activos creados por un proyecto hereden automáticamente sus controles de acceso, eliminando la configuración manual y reforzando la coherencia.