Desarrollo de negocio con Public Cloud para responder a una alta demanda computacional y requisitos de privacidad
Un caso de éxito
Potentes instancias CPU y GPU para ejecutar complejos algoritmos de IA
Un cloud público 100 % europeo para una plena conformidad con el RGPD
Escalabilidad total en cuestión de minutos para absorber los picos de demanda en tiempo real
El contexto
Policy-Insider.AI tiene busca transformar el sector de asuntos públicos mediante la combinación del conocimiento tradicional de los expertos con los últimos algoritmos de IA para ofrecer a los profesionales una plataforma central de conocimiento y monitorización de las políticas públicas. La plataforma de la startup, como plataforma única, ofrece acceso centralizado en tiempo real a decenas de instituciones públicas y responsables políticos más allá de cualquier frontera o barrera lingüística. Gracias a la plataforma digital de Policy-Insider.AI, los profesionales de los asuntos públicos pueden acceder fácilmente a toda la información que necesitan para que sus clientes puedan tomar decisiones informadas.
El desafío
Para que esta potente plataforma basada en IA funcione correctamente, Policy-Insider.AI necesita procesar grandes cantidades de datos utilizando complejos pipelines de procesamiento. A medida que la startup sigue añadiendo nuevos documentos y fuentes para su creciente base de usuarios, resulta fundamental contar con un procesamiento eficiente de las cargas de trabajo en términos de tiempo y dinero. Y es que cada día se procesan unos 5000 nuevos documentos políticos, incluyendo más de 300 tipos de documentos procedentes de más de 40 instituciones de países como Reino Unido, Alemania y Francia, así como de diversos organismos de la Unión Europea. Cada día se suman más Gobiernos nacionales, tanto europeos como no europeos, e instituciones de las Naciones Unidas. Además, la plataforma procesa diariamente 8000 publicaciones en redes sociales de más de 4000 responsables políticos pertenecientes a 60 partidos diferentes para ofrecer información actualizada.
Policy-Insider.AI, con sede central en Hamburgo, Alemania, concede una gran importancia a la privacidad de los datos. Al tratarse de una empresa europea, el equipo debe cumplir con las normativas nacionales y europeas en materia de tratamiento y privacidad de los datos, como el RGPD europeo. Utilizar servidores ubicados en la Unión Europea para alojar la plataforma no es solo una ventaja, sino también un requisito indispensable para inspirar confianza a sus clientes en un entorno sensible y competitivo.
La plataforma se basa en potentes algoritmos de inteligencia artificial, por lo que el equipo debe ser capaz de entrenar eficazmente sus modelos de IA con un buen rendimiento de la inferencia. Por lo tanto, los servidores que ejecutan la plataforma deben ser capaces de sacar el máximo partido a la tecnología GPU en términos de hardware.
De manera puntual, Policy-Insider.AI también debe tener capacidad para escalar su plataforma durante acontecimientos políticos relevantes que se traducen en un aumento de documentos sobre las nuevas políticas públicas. Para responder a los picos de demanda de los usuarios, con hasta 100 000 consultas diarias, la empresa necesita poder aumentar en tiempo real la potencia de procesamiento, el ancho de banda y la capacidad de los usuarios.
La solución
Para cumplir con todos estos requisitos, Policy-Insider.AI eligió el Public Cloud de OVHcloud para alojar su plataforma, ya que esta infraestructura puede desplegarse fácilmente para ofrecer a los clientes recursos bajo demanda con los que poder escalar su proyecto de forma flexible.
Para conseguir una plataforma potente capaz de procesar a diario grandes volúmenes de datos y al mismo tiempo ofrecer un servicio fluido y de alta disponibilidad para sus usuarios en todo el mundo, Policy-Insider.AI utiliza instancias CPU y GPU de las familias C2 y T1 respectivamente para ejecutar sus pipelines de procesamiento y algoritmos de IA. Los servidores CPU del proveedor de cloud disponen de recursos garantizados y están especialmente diseñados para ejecutar aplicaciones de IA que requieren una gran potencia de cálculo. Las instancias GPU, por su parte, integran procesadores gráficos NVIDIA Tesla V100 para ofrecer una gran capacidad de procesamiento paralelo especialmente diseñada para acelerar la IA y la alta computación (HPC) en el datacenter.
La arquitectura de Policy-Insider.AI ejecuta un cluster de motor de búsqueda que permite a los usuarios encontrar rápidamente la información que buscan. Al funcionar en instancias de Public Cloud, este cluster disfruta de todas las ventajas que ofrece esta infraestructura flexible capaz de suministrar recursos adicionales bajo demanda en cualquier momento para responder a un aumento de la demanda en tiempo real.
La disponibilidad de potentes arquitecturas CPU y GPU de última generación como las NVIDIA Tesla V100 en instancias flexibles es imprescindible para que la plataforma gestione de forma eficaz las cargas de trabajo de IA durante el entrenamiento y la ejecución de algoritmos avanzados. Al disponer de un Public Cloud flexible y a la vez seguro, podemos aprovechar toda la potencia de la IA con una excelente relación rendimiento-precio.
Agata Chudzinska, cofundadora y responsable de IA en Policy-Insider.AI
La plataforma Policy-Insider.AI funciona principalmente en uno de los datacenters de OVHcloud en Francia, garantizando así el cumplimiento de todas las regulaciones europeas en materia de datos y privacidad, así como de exigentes estándares de seguridad. Los servidores de alta calidad de OVHcloud, fabricados en los centros de producción del grupo, ejecutan todos los entornos de IA de Policy-Insider.AI en la nube. Además, OVHcloud se encarga de la investigación y el desarrollo de las funcionalidades y los componentes de hardware utilizando recursos de última generación a un precio competitivo.
Policy-Insider.AI trabaja con múltiples archivos estáticos, como documentos PDF, archivos de texto e imágenes, por lo que también utiliza soluciones de almacenamiento cloud de OVHcloud, que combinan un gran rendimiento con una alta seguridad, escalabilidad y resiliencia. El Object Storage de OVHcloud, por ejemplo, permite utilizar archivos estáticos de la plataforma de forma rentable. Además, la escalabilidad de este almacenamiento favorece una mayor flexibilidad a largo plazo a medida que Policy-Insider.AI sigue aumentando tanto su actividad como las fuentes de las que proceden los documentos tratados. La solución Object Storage de OVHcloud ofrece un espacio ilimitado de almacenamiento para archivos de todo tipo.
Para una mayor resiliencia, los datos almacenados se distribuyen en clusters con triple replicación tanto en discos como en servidores diferentes. Esto resulta especialmente útil a la hora de crear copias de seguridad de la plataforma, para lo que la startup también utiliza la solución Object Storage.
El resultado
Gracias a OVHcloud, la plataforma de Policy-Insider.AI funciona de forma fluida y fiable, ofreciendo a los usuarios un alto nivel de disponibilidad y rendimiento. Así pues, la startup aprovecha la tecnología y los componentes cloud de última generación para suministrar a sus clientes información completa y relevante extraída de miles de documentos y conjuntos de datos. La tecnología GPU de alta calidad desempeña un papel clave en la ejecución fiable de los sofisticados algoritmos de IA de la empresa en el cloud. Además, Policy-Insider.AI y OVHcloud comparten los mismos valores europeos en materia de seguridad y privacidad de los datos, lo cual garantiza un cumplimiento permanente del RGPD europeo por parte del servicio.
Con un crecimiento constante de las bases de datos y de los usuarios, el Public Cloud de OVHcloud hace posible que la startup se concentre en su actividad principal, permitiendo el escalado inmediato y flexible de la infraestructura para adaptarla a las necesidades cambiantes y a los picos de uso puntuales de la plataforma. Policy-Insider.AI se encuentra así en una posición privilegiada para transformar la forma en la que los profesionales de los asuntos públicos obtienen la información, acelerando así el proceso de toma de decisiones.
El equipo de OVHcloud tiene una actitud muy colaborativa ayudándonos a superar todos los obstáculos, así como a abrir nuevas posibilidades de negocio para seguir creciendo. En definitiva, la infraestructura y el servicio de OVHcloud nos permiten seguir innovando y ampliando constantemente nuestra base de datos.
Agata Chudzinska, cofundadora y responsable de IA en Policy-Insider.AI
