Clientes de AWS Transfer Family

En el ámbito de los servicios financieros, es un patrón de arquitectura común encontrar servidores de archivos de servicios compartidos que actúan como servidor de archivos SFTP o servidor FTP. DXC Technology abordó la migración de este tipo de servidor mediante AWS Transfer Family porque no es necesario instalar, aplicar parches ni mantener el software y los sistemas operativos de transferencia de archivos, ya que AWS se encarga de esas tareas.

Los servidores SFTP permiten a los socios comerciales internos de Whole Foods acceder al almacenamiento de datos, transferir datos de forma segura entre los centros de datos locales y la nube, incluidas grandes cargas de datos, e integrarse sin problemas con nuestros socios de SaaS, como Coupa, Workday y Adaptive. AWS Transfer Family nos permitió crear una solución amplia para transferir nuestros datos de forma segura entre nuestros entornos locales y en la nube con un servicio escalable y de alta disponibilidad.

Uno de los desafíos de la migración de datos a AWS es que es necesario usar API de AWS que tal vez no sean compatibles de forma nativa con una aplicación o que no sean tan familiares para el equipo de aplicaciones como los protocolos tradicionales, por ejemplo, SFTP. AWS ha resuelto esta limitación con la introducción del servicio AWS Transfer Family. Es una puerta de enlace SFTP, FTPS o FTP para buckets de S3 o sistemas de archivos EFS, completamente administrada por AWS e integrada en el servicio, especialmente en lo que respecta al acceso, los permisos o la seguridad.

Usamos SFTP como un método seguro para introducir y extraer datos de nuestra infraestructura de socios, proveedores de datos, empleados y clientes. Antes administrábamos servidores SFTP tradicionales en nuestro entorno en las instalaciones, un sistema muy voluminoso y complejo. Nuestra antigua configuración de SFTP funcionaba, pero no se escaló bien y el uso de soluciones fragmentadas en toda nuestra organización generó inconsistencias, lo que complicaba su administración. Para hacer frente a estos desafíos, ahora utilizamos AWS Transfer Family en la nube, que nos proporciona un soporte sencillo, seguro, coherente y completamente administrado para nuestras transferencias de archivos a Amazon S3, un servicio flexible y rentable. AWS Transfer Family elimina los gastos generales de administración de la infraestructura, se implementa con extrema rapidez y utiliza nuestro sistema de administración de identidades preferido (Okta), lo que, en última instancia, crea una plataforma que consumimos, en lugar de la infraestructura que tenemos que administrar. Ahora podemos centrarnos en los objetivos empresariales principales, como la ingeniería y el análisis de datos posteriores, en lugar de tener que administrar los servidores.

Gracias a AWS Transfer Family, en Discover Financial Services hemos podido acabar con los problemas intermitentes a los que nos enfrentábamos con las soluciones anteriores, presentes tanto en la entrada como en la salida desde las instalaciones a AWS. Ahora podemos cumplir con los SLA estrictos que exigen nuestros usuarios empresariales y atender sus necesidades a mayor escala de una manera más segura y eficiente. El servicio AWS Transfer Family se ajusta muy bien con nuestro objetivo de excelencia operativa.

Antes de migrar a la nube, la implementación de un servidor SFTP tardaba semanas o meses en crearse e integrarse completamente con nuestros sistemas principales antes de poder compartirlo con nuestros socios. Si bien ahora tenemos muchas aplicaciones nativas en la nube, descubrimos que las capacidades de AWS Transfer Family, específicamente AWS Transfer for SFTP, son un medio útil y familiar de integrarse con socios nuevos y existentes para intercambiar datos financieros y reglamentarios de bancos y otros orígenes. Como AWS Transfer Family se ejecuta en una plataforma administrada, AWS se encarga de la mayor parte del trabajo arduo. AWS Transfer Family viene listo para usarse, es fácil de implementar y ofrece innumerables ventajas desde el punto de vista operativo.

En Elula, manejamos volúmenes importantes de datos de instituciones financieras. La capacidad de mover grandes volúmenes de datos de forma rápida y segura entre organizaciones, a veces varias veces al día, es fundamental para ofrecer nuestro servicio, el cual permite obtener información valiosa y conversaciones personalizadas a gran escala. Como startup, nos centramos en las cosas que ofrecen a nuestros clientes el mayor valor en poco tiempo: las predicciones de machine learning, la IA explicable (XAI) y el procesamiento subyacente de big data. No queremos administrar centros de datos ni ningún tipo de almacenamiento in situ, por eso nos asociamos con AWS. Los servicios de AWS nos permiten ofrecer un patrón de integración empresarial seguro y escalable de forma sencilla. AWS Transfer for SFTP es fácil de usar, fiable, está completamente administrado por AWS y nos permite poner en marcha los servidores SFTP con gran rapidez. Trabajar con instituciones financieras exige ser muy rigurosos, y AWS Transfer for SFTP nos da la tranquilidad de saber que nuestros activos de datos se almacenan y cifran de forma segura con Amazon S3 y que solo puede acceder a ellos el personal autorizado.

Dependemos de Amazon S3 como un área de preparación fundamental donde guardamos datos para procesar el núcleo de nuestra plataforma de datos. AWS Transfer for SFTP nos ha ayudado a simplificar la seguridad de los datos del sensor que provienen de los sitios extendidos de nuestros clientes a través de la red de satélites Myriota a Amazon S3.

La seguridad de los datos es de vital importancia para OpenGamma y nuestros clientes. AWS Transfer for SFTP permite a nuestros clientes cargar datos confidenciales de cartera y actividad comercial en nuestros servicios alojados, con cifrado inactivo específico del cliente directamente en Amazon S3, con cifrado del lado del servidor con claves administradas por KMS (SSE-KMS) y cifrado predeterminado de los datos en tránsito. Antes de que existiera AWS Transfer for SFTP, ejecutábamos un servidor SFTP personalizado en un contenedor por cliente para cumplir con nuestros estándares de división lógica de datos. Nuestra solución SFTP personalizada era costosa y lenta de configurar y requería recursos consistentes para administrar y mantener el servidor. AWS Transfer for SFTP proporciona soporte completamente administrado para las transferencias de archivos, lo que nos proporciona aún más características y funcionalidades sin la sobrecarga operativa y, al mismo tiempo, aprovecha la seguridad integrada de AWS.

Recibimos grandes cantidades de datos procedentes de una amplia gama de fuentes y orígenes debido al gran volumen de investigación cuantitativa que examinamos. La ingesta de datos en nuestro centro de datos resultaba complicada debido a la dependencia de otros equipos internos cuando era necesario modificar con frecuencia las reglas del firewall para controlar el aumento de la exposición en Internet. AWS Transfer for SFTP ofrece la traducción de archivos a objetos en tiempo real, lo que nos permite crear una arquitectura flexible, sin la necesidad de conservar los datos de manera local en el disco, lo que permite ahorrar costos financieros y mejorar la eficiencia general de nuestra empresa. AWS Transfer for SFTP nos permite obtener datos valiosos en Amazon S3 y luego usarlos para crear algoritmos que nos ayuden a predecir el futuro mediante el análisis de los datos del pasado. En tan solo unos meses, hemos transferido más de 400 TB de datos a través de AWS Transfer for SFTP, que se ha utilizado junto con Amazon EMR, AWS Glue y AWS Batch para procesar y analizar los datos y extraer información empresarial aún más relevante.

Como organización, en FINRA hemos incorporado Amazon S3 como nuestro lago de datos para que nos ayude a eliminar los silos de almacenamiento, a mantener una fuente de veracidad de datos y a reducir los costos de administración de la infraestructura. Sin embargo, administrar la infraestructura de SFTP para más de 1000 usuarios externos que realizan 6 millones de transferencias de archivos por mes fue bastante difícil. Nuestra solución fue crear una nueva plataforma FileX en AWS y usar el nuevo servicio de AWS Transfer for SFTP. AWS Transfer for SFTP nos ayuda a reducir la carga operativa conservando S3 como nuestro lago de datos. Al mismo tiempo, mantiene una conexión crítica a nuestros sistemas de autenticación existentes para los usuarios externos, de este modo, ellos no experimentan interrupciones mientras completamos la migración de los servicios de SFTP a AWS.

Trabajar con nuestros socios externos es imperativo para nuestras iniciativas de investigación y necesitamos intercambiar datos de una manera controlada y segura que no les permita a dichos terceros poder acceder a nuestros cruciales sistemas. Al mismo tiempo, Amazon S3 es el centro de nuestro universo en torno a los datos de investigación. No queremos comprar y administrar pilas de almacenamiento separadas para intercambiar selectos conjuntos de datos con los socios. Por eso, AWS Transfer for SFTP fue una victoria instantánea para Celgene. Podemos intercambiar datos de forma segura con AWS SFTP, tenerlos en vivo en nuestro bucket de Amazon S3 bloqueado y administrar fácilmente nuestros usuarios externos. AWS SFTP ya nos ha salvado: mágicamente surgió un nuevo proyecto de colaboración y no teníamos ningún almacenamiento local a escala de petabytes o infraestructura SFTP que pudiera manejar ese tipo de volumen. Pusimos en marcha nuestro punto de enlace SFTP utilizando el servicio en cuestión de minutos, lo conectamos a nuestro bucket, aprovisionamos usuarios y comenzamos a operar en menos de una hora. Esa velocidad y flexibilidad simplemente no es posible en un mundo tradicional en las instalaciones.

Recibimos grandes archivos multimedia y el tiempo de carga en el sitio web se agota rápidamente. El servicio AWS Transfer for SFTP funciona de maravillas en este caso. La transferencia de archivos grandes, como videos musicales o episodios de series de televisión transferidos a través de una conexión SFTP, se ha realizado de forma segura y con un alto rendimiento. Una vez cargados en nuestro bucket de S3, además de entregarlos a nuestros socios como agregadores en la cadena de medios, almacenamos estos archivos durante largos períodos en diferentes tipos de almacenamiento de Amazon S3.

Nuestros ingenieros pudieron implementar un marco de análisis del uso del cliente casi en tiempo real en una semana. Este plazo es profundo dado que la incorporación de registros de detalles de llamadas móviles se produce en diferentes tamaños y frecuencias, de 3 a 20 MB cada 1 a 10 segundos durante todo el día. AWS SFTP permite escalar sin problemas y hace que los archivos estén disponibles como objetos S3, lo que encaja a la perfección con nuestras necesidades. Esto permitió incorporar datos impulsados por eventos a nuestro lago de datos. Con una integración inmediata a S3, IAM, KMS y disponible como un servicio completamente administrado, se correspondió de inmediato con nuestra política operativa y de seguridad. AWS SFTP es extremadamente práctico en lo que se refiere a la incorporación de archivos casi en tiempo real, y ahora es la capacidad de ingesta estratégica de nuestra moderna arquitectura de datos.

Desde la configuración hasta la operación, AWS Transfer for SFTP proporciona una solución fácil y fiable para el intercambio de datos con nuestros socios.

Antes de que el servicio SFTP de AWS estuviera disponible, administrábamos nosotros mismos una solución de SFTP basada en la nube para nuestras necesidades y nos topamos con muchos problemas. Hay proyectos de código abierto para montar Amazon S3 en Amazon EC2, pero gestionar dichos proyectos de código abierto y obtener un buen rendimiento no fue fácil. Además, cuando necesitamos más recursos, enfrentamos problemas con el escalado. Después de que AWS anunció el servicio AWS Transfer for SFTP completamente administrado, comenzamos a usarlo directamente. Cambiamos nuestra configuración propia por la de AWS Transfer for SFTP y ya no necesitamos monitorear el escalado ni administrar proyectos de código abierto. Por otro lado, en términos de costo, no tenemos que pagar por los recursos que no utilizamos.

Nuestro estudio de televisión utiliza un codificador en vivo en las instalaciones, que no se integra con los servicios multimedia de AWS. Determinamos que nuestro codificador puede enviar y eliminar los archivos codificados mediante FTP, por lo que inicialmente creamos una configuración de FTP autoadministrada para satisfacer esa necesidad. Crear e implementar esta solución autoadministrada supuso un costo muy elevado, y tuvimos muchos problemas de escalabilidad y conectividad entre nuestro estudio y el FTP, lo que provocó problemas en nuestra transmisión en directo y, en consecuencia, una mala experiencia para los clientes. Tras el anuncio de la compatibilidad de AWS Transfer Family con FTP, cambiamos rápidamente nuestra configuración para adoptar este servicio de AWS completamente administrado. Ponemos una gran carga en el servicio para poder transmitir varios canales en vivo, pero desde que decidimos utilizar AWS Transfer Family, ya no tenemos problemas de conectividad, nuestra transmisión en vivo funciona a la perfección y la experiencia de nuestros clientes ha mejorado considerablemente. AWS Transfer Family es un servicio extremadamente estable y fiable que nos ahorra mucho tiempo y dinero al mismo tiempo que moderniza nuestros flujos de trabajo de transferencia de archivos.

Trasladamos nuestras cargas de trabajo de EDI a AWS porque AWS Transfer Family amplió su línea de productos para incluir AS2, ya que AS2 sigue siendo el estándar dominante para EDI. El año pasado comenzamos a crear nuestro producto de próxima generación, RapidMap, e hicimos un análisis del sector para determinar cómo deberíamos abordar las integraciones. Íbamos a crear nuestro propio servicio AS2, pero descubrimos las capacidades AS2 nativas en la nube y completamente administradas de Transfer Family. En cambio, el AS2 de Transfer Family nos ha permitido centrarnos en crear la solución de RapidMap, de modo que hemos reducido drásticamente el mapeo, las pruebas y la conectividad para hacer que el negocio fluya a través de una cadena de suministro logístico. Hemos cambiado nuestros recursos para crear herramientas de autoservicio para usuarios empresariales, de modo que puedan realizar operaciones técnicas que antes estaban limitadas a los desarrolladores, ya que Transfer Family nos ha permitido reducir los plazos de integración de meses a semanas.

Como consultora de servicios profesionales impulsada por la tecnología que opera en la industria de la cadena de suministro y la logística, nos enfrentamos a nuevos desafíos a diario. Sin embargo, que las empresas intercambien datos con sus socios comerciales no debería ser uno de ellos. Dado que los clientes ahora desean una solución fiable, completamente alojada y administrada que funcione en una nube segura y privada, elegimos AWS Transfer Family para proporcionarles una solución lista para usar y completamente administrada para transferencias de archivos SFTP e intercambios de mensajes AS2. Transfer Family proporciona las capacidades de transferencia de archivos administradas seguras y fiables que necesitamos para satisfacer las necesidades de integración de datos en constante cambio de nuestros clientes. Al adoptar AWS Transfer Family, hemos podido ahorrar a nuestros clientes una media del 15 % en los costos de configuración y reducir el tiempo de nuestras pruebas de integración en un 20 %, a la vez que les hemos ayudado a lograr una visibilidad integral de la cadena de suministro.

Redpack es un proveedor de logística internacional que ofrece servicios de envío globales y soluciones de entrega de última milla en toda América Latina. Utilizamos las funciones AS2 de AWS Transfer Family para enviar avisos y confirmaciones de envío al entregar paquetes. También utilizamos la solución AS2 de Transfer para intercambiar facturas y documentos de facturación digitales con nuestra red global de socios de servicios de entrega. Las capacidades de Transfer Family cumplen con las directrices para socios logísticos de Amazon y nos proporcionan las comunicaciones críticas de empresa a empresa que necesitamos para entregar más del 95 % de los paquetes a tiempo en un plazo de 24 horas.

Nuestra empresa global de SaaS confía en el SFTP para la transferencia segura de datos a través de nuestras aplicaciones e infraestructuras mundiales. Para mejorar la accesibilidad de nuestros socios, estamos adoptando las aplicaciones web de AWS Transfer Family, que proporcionan un portal web seguro y fácil de usar con métodos de autenticación modernos como MFA. Al aprovechar las aplicaciones web y SFTP de Transfer Family, podemos optimizar los procesos de transferencia de datos y mejorar la eficiencia, lo que nos permite centrarnos mejor en ofrecer valor a nuestros clientes.

ScaleCapacity nos ayudó a crear un entorno SFTP sin servidor en AWS que es considerablemente más económico que el que teníamos antes. Esto nos cuesta unos cientos de dólares al mes, mientras que otras soluciones gestionadas podrían habernos costado fácilmente hasta 100 000 USD al año.