AWS Transfer Family-Kunden

In der Finanzdienstleistungsbranche ist es ein übliches Architekturmuster, Shared-Services-Dateiserver zu finden, die als SFTP-Dateiserver oder FTP-Server fungieren. DXC Technology hat sich mit der Migration dieses Servertyps mithilfe der AWS Transfer Family befasst, da Sie keine Dateiübertragungssoftware und Betriebssysteme installieren, patchen und warten müssen, da AWS sich um diese Aktivitäten kümmert.

SFTP-Server ermöglichen den internen Geschäftspartnern von Whole Foods den Zugriff auf Datenspeicher, die sichere Übertragung von Daten zwischen On-Premises-Rechenzentren und der Cloud, einschließlich großer Datenmengen, und die nahtlose Integration mit unseren SaaS-Partnern wie Coupa, Workday und Adaptive. Mit AWS Transfer Family konnten wir eine umfassende Lösung für die sichere Übertragung unserer Daten zwischen unseren On-Premises- und Cloud-Umgebungen mit einem hochverfügbaren und skalierbaren Service entwickeln.

Eine der Herausforderungen bei der Migration von Daten zu AWS besteht darin, dass Sie die AWS-APIs verwenden müssen, die möglicherweise nicht nativ von einer Anwendung unterstützt werden oder dem Anwendungsteam weniger bekannt sind als herkömmliche Protokolle wie SFTP. AWS hat diese Einschränkung durch die Einführung des Services AWS Transfer Family behoben. Es handelt sich um ein SFTP-, FTPS- oder FTP-Gateway für S3-Buckets oder EFS-Dateisysteme, das vollständig von AWS verwaltet und in den Service integriert wird, insbesondere in Bezug auf Zugriff, Berechtigungen oder Sicherheit.

Wir verwenden SFTP als sichere Methode, um Daten von Partnern, Datenanbietern, Mitarbeitern und Kunden in unsere Infrastruktur ein- und auszuleiten. Zuvor verwalteten wir herkömmliche SFTP-Server in unserer On-Premises Umgebung, die ein sehr sperriges und komplexes System war. Unser altes SFTP-Setup hat funktioniert, aber es war nicht gut skalierbar, und die Verwendung fragmentierter Lösungen in unserer gesamten Organisation führte zu Inkonsistenzen, was die Verwaltung mühsam und mühsam machte. Um diesen Herausforderungen zu begegnen, verwenden wir jetzt die AWS Transfer Family in der Cloud und bieten uns so einfachen, sicheren, konsistenten und vollständig verwalteten Support für unsere Dateiübertragungen in das flexible und kostengünstige Amazon S3. AWS Transfer Family beseitigt den Verwaltungsaufwand für die Infrastruktur, ist extrem schnell bereitzustellen und verwendet unser bevorzugtes Identitätsmanagementsystem (Okta), wodurch letztendlich eine Plattform entsteht, die wir nutzen, und nicht die Infrastruktur, die wir verwalten müssen. Jetzt können wir uns auf unsere Kerngeschäftsziele wie Downstream-Datentechnik und Analytik konzentrieren, anstatt uns um die Serververwaltung zu kümmern.

Mithilfe der AWS Transfer Family konnten wir bei Discover Financial Services die zeitweiligen Probleme beseitigen, mit denen wir bei früheren Lösungen konfrontiert waren, die sowohl für den Ein- als auch für den Ausgang von vor Ort zu AWS verfügbar waren. Wir sind jetzt in der Lage, die strengen SLAs zu erfüllen, die unsere Geschäftsanwender verlangen, und ihre Bedürfnisse in größerem Umfang auf sicherere und effizientere Weise zu erfüllen. Der Service AWS Transfer Family passt sehr gut zu unserem Ziel der betrieblichen Exzellenz.

Vor der Migration in die Cloud dauerte es Wochen oder Monate, bis die Bereitstellung eines SFTP-Servers erstellt und vollständig in unsere Kernsysteme integriert war, bevor er mit unseren Partnern geteilt wurde. Obwohl wir inzwischen viele Cloud-native Anwendungen haben, haben wir festgestellt, dass die Funktionen der AWS Transfer Family, insbesondere AWS Transfer für SFTP, eine nützliche und vertraute Methode zur Integration mit bestehenden und neuen Partnern für den Austausch von Finanz- und Aufsichtsdaten von Banken und anderen Quellen sind. Da die AWS Transfer Family in einer verwalteten Plattform ausgeführt wird, übernimmt AWS den Großteil der Arbeit. AWS Transfer Family ist sofort einsatzbereit, einfach bereitzustellen und bietet aus betrieblicher Sicht unzählige Vorteile.

Bei Elula haben wir es mit erheblichen Datenmengen von Finanzinstituten zu tun. Die Fähigkeit, große Datenmengen schnell und sicher zwischen Unternehmen zu übertragen, manchmal mehrmals am Tag, ist entscheidend für die Bereitstellung unseres Service, der umfassende Einblicke und personalisierte Gespräche ermöglicht – und das in großem Umfang. Als Startup konzentrieren wir uns auf die Dinge, die unseren Kunden in einer beschleunigten Zeit den größten Nutzen bieten – Prognosen für Machine Learning, erklärbare KI (XAI) und die zugrunde liegende Big-Data-Verarbeitung. Wir möchten nicht, dass Rechenzentren oder Speicher vor Ort verwaltet werden müssen. Deshalb arbeiten wir mit AWS zusammen. AWS-Services ermöglichen es uns, auf einfache Weise ein sicheres und skalierbares Unternehmensintegrationsmuster bereitzustellen. AWS Transfer für SFTP ist einfach zu verwenden, zuverlässig, vollständig von AWS verwaltet und ermöglicht es uns, SFTP-Server sehr schnell einzurichten. Die Zusammenarbeit mit Finanzinstituten ist sehr streng, und AWS Transfer für SFTP gibt uns die Gewissheit, dass unsere Datenbestände mithilfe von Amazon S3 sicher gespeichert und verschlüsselt sind und nur autorisiertes Personal darauf zugreifen kann.

Wir verlassen uns auf Amazon S3 als einen kritischen Staging-Bereich, in dem wir Daten für die Verarbeitung des Kerns unserer Datenplattform aufbewahren. AWS Transfer für SFTP hat uns geholfen, die Sicherheit der Sensordaten zu vereinfachen, die von den Standorten unserer Kunden auf der ganzen Welt über das Myriota-Satellitennetzwerk an Amazon S3 übertragen werden.

Datensicherheit ist für OpenGamma und unsere Kunden von größter Bedeutung. AWS Transfer für SFTP ermöglicht es unseren Kunden, sensible Portfolio- und Handelsaktivitätsdaten mit kundenspezifischer Verschlüsselung im Ruhezustand direkt in Amazon S3 hochzuladen, und zwar mithilfe von serverseitiger Verschlüsselung mit KMS-verwalteten Schlüsseln (SSE-KMS) und Standardverschlüsselung für Daten während der Übertragung. Bevor es AWS Transfer für SFTP gab, betrieben wir einen maßgeschneiderten SFTP-Server in einem Container pro Kunde, um unsere Standards für die logische Trennung von Daten zu erfüllen. Die Einrichtung unserer maßgeschneiderten SFTP-Lösung war kostspielig und zeitaufwändig und erforderte konsistente Ressourcen für die Verwaltung und Wartung des Servers. AWS Transfer für SFTP bietet vollständig verwaltete Unterstützung für File Transfer und bietet uns so noch mehr Funktionen und Kapazitäten ohne Betriebsaufwand und nutzt gleichzeitig die integrierte Sicherheit von AWS.

Aufgrund des großen Volumens an quantitativen Untersuchungen, die wir untersuchen, erhalten wir große Datenmengen aus einer Vielzahl von Feeds und Quellen. Die Erfassung von Daten in unser Rechenzentrum erwies sich als schwierig, da wir auf andere interne Teams angewiesen waren, als die Firewall-Regeln häufig geändert werden mussten, um die erhöhte Exposition im Internet zu kontrollieren. AWS Transfer für SFTP bietet die Übersetzung von Datei zu Objekt in Echtzeit, sodass wir eine flexible Architektur aufbauen können, ohne dass Daten lokal auf der Festplatte gespeichert werden müssen. Dies führt zu finanziellen Kosteneinsparungen und einer verbesserten Gesamteffizienz für unser Unternehmen. AWS Transfer für SFTP ermöglicht es uns, wertvolle Daten in Amazon S3 zu übertragen, sodass wir diese Daten dann verwenden können, um Algorithmen zu erstellen, mit denen wir anhand vergangener Daten die Zukunft vorhersagen können. In nur wenigen Monaten haben wir über 400 TB an Daten mithilfe von AWS Transfer für SFTP übertragen, das zusammen mit Amazon EMR, AWS Glue und AWS Batch verwendet wurde, um die Daten zu verarbeiten und zu analysieren, um noch aussagekräftigere Geschäftseinblicke zu gewinnen.

Als Organisation hat FINRA Amazon S3 als unseren Data Lake angesehen, um uns dabei zu helfen, Speichersilos zu eliminieren, eine Quelle der Datenwahrheit zu erhalten und die Kosten für das Infrastrukturmanagement zu senken. Die Verwaltung der SFTP-Infrastruktur für über 1.000 externe Benutzer, die pro Monat 6 Millionen Dateitransfers durchführen, war jedoch etwas anstrengend. Unsere Lösung bestand darin, unsere neue FileX-Plattform in AWS aufzubauen und den neuen AWS Transfer for SFTP-Dienst zu verwenden. AWS Transfer für SFTP hilft uns, unsere betriebliche Belastung zu reduzieren, indem wir S3 als unseren Data Lake behalten, während wir die kritische Verbindung zu unseren vorhandenen Authentifizierungssystemen für externe Benutzer aufrechterhalten – sodass sie bei der Migration von SFTP-Services zu AWS keine Unterbrechungen erfahren.

Die Zusammenarbeit mit unseren externen Partnern ist entscheidend für unsere Forschungsinitiativen. Dabei müssen wir Daten auf eine kontrollierte, sichere Art und Weise austauschen, die Dritten keinen Zugang zu unseren kritischen Systemen gewährt. Gleichzeitig ist Amazon S3 das Zentrum unseres Universums für Forschungsdaten; wir möchten keine separaten Speicherstapel kaufen und verwalten, um ausgewählte Datensätze mit Partnern auszutauschen. Daher war AWS Transfer for SFTP ein Sofortgewinn für Celgene. Wir können Daten mit AWS SFTP sicher austauschen, sie in unserem eingeschränkten Amazon S3-Bucket in Echtzeit nutzen und unsere externen Benutzer einfach verwalten. AWS SFTP hat uns bereits gerettet: Ein neues Gemeinschaftsprojekt kam kurzfristig zustande, und wir hatten weder einen lokalen Speicher im Petabyte-Bereich noch eine SFTP-Infrastruktur, die ein solches Volumen bewältigen könnte. Wir haben unseren SFTP-Endpunkt mit dem Service innerhalb von Minuten aufgestellt, ihn an unseren Bucket angefügt, Benutzer bereitgestellt und waren in weniger als einer Stunde einsatzbereit. Diese Schnelligkeit und Flexibilität ist in einer herkömmlichen On-Premises-Umgebung schlicht nicht möglich.

Wir erhalten große Mediendateien, für die bei Website-Uploads relativ schnell eine Zeitüberschreitung eintritt. Der AWS Transfer for SFTP-Service hat sich in diesem Fall für uns sehr gut bewährt. Große Dateien wie Musikvideos oder Folgen von Fernsehserien wurden sicher und leistungsstark über eine SFTP-Verbindung übertragen. Nachdem sie in unseren S3-Bucket hochgeladen wurden, liefern wir die Dateien nicht nur an unsere Partner als Aggregatoren in der Medienkette aus, sondern speichern sie auch über längere Zeiträume in verschiedenen Speicherklassen von Amazon S3.

Unsere Techniker waren in der Lage, innerhalb einer Woche die Rahmenbedingungen für die Analyse der Kundennutzung nahezu in Echtzeit zu schaffen. Dieser Zeitrahmen ist beachtlich, wenn man bedenkt, dass die Erfassung von detaillierten Datensätzen zu Mobiltelefonanrufen in verschiedenen Größen und Frequenzen erfolgt, 3 bis 20 MB alle 1 bis 10 Sekunden über den Tag verteilt. AWS SFTP lässt sich nahtlos skalieren und stellt die Dateien als S3-Objekte zur Verfügung, was für unsere Bedürfnisse genau das Richtige ist. Dies ermöglichte die ereignisgesteuerte Erfassung von Daten in unseren Data Lake. Dadurch, dass der Service eine sofort einsatzbereite Integration in S3, IAM, KMS bot und als vollständig verwalteter Service war, entsprach er sofort unserer Sicherheits- und Betriebsrichtlinie. AWS SFTP eignet sich hervorragend für die Erfassung von Dateien nahezu in Echtzeit und stellt jetzt die strategische Erfassungsfunktionalität unserer modernen Datenarchitektur dar.

Von der Einrichtung bis zum Betrieb bietet AWS Transfer für SFTP eine einfache und zuverlässige Lösung für den Datenaustausch mit unseren Partnern.

Bevor der SFTP-Service von AWS verfügbar war, haben wir selbst eine Cloud-basierte SFTP-Lösung für unsere Bedürfnisse verwaltet und sind dabei auf zahlreiche Probleme gestoßen. Es gibt Open-Source-Projekte für die Bereitstellung von Amazon S3 für Amazon EC2, aber es war nicht einfach, diese Open-Source-Projekte zu verwalten und eine gute Leistung von ihnen zu erhalten. Zudem gab es Skalierungsprobleme, als wir mehr Ressourcen benötigten. Nachdem AWS den vollständig verwalteten AWS Transfer for SFTP-Service angekündigt hatte, haben wir ihn sofort genutzt. Wir haben unsere selbst erstellte Einrichtung auf AWS Transfer for SFTP umgestellt und müssen nun keine Open-Source-Projekte mehr überwachen und verwalten. Auch was die Kosten betrifft, müssen wir nicht für ungenutzte Ressourcen aufkommen.

Unser TV-Studio verwendet einen On-Premises-Live-Encoder, der nicht in AWS-Medienservices integriert ist. Wir haben festgestellt, dass unser Encoder die verschlüsselten Dateien per FTP senden und löschen kann. Deshalb haben wir zunächst ein selbstverwaltetes FTP-Setup entwickelt, um diesen Bedarf zu decken. Die Entwicklung und Bereitstellung dieser eigenverwalteten Lösung war mit sehr hohen Kosten verbunden, und wir hatten mit zahlreichen Skalierungs- und Verbindungsproblemen zwischen unserem Studio und dem FTP-Server zu kämpfen, was zu Problemen bei unserem Livestream und damit zu einer negativen Kundenerfahrung führte. Nach der Ankündigung, dass AWS Transfer Family FTP unterstützt, haben wir unser Setup schnell geändert, um diesen vollständig verwalteten AWS-Service einzuführen. Wir haben den Service stark ausgelastet, um mehrere Live-Übertragungskanäle zu streamen, aber seit wir auf AWS Transfer Family umgestellt haben, haben wir keine Verbindungsprobleme mehr, unser Live-Stream funktioniert hervorragend und unser Kundenerlebnis hat sich erheblich verbessert. AWS Transfer Family ist ein extrem stabiler und zuverlässiger Service, der uns viel Zeit und Geld spart und gleichzeitig unsere Dateiübertragungs-Workflows modernisiert.

Wir haben unsere EDI-Workloads zu AWS verlagert, weil die AWS Transfer Family ihre Produktlinie um AS2 erweitert hat, da AS2 nach wie vor der dominierende Standard für EDI ist. Letztes Jahr haben wir mit der Entwicklung unseres Produkts der nächsten Generation, RapidMap, begonnen und eine Branchenanalyse durchgeführt, um zu ermitteln, wie wir Integrationen angehen sollten. Wir wollten unseren eigenen AS2-Service entwickeln, entdeckten aber die vollständig verwalteten, Cloud-nativen AS2-Funktionen von Transfer Family. Das AS2 von Transfer Family hat es uns stattdessen ermöglicht, uns auf die Entwicklung der RapidMap-Lösung zu konzentrieren und den Mapping-, Test- und Konnektivitätsaufwand drastisch zu reduzieren, um das Geschäft in der gesamten Logistikkette zum Laufen zu bringen. Wir haben unsere Ressourcen verlagert, um Self-Service-Tools für Geschäftsanwender zu entwickeln, sodass sie technische Operationen durchführen können, die früher nur Entwicklern vorbehalten waren, da wir mit Transfer Family die Integrationszeiten von Monaten auf Wochen reduzieren konnten.

Als technologiegetriebenes Beratungsunternehmen für professionelle Dienstleistungen, das in der gesamten Lieferketten- und Logistikbranche tätig ist, stehen wir täglich vor neuen Herausforderungen. Unternehmen, die Daten mit ihren Geschäftspartnern austauschen, sollten jedoch nicht dazu gehören. Da Kunden nun eine zuverlässige, vollständig gehostete und verwaltete Lösung suchen, die in einer sicheren und privaten Cloud betrieben wird, haben wir uns für AWS Transfer Family entschieden, um ihnen eine vollständig verwaltete, schlüsselfertige Lösung für SFTP-Dateiübertragungen und AS2-Nachrichtenaustausch zu bieten. Transfer Family bietet sichere, zuverlässige verwaltete File-Transfer-Funktionen, die wir benötigen, um die sich ständig ändernden Datenintegrationsanforderungen unserer Kunden zu erfüllen. Durch die Einführung der AWS Transfer Family konnten wir unseren Kunden im Durchschnitt 15 % der Einrichtungskosten sparen und unsere Zeit für Integrationstests um durchschnittlich 20 % reduzieren. Gleichzeitig konnten wir ihnen dabei helfen, einen umfassenden Überblick über die Lieferkette zu erhalten.

Redpack ist ein internationaler Logistikdienstleister, der globale Versanddienstleistungen und Lieferlösungen auf der letzten Meile in ganz Lateinamerika anbietet. Wir verwenden die AS2-Funktionen von AWS Transfer Family, um Versandbenachrichtigungen und Bestätigungen bei der Zustellung von Paketen zu senden. Wir verwenden auch die AS2-Lösung von Transfer, um digitale Rechnungen und Rechnungsdokumente mit unserem globalen Netzwerk von Lieferservicepartnern auszutauschen. Die Funktionen von Transfer Family entsprechen den Richtlinien von Amazon für Versandpartner und bieten uns die wichtige Kommunikation zwischen Unternehmen, die wir benötigen, um über 95 % der Pakete innerhalb von 24 Stunden pünktlich auszuliefern.

Unser globales SaaS-Unternehmen verlässt sich auf SFTP für die sichere Datenübertragung über unsere weltweiten Anwendungen und Infrastrukturen. Um die Barrierefreiheit für unsere Partner zu verbessern, verwenden wir die AWS-Transfer-Family-Webanwendungen, die ein sicheres, benutzerfreundliches Webportal mit modernen Authentifizierungsmethoden wie MFA bieten. Durch die Nutzung von Transfer Family SFTP und Web-Apps können wir Datenübertragungsprozesse rationalisieren und die Effizienz verbessern, sodass wir uns besser darauf konzentrieren können, unseren Kunden einen Mehrwert zu bieten.

ScaleCapacity hat uns geholfen, eine Serverless-SFTP-Umgebung auf AWS aufzubauen, die deutlich günstiger ist als unsere vorherige Lösung. Das kostet uns ein paar hundert Dollar pro Monat, während andere verwaltete Lösungen uns leicht bis zu 100.000 Dollar pro Jahr hätten kosten können.