Integrationen sind eine wichtige Methode zur Senkung der Betriebskosten, insbesondere wenn sie in Ihre Datensysteme integriert sind. Durch die Integration wichtiger Daten zwischen Amazon OpenSearch Service und anderen AWS-Services können Sie die wichtigsten Vorteile von OpenSearch Service für Ihre Daten nutzen, unabhängig davon, wo sie gespeichert sind. Dies reduziert häufig die Betriebskosten und die Komplexität der Datenverwaltung. Darüber hinaus ermöglicht die Datenerfassung eine effiziente Datenkonvertierung, Bereinigung, Zuordnung und Laden, sodass die Daten sofort nach der Abfrage verfügbar sind, ohne die Rechen- und Netzwerksysteme Ihres Clusters zu überlasten.
Mit Amazon OpenSearch Service können Sie all dies problemlos erreichen, indem Sie Amazon OpenSearch Ingestion und die Integrationen mit verschiedenen AWS-Services wie Amazon Kinesis Data Firehose, Logstash, Amazon CloudWatch oder AWS IoT nutzen. Und mit Null-ETL-Integrationen, unter anderem in Amazon S3 und DynamoDB, können Sie noch mehr erreichen. Diese Integrationen und Verbindungen bieten Ihnen die Flexibilität, das Integrations- und Erfassungstool auszuwählen, das Ihren Anwendungsfallanforderungen entspricht.
Datenerfassung mit Amazon OpenSearch Ingestion
Amazon OpenSearch Ingestion ist eine Funktion von Amazon OpenSearch Service zum Sammeln, Transformieren und Weiterleiten von Daten an Amazon-OpenSearch-Service-Domänen. OpenSearch Ingestion steigert die Kosteneffizienz und trägt zur Sicherstellung der Datenqualität bei. Der OpenSearch Ingestion Service führt OpenSearch-Data-Prepper-Pipper-Pipelines als serverlosen Prozess aus, der automatisch an die Verarbeitungsanforderungen Ihrer Ingest-Workloads angepasst wird. Weitere Informationen »
Null-ETL-Integration von Amazon OpenSearch Service in Amazon S3
Die Null-ETL-Integration von Amazon OpenSearch Service in Amazon S3 ist eine neue Art, eine Verbindung zu eigenen Daten herzustellen, sodass Kunden die umfangreichen interaktiven Funktionen von OpenSearch Service direkt für selten abgefragte Daten nutzen können, die in ihrem Amazon S3 Data Lake mit Null-ETL gespeichert sind. Durch die Null-ETL-Verbindung mit S3 müssen Kunden keine komplexen ETL-Pipelines mehr erstellen oder verwalten, sodass sie wichtige Abfragen ausführen können, um Erkenntnisse zu gewinnen und Sicherheits- und Beobachtbarkeitsdaten zu visualisieren. Gleichzeitig werden die Kosten und die betriebliche Komplexität der Duplizierung von Daten oder der Verwaltung mehrerer Analysetools reduziert. Weitere Informationen >>
Null-ETL-Integration in DynamoDB
Die Null-ETL-Integration von Amazon OpenSearch Service in Amazon DynamoDB ermöglicht es Ihnen, erweiterte Suchfunktionen wie Volltext- und Vektorsuche für Ihre Betriebsdaten in Amazon DynamoDB zu verwenden. Diese Null-ETL-Integration verwendet Amazon OpenSearch Ingestion, um Ihre Daten nahtlos von Amazon DynamoDB mit Amazon OpenSearch Service zu synchronisieren, ohne dass Sie benutzerdefinierten Code schreiben müssen. Diese Null-ETL-Integration reduziert den Betriebsaufwand und die Kosten, die mit der Synchronisation der Daten zwischen diesen beiden Speichern verbunden sind, sodass Sie sich auf Ihre Anwendungen konzentrieren können. Weitere Informationen>>
Datenerfassung mithilfe von Amazon Kinesis Data Firehose
Mit Amazon Kinesis Firehose können Sie unbearbeitete Streaming-Daten aus Ihren Datenquellen leicht in die Formate umwandeln, die von Ihrem Elasticsearch-Index verlangt werden, und diese in Amazon OpenSearch Service laden, ohne eigene Datenverarbeitungs-Pipelines zu erstellen.
Wählen Sie für die Nutzung dieser Funktion einfach eine AWS-Lambda-Funktion aus der Registerkarte "delivery stream configuration" von Amazon Kinesis Firehose in der AWS Management Console aus. Amazon Kinesis Firehose wendet die Funktion AWS Lambda automatisch auf jeden Eingabedatensatz an und lädt die umgewandelten Daten in Ihren Amazon OpenSearch-Service-Index.
Amazon Kinesis Firehose bietet integrierte Lambda-Blueprints für die Konvertierung allgemeiner Datenquellen wie Apache-Protokolle und Systemprotokolle in die Formate JSON und CSV ohne Änderungen oder Anpassungen. Sie können Amazon Kinesis Firehose auch für die automatische Wiederholung fehlgeschlagener Aufträge und das Sichern der unbearbeiteten Streaming-Daten konfigurieren. Weitere Informationen »
Dateneingabe mithilfe von Logstash
Amazon OpenSearch Service unterstützt die Integration mit Logstash, einem Open-Source-Datenverarbeitungstool, das Daten aus Quellen sammelt, umwandelt und sie anschließend in Elasticsearch oder OpenSearch lädt. Sie können Logstash mühelos in Amazon EC2 bereitstellen und Ihre Amazon-OpenSearch-Domain als Backend-Speicher für alle Protokolle aus Ihrer Logstash-Implementierung einrichten. Logstash unterstützt eine Bibliothek an voreingestellten Filtern, für die mühelose Durchführung gängiger Umwandlungen, wie das Parsen von unstrukturierten Protokolldaten in strukturierte Daten durch Mustervergleich; das Umbenennen, Entfernen, Ersetzen und Modifizieren von Feldern in Ihren Datenaufzeichnungen; und das Zusammentragen von Metriken. Weitere Informationen »
Dateneingabe mithilfe von Amazon CloudWatch Logs
Mit Amazon CloudWatch Logs können Sie anhand Ihrer vorhandenen System-, Anwendungs- und kundenspezifischen Protokolldateien Ihre Systeme und Anwendungen überwachen und Probleme beheben. Sie können eine CloudWatch Logs-Protokollgruppe konfigurieren, um Daten in nahezu Echtzeit über ein CloudWatch Logs-Abonnement in Ihre Amazon OpenSearch Service-Domäne zu streamen. Diese Integration ist praktisch, wenn Sie bereits CloudWatch Logs verwenden, um Protokolldaten zu sammeln, und diese Daten mit Ihren Amazon OpenSearch Service-Benutzern teilen möchten. Weitere Informationen »
Dateneingabe mithilfe von AWS IoT
AWS IoT ist eine verwaltete Cloud-Plattform, mit der verbundene Geräte einfach und sicher mit Cloud-Anwendungen und anderen Geräten zusammenarbeiten können. Mit AWS IoT können Sie Daten von angeschlossenen Geräten erfassen, etwa Verbrauchsgeräte, eingebettete Sensoren und TV-Set-Top-Boxen. Mit der AWS-Managementkonsole können Sie AWS IoT so konfigurieren, dass die Daten direkt in den Amazon OpenSearch Service geladen werden. So können Sie Ihren Kunden Zugriff auf IoT-Daten und -Metriken nahezu in Echtzeit bieten. Weitere Informationen »
So wählen Sie den richtigen Eingabemechanismus aus
Die Wahl des richtigen Eingabemechanismus hängt von den Anforderungen Ihres Anwendungsfalles wie Datenlatenz und -typ ab. Für große Datenvolumen empfehlen wir die Verwendung von Amazon Kinesis Data Firehose, einem vollständig verwalteten Service, der automatisch skaliert, um dem Durchsatz Ihrer Daten gerecht zu werden, und keine laufende Verwaltung erfordert. Er kann die Daten außerdem komprimieren und stapeln, bevor sie in die Amazon-OpenSearch-Service-Domain geladen werden. Häufig läuft die Wahl auch darauf hinaus, welche Services Sie bereits nutzen. Wenn Sie beispielsweise bereits Anwendungsprotokolle mithilfe von Amazon CloudWatch Logs sammeln, können Sie die Daten einfach ohne viel zusätzliche Mühe in Ihre Amazon-OpenSearch-Service-Domain laden.
Nächste Schritte
- Starten Sie mit Amazon OpenSearch Service über das kostenlose AWS-Kontingent »
- Arbeiten Sie das Handbuch Erste Schritte zu Amazon OpenSearch Service durch »
OpenSearch enthält bestimmten von Apache lizenzierten Elasticsearch-Code von Elasticsearch B.V. und anderen Quellcode. Elasticsearch B.V. ist nicht die Quelle dieses anderen Quellcodes. ELASTICSEARCH ist eine eingetragene Marke von Elasticsearch B.V.
Weitere Informationen zu den Preisen von Amazon OpenSearch Service