Amazon S3 Dateneingabekonfigurationsfelder
Beschreibung der Felder in Amazon S3 Formular für Dateneingabekonfiguration.
Basiskonfiguration
| Feld | Beschreibung |
|---|---|
| Name | Name der neuen Dateneingabe. Dies ist ein Pflichtfeld. |
| Beschreibung | Beschreibung der Dateneingabe |
| Ausführen auf | Option zum Auswählen, ob ein bestimmtes verwendet werden soll MID-Server Oder ein MID-Server Cluster. |
| MID |
(Nur wenn Ausführen am Feld ist auf bestimmten MID-Server festgelegt) MID-Server An, von dem Daten protokolliert werden Amazon S3 Wird abgerufen.Hinweis: Dies ist ein Pflichtfeld.
|
| MID-Server-Cluster | (Nur wenn Ausführen am Ist auf festgelegt MID-Server Cluster.) Die MID-Server Cluster, in den die Protokolldaten abgerufen werden.Die Dateneingabe wird für einen einzelnen ausgeführt MID-Server Im Cluster bis dahin MID-Server Schlägt fehl. Das System verschiebt dann alle Dateneingabeaufgaben in die nächsten verfügbaren Aufgaben MID-Server Im Cluster gemäß der konfigurierten Reihenfolge. Hinweis: Weitere Informationen zu finden MID-Server Cluster, siehe Konfigurieren Sie einen MID-Server-Cluster .
Dies ist ein Pflichtfeld. |
| Serviceinstanz | Die Serviceinstanz, an die die Protokolldaten gebunden werden sollen. Hinweis: Dies ist ein Pflichtfeld.Wenn keine relevante Serviceinstanz vorhanden ist, Erstellen Sie einen Serviceinstanz Und fügen Sie CIs hinzu. Legen Sie den Status der neuen Serviceinstanz auf betriebsbereit fest. |
Die folgenden Felder zeigen schreibgeschützte Informationen:
| Feld | Beschreibung |
|---|---|
| Status | Status der Dateneingabe |
| Übertragung | Protokoll zum Streamen der Protokolldaten. Die Dateneingabe verwendet Amazon S3 zum Streamen von Protokolldaten an Ihre Instanz. |
| Quellenanzahl | Die Anzahl der Protokollquellen, die diese Dateneingabe erstellt haben. |
| Deaktiviert seit | Zeitpunkt, zu dem die Dateneingabe gestoppt wurde oder fehlgeschlagen ist. |
| Zeit des letzten Protokolls | Zeitpunkt, zu dem das letzte Protokoll in die Dateneingabe gestreamt wurde. |
| Fehlermeldung | Der Streaming-Fehler. Dieses Feld wird automatisch ausgefüllt. Wird nur angezeigt, wenn ein Streaming-Fehler aufgetreten ist. |
| Feld | Beschreibung | Beispiel |
|---|---|---|
| Von/Bis | Von/Bis-Datum und -Uhrzeit zum Lesen der Daten.
|
Von: Jetzt -1 Woche Bis: 2300-01-01 15:59:59 |
| Bucket-Name | Das zu streamende Amazon S3-Bucket Dies ist ein Pflichtfeld. |
my-s3-bucket |
| Präfix | Präfix für die abzurufenden Objekte. Die Dateneingabe ruft nur Objekte ab, die mit diesem Präfix beginnen. Dieses Feld wird normalerweise verwendet, um nur bestimmte Ordner in einem Bucket abzurufen. | /nur/dieses/verzeichnis/ |
| Einbeziehen | Datei oder Objekt, die/das einbezogen werden soll, wenn das System einen Musterabgleich durchführt. | .*bezieh-mich-ein.* |
| Ausschließen | Datei oder Objekt, die/das ausgeschlossen werden soll, wenn das System einen Musterabgleich durchführt. | .*überspring-mich.* |
| Feld | Beschreibung |
|---|---|
| AWS-Anmeldeinformationen | Feld, das auf die Liste „AWS-Anmeldeinformationen“ (aws_credentials.list) verweist. Die Liste enthält den AWS-Zugriffsschlüssel und den geheimen Zugriffsschlüssel. |
| AWS-Region | AWS-Region, in der sich das Amazon S3-Bucket befindet, z. B. us-west-1. Eine Liste der AWS-Regionen finden Sie unter https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/using-regions-availability-zones.html#concepts-regions. Dies ist ein Pflichtfeld. |
Erweiterte Konfiguration
| Feld | Beschreibung | Standardwert |
|---|---|---|
| Anonym | Option zum Erzwingen des Zugriffs auf den Amazon S3-Bucket ohne Anmeldeinformationen, wobei Standardanmeldeinformationen, falls vorhanden, ignoriert werden. | Falsch |
| Durchlaufen | Option für den Zugriff auf jedes Verzeichnis im Bucket. | Falsch |
| Objekte sortiert nach dem Zeitpunkt der letzten Änderung | Option zum Abrufen von Objekten, wenn die Objekte im Bucket nach Zeit sortiert sind. | Falsch |
| Verbindungstimeout | Anzahl der Millisekunden, die gewartet werden soll, bevor der AWS-Verbindungsversuch abgebrochen wird. | 100 |
| Threadpool-Größe | Anzahl der gleichzeitigen Threads, die Dateien aus dem Bucket herunterladen. | 1 |
| Puffergröße | Größe des Download-Puffers in Byte. | 100 MB |
| Socket-Zeitüberschreitung | Anzahl der Millisekunden, die gewartet werden soll, bevor bei einer Datenübertragung über eine hergestellte Verbindung eine Zeitüberschreitung auftritt. | 10000 |
| Max retry for file (Max. Wiederholungsversuche für Datei) | Maximale Anzahl der Wiederholungen der Dateiverarbeitung im Fehlerfall. | 10 |
| Standardzeitzone | Standardzeitzone, wenn das Protokoll keine Zeitzoneninformationen enthält. | UTC |
| Anteil der zu verwerfenden Unterstichproben | Anzahl der Events, die als Stapel ausgeführt werden sollen und von denen eines verworfen wird. Diese Einstellung wird verwendet, um die Anzahl der abgerufenen Events zu reduzieren. | -1 |
| Anteil der zu empfangenden Unterstichproben | Anzahl der Events, die als Stapel ausgeführt werden sollen und von denen alle bis auf eines verworfen werden. Diese Einstellung wird verwendet, um die Anzahl der empfangenen Events zu reduzieren. | -1 |
| Quotengrenze | Maximale Anzahl von Events pro Sekunde, die diese Dateneingabe verarbeitet. | -1 |
| Maximale Länge in Bytes | Maximale Länge von Events in Byte. | 32766 |
| Zeichencodierung | Zeichencodierung für diese Dateneingabe | UTF-8 |
| Ruhezustandsintervall | Intervall der Wartezeit in Sekunden, bevor eine weitere Abfrage ausgeführt wird, nachdem eine Abfrage keine Events zurückgegeben hat. | 60 |
| Abfrageintervall | Intervall in Sekunden, das gewartet werden soll, bevor neue Events abgerufen werden. | 0 |
| Verwerfen, wenn Warteschlange voll ist | Hiermit legen Sie fest, dass Protokolle verworfen werden, wenn der MID-Server ausgelastet ist. | Falsch |