Home
Home
Englische Version
Support
Impressum
20.5 Release ►

    Main Navigation

    • Vorbereitung
      • Einrichten InSpire G7 Primärsystem und Standby Appliances
      • Initiale Inbetriebnahme für G6 Appliances (vor Jänner 2018 ausgeliefert)
      • Initiale Inbetriebnahme für G7 Appliances
      • Konnektoren
    • Datenquellen
      • Anleitung zur Datenintegration mithilfe eines SQL Datenbank-Beispiels
      • Indizierung benutzerspezifischer Eigenschaften (SharePoint 2013 Connector)
      • Indizierung benutzerspezifischer Objekttypen (Documentum)
      • Installation & Konfiguration - Atlassian Confluence Sitemap Generator Add-On
      • Installation & Konfiguration - Caching Principal Resolution Service
      • Installation & Konfiguration - Jive Sitemap Generator
      • Konfiguration - Atlassian Confluence Connector
      • Konfiguration - Best Bets Connector
      • Konfiguration - Data Integration Connector
      • Konfiguration - Documentum Connector
      • Konfiguration - Dropbox Connector
      • Konfiguration - Egnyte Connector
      • Konfiguration - GitHub Connector
      • Konfiguration - Google Drive Connector
      • Konfiguration - GSA Adapter Service
      • Konfiguration - HL7 Connector
      • Konfiguration - IBM Connections Connector
      • Konfiguration - IBM Lotus Connector
      • Konfiguration - Jira Connector
      • Konfiguration - JiveSoftware Jive Connector
      • Konfiguration - JVM Launcher Service
      • Konfiguration - LDAP Connector
      • Konfiguration - Microsoft Dynamics CRM Connector
      • Konfiguration - Microsoft Exchange Connector
      • Konfiguration - Microsoft File Connector (Legacy)
      • Konfiguration - Microsoft File Connector
      • Konfiguration - Microsoft SharePoint Connector
      • Konfiguration - Salesforce Connector
      • Konfiguration - SAP KMC Connector
      • Konfiguration - SemanticWeb Connector
      • Konfiguration - ServiceNow Connector
      • Konfiguration - SharePoint Online Connector
      • Konfiguration - Web Connector
      • Konfiguration - Yammer Connector
      • Mindbreeze InSpire Insight Apps in Microsoft SharePoint Online
      • Mindbreeze InSpire Suchanwendungen in Microsoft SharePoint 2010
      • Mindbreeze InSpire Suchanwendungen in Microsoft SharePoint 2013
      • Mindbreeze Web Parts in Microsoft SharePoint
    • Konfiguration
      • CAS Authentifizierung
      • Cognito JWT Authentifizierung
      • Cookie Authentifizierung
      • I18n Item Transformation
      • Konfiguration - Alternative Suchvorschläge und automatische Sucherweiterung
      • Konfiguration - Backend Credentials
      • Konfiguration - Benachrichtigungen
      • Konfiguration - CJK Tokenizer Plugin
      • Konfiguration - CSV Metadata Mapping Item Transformation Service
      • Konfiguration - Entity Recognition
      • Konfiguration - Export Funktionalität
      • Konfiguration - Gesammelte Ergebnisse
      • Konfiguration - GSA Late Binding Authorization
      • Konfiguration - Index-Servlets
      • Konfiguration - Item Property Generator
      • Konfiguration - Kerberos Authentfizierung
      • Konfiguration - Management Center Menü
      • Konfiguration - Metadata Reference Builder Plugin
      • Konfiguration - Metadaten Anreicherung
      • Konfiguration - Microsoft SharePoint Connector
      • Konfiguration - Mindbreeze InSpire
      • Konfiguration - Outlook Add-In
      • Konfiguration - Personalisierte Relevanz
      • Konfiguration - Plugin Installation
      • Konfiguration - Principal Validation Plugin
      • Konfiguration - Profile
      • Konfiguration - Reporting Query Log
      • Konfiguration - Reporting Query Performance Tests
      • Konfiguration - Request Header Session Authentisierung
      • Konfiguration - Vokabulare für Synonyme und Autovervollständigung
      • Konfiguration von Vorschaubildern
      • Mindbreeze Personalization
      • Mindbreeze Prediction Service mit Beispiel Textklassifizierung
      • Mindbreeze Property Expression Language
      • Mindbreeze Query Expression Transformation
      • Non-Inverted Metadata Item Transformer
      • SAML Authentifizierung
      • Spracherkennung mit dem LanguageDetector Plugin
      • Trusted Peer Authentication für Mindbreeze InSpire
      • Verwendung von InSpire-Snapshots in einer CI_CD-Umgebung
    • Betrieb
      • app.telemetry Statistiken zu Suchanfragen
      • Bereitstellen von app.telemetry Informationen mittels SNMPv3 auf G7 Appliances
      • Handbuch - Filemanager
      • Handbuch - Indizierungs- und Suchlogs
      • Handbuch - Kommandozeilenwerkzeuge
      • Handbuch - Sichern & Wiederherstellen
      • Handbuch - Synchronisierter Betrieb (G6)
      • Handbuch - Verteilter Betrieb (G7)
      • Index Betriebskonzepte
      • Inspire Diagnose und Ressourcen Monitoring
      • Konfiguration - Nutzungsanalyse
      • Löschung der Festplatten
      • Mindbreeze InSpire SFX Update
      • Wiederherstellen des Lieferzustandes
    • Anwenderhandbuch
      • Cheat Sheet
      • iOS App
      • Tastaturbedienung
    • SDK
      • api.v2.alertstrigger Schnittstellenbeschreibung
      • api.v2.export Schnittstellenbeschreibung
      • api.v2.personalization Schnittstellenbeschreibung
      • api.v2.search Schnittstellenbeschreibung
      • api.v2.suggest Schnittstellenbeschreibung
      • api.v3.admin.SnapshotService Schnittstellenbeschreibung
      • Entwicklung eines API V2 Search Request Response Transformer
      • Entwicklung von Insight Apps
      • Java API Schnittstellenbeschreibung
      • SDK Übersicht
    • Release Notes
      • Release Notes 20.1 Release - Mindbreeze InSpire
      • Release Notes 20.2 Release - Mindbreeze InSpire
      • Release Notes 20.3 Release - Mindbreeze InSpire
      • Release Notes 20.4 Release - Mindbreeze InSpire
      • Release Notes 20.5 Release - Mindbreeze InSpire
      • Release Notes 2018 Spring - Mindbreeze InSpire
      • Release Notes 2018 Winter - Mindbreeze InSpire
      • Release Notes 2019 Fall - Mindbreeze InSpire
      • Release Notes 2019 Winter - Mindbreeze InSpire
    • Sicherheit
      • Bekannte Schwachstellen
    • Produktinformation
      • Produktinformation - Mindbreeze InSpire - Standby
      • Produktinformation - Mindbreeze InSpire
    Home

    Path

    Betrieb

    Indizierungs-, Such- und Syslogs

    Copyright ©

    Mindbreeze GmbH, A-4020 Linz, .

    Alle Rechte vorbehalten. Alle verwendeten Hard- und Softwarenamen sind Handelsnamen und/oder Marken der jeweiligen Hersteller.

    Diese Unterlagen sind streng vertraulich. Durch die Übermittlung und Präsentation dieser Unterlagen alleine werden keine Rechte an unserer Software, an unseren Dienstleistungen und Dienstleistungsresultaten oder sonstigen geschützten Rechten begründet. Die Weitergabe, Veröffentlichung oder Vervielfältigung ist nicht gestattet.

    Aus Gründen der einfacheren Lesbarkeit wird auf die geschlechtsspezifische Differenzierung, z.B. Benutzer/-innen, verzichtet. Entsprechende Begriffe gelten im Sinne der Gleichbehandlung grundsätzlich für beide Geschlechter.

    Log DateienPermanenter Link zu dieser Überschrift

    Das Verzeichnis für die Mindbreeze Enterprise Search Services Log Dateien kann in „Advanced Settings“ konfiguriert werden.

    Per Default ist es unter Linux „/var/opt/mindbreeze/log“ und unter Windows „c:/Users/<service user>/App Data/Local/Temp“ eingetragen. Im folgenden Kapiteln wird dieses Verzeichnis als „Log Directory“ bezeichnet.

    Client Service Log DateienPermanenter Link zu dieser Überschrift

    Die Client Service Log Dateien befinden sich im „Log Directory/log-mesclientservice-<client-port>“ Verzeichnis, wo für jeden Neustart ein Unterverzeichnis mit dem entsprechenden Zeitstempel angelegt wird.

    Query Service Log DateienPermanenter Link zu dieser Überschrift

    Die Query Service Log Dateien liegen unter „Log Directory/log-mesindex<index path>“ mit Unterverzeichnissen für jeden neuen Start. Relevante Query Service Log Dateien sind:

    • log-mesindex.log
    • performance-findservlet.csv  

    Folgende Spalten der „performance-findservlet.csv“ Datei haben eine wesentliche Rolle bei der Analyse von Suchanfragen.

    • Starting Timestamp: Start Zeitpunkt
    • Query: Beinhaltet der Suchbegriff
    • Authorized Hit Count: Die Anzahl von autorisierte Dokumente
    • Rejected Hit Count: Die Anzahl von nicht autorisierte Dokumente

    Die Autorisierung und Kontextualisierung als Teil des Query Services wird in separaten Prozessen durchgeführt. Die Log Dateien liegen unter „Log Directory/log-messdkjavasandbox-bootstrapped-<query-port>“, „Log Directory/log-messdkcsandbox-<query-port>“ oder in der „Log Directory/log-messdknetsandbox-<query-port>.txt Datei je nach der Implementierung (Java, C oder .NET)

    Crawler Log DateienPermanenter Link zu dieser Überschrift

    Die Crawler Logs liegen im „Log Directory/log-mescrawler-launchedservice-<Category>_<Source Name>“ Verzeichnis.

    Microsoft Exchange 2010Permanenter Link zu dieser Überschrift

    log-mescrawler_launchedservice_Microsoft_Exchange_<Source Name>.log beinhaltet sämtliche Informationen wie: Start Zeitpunkt, gefundene Mailboxen (AD), Crawler Status Fetch, Zeitpunkt wann eine Mailbox fertig durchsucht ist und End Zeitpunkt mit den gesammelten Statistiken über die gesamte Anzahl von gefundenen, indizierten und gelöschten Dokumenten.

    Es werden zusätzlich CSV Log Dateien generiert. Die Namen der CSV Log Dateien entsprechen dem zugehörigen „Crawl Run“ bzw. „Scope“. Folgende Dateien habe eine wesentliche Rolle bei der Analyse von Delta-Indizierungen:

    per-folder-finditems-<crawlrun>_<scope>.csv: Beinhaltet die Informationen aller gefundenen Ordner der Postfächer, die im Zeitbereich (scope) erstellt oder geändert worden sind. Die wichtigsten Spalten sind:

    • Timestamp: Start Zeitpunkt
    • Mailbox: Email Adresse
    • Path: Pfad von Ordner <mailbox>/ordner/unterordner/…
    • PerFolderFoundItemsSize: Anzahl von gefundene Items die neue erstellt oder geändert sind.

    mindbreeze-dispatcher-<crawlrun>_<scope>.csv: Alle Dokumente bzw. Emails die an das Filter Service gesendet worden sind. Die wichtigsten Spalten sind:

    • Timestamp: Start Zeitpunkt
    • Key:
    • Mailbox: Email Adresse
    • Folder: Der Ordner wo dieser Email sich befindet

    FilesystemPermanenter Link zu dieser Überschrift

    „Log Directory/log-mesfscrawler_<indexpath>.log“ beinhaltet sämtliche Informationen die von Filesystem Crawler generiert werden.

    Filter Service Log DateienPermanenter Link zu dieser Überschrift

    Die Filter Service Log Dateien befinden sich im „Log Directory/log-mesfilterservice-<port>“ Verzeichnis. Die statistic-filter-rpc.csv Datei gibt z.B. Information über verwendete Filter Plugin, Datei Endungen und mögliche Fehler beim Filtern. Die wichtigsten Spalten sind:

    • Timestamp: Start Zeitpunkt
    • Extension: Datei Endung
    • Used Filter ID: Filter Plugin
    • Internal Exception: mögliche Fehler

    Das tatsächliche Filtern passiert in separaten Prozessen. Je nach Implementierung des Filter Plugins (Java, C oder .NET) werden die „Log Directory/log-messdkjavasandbox2-Filter@<port>“, „Log Directory/log-messdkcsandbox2-Filter@<port>“ Verzeichnisse oder „Log Directory/log-messdknetsandbox-<port>.txt“ Datei generiert.

    Index Service Log DateienPermanenter Link zu dieser Überschrift

    Die Index Service Log Dateien liegen im „Log Directory/log-mesindex<index path>“ Verzeichnis. Alle Informationen bzgl. des Zustands der Indizierung (Invertieren, Mergen und Announcen) befindet sich in der log-mesindex.log Datei.

    performance-servlet-mes3_indexeddocuments.csv gibt Auskunft über die Anzahl von Dokumenten die vom Index Service erreicht wurden.

    performance-servlet-mes3_deletedocuments.csv gibt Auskunft über die Anzahl von Dokumenten die aus dem Index gelöscht worden sind.

    performance-servlet-mes3_updatedocuments.csv gibt Auskunft über die Anzahl von Dokumenten die im Index aktualisiert worden sind.

    System-Logdateien (G7)Permanenter Link zu dieser Überschrift

    Mindbreeze InSpire Appliances sammeln logs unter anderem aus folgenden Quellen:

    System-Logs des Host Systems

    Logs der Docker Container

    Logs von Reverse-Proxy und Keycloak Server

    Logs von Mindbreeze Prozessen

    Diese werden automatisch an den syslog Server im InSpire Container und an die app.telemetry weitergeleitet.

    Aufteilung auf Log DateienPermanenter Link zu dieser Überschrift

    /var/log/messagesenthält Meldungen von Mindbreeze Services sowie Startmeldungen vom Host und den Containern

    /var/log/reverse-proxyenthält Meldungen der Reverse-Proxy Server

    /var/log/cronenthält Meldungen der Cron Jobs

    /var/log/secureenthält Audit und Authentifizierungsmeldungen (login, logout, …)

    Filtered Log Pools in der app.telemetryPermanenter Link zu dieser Überschrift

    In der app.telemetry sind die Logmeldungen im Logpool: “Syslog Events” ersichtlich.
    Zusätzlich gibt es folgende “Filtered Log Pools”:

    Syslog Audit Events: entspricht /var/log/secure

    Syslog Reverse Proxy Events: entspricht /var/log/reverse-proxy

    Use-Case Audit Logs abholenPermanenter Link zu dieser Überschrift

    Die Audit logs (/var/log/secure) können mittels File Manager abgeholt werden:

    Weiterleitung an einen externen Syslog-ServerPermanenter Link zu dieser Überschrift

    Zusätzlich ist es möglich die oben genannten Logs an einen Syslog-Server weiterzuleiten.
    Dazu muss der Server wie folgt in die Datei “/config/rsyslog/remote.conf” eingetragen werden.

    *.*@<hostname oder ip>:<port> (verwendet UDP)

    Oder

    *.*@@<hostname oder ip>:<port> (verwendet TCP)

    Dadurch werden alle Log-Meldungen weitergeleitet. Um die Weiterleitung feingranularer zu Konfigurieren verwenden Sie bitte die Dokumentation zu rsyslog.

    Die Log-Meldungen können auch verschlüsselt übertragen werden wenn der Zielserver dies unterstützt. Dazu müssen die korrekten Zertifiikate konfiguriert werden: Z.B.:

    $DefaultNetstreamDriverCAFile /config/rsyslog/ca-cert.cer

    $DefaultNetstreamDriverCertFile /config/rsyslog/client-cert.cer

    $DefaultNetstreamDriverKeyFile /config/rsyslog/cliet-cert.key

    $DefaultNetStreamDriver gtls

    $ActionSendStreamDriverMode 1

    $ActionSendStreamDriverAuthMode anon

    Weitere Konfigurationsmöglichkeiten finden sich ebenfalls in der Dokumentation zu rsyslog.

    Thread DumpsPermanenter Link zu dieser Überschrift

    Um Informationen über den aktuellen Zustand eines Prozesses zu erhalten, können Thread-Dumps erstellt werden.

    Für alle Arten von Prozessen wird die Prozess-ID (PID) benötigt. Sie befindet sich im Log-Verzeichnis des Prozesses (xxxxx.pid) wobei xxxxx der PID entspricht.

    Thread Dumps von Java ProzessenPermanenter Link zu dieser Überschrift

    Um einen Thread Dump von Java Prozessen zu erstellen muss das “QUIT”-Signal and den jeweiligen Prozess gesendet werden.

    kill-QUIT <PID>

    Der Thread Dump befindet sich dann in der Log-Datei des Prozesses.

    Thread Dumps von nativen ProzessenPermanenter Link zu dieser Überschrift

    Um einen Thread Dump eines nativen Prozesses zu erstellen (z.B.: mesindex) kann das Hilfsskript “thread-dump-native.sh” verwendet werden.

    /opt/mindbreeze/scripts/thread-dump-native.sh <PID>

    Der Thread Dump wird direkt ausgegeben, kann aber in eine Datei umgeleitet werden.

    PDF herunterladen

    • Handbuch - Indizierungs- und Suchlogs

    Inhalt

    • Log Dateien
    • System-Logdateien (G7)
    • Thread Dumps

    PDF herunterladen

    • Handbuch - Indizierungs- und Suchlogs