Einstellung

Beschreibung

Ignore Category Instance

Wenn mehrere File Crawler auf einem Index konfiguriert sind, wird bei der Suche nicht auf konkrete Category Instances eingeschränkt.

Authorization Service

Aktuell wird für Microsoft File kein Authorization Service zur Verfügung gestellt.

Einstellung

Beschreibung

Root Directories (UNC Path)

In dieser Option können Sie festlegen, welche Verzeichnisse gecrawlt werden sollen.

Hinweise:

• Verzeichnisse sollten durch Zeilenumbrüche getrennt werden (maximal 24 Verzeichnisse).
• Falls Azure File Shares gecrawlt werden, muss die Kerberos-Authentifizierungsmethode in der Option „Authentication Type“ ausgewählt und verwendet werden.
• Für das Crawling mit der Option „Content Location Optimization“ unter Linux stellen Sie bitte sicher, dass die Root-Pfade gemountet sind.

Achtung: Stellen Sie sicher, dass der angegebene Pfad mit einem umgekehrten Schrägstrich bzw. „Backslash“ endet. Ist dies nicht der Fall, wird der angegebene Pfad nicht anerkannt.

Supports SMBv2/v3

Wenn deaktiviert, wird nur das SMBv1 Protokoll verwendet.

Wenn aktiviert, werden ebenfalls SMBv2/v3 Protokolle verwendet.

Disable SMB Packet Signing
(Advanced Settings)

Wenn aktiviert, wird für gesendete SMB-Pakete keine Signatur erzeugt und für empfangene Paketen wird die Signatur nicht verifiziert.

Encrypt Data

(Advanced Setting)

Aktiviert die Datenverschlüsselung. Stellen Sie sicher, dass “Maximum SMB2 Dialect” entweder Auto oder einer der folgenden SMB2-Dialekte ist: 3.0.0, 3.0.2, 3.1.1.

Disable SMB2 Multi-Protocol Negotiate
(Advanced Settings)

Wenn aktiviert, können dadurch bessere Fehlermeldungen ausgegeben werden falls der Server nur SMBv1 unterstützt.

Minimum SMB2 Dialect

(Advanced Setting)

Unterstützte SMB2-Dialekte sind 2.0.2, 2.1.0, 3.0.0, 3.0.2 und 3.1.1. Dieser Wert sollte kleiner oder gleich dem „Maximum SMB2 Dialect“-Wert sein.

Der tatsächlich verwendete SMB2-Dialekt wird durch das Ergebnis der „SMB2 Protocol Negotiation“ mit dem Dateifreigabeserver bestimmt.

Maximum SMB2 Dialect

(Advanced Setting)

Unterstützte SMB2-Dialekte sind 2.0.2, 2.1.0, 3.0.0, 3.0.2 und 3.1.1. Dieser Wert sollte kleiner oder gleich dem „Maximum SMB2 Dialect“-Wert sein.

Der Standardwert ist Auto. Für Azure Fileshares wird der Wert auf 3.1.1 gesetzt. Für alle anderen Fileshares wird der Wert auf 3.0.2 gesetzt.

Der tatsächlich verwendete SMB2-Dialekt wird durch das Ergebnis der „SMB2 Protocol Negotiation“ mit dem Fileshare-Server bestimmt.

SMB Client Transaction Timeout
(Advanced Settings)

Hier kann der Thread-Timeout (in Sekunden) für SMB Verbindungen festgelegt werden.

SMB Client Socket Timeout
(Advanced Settings)

Hier kann der Socket-Timeout (in Sekunden) für SMB Verbindungen festgelegt werden.

Crawl Last Modified Directory Files First
(Advanced Settings)

Wenn aktiviert, werden während der Traversierung eines Verzeichnisses, die Dateien und Unterverzeichnisse nach Änderungsdatums sortiert.

Dadurch werden die zuletzt geänderten Dateien und Verzeichnisse zuerst gecrawlt.

Root Traversal Threads Count

Hier kann die Anzahl von Threads festgelegt werden, die die Verzeichnisse vom “Root Directories” Feld parallel traversieren.

Documents Dispatcher Threads Count

Hier kann die Anzahl von Threads festgelegt werden, die die Verzeichnisse und deren Dokumente, die sich in der „Documents Dispatcher Queue“ befinden, parallel an den Index senden.

Documents Dispatcher Queue Size

Hier kann die maximale Anzahl der Verzeichnisse und deren Dokumente festgelegt werden, die sich in der Warteschlange befinden sollen, bevor diese durch „Document Dispatcher Threads“ von der Warteschlange entfernt und an Index geschickt werden.

Directory Files Lister Threads Count

Hier kann die Anzahl von Threads festgelegt werden, welche die Dateien, Unterverzeichnisse und die ACLs eines Verzeichnisses vom Filesystem Share mittels SMB abrufen. Die Unterverzeichnisse werden in der „Directory Files Lister Queue“ abgelegt. Die Verzeichnisse und deren Dateien werden in der „Document Dispatcher Queue“ abgelegt.

Directory Files Lister Queue Size

Hier kann die maximale Anzahl der Verzeichnisse für welche noch keine Dateien, Unterverzeichnisse und ACLs vom Filesystem Share abgerufen worden sind festgelegt werden, die in der Warteschlange stehen sollen.

Document Size Limit (MB)

Hier kann die maximale Dokumentengröße eingestellt werden. Dokumente, die größer als dieser Wert sind, werden ignoriert.

Hinweis: Wenn dieser Wert verändert wird, sollten auch die Optionen „Document Size Limit (MB)“ und „Filter RPC Timeout (non-streamed)“ im Filter Service angepasst werden.

Maximum Crawled Content Length in MB.

Wenn Dokumente die in dieser Option festgelegte Größe (in MB) überschreiten, werden sie mit leerem Inhalt an den Filter gesendet.

Includes (Regexp)

Wenn diese Option konfiguriert wird, werden nur jene Dateien und Verzeichnisse indiziert, welche dem angegebenen Muster (Regular Expression) entsprechen.

Excludes haben höhere Priorität als Includes (d.h wenn ein Dokument sowohl inkludiert, als auch exkludiert wird, wird es nicht indiziert).

Excludes (Regexp)

Wenn diese Option konfiguriert wird, werden jene Dateien und Verzeichnisse ignoriert, welche dem angegebenen Muster (Regular Expression) entsprechen.

Excludes haben höhere Priorität als Includes (d.h wenn ein Dokument sowohl inkludiert, als auch exkludiert wird, wird es nicht indiziert).

Include Patterns
(Advanced Settings)

Es werden nur jene Dateien und Verzeichnisse indiziert, welche dem angegebenen Muster (Regular Expression) entsprechen. Im Unterschied zum „Includes (Regexp)“ Feld, hat man hier die Möglichkeit mit der Verwendung von „regexpIgnoreCase:“, „case-insensitive“ und „regexp:“ „case-sensitive“ Muster (Reqular Expression) zu definieren oder mit dem „#“ Zeichen am Anfang der Zeile das Muster auskommentieren.

Exclude Patterns
(Advanced Settings)

Es werden jene Dateien und Verzeichnisse ignoriert, welche dem angegebenen Muster (Regular Expression) entsprechen. Im Unterschied zum „Includes (Regexp)“ Feld, hat man hier die Möglichkeit mit der Verwendung von „regexpIgnoreCase:“, „case-insensitive“ und „regexp:“ „case-sensitive“ Muster (Reqular Expression) zu definieren oder mit dem „#“ Zeichen am Anfang der Zeile das Muster auskommentieren.

Exclude Directories

Wenn aktiviert, werden Verzeichnisse nicht indiziert

Full Traversal Interval (Hours)

Hier kann das Intervall (in Stunden) zwischen zwei vollständigen Traversierungen aller Dokumente im Fileshare definiert werden. Die Standardeinstellung (-1) ist für die meisten Anwendungsfälle ausreichend und es ist eine vollständige Traversierung aller Dokumente im Abstand „Crawler Interval“. Bei sehr großen Fileshares kann es sinnvoll sein die inkrementelle Traversierung durchzuführen um sie zu beschleunigen. Dabei werden Dokumente die wegen Filter Probleme nicht indiziert wurden sind ignoriert.

Modifizierte Dokumente werden bei der inkrementellen Traversierung im Abstand von „Crawler Interval“ indiziert. Die Aktualisierung der Berechtigungen (ACLs) sowie die Entfernung von gelöschten Dokumenten von Index werden am Ende der inkrementellen Traversierung durchgeführt.

Remove Deleted Documents From Index

Wenn aktiviert, werden die Dokumente die vom Fileshare gelöscht wurden, am Ende einer vollständigen Traversierung aus dem Index gelöscht.

Remove Old Documents From Index (Number Of Years)

Wenn konfiguriert, werden Dokumente, deren Änderungsdatum älter als ein bestimmtes Datum ist, am Ende eines Traversals aus dem Index entfernt. Dieses Datum errechnet sich aus dem Startdatum des Crawlers minus der Anzahl der Jahre, die in diesem Feld definiert wurden.

Beispiel:

Das Änderungsdatum eines Dokuments ist der 20.09.2020 und die Einstellung „Remove Old Documents From Index (Number Of Years)” ist mit dem Wert “3” konfiguriert. Dementsprechend wird das Dokument am 21.09.2023 aus dem Index entfernt.

Content Location Optimization

Die Beschreibung dieser Option, finden sie hier.

Einstellung

Beschreibung

ACL Security Level

Folgende Optionen stehen zur Verfügung:

• Directory - Alle Dokumente bekommen nur die ACLs des entsprechenden Verzeichnisses. Die Share Rechte werden nicht inkludiert.
• File - Die ACLs werden pro Dokument berechnet. Die Share Rechte werden nicht inkludiert.
• Share - Alle Dokumente bekommen nur die ACLs des Shares. Für das Lesen der Share Rechte muss der Servicebenutzer Mitglied folgender lokalen (Share Server) Gruppen sein: Administrator, Power User, Print Operator oder Server Operator.
• Trustee - Die ACLs werden aus der Trustee Info Datei berechnet.
• None - Dokumente bekommen keine ACLs. Darf nur gemeinsam mit der „Unrestricted Public Access“ Option des Index konfiguriert werden.

Permission Mapping

(Advanced Settings)

Folgende Optionen stehen zur Verfügung:

• Full (deprecated) - Wenn diese Option ausgewählt ist, weist der Crawler dem Indexdokument alle im Dateisystem definierten ACEs entsprechend der Zugriffsart "Grant oder Deny" zu, unabhängig von der Art der im Dateisystem definierten Zugriffsberechtigung (Lesen, Schreiben, Löschen, Ändern etc.).
• Basic Read - Wenn diese Option ausgewählt ist, gewährt der Crawler nur denjenigen Benutzern oder Gruppen (ACE) Zugriff, die alle der folgenden erweiterten Zugriffsrechte auf die Datei haben:
  • Ordner auflisten / Daten lesen
  • Attribute lesen
  • Erweiterte Attribute lesen
  • Berechtigungen lesen

Der Crawler verweigert den Zugriff auf die Datei für Benutzer oder Gruppen, die für eine der oben genannten erweiterten Zugriffsberechtigungen den Zugriffstyp "Verweigern" haben. Die anderen erweiterten Zugriffsberechtigungen werden vom Crawler ignoriert.

Permission Mapping Validation

(Advanced Settings)

Wenn diese Option konfiguriert ist, wird eine Protokolldatei im aktuellen Logverzeichnis vom Crawler erstellt, um das ausgewählte „Permission Mapping“ mit einem anderen zu vergleichen.

• None - Es wird keine Vergleichsprotokolldatei erstellt.
• Basic Read - Diese Option soll ausgewählt werden, um Full „Permission Mapping“ mit Basic Read „Permission Mapping“ zu vergleichen. Das ausgewählte „Permission Mapping“ soll Full sein.
• Full - Diese Option soll ausgewählt werden, um Basic Read „Permission Mapping“ mit Full „Permission Mapping“ zu vergleichen. Das ausgewählte „Permission Mapping" soll Basic Read sein.

Normalize ACLs

(Advanced Settings)

Wenn die Checkbox aktiviert ist, werden die ACLs im „Distinguished Name“ Format gespeichert. Wenn die Checkbox nicht aktiviert ist, bleiben die ACLs im SID Format. In diesem Fall ist es wichtig, dass die „objectsid“ Attribute in den “User Alias Name LDAP Attribute” und “Group Alias Name LDAP Attribute”-Felder der ausgewählen LDAP principal resolution service konfiguriert sind.

Resolve Local Group Members

(Advanced Settings)

Manchmal beinhalten die ACLs von Dokumenten auch lokale Gruppen. Um die Domänenbenutzer oder Domänengruppen in diesen lokalen Gruppen aufzulösen, wird ein Zugriff auf LSA (Local Security Authority) und SAM (Service Account Manager) mittels RPC-SMB Protokoll benötigt. Falls der Crawler Service Benutzer die benötigten Rechte für LSA und SAM nicht hat, kann das Auflösen des Lokalen Gruppen hier deaktiviert werden. Dies wird jedoch grundsätzlich nicht empfohlen und sollte nur in Ausnahmefällen deaktiviert werden.

LSA/SAM Desired Access

(Advanced Settings)

Die bevorzugte Zugriffsberechtigung des Crawler Service Benutzers auf LSA und SAM. Maximum allowed, Generic all, Generic execute, Generic Read oder Read Control. Für das Crawlen von NetApp Shares sollte Read Control als LSA/SAM Desired Access ausgewählt werden. Wenn der Zugriff mit der ausgewählten Berechtigung nicht erfolgreich ist, werden die anderen Zugriffsberechtigungen ausprobiert.

Resolve All Domains

(Advanced Settings)

Um die Dateiberechtigungen (ACLs) verschiedener Domänen richtig zuordnen zu können muss die Option Resolve All Domains ausgewählt werden. Dafür ist es notwendig, dass entweder die LDAP Server dieser Domänen direkt unter „LDAP Server“ konfiguriert werden oder über DNS SRV Records von AD mittels LDAP aufgelöst werden können. Dafür sollen die Domänen im Network Tab unter LDAP Setting konfiguriert werden. Falls „Resolve All Domains“ nicht ausgewählt ist, werden nur die ACLs von der Domäne des File Share Servers richtig aufgelöst.

Einstellung

Beschreibung

Trustee Information File Path

Der Pfad zur Trustee Information Datei, welche in einem Freigegebene Ordner (UNC Pfad) oder in einem lokalen Ordner gespeichert sein kann.

Trustee Volume Path

Der Volume-Pfad in der Trustee Information Datei zu konfiguriertes Root-Verzeichnis. Dieses Feld soll nicht konfiguriert werden, wenn das Root-Verzeichnis dem Volume-Pfad entspricht.

Einstellung

Beschreibung

Root Directory (UNC Path)

Verwenden Sie hier denselben Pfad wie bei der Crawling Root.

Root Directory (Mount Path)

Der Lokale Pfad an dem das Netzwerkdateisystem eingehängt ist.

Files Pattern (Regex)

Ein regulärer Ausdruck der jenen Dateien entspricht für die Content Location Optimization verwendet werden soll.

• Einstellung

• Beschreibung

• Username

• Der Username des Benutzers.

• Domain

• Der Domainname des Benutzers.

• Password

• Das Passwort des Benutzers.

• Authentication Type

(Advanced Setting)

• Hier kann festgelegt werden, welche Authentisierungsmethode verwendet werden soll.

Standardmäßig wird die NTLM-Authentisierung verwendet. Dazu ist es erforderlich, dass „Username“, „Domain“ und „Password“ konfiguriert werden müssen.

Falls Kerberos-Authentisierung ausgewählt ist, muss für den Crawler ein Kerberos Keytab und Principal im „Authentication“-Tab ausgewählt werden. Weitere Informationen dazu finden sie hier.

Alternativ können auch dafür „Username“, „Domain“ und „Password“ konfiguriert werden, was jedoch für diese Authentifizierungsmethode nicht empfohlen wird.

Einstellung

• Beschreibung

Dry Run

(Advanced Settings)

• Während eines Dry-Runs wird der Indizierungsstatus der Dokumente nicht geändert. Alle Dokumente in der konfigurierten Dateifreigabe werden durchlaufen, Metadaten und ACLs werden mit dem Index verglichen, ohne den Inhalt herunterzuladen, und das Ergebnis wird im Crawler-Logverzeichnis protokoliert. Mit einem Dry-Run können Sie bestimmte Konfigurationsänderungen, z.B. "ACL Security Level", vorab testen.

Content Type Mapping Description File

• Der Pfad zur Datei, der kundenspezifische Abbildungsregeln für die Dokument-Metadaten enthält.
• Achtung: Dieses Dokument wird nur vom Mindbreeze Support Team zur Verfügung gestellt.

Always Update Files Matching Regex

• Dokumente die mit diesem Regex übereinstimmen, werden an den Filter gesendet auch wenn sie nicht verändert wurden.

Ignore Content of Documents without Extension

Ist diese Einstellung aktiviert, wird keine automatische Mimetype-Erkennung bei Dokumenten, die keine Extension haben, durchgeführt. Die Inhalte dieser Dokumente werden nicht indiziert.

Disable Default Extension

Ist diese Einstellung aktiviert, bleiben Dokumente, die keine Extension haben und wo die automatische Mimetype-Erkennung fehlgeschlagen ist, ohne Extension.

Ist diese Einstellung deaktiviert, wird eine Default Extension verwendet.

Fetch Preview Content from Datasource

Um eine PDF Vorschau für PDF Dokumente zu ermöglichen werden PDF Dokumente als binäre Dateien im Index gespeichert. Ist diese Einstellung aktiviert, werden die binären Dateien stattdessen von der Datenquelle direkt geladen. Dadurch kann das Speichern der PDF Inhalte im Index in der Filter Konfiguration deaktiviert werden, womit der Speicherplatzbedarf des Index reduziert wird.

Enable Heap Dump On OutOfMemory

Wenn der Crawler mehr Speicher benötigt als im Plugins.xml <vm_arg> konfiguriert wurde, wird ein Heap Dump im Logverzeichnis für weitere Analysen erstellt. Wieviel Speicher der Crawler zur Verfügung hat, steht im Connector Plugins.xml unter <vm_arg>.

Max. Retry Duration by Filter Connection Problems

Die maximal erlaubte Zeit in welcher der Crawler versucht ein Dokument wiederholt an den Filter Service zu senden, während Verbindungsprobleme bestehen.

Retry Interval during Repository Connection Problems

Die Menge an Zeit, die der Crawler wartet, bevor er versucht sich wieder mit der Datenquelle zu verbinden, während Verbindungsprobleme bestehen.

Max. Retry Duration during Repository Connection Problems

Die maximal erlaubte Zeit in welcher der Crawler versucht sich wieder mit der Datenquelle zu verbinden, während Verbindungsprobleme bestehen.

Disable logging for excluded documents

(Advanced Settings)

Ist diese Einstellung aktiviert, werden ausgeschlossene Dokumente nicht in den Crawler-Logs und im app.telemtry Service Log-Pool aufgenommen. Dies ist nur dann notwendig, wenn viele Dokumente durch die Einstellung "Exclude Patterns" ausgeschlossen werden.