12.11.2019

2263

Suche Suchprogramm

Hallo,
ich brauche einen Tipp für ein profesionelles Suchprogramm.
Es geht um rund 3 TB Dokiumente auf ner externen USB 3 Storage.
Es sollen Inhalte und Namen gesucht werden können und möglichst auch Emails (Thunderbird/Outlook).
Welche hatte ich bislang probiert:

Indexyourfiles - überfordert stürzt ab, Inhaltssuche dauert ewig (10 Minuten null Ergebnisse trotz 3 Wochen indexieren; Index kommt nie zum Ende)
Archivarius - überfordert stürzt ab (Gigantischer Index von 70 GB; nach 3 Tagen plötzlich defekt)
Hubbelbee - stürzt ohne Fehlermeldung ab, lt. SUpport zuviele Daten, die Oberfläche ist topp. Angebot eines NAS mit ENterprise Edition war dann doch etwas zu viel. 1200 €, keine Einstellmöglichkeiten (Indexort)
Google Desktop - keine Ergebnisse

Muss keine Freeware sein. Möglichst Deutsch.

mfG
tsunami

Bitte markiere auch die Kommentare, die zur Lösung des Beitrags beigetragen haben

Content-ID: 514162

Url: https://administrator.de/forum/suche-suchprogramm-514162.html

Ausgedruckt am: 30.04.2025 um 04:04 Uhr

27 Kommentare

Neuester Kommentar

DocFetcher

Hi
probier mal Agent Ransack

CH

Moin,

dazu noch eine Frage:

Zitat von @tsunami:

Archivarius - überfordert stürzt ab (Gigantischer Index von 70 GB; nach 3 Tagen plötzlich defekt)

das sind gerade einmal 2% der Daten. Enorm wenig in meinen Augen, wenn man bedenkt, was das Tool alles indiziert.
Wie sind also in diesem Punkt deine Anforderungen?

Gruß

Agent Ransack ist doch schon mal ein guter Ansatz!
docFetcher ist sehr gewöhnungsbedürftig.
Teste beides gerade
Vielen Dank estmal!

@Kraemer: 70 GB als Datenbank finde ich sehr viel.
Normalerweise sind da doch nur Texte drin.
Dürfte also max 1 GB sein.
1 MB sind doch 1024 x 1024 Zeichen also zB einmal die Bibel
Was bedeutet Anforderungen?

Ich möchte zB Eingeben können, Suche "Donau".
Dateityp: Dokumente -> Durchsucht alle Dokumente nach Donau oder optional mit dem Wort Donau im Inhalt.
=> Donaxyz.odt
Donau_peep.doc
PengDonau.pdf
...
und optional:
blah blah blah Donau blah blah blah => Hugo.doc
blah blah blah Donau blah blah blah => Muas.odt
blah blah blah Donau blah blah blah => Himmel.pdf
...

Dürfte also max 1 GB sein.
1 MB sind doch 1024 x 1024 Zeichen also zB einmal die Bibel

Milchmädchen Rechnung, schon mal was von Unicode/UTF8 usw. gehört? Und Datenbanken haben immer entsp. Overhead. Durch Zusammenfassung u. Komprimierung gibt es aber sicherlich effizientere Algorithmen.

@calender sollte auch meiner bescheidener Meinung nach kleiner sein, wenn da mal ein gescheiter Algorithmus implementiert worden ist, z.B. B-Tree.

Zitat von @tsunami:
Was bedeutet Anforderungen?

na genau in dem Kontext. Wie groß darf die Datenbank werden?
Die Frage hast de ja nun beantwortet

Dürfte also max 1 GB sein.

Hi,

kann es an der USB-Anbindung liegen?

Irgendeine Chance das auf eine Interne/(kleinen) Server zu kopieren?

sg Dirm

@Kraemer Max 1 GB meinte isch so nicht. Nur 70 GB finde ich zu groß. Wie gesagt, es sind doch nur texte.
Als Beispiel die Bibel. Da brauche ich doch in der Datenbank keine Schriftart, Farbe, Hintergrund usw., sondern reinen Text. Wenn ich dann nach Moses suche, müsste er mir das Dokument Bibel.pdf rauswerfen, optimalerweise mit den Stellen, wo Moses steht markiert. Ob in dem Original Dokument dann tot, fett oder unterstrichen ist, ist doch für den Index egal, oder?
@Dirmhirn der Server ist ja Quasi da. Ein USB Raid. Ich habe da relativ viel Kohle für gezahlt und wollte nun eigendlich nicht nochmal nen 1000ender investieren. (3 TB!)

@all Ich hatte früher mal so eine Software, ich meine von einem Schweizer. Da konnte man sogar einzelne Foren einbinden...
mfG
tsunami

Guten Morgen zusammen.
Docfetcher ist nun schon mal raus. Absturz mit "Zu wenig Arbeitsspeicher" bei I7 und 16 GB...

Und Agent Ransak überzeugt nicht. Sucht nach einem Wort und ist nach 15 Minuten bei 15% der Dateien durchsucht.
Der Index lief nun 24 h.

Zitat von @tsunami:

Guten Morgen zusammen.
Docfetcher ist nun schon mal raus. Absturz mit "Zu wenig Arbeitsspeicher" bei I7 und 16 GB...

Hm dann hast du das entweder nur als 32bit Prozess gestartet oder einen Fehler gemacht. Hir läuft DocFetcher seit Jahren mit einem Datenbestand über 50TB wie Schmidts Katze auf einem System mit 8GB RAM klaglos.

Hm, was kann man da falsch machen? Index anlegen und laufen lassen...
Nach 15 h dann der Fehler

Ok, die Portable Version...

Ich benutze als Google Desktop Ersatz Copernic Desktop Search.
Kann man ordentlich testen, den Indexort ändern und kann auch in Mails "stöbern".. wie es sich aber bei 3TB Daten verhält kann ich dir auch nicht sagen

Ups, copernic hatte ich auch schon. Absturz, keine Ergebnisse.

Zitat von @tsunami:
Absturz, keine Ergebnisse.

Wow bei dir scheint alles abzustürzen was Bit's und Bytes hat

. Vielleicht hilft Anleinen

Zitat von @141815:
Wow bei dir scheint alles abzustürzen was Bit's und Bytes hat

. Vielleicht hilft anleinen

dachte ich auch gerade. Vielleicht mal Dateisystem / Platte reparieren...

@141815
Wie kann ich das expliziet als 64bit starten?
Er installiert sich in Programme (x86)
In der Doku steht er untertützt beides. Aber wie sage ich ihm nimm expliziet die 64er?
Gerade wieder: Zu wenig Arbeitsspeicher...

Die Platte ist 3 Monate alt.
Ich denke, dass es einfach die Menge ist, die die normalen Programme überfordern.
Deshalb fragte ich nach professionellem Programm.
Hab nun woanders getestet. NAS mit 1 TB an Daten. Trotzdem Zu wenig Arbeitsspeicher...

64Bit Java JRE nutzen. Oder gleich als Snap https://snapcraft.io/docfetcher

Das Java ist 64 bit.
Der Link st für Linux.

Ok, habe es gefunden, im Ordner misc gibt es 64 bit Versionen und Speicherlimits also 2096 stadt 256 MB.
Und wieder warten...

Wieder ein Satz mit x.
Habe nun via batch den Speicher auf 8 GB (!!!) hochgesetzt. Nach 10h Absturz...
mfG
tsunami

Dann haben deine Daten, Rechner allgemein oder Dateisystem irgendein Problem, die 50TB die ich hier habe waren innerhalb von 3 Stunden indiziert (8 Core CPU, Datenträger:SSD-RAID 10 angebunden via 10GBit/s iSCSI), nüscht Absturz.