alte Dateien von Fileserver automatisch auf Bandlaufwerk auslagern

[Symbadisch 10]

Hallo zusammen,

 

weiss nicht ob ich hier richtig bin, aber wir haben das Problem welches sicherlich nicht unbekannt sein dürfte und viele hier kennen.

 

Unser Fileserver platzt immer und immer wieder aus allen Nähten. Zum Grossteil handelt es sich um Grafik/CAD-Daten, welche auf keinen Fall gelöscht werden können, auch wenn sie schon Jahrelang nicht mehr benutzt wurden.

 

Da wir aktuell auf der Suche nach einer neuen Backuplösung sind, bin ich über die Möglichkeit gestolpert ältere Daten oder gewisse Daten statt auf dem teuren Storage auch auf Bandlaufwerke auszulagern.

 

Hat damit jemand Erfahrung?

 

Lohnt sich das überhaupt schon bei uns? Aktuell haben wir nen Storage (EQL) mit ca. 140 TB Daten und jährliches Wachstum von ca. 20-30TB.

 

Hiervon ist ganz sicher ein Viertel davon Grafiksachen die wie gesagt vielleicht mal wieder benötigt werden.

 

So wie ich das wird anhand des Kriteriums die Datei auf Band verschoben und durch einen Link ersetzt.

 

Erfahrungen wären super!

 

Gruss Lars

[zahni 521]

Hier kann ich auch nur wieder empfehlen, sich einen DL zu suchen, der sich damit auskennt.

 

Womit man sich mal beschäftigen kann: Duplizierung (die schafft bei den Dateitypen sicher viel weg), Komprimierung (die Dateien sind nicht ständig im Zugriff).

Kann mit Windows machen oder einem geeigneten Storage. 

Mit einer geeigneten Backup-Lösung kann man Inhalte auch so archivieren, dass man sie manuell durch eine Datenbankabfrage wiederfindet bzw. das dazugehörige Tape.

Die einfachste Lösung: Anwender sollen Löschungen von alten Daten dokumentieren (Datum und  Pfad). Dann findet sie mit jeder guten Backup-Software wieder...

 

Da Tape extern gelagert werden sollten, finde ich persönlich eine HSM-Lösung unpraktisch. Aber  damit kenne ich mich nicht wirklich aus.

[DocData 85]

HSM macht aber genau das: Transparent Daten vom Filesystem auf Tape verlagern. Im Filesystem bleibt nur ein Stubfile. War damams am Institut im Bereich HPC und bei Fileservices üblich.

[magheinz 100]

ist heute noch in grösseren solaris-ungebungen üblich dank samfs.

das kann auch auf cdlaufwerke o.ä. ausgelagert werden.

[Symbadisch 10]

Also Dedup haben wir schon an, nicht nur auf Datei-, sondern auf Blockebene und das brachte in der Tat ca. 20%. Komprimierung hingegen brachte nicht viel.

 

Natürlich nehmen wir hier nachher Dienstleister ins Boot. Mich interessierte einfach eure Meinung und Erfahrung und ich lese mich gerne in Themen ein um nicht völlig ahnungslos dazustehen.

 

Bin bei Quantum über LTFS gestolpert und was ich hier las klingt sehr interessant und ich denke günstiger als mit Bändern bekomme ich das TB nicht.

 

Ich stelle mir das so vor und so habe ich es im ersten Step verstanden, dass Daten die zB seit vier Jahren nicht genutzt werden automatisch auf Band verschoben werden und wenn dann wieder genutzt wieder ins Primärsystem verschoben.

 

Was ist HSM? Google sagt mir hier Hardware-Sicherheitsmodul aber denke das ist nicht gemeint.

[magheinz 100]

Je nachdem was ihr ablegt und wie komprimiert wird kann das nach hinten losgehen.

Hatte letztens erst ein Gespräch mit jemandem. Ich glaube es waren Gen-Sequenzen und TIFF-Bilder die bei Komprimierung größer wurden. In der Runde haben das andere bestätigt.

 

HSM: Hirarchical StorageManagement

 

Da gibts diverses Lösungen. Billig sind die alle nicht.

Wir bauen jetzt soetwas halbautomatisch nach. PrimärSchnell: Netapp. PrimärLangsam: Cifsserver mit einer Solaris-SAMFS-Umgebung dahinter. im DFS wird alles passend verlinkt und per Webportal kann man Bereiche ein und auslagern.

[Symbadisch 10]

Danke Heinz, damit kann ich erstmal was anfangen.

 

Werde morgen mal unsere Partner Anfragen, da wir aktuell nen neuen Bandroboter und ne SAN-Erweiterung anschaffen müssen, könnte das mit den Kosten passen, vielleicht gibt es da was passendes.

[magheinz 100]

Ihr seid nicht zufällig eine Einrichtung aus dem Bereich Bildung und Forschung in Berlin?

[Symbadisch 10]

Nein, ganz andere Branche und ganz andere Ecke von Deutschland.