[1] MLD-5.x / Development / cache Ordner auf Datenlaufwerk verlegen
 

Offline clausmuus

  • Administrator
  • Expert Member
  • ********
  • Posts: 20418
    • View Profile
    • ClausMuus.de
cache Ordner auf Datenlaufwerk verlegen
« on: July 20, 2016, 11:11:24 »
Hi,

wie gestern Abend besprochen, wollen wir versuchen den cache Ordner auf das Datenlaufwerk zu verlegen. In dem Zuge wollen wir mhddfs verwenden um alle Datenlaufwerke zusammen zu fassen. Ich habe dazu folgenden Vorschlag:

Data Ordner:
- das Subvolume @data des Systemlaufwerken wird fest nach /mnt/data gemountet
- alle weiteren Laufwerke werden nach /mnt/DEVICENAME (z.B. /mnt/sdb1) gemountet
  - auch Netzwerklaufwerke werden nach /mnt/NETZNAME gemountet
  - der Name des Mountpoints sollte im Setup frei wählbar sein und beim mount die UUID verwendet werden
- per mhddfs wird das Laufwerk /mnt/data und alle weiteren per setup gewählten Laufwerke nach /data gemountet
  - es muss erst noch getestet werden, wie sich mhddfs verhält, wenn z.B. ein Netzlaufwerk erst nach dem mhddfs mount eingehängt wird
- wenn ein Netzwerklaufwerke z.B. nur den tv Ordner bereitstellt, wird dieses direkt nach /data/tv gemountet
  - dies verdeckt dann den ursprünglichen /data/tv Ordner. Es findet an dieser Stelle kein zusammenfassen der Laufwerke mehr statt. Möchte man dies trotzdem haben, muss man vorerst die fstab manuell anpassen

Cache Ordner:
- der Ordner /var/cache wird per bind mount von /data/.cache/MACADRESSE/ gemountet
- durch die Verwendung der Mac Adresse als Teil des Pfades, gibt es auch bei Netzwerk Datenlaufwerken die von mehreren Clients verwendet werden keine Konflickte
- soll von einzelnen Programmen der Cache von allen Clients gemeinsam genutzt werden, so könnten wird der Ordner /var/cache/global erstellen, der ein bind mount nach /data/.cache/global ist

Anpassungen:
- bisher werden in einigen postinst Scripten Ordner unterhalb von /mnt/data angelegt. Dies bleibt so bestehen
  - dadurch existieren diese Ordner immer, auch wenn mal ein Datenlaufwerk verloren geht
- die Softlinks von /data/xxx nach /mnt/data/xxx dürfen nicht mehr angelegt werden. Das ist hinfällig
- das Datenlaufwerk Setup wird durch das mhddfs Setup ersetzt

Optional:
- Damit das /mnt/data Laufwerk (welches ein Subvolume des System Laufwerkes ist) nicht voll läuft, wenn z.B. ein Netzlaufwerk gelegentlich zu spät auftaucht und das /mnt/data Laufwerk ersatzweise verwendet wird, könnte ein Script erstellt werden, welches alle Datein unterhalb von /mnt/data nach /data verschiebt, bzw. auf das Datenlaufwerk mit dem meisten freien Platz.
  - Damit dies z.B. bei Datenbanken nicht zu Problemen führt, werden nur Dateien die nicht geöffnet sind verschoben. Alle anderen Dateien werden vor dem ausschalten (wenn alle Dienste gestoppt wurden) verschoben
  - Existiert auf einem anderen Datenlaufwerk eine neuere Version einer Datei, so wird sie einfach nur gelöscht.

So, jetzt seit Ihr dran. Habe ich etwas von dem besprochenem vergessen? Gibt es Punkte die ich übersehen habe und die zu Problemen führen könnten?

Claus
« Last Edit: July 20, 2016, 11:17:09 by clausmuus »
MLD 5.5 - Raspberry PI - 7" Touch TFT - Squeeze Play
MLD 5.5 - lirc yaUsbIR - OctopusNet - XFX GeForce 9300 mit Intel E3200 - 2GB RAM - 12TB HDD - Lian Li PC-C37B - Samsung LE40A559

Offline skippy

  • MLD-Tester
  • Expert Member
  • ******
  • Posts: 2280
    • View Profile
cache Ordner auf Datenlaufwerk verlegen
« Reply #1 on: July 20, 2016, 13:01:21 »
Hallo Claus,

dann muss vermutlich auch die Konfiguration des avahi-linker angepasst werden?? Derzeit landen die darüber gemounteten Verzeichnisse in einem Unterverzeichnis von /net. Im Unterverzeichnis von /media/vdr werden Links erzeugt, die auf das Unterverzeichnis in /net verweisen und unter /mnt/data/tv sind Links, die auf das Unterverzeichnis unter /media/vdr zeigen.

Für mich hört sich das Vorhaben sehr gut an und ich hoffe, dass es stabil laufen wird.

Viele Grüße
skippy
meine MLDs (show / hide)

Offline clausmuus

  • Administrator
  • Expert Member
  • ********
  • Posts: 20418
    • View Profile
    • ClausMuus.de
cache Ordner auf Datenlaufwerk verlegen
« Reply #2 on: July 20, 2016, 14:49:28 »
Hi Skippy,

Danke für den Hinweis mit dem aufs. Das muss dann auch angepasst werden.

Claus
MLD 5.5 - Raspberry PI - 7" Touch TFT - Squeeze Play
MLD 5.5 - lirc yaUsbIR - OctopusNet - XFX GeForce 9300 mit Intel E3200 - 2GB RAM - 12TB HDD - Lian Li PC-C37B - Samsung LE40A559

Offline clausmuus

  • Administrator
  • Expert Member
  • ********
  • Posts: 20418
    • View Profile
    • ClausMuus.de
cache Ordner auf Datenlaufwerk verlegen
« Reply #3 on: July 20, 2016, 14:51:57 »
Ich hab noch mal in meine Notizen geschaut. Eine Alternative zu mhddfs wäre eventuell das mergerfs https://github.com/trapexit/mergerfs
Ich bin nicht sicher ob das wirklich für unser Vorhaben geeignet ist. Falls das auch passt, wäre es die bessere Wahl, wei es aktiv entwickelt wird und vermutlich stabiler ist.

Claus
MLD 5.5 - Raspberry PI - 7" Touch TFT - Squeeze Play
MLD 5.5 - lirc yaUsbIR - OctopusNet - XFX GeForce 9300 mit Intel E3200 - 2GB RAM - 12TB HDD - Lian Li PC-C37B - Samsung LE40A559

[1] MLD-5.x / Development / cache Ordner auf Datenlaufwerk verlegen
 



Users Online Users Online

0 Members and 1 Guest are viewing this topic.