In einem vergangenen Post habe ich Ihnen gezeigt, wie Sie ein Subversion-Repository aufsetzen.

In diesem post zeige ich Ihnen die einfache Variante, in der wir einfach nur git installieren. Dabei können alle User, die sich per Public Key Authentication SSH auf den Server verbinden können (also ihren öffentlichen Schlüssel auf dem Server abgelegt haben), mit dem git repository arbeiten.

In einem späteren Post zeige ich Ihnen, wie Sie mit gitolite auch Usern, die sich nicht per SSH auf den Server schalten können, Zugriff über einen Usernamen und Passwort gewähren können.

Git-Repository

Installation

sudo apt-get install git

wir erstellen einen user für git

adduser --system --shell /bin/bash --group --disabled-password --home /home/git git

Sie als REpositoryadministraotr müssen Sie dem User git ihren öffentlichen SSh-Schlüssel geben, damit Sie sich mit diesem als User git auf dem Server einloggen können. Wie das geht, habe ich Ihnen hier für Windows und hier für Linux gezeigt.  Sie haben den SChlüssel wahrscheinlich bereits  im Ordner /home/<ihr username>/.ssh. Kopieren Sie ihn nach /tmp/$(whoami).pub und außerdem nach /home/git/.ssh/authorized_keys und geben Sie dieser authorized-keys ownership für den user git

cp /home/<username>/.ssh/authorized_keys /tmp/($whoami).pub

cp /home/<username>/.ssh/authorized_keys /home/git/.ssh/authorized_keys

chown git /home/git/.ssh/auhtorized_keys

reload ssh

sie müssen jetzt testen, ob Sie sich von ihrem Desktop-Rechner aus als User git über ssh verbinden können. Wenn das nicht geht, müssen Sie vielleicht in der /etc/ssh/sshd_config den User git noch in der Option AllowUsers eintragen und danach noch mal ein reload ssh ausführen. ERst wenn das geht, können Sie weiter machen.

Ein Git Repository einrichten weiterlesen →

Die RAID Typen

ein sehr einfaches Tool zur Übersicht über RAID-Levels ist beispielsweise der RAID calculator von Synology. Ansonsten im Folgenden noch eine hilfreiche Tabelle sowie Erklärungen

RAID 0 – Striping

Striping ist eine Option, die man eigentlich sehr selten sieht, denn sie liefert keine Ausfallsicherheit. RAID 0 verbessert die Performance der schreib- und Lesezugriffe, indem die Daten auf zwei Festplatten verteilt werden. Somit profitiert man von den Schreib-/Leseköpfen zweier festplatten udn kann somit mehr Daten auf einmal verarbeiten. Das Problem bei RAID 0: sobald auch nur eine der beiden Festplatten ausfällt, sind alle Daten verloren

RAID 1 – Mirroring

Die am häufigsten anzutreffende RAID-Konfiguration. Bei RAID 1 werden die Daten immer von einer auf die andere Festplatte gespiegelt. Das ganze geschieht dabei so, dass die spiegelung bevorzugt dann stattfindet, wenn beide festplatten gerade nicht so sehr ausgelastet sind. Gelesen werden kann von beiden Festplatten. Der Benefit bei RAID 1 ist die Ausfallsicherheit, die es bietet: Wenn eine der beiden Festplatten ausfällt, liest das Betriebssystem automatisch von der anderen, noch funktionsfähigen Festplatte. Das System bleibt also online. Währenddessen kann amn die kaputte Festplatte gegen eine neue, funktionstüchtige austauschen. Diese wird dann automatisch mit den Daten der verbliebenen Festplatte beschrieben, so dass wieder eine Spiegelung vorhanden ist. Nachteil an RAID 1: Man verliert den Speicherplatz der zweiten Festplatte, da dieser ja genutzt wird, um den Speicher der ersten Festplatte zu spiegeln.

RAID 5

RAID 5 verteilt die Daten über mehrere platten und stellt gleichzeitig eine Ausfallsicherheit zur Verfügung, indem es auf diese Festplatten paritätsinformationen schreibt. Dabei werden 25% des Gesamtspeicherplatzes aller beteiligten Festplatten für diese Paritätsinformationen genutzt.  Aus diesen paritätsinformationen können die Daten auf einer festplatte (egal welcher) zurückgewonnen werden. Wenn also im RAID 5 eine Festplatte ausfällt, egal welche, dann können die Daten dieser einen Festplatte wiederhergestellt und auf die restlichen Festplatten verteilt werden. In der Zwischenzeit kann die fehlerhafte festplatte entfernt und durch eine neue, funktionstüchtige ersetzt werden.

Das heißt mit RAID 5 kombiniert man den Performancevorteil von RAID 0 mit dem Mirroring von RAID 1. Vorteil gegenüber RAID 1: Man verliert nur 25% des Gesamtspeicherplatzes und nicht 50% wie bei RAID 1 üblich und man hat gleichzeitig noch das Striping als Performanceboost. Nachteil: RAID 5 braucht ein Minimum von drei beteiligten Festplatten, lässt sich also nicht mit lediglich zwei Festplatten realisieren.

Software RAID oder Hardware RAID

Man kann ein RAID über Software auf dem Betriebssystem oder über Hardware-Controller realisieren.

Der vorteil von Hardware-Lösungen: Sie sind als Hardware-Controller verbaut und werdne als PCI-Steckkarte in das Mainboard angeschlossen und belasten daher das Betriebssystem nicht, da dieses keine Softwareprozesse ausführen muss, um das RAID zu gewährleisten. Dadurch verbessert sich die Performance des RAIDs und des gesamten Betriebssystems. Hardware-RAID funktioniert desweiteren Betriebssystemübergreifend. Wenn auf den Festplatten also mehrere Betriebsysteme im Dual-Boot installiert sind, oder es sich beispielsweise um die Festplatte von einem VMWare ESXi-Host handelt, dann funktioniert das RAID über alle Betriebssysteme und über alle virtuellen Maschinen hinweg. Unter Software-RAID müsste man hingegen das RAID auf jedem Betriebssystem bzw. auf jeder virtuellen Maschine extra einrichten.

Der Nachteil von Hardware-Lösungen ist, dass wenn der RAID-Controller kaputt geht, also die Steckkarte des RAID-Controllers geht kaputt, dann kommt man an die Daten auf diesen Festplatten nicht mehr ran, bis man die Festplatten wieder an einen haargenau baugleichen RAID-Controller angeschlossen hat. Das kann mitunter schwierig werden, wenn der RAID-Controller nicht mehr produziert wird und man versuchen muss, sich über ebay einen 10 Jahre alten RAID-Controller anzuschaffen. Dieses Problem hat man bei Software-RAID nicht, da sich die Software auf jeder x-beliebigen Hardware ausführen lässt, wodurch man wieder an seine Daten herankommt.

FAKE-RAID

Hardware-RAID wird oftmals mit sogenanntem Fake-RAID verwechselt. Fake-RAID sind RAID-controller, der in den Chipsatz eines Mainboards integriert ist, alson nicht als extra Steckkarte in das Mainboard gesteckt wird, sondern bereits „auf dem Mainboard integriert“ ist. Dieses Fake-RAID wird grundsätzlcih genau so eingerichtet wie das Hardware-RAid eines Steckkarten-Controllers. Der Nachteil eines sogenannten Fake-RAIDS ist, dass dieser RAID-Controller keinen zusätzlichen Prozessor hat, wie es bei der Steckkarte der fall ist. DAher belastet dieses Fake-Raid die CPU und damit letztendlich auch die Performance des Betriebssystems. Man kombiniert mit Fake-Raid also die Nachteile des Hardware-Raids (wenn das Mainboard, auf welchem sich der Raid-controller befindet, kaputt geht, braucht man ein baugleiches Mainboard, um an die Daten heranzukommen) mit den Nachteilen des software-Raids (die Performance des Betriebssystems wird eingeschränkt). Daher empfehle ich FAKE-RAID ÜBERHAUPT NICHT für irgendjemanden da draußen.

RAID einrichten unter Linux weiterlesen →

Informationen sammeln

Eine Liste Ihrer aktuellen Partitionen können Sie sich holen über

cat /proc/partitions

Zum Sammeln von Informationen gibt es außerdem zwei Tools: fdisk und parted. Das tool parted, auch GParted genannt, ist heutzutage das Tool, welches man nehmen sollte. Fdisk ist nämlich etwas outdated, da es nicht mehr mit GPT-Festplatten umgehen kann.

Ihr könnt euch infomrationen über alle Platten und Partitionen mit dem Befehl

parted -l

anzeigen lassen.

Wenn ihr eine neue, noch nicht mit einem Dateisystem formatierte Festplatte an das System eingeschoben habt, werdet ihr hier eventuell eine Meldugn bekommen wie

Error: /dev/sdb: unreconized disk label

Partitionen erstellen und formatieren

Linux Partitionierung erklärt weiterlesen →

Der Logical Volume Manager ist eine Software, die es ermöglicht, mehrere physikalische Partitionen zu einer einzigen logischen (Logical Volume) zusammenzufügen. Man kann theoretisch eine Partition auf /dev/sda und eine Partition auf /dev/sdb zu einem logischen Mountpoint /testordner zusammenfügen. Das Schreiben und Lesen der Daten wird für den Benutzer unersichtlich abstrahiert, es ändert sich für ihn nichts im Vergleich zur Nutzung gewöhnlicher physikalischer Partitionen. Im Hintergrund wird durch den LVM die Bewegung der Schreib- und Leseköpfe optimiert, indem die Daten gleichmäßig auf beide Platten verteilt werden. Das darf nicht mit einem RAID verwechselt werden. Der LVM dient der Performanceverbesserung, ein RAID dient vordergründig der Ausfallsicherheit. Aus diesem Grund ist der LVM besser für seine Aufgabe geeignet, da er keinen zusätzlichen Datenoverhead erzeugt, was beim RAID jedoch wiederum der Fall ist. Dafür erzeugt die RAID-Technologie Redundanzen durch Paritätsbildung, die beim Ausfall einer der Platten zur Weiterverwendung des Systems genutzt werden können. LVM und RAID lassen sich jedoch miteinander kombinieren, was wir de fakto in einem späteren post auch noch machen werden, um ein Optimum beider Vorteile genießen zu können. Mehrere logical Volumes lassen sich zudem in eine Logical Volume Group zusammenfassen. In so eine Logical Volume Group können wir beispielsweise ein Logical Volume stecken, auf das wir unser /tmp-Verzeichnis einhängen, und ein anderes Logical Volume, auf welches wir unser /var-Verzeichnis einhängen. Dabei könnten theoretisch an beiden Einhängepunkten mehrere physiaklische Partitionen auf unterschiedlichen Festplatten beteiligt sein.

Nun haben wir noch den Vorteil, dass die einzige der oben besprochenen Partitionen, die sich außerhalb einer LVG befinden muss, die Partition /boot ist, da diese den Kernel enthält und dieser bereits arbeiten muss, bevor der Logical Volume Manager geladen werden kann. Die restlichen Logival Volumes, also die Einhängepunkte für /var, /tmp usw., können auf einer Logical Volume Group sitzen..

Wenn wir zwei Festplatten haben und derzeit kein Grund für die Aufteilung in mehrere  Logical Volume Groups besteht, allokieren wir den gesamten restlichen verfügbaren Speicherplatz einer der beiden Platten nach Abzug von /boot unserer ersten platte als neue Logical Volume Group – diese können wir später bei Bedarf schließlich ganz einfach wieder aufsplitten, in der Praxis braucht manj edoch nur eine einzige Logical Volume Group, die alle Logical Volumes des Systems enthält. Diese erste Platte lassen wir dann beispielsweise per RAID1-Mirroring auf die zweite Platte spiegeln. Die Stärken dieser Konfiguration sind die durch den LVM erhaltene Flexibilität in der Dateisystemgestaltung, die Abstrahierung des Imaging des Servers dank der Snapshot-Funktion von LVM, und die erhaltene Ausfallsicherheit dank der Redundanz im RAID1-Verbund.

Installation

Installation mit dem Betriebssystem

Viele Linux/Unix-Serverdistributionen bieten bereits bei der Installation die Option an, den Logical Volume Manager mitzuinstallieren. Ubuntu Server ist eine davon. Diese Option sollten Sie nutzen, um sich den Aufwand der manuellen installation zu sparen. Diese Variante ist der nachträglichen Installation auf jeden Fall vorzuziehenn.

Nachträgliche Installation

Der Logical Volume Manager weiterlesen →

In einem vergangenen Post habe ich Ihnen gezeigt, wie Sie auf einer synology Diskstation oder einem beliebigen Debian/Ubuntu-System einen Dwonload-Server mit pyLoad einrichten.

Als alternative dazu gibt es mittlerweile den Download-Server JDownloader 2, der für einige wesentlich performanter funktioniert und einfacher zu bedienen ist.

In diesem post zeige ich Ihnen, wie Sie auf einem Raspberry pi oder einem Ubuntu System den JDownloader-server installieren.

Installation

apt-get install oracle-java8-jdk # raspberry pi

apt-get install java # alle anderen systeme

Sie brauchen auf jeden Fall eien Möglichkeit, den Server grafisch zu administrieren. Einen Überblick über mögliche Lösungen habe ich in diesem Post aufgezeigt.

Jetzt müssen wir den JDownloader runterladen

mkdir /home/<username>/jdownloader

wget http://installer.jdownloader.org/JDownloader.jar

Jetzt starten wir den JDownloader über die JDownloader.jar. Daraufhin öffnet sich der JDownloader als grafische Anwendung. Wie Sie diese grafischea wnendung darstellen können, haben Sie ja bei der Einrichtugn der grafischen Administrationsmöglichkeit bereits kennengelernt.

cd /home/<username>

java -jar ./JDownloader.jar

Daraufhin werden Sie wahrscheinlich gleich als erstes gefragt, ob Sie ein Update installieren wollen. Das bestätigen wir natürlich.

Im JDownloader angekommen klicken wir auf den Globus, um MyJDownloader einzurichten.

Daraufhin öffnen sich die einstellungen in der Kategorie MyJDownloader.

Erstellt euch zuerst unter MyJDownloader.org ein Benuzterkonto. Registriert euch und meldet euch dann unter my.jdownloader.org an und klickt auf den Anmeldebutton.

Geht nun zurück in den Jdownloader und gebt dort eure Anmeldedaten ein. Klickt dann im Jdownloader auf Verbinden. Wenn ihr eine Meldung bekommt Verbindung hergestellt. Toll!.

Von jetzt an können sie über my.jdownloader.org downloads hinzufügen.

Einen Haken hat die Sache: sie dürfen das X-Window-Fenster nicht schileßen, da sich ansonsten der Jdownloader wieder beendet. Die besten Optionen, um JDownloader zu starten, ist meiner meinung nach also XRDP. Dann können Sei eien RDP-Session zum Server aufbauen, JDownloader starten und die RDP-Session auf dem Desktop-Rechner beenden: die Desktop-Session an sich bleibt auf dem Server erhalten und Jdownloader sollte weiterlaufen.