Globus: ein neuer Service der HPC-Gruppe von Scientific IT Services (ID SIS).<\/p>\n\n\n\n\n\n\n\n
Globus, als Z\u00fcrcher denke ich da nat\u00fcrlich zuerst an das Warenhaus an der Bahnhofstrasse. In der Welt des wissenschaftlichen Rechnens steht Globus<\/a> allerdings f\u00fcr einen Daten-Managementservice, der es erlaubt Terabytes von Daten auf einfache Art weltweit zu transferieren und zu organisieren.<\/p>\n\n\n\n Kurz, Globus wurde entwickelt, um grosse Datenmengen zu managen, die an der ETH Z\u00fcrich oder an anderen Forschungsinstitutionen auf der ganzen Welt gespeichert sind. Mit Globus k\u00f6nnen die Benutzenden:<\/p>\n\n\n\n Globus wird weltweit von HPC-Zentren benutzt. Der einfach Grund ist: HPC (High Performance Computing) heisst auch oft, dass grosse Datens\u00e4tze involviert sind. Und es ist \u00fcblich, dass Daten zwischen verschiedenen HPC-Zentren ausgetauscht werden; sei es von Benutzenden, die an verschiedenen Orten rechnen oder f\u00fcr die Zusammenarbeit in Forschungsprojekten.<\/p>\n\n\n\n Der Globus-Service baut auf gridFTP auf, welches auf die gute alte FTP-Technologie zur\u00fcckgeht. Man k\u00f6nnte gridFTP als einen FTP-Service auf Stereoiden und mit zus\u00e4tzlichen Funktionen bezeichnen. Zum Beispiel die Parallelisierung der Datenstr\u00f6me und einen verschl\u00fcsselten Authentifizierungskanal. <\/p>\n\n\n\n Urspr\u00fcnglich war gridFTP Teil des quellenoffenen Globus-Toolkits, dem Offiziersmesser f\u00fcr Grid-Computing. Grid heisst jetzt Cloud, die Benutzung ist einfacher geworden, und damit auch brauchbar f\u00fcr digital natives<\/em>. Die gr\u00f6sste Schwierigkeit dieses veralteten Toolkits und damit von gridFTP war der aufw\u00e4ndige Umgang mit den Zertifikaten. Dennoch wurde gridFTP gerne benutzt, um grosse Datenmengen zu kopieren, auch wenn die Vorbereitung oft mehr Zeit beanspruchte als der Transfer.<\/p>\n\n\n\n Die beiden Hauptschwierigkeiten bei der Benutzung von gridFTP waren der Umgang mit den Zertifikaten, insbesondere der sogenannten short live certificates<\/em> und das Fehlen eines graphischen Benutzerinterface. <\/p>\n\n\n\n An dieser Stelle \u00fcbernahmen unsere Kolleginnen und Kollegen der Universit\u00e4t Chicago<\/a>. Sie bauten ein System, welches den Umgang mit den Zertifikaten, also mit der Benutzer-Authentifizierung, transparent und damit einfach benutzbar f\u00fcr Forschende auf der ganzen Welt gemacht haben. Dabei st\u00fctzten sie sich auf das Internet2-Netzwerk<\/a> ab. Das bedeutet Benutzende k\u00f6nnen mit dem ETH Usernamen bei Globus einloggen und zwar auf die gleiche Art wie bei vielen unserer Webseiten. <\/p>\n\n\n\n Der Globus-Service beinhaltet einen Webbasierten Filemanager, der es einfach macht, grosse Daten Mengen von A nach B zu kopieren, w\u00e4hrend man selbst an seinem Notebook C sitzt, welcher solche Datenmengen gar nicht speichern k\u00f6nnte.<\/p>\n\n\n\n Ein komplexes System wie Globus zu unterhalten, ist nicht gratis. Deshalb hat die Universit\u00e4t Chicago entschieden, viele Funktionen von Globus nur den Institutionen zug\u00e4nglich zu machen, welche den Dienst abonnieren. <\/p>\n\n\n\n Um den HPC-Benutzenden das volle Potential von Globus anzubieten, hat sich die HPC-Gruppe dazu entschieden, eine Subskription f\u00fcr Globus zu erwerben, welche f\u00fcr die ganze ETH nutzbar ist. Das heisst alle mit einem ETH-Login k\u00f6nnen Globus voll benutzen.<\/p>\n\n\n\n Departemente, Institute oder andere Einheiten, welche ihren eigenen Storage direkt mit Globus verbinden wollen, k\u00f6nnen vom HPC-Team eine kostenpflichtige Subskription erhalten. Mehr Information dazu ist \u00fcber globus-support@id.ethz.ch<\/a> erh\u00e4ltlich.<\/p>\n\n\n\n Um einen ersten Blick auf Globus zu erhalten, k\u00f6nnen Benutzende die URL http:\/\/app.globus.org<\/a> in ihrem Browser eingeben. Dann ETH Z\u00fcrich aus dem Dropdown<\/em>-Men\u00fc ausw\u00e4hlen und mit dem ETH Usernamen einloggen. Im Filemanager, der sich dann \u00f6ffnet, kann nach ETH Z\u00fcrich oder Euler gesucht werden. Der Euler-Service wird in den n\u00e4chsten Wochen als produktiver Service erstellt werden. Um auf dem Laufenden zu bleiben, bietet sich die ETH interne HPC-Globus-Mailingliste<\/a> an.<\/p>\n\n\n\nGlobus stammt aus der Zeit als Cloud noch Grid hiess<\/h2>\n\n\n\n
Der Transfer grosser Datenmengen als Service<\/h2>\n\n\n\n
Eine Globus-Subskription f\u00fcr die ETH Z\u00fcrich<\/h2>\n\n\n\n
Mit Globus beginnen<\/h2>\n\n\n\n