Condor

Condor wird nun sowohl von den technologischen und soziologischen Herausforderungen eines solchen IT-Umgebung beeinflusst,
Condor-Team wurde in der Schaffung erstaunliche Werkzeuge, die Wissenschaftler und Ingenieure zu ermöglichen, ihre Rechendurchsatz zu erhöhen

Was ist neu in dieser Pressemitteilung:.

< li> 7.6.X ist die neue stabile Condor-Serie.
• Viele neue Features wurden seit 7.4.x hinzugefügt.

Was ist neu in Version 7.3.2:

• Release Notes:
• Das Format der Ausgabe vom condor_status mit -Gitter Option wurde verändert, um weitere nützliche Informationen liefern.
• Entfernt die neue Zeile an das Ende der condor_status -Format Ausgabe angehängt. Deshalb sollte Code, der die Ausgabe dieses Befehls analysiert jetzt vorsichtig sein, wenn Trimmen der letzten Zeile.
• Neue Features:
• condor_fetchlog kann jetzt holen die History-Dateien von einem condor_schedd Daemon. Und kann die History-Datei von der condor_schedd Dämon hielt nun täglich oder monatlich gedreht werden.
• Die condor_ckpt_server automatisch bereinigen veraltete Prüfpunktdateien. Die Konfigurationsvariablen, die dieses Verhalten zu steuern sind nachfolgend beschrieben.
• Die condor_ckpt_server (entweder die 32-Bit- oder 64-Bit) ausführbar wird nun korrekt die Kommunikation zwischen 32-Bit- und 64-Bit-Knoten einreichen. Wenn durch Zufall Bitbreite Probleme entstehen in der Checkpoint-Protokoll (zB mit Dateigrößen) werden klare Fehlermeldungen in den Checkpoint-Logs protokolliert.
• Die neue condor_ssh_to_job Tool ermöglicht interaktives Debugging von laufenden Jobs. Finden Sie in der Handbuchseite auf [*] für Details.
• Der Befehl condor_status ist jetzt wesentlich schneller, vor allem mit der Option -format.
• Grid Universum Gittertyp gt5 hat zur Vorlage an den neuen Globus GRAM5 Service hinzugefügt. Wenn ein GRAM-Dienst wird als gt5, Jobmanager Drosselung und der Überwachung des Netzes identifiziert werden nicht verwendet. Siehe Abschnitt 5.3.2 für weitere Informationen.
• Grid Universum gitterartigen Creme zur Vorlage an den CREAM Stellenmarkt von gLite hinzugefügt. Siehe Abschnitt 5.3.8 für weitere Informationen.
• Wenn wenig Dateideskriptoren für die Schaffung neuer Netzwerk-Sockets, die condor_schedd Daemon vermeidet nun die unbegrenzte Stapel aus Nachrichten, die es sendet periodisch an die condor_negotiator und condor_startd.
• Die Leistung und die Fehlerbehandlung des Grid-Monitor wurden verbessert.
• Für Rastertyp nordugrid im Netz Universum wird Auftragsstatusinformationen jetzt mit nordugrid ARC LDAP-Server, die die Leistung erheblich verbessern sollte erhalten. Außerdem können Condor jetzt sagen, wenn diese Aufträge ausgeführt werden.
• Die neue -valgrind Option condor_submit_dag Ursachen condor_submit_dag einen einzureichen Beschreibungsdatei, valgrind auf condor_dagman verwendet erzeugen, statt der condor_dagman binäre als ausführbare Datei.
• condor_dagman jetzt träge wertet und öffnet Knoten Job-Log-Dateien. Statt Parsen alle einreichen Beschreibungsdateien und sofort öffnen ihre angegebenen Log-Dateien beim Start, analysiert condor_dagman jetzt einreichen Beschreibungsdateien kurz vor jeder Auftrag eingereicht wird, und hat jede Protokolldatei öffnen sich nur, wenn Sie passende Stellen in der Warteschlange befinden oder ausgeführt wird POST Skripte . Zusätzlich generiert condor_dagman jetzt automatisch eine Standard-Benutzer-Protokolldatei für jeden Knoten Job, der nicht angegeben wird man.
• Sowohl die Unterstützung und Dokumentation für die MPI-Universum, wurden entfernt. MPI-Anwendungen werden durch den Einsatz von Paralleluniversum unterstützt.
• Wenn der condor_startd Daemon Test der virtuellen Maschine Software nicht (für Maschinen in der Lage, virtuelle Maschinen konfiguriert), der condor_startd wird in regelmäßigen Abständen wiederholen Sie den Test, bis es gelingt.
• Die nordugrid_gahp begrenzt nun die Anzahl der Verbindungen zu jedem nordugrid ARC-Server hergestellt und verwendet Verbindungen, wenn möglich.
• wurde hinzugefügt ClassAd Funktion eval (), die ein String-Argument nimmt und den Inhalt der Zeichenfolge als ClassAd Ausdruck. Eine Politik Beispiel, wo dies sinnvoll ist in Abschnitt 3.5.9 auf die Arbeits Suspension beschrieben.
• Die neue condor_q Option -Attribute begrenzt die Attribute, die bei der Verwendung der -xml oder -lang Optionen angezeigt werden. Die Begrenzung der Anzahl der Attribute erhöht auch die Effizienz der Abfrage.
• Power-Management-Funktionen von Condor werden jetzt als Plug-in implementiert. Insbesondere führt der condor_startd jetzt ein externes Programm, wie die Konfigurationsvariable HIBERNATION_PLUGIN angegeben, um die Erkennung von verfügbaren Low-Power-Staaten und die Umschaltung auf diesen niedrigen Energiezuständen durchzuführen.
• Die neue Condor Daemon condor_rooster wurde hinzugefügt, um Winterschlaf aufzuwachen Maschinen, wenn die durch die Konfiguration festgelegt Ausdruck variable UNHIBERNATE wird wahr. Die Konfigurationsvariablen für condor_rooster sind in Abschnitt 3.3.35 beschrieben.
• Möglichkeit hinzugefügt, um Informationen von der Benutzerereignisprotokollleser Puffer für den Benutzer-Log-Leser zu extrahieren. Dies wird durch eine neue ReadUserLogStateAccess C ++ Klassen wie in read_user_log.h definiert umgesetzt.
• Änderungen an dem Wert der Konfigurationsvariable CERTIFICATE_MAPFILE oder den Inhalt der Datei, auf die sie sich bezieht, nicht mehr einen vollständigen Neustart des Condor erfordern. Stattdessen wird der Befehl condor_reconfig Damit die Änderungen zu nutzen.
• Die condor_master Daemon wird nun den Pfad und Argumente zu drucken, um alle Dämonen es beginnt, wenn D_FULLDEBUG aktiviert ist. Bisher gab es keine Möglichkeit, es zu erhalten, um die Argumente angezeigt werden, mit dem es begann ein Dämon.
• Die condor_had Dämon hat jetzt die Möglichkeit, andere als die condor_negotiator Dämonen zu kontrollieren. Dies wird über den HAD_CONTROLLEE Makro gesteuert.
• Condor erkennt nun VOMS Erweiterungen in X.509-Proxies. Die VOMS Attribute werden in der Job-codierte ClassAd Attribut X509UserProxySubject.
• Die condor_startd können jetzt bereinigen gestrandet virtuellen Maschinen nach einem Absturz von Condor oder dessen Host-Betriebssystem.
• Nach einem Unfall, der condor_gridmanager nicht mehr neu gestartet alle jobmanagers für gt2 Arbeitsplätze. Dies sollte Recovery-Zeit zu verbessern.
• Condor besser mit den ClassAds als Generika im condor_collector Daemon kategorisiert. Verschiedene Daemons, die sich mit generischen ClassAds registrieren können nun Werkzeuge, die die -subsystem Option richtig manipulieren ihre ClassAds.
• Condor bietet jetzt einen Mechanismus zur strengen Durchsetzung Ressourcenbegrenzung für einige Universen der laufenden Aufträge.
• Konfigurationsvariable Ergänzungen und Änderungen:
• Die neue Konfigurationsvariable EMAIL_SIGNATURE gibt eine benutzerdefinierte Signatur angehängt werden, die von der Condor-System gesendet E-Mail-. Wenn definiert, dann ist dieses kundenspezifische Signatur ersetzt die Standard einer intern festgelegt. Es gibt keinen Standardwert für diese Variable.
• Die neue Konfigurationsvariable CKPT_SERVER_CLIENT_TIMEOUT informiert die condor_schedd wie lange in Sekunden bereit zu warten, um zu versuchen, und sprechen Sie mit einem condor_ckpt_server Verfahren, bevor ein condor_ckpt_server unten ist. Siehe Abschnitt 3.3.11 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable CKPT_SERVER_CLIENT_TIMEOUT_RETRY informiert den condor_schedd, die einmal condor_ckpt_server ist als unten markiert, wie kann Sekunden muss, bevor die condor_schedd werden versuchen, wieder mit dem condor_ckpt_server kommunizieren. Siehe Abschnitt 3.3.11 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable CKPT_SERVER_REMOVE_STALE_CKPT_INTERVAL informiert den condor_ckpt_server um das Entfernen von veralteten Kontrollpunkten in festgelegten Intervallen in Sekunden beginnen. Siehe Abschnitt 3.3.8 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable CKPT_SERVER_STALE_CKPT_AGE_CUTOFF informiert den condor_ckpt_server wie alt Zugriffszeit einer Datei Prüfpunkt muss in Ordnung sein, als veraltet angesehen werden. Diese Zeit wird mit dem aktuellen Begriff der jetzt, wenn der Kontrollpunkt-Server überprüft die Checkpoint-Image-Datei verglichen. Siehe Abschnitt 3.3.8 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable SlotWeight kann verwendet werden, um einen Schlitz ein größeres Gewicht bei der Berechnung Nutzung, Computermesse Aktien und Durchsetzung von Gruppenkontingenten zu geben. Siehe 3.3.10 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable MAX_PERIODIC_EXPR_INTERVAL setzt eine Obergrenze für die Zeit zwischen Auswertung der regelmäßigen Ausdrücke, aufgrund der adaptiven Timing durch die Konfigurationsvariable PERIODIC_EXPR_TIMESLICE impliziert. Siehe 3.3.11 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable GRIDMANAGER_SELECTION_EXPR können Sie steuern, wie viele condor_gridmanager Prozesse hervorgebracht, um Raster Universum Aufträge verwalten werden können. Als Teil dieser Änderung entfernt die Konfigurationsvariable und Unterstützung Code für GRIDMANAGER_PER_JOB da die neue Konfigurationsvariable ersetzt es. Siehe 3.3.11 für die vollständige Beschreibung.
• Die Konfigurationsvariable GRIDMANAGER_MAX_PENDING_SUBMITS_PER_RESOURCE und die entsprechenden Gas GRIDMANAGER_MAX_PENDING_SUBMITS entfernt wurden.
• Die neuen Konfigurationsvariable GRID_MONITOR_DISABLE_TIME kontrolliert wie lange das condor_gridmanager wird nach der Begegnung ein Fehler, bevor Sie eine Grid Monitor-Job neu zu starten warten. Siehe 3.3.23 für die vollständige Beschreibung.
• Die neue vordefinierte Konfigurationsmakro DETECTED_MEMORY gibt die Größe des physikalischen Speichers (RAM) von Condor erkannt. Der Wert wird in Megabyte angegeben.
• Die neuen vordefinierte Konfigurationsmakro DETECTED_CORES gibt die Anzahl der CPU-Kerne von Condor erkannt.
• Die neuen Konfigurationsvariable DELEGATE_FULL_JOB_GSI_CREDENTIALS steuert, ob eine vollständige oder beschränkte X.509 Proxy für den Netztyp gt2 Raster Universum Arbeitsplätze übertragen. Siehe 3.3.26 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable UNHIBERNATE wird durch die condor_startd verwendet werden, um in seiner ClassAd werben mit einem boolschen Ausdruck spezifizieren, wenn die Maschine sollte von condor_rooster geweckt werden zum Beispiel. Siehe 3.3.10 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable HIBERNATION_PLUGIN gibt den Pfad zu den Plug-in, das condor_startd verwendet sowohl den Zustand niedriger Leistung Fähigkeiten von einer Maschine zu erkennen und die Maschine auf einen niedrigen Energiezustand zu wechseln. Siehe 3.3.10 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable HIBERNATION_PLUGIN_ARGS gibt zusätzliche Befehlszeilenargumente, die der condor_startd wird das Plug-In übergeben beim Aufruf von es, um die Maschine auf einen niedrigen Energiezustand zu wechseln. Siehe 3.3.10 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable HIBERNATION_OVERRIDE_WOL kann die condor_startd zu leiten, um Wake-On-LAN (WOL) Funktionen von Netzwerkschnittstelle der Maschine zu ignorieren und auf einen niedrigen Energiezustand zu wechseln, auch wenn die Schnittstelle nicht unterstützt WOL oder wenn WOL wird es deaktiviert. Siehe 3.3.10 für die vollständige Beschreibung.
• Die neuen Konfigurationsvariable DAGMAN_USER_LOG_SCAN_INTERVAL steuert, wie lange condor_dagman wartet zwischen Überprüfung Job-Log-Dateien für Status-Updates. Siehe 3.3.25 für die vollständige Beschreibung.
• Die neue Konfigurationsvariable DAGMAN_DEFAULT_NODE_LOG setzt den Standardprotokolldateinamen für die neue condor_dagman Standardknotenprotokolldatei-Funktion. Siehe 3.3.25 für die vollständige Beschreibung.
• Entfernt die Konfigurationsvariable DAGMAN_DELETE_OLD_LOGS; neue Protokolldatei Lesecode macht es überflüssig.
• Die neue Konfigurationsvariable HAD_CONTROLLEE wird verwendet, um den Namen des Dämons welche die condor_had Kontrollen angeben. Dieser Name sollte den Daemon-Namen in der condor_master der DAEMON_LIST entsprechen.
• Behobene Fehler:
• ein Fehler in ClassAd Funktionen, in denen Argumente, die richtig in Saiten wurden gezwungen sein sollte, anstatt zu ERROR. Ausgewertet Fest
• Es wurde ein verwirrend Diagnosemeldung mit der Jobrouter, was passiert, wenn ein Auftrag wurde innerhalb von 5 Minuten nach ihrer Einreichung entfernt.
• ein Bug in denen die Verwendung von dynamischen Slots (siehe Abschnitt 3.13.7) verursacht die Maschine ClassAd Attribut SLOT_STARTD_ATTRS vom ClassAd für einige Slots verschwinden behoben.
• eine Windows-Plattform Fehler in dem das Fenster zu einem Job gehörenden Condor hat eine Farbe Nachricht nicht erhalten, wurde behoben.
• Ein Fehler wurde behoben condor_q -analyze zum Absturz zu bringen, wenn es keine condor_schedd Daemon ClassAd Datei behoben.
• a condor_procd Absturz behoben verursacht, wenn die Umgebung eines überwachten Prozesses überschritten 1MByte in / proc.
• eine Windows-Plattform, die den Fehler verursachen können condor_credd zum Absturz zu bringen, wenn eine angeforderte Anmeldeinformationen nicht in der Passwortspeicher behoben.
• Ein Fehler, der den Job Ereignisprotokoll Verdrehsicherung verursacht wurde, mit falschen Berechtigungen erstellt werden, wurde behoben.
• ein Fehler in der Drehung des Job-Ereignisprotokoll, die dazu führen können, es nie in der Windows-Portierung von Condor gedreht werden, wurde behoben.
• Es wurde ein Potential Race-Bedingung in der Job-Ereignisprotokoll Initialisierung.
• Feste Race-Bedingung, die einen Absturz des condor_collector und condor_schedd beim Herunterfahren verursachen könnten.
• ein Fehler in dem der condor_master manchmal sterben und produzieren eine dprintf_failure.MASTER Datei, wenn entweder einen Neustart durch neue binäre Zeitstempel oder wenn zunächst gestartet wurde behoben.
• Es wurde ein Speicherleck, um SOAP-Konfigurationsvariablen, die bei Condor wurde neu konfiguriert stattgefunden haben.
• ein Fehler in dem der unterbreiten Beschreibungsdatei Befehl cron_day_of_week wurde fälschlicherweise ignoriert wurde behoben.
• Ein Fehler wurde behoben, bei dem die Konfigurationsvariablen MAX_JOB_QUEUE_LOG_ROTATIONS und GRIDMANAGER_SELECTION_EXPR nicht richtig beim Start zu arbeiten; sie arbeiteten erst nach einer condor_reconfig.
• Ein Fehler in dem SOAP-Operationen wurden nicht korrekt mit dem Peer-IP-autorisierte, wurde behoben.
• eine Windows-Plattform Bug, bei dem nicht alle Condor Dämonen wurden von der Windows-Firewall (früher Internetverbindungsfirewall oder ICF genannt) vertraut behoben.
• Es wurde ein Abschalten Racebedingung im condor_master in Bezug auf Hochverfügbarkeit Dämonen.
• ein Fehler in dem ein Condor Daemon falsch ermittelt sie aus Socket-Deskriptoren gelaufen war, wurde behoben.
• ein Fehler behoben, der condor_schedd würde für sehr lange Zeit blockieren bei dem Versuch, in eine untere Kontrollpunkt-Server zu verbinden, wurde behoben. Nun ist die condor_schedd tun ein Sperr Verbindung mit einem Timeout zum Checkpoint-Server für eine konfigurierbare Anzahl von Sekunden. Schlägt dies fehl, wird der condor_schedd ein Moratorium für die Verbindung zum Checkpoint-Server, bis die konfigurierbaren Moratorium Pässe setzen. Variablen der Konfigurationsdatei, die dieses Verhalten beschreiben, sind oben beschrieben.
• geändert, dass das Kontroll condor_dagman tut für andere condor_dagman Instanzen ausgeführt derselben DAG, wenn es eine Sperrdatei beim Start findet. Nun, wenn condor_dagman ist nicht sicher, ob der andere DAGMan lebendig ist, geht es weiter, anstatt verlassen.
• Es wurde ein Haupt Dateideskriptor Leck in der Stork-Dämon.
• ein Fehler in dem erfolgreichen Stork Übertragungen wurden als nicht bestanden. Markiert Fest
• Es wurde ein ungewöhnlich Speicherverlust in der Benutzerereignisprotokolldatei Lesecode beim Auslesen falsch formatierte Ereignisse.
• einen Bug, bei dem mehrere Maschinen ClassAds im condor_collector mit dem gleichen Namen, aber unterschiedlichen StartdIPAddr Attributwerten, würde die condor_negotiator mit einem Fehler beenden behoben. Das ist ungewöhnlich und sollte nicht in einem typischen Condor Installation geschehen. Die wahrscheinlichste Ursache wird mit condor_advertise benutzerdefinierte ClassAds für Netzmatchmaking zu werben.
• Ein Fehler, der zu condor_dagman Core Dump verursacht, wenn alle Versuche scheiterten einreichen auf einem DAG-Knoten mit einer POST-Skript behoben. Dieser Fehler ist seit Condor Version 7.1.4 vorhanden.
• Es wurde ein Speicherleck im condor_schedd, der auftrat, wenn die Konfigurationsvariable NEGOTIATOR_MATCH_EXPRS verwendet wurde.
• ein Fehler in der Windows-Plattform-Code, Scripts als ausführbare Dateien behandelt wurde behoben. Unbekannt Dateierweiterungen wurden als Fehler behandelt, und nicht als ausführbare Windows-Datei.
• Die condor_job_router nun korrekt setzt der ClassAd Attribut EnteredCurrentStatus auf die aktuelle Zeit beim Erstellen eines neuen gerouteten Job. Zuvor kopierte es dieses Attribut von der ursprünglichen Arbeit.
• Die condor_job_router strahlt ein freundlicher Log-Nachricht, wenn es fest, dass die geroutet Kopie des Jobs entfernt wurde.
• Ein Update ist für ein Problem in 7.3.1 gesehen, in dem Condor-Dämonen mit CCB, um zu anderen Condor Dämonen manchmal verbrauchen große Mengen an CPU-Zeit für keinen guten Grund verbinden gemacht.
• eine seltene Fehlerfall Fehler, in der versucht, über CCB verbinden könnte in einem wartenden Zustand auf unbestimmte Zeit zu bleiben, wurde behoben.
• Ein Unix nur Fehler verursacht Condor Daemonen nicht gestartet, wenn MAX_FILE_DESCRIPTORS war höher als die aktuelle harte Grenze von Condor geerbt konfiguriert. Wenn Condor als root läuft, ist dies nicht mehr der Fall ist.
• Die condor_gridmanager wirbt jetzt Raster ClassAds richtig, wenn es mehrere condor_collector Dämonen.
• Wenn Sie condor_q -xml und -format sowie zur Begrenzung der Zahl der ClassAd Attribute in der Abfrage zurückgegeben, die XML-Container-Tag wurde nicht erzeugt. Das wurde behoben, aber jetzt ist der bevorzugte Weg, um die zurückgegebenen Attribute beschränken soll condor_q Option -Attribute zu verwenden.
• ein Fehler in dem der Unix condor_master versagt bei dem Versuch, sich selbst neu zu starten, wenn die Konfigurationsvariable Master_Lock definiert wurde, oder wenn die condor_master wurde mit der Option -t aufgerufen wurde behoben. Dieser Fehler ist seit der Serie 7.0 existiert, und wahrscheinlich hat viel länger existiert.
• Es wurde ein signifikanter Speicherverlust in der gahp_server. Dieses Leck Erst im vorigen Condor 7.3.x Versionen vorhanden.
• Ein Fehler, der einen Job, der entfernt gehalten und dann losgelassen wird, um den Ruhezustand zurückzukehren verursachen können, wurde behoben.
• Die Globus-JAR-Dateien mit der x86-64 RHEL 5 RPMs wurden beschädigt, was zu gt4 gitterartige Arbeitsplätze zu scheitern verteilt.
Dies wurde behoben.

Was ist neu in Version 7.2.2:

• Es wurde ein voller Hafen von Condor auf Debian 5.0 auf die x86-Plattform.
• Es wurde ein abgeschnitten Hafen von Condor auf Debian 5.0 auf der x86_64-Plattform.
• wurde hinzugefügt -DumpRescue Kommandozeilen-Flag auf condor_dagman und condor_submit_dag. Dieses Flag wird in erster Linie für den Test vorgesehen.
• Unterstützung für die Debug-Option zu condor_qedit.
• Der Job Router benutzt jetzt eine Zeitscheibe Timer für die regelmäßige Auswertung von Ausdrücken, ähnlich dem condor_schedd Daemon. Die Auswertung Intervall wird durch die Konfigurationsvariable PERIODIC_EXPR_INTERVAL gesteuert und standardmäßig auf 60 Sekunden der gleichen Standardwert durch den condor_schedd Daemon verwendet.
• Der Job Router setzt nun die Quelle von Arbeitsplätzen, wenn ein Fehler auftritt, wenn die Aktualisierung der condor_schedd Daemon für eine periodische Ausdruck, der auf True ausgewertet. Regelmäßige Ausdrücke des Jobs soll wieder einige Zeit in der Zukunft mit einer erfolgreichen Aktualisierung bewertet werden.

Was ist neu in Version 7.2.0:.

• Wichtige Funktionserweiterungen

Was ist neu in Version 7.0.5:

• Diese Mitteilung enthält viele Bugfixes und einige Verbesserungen bei der Fehler Umgang mit lokalen Universum Arbeitsplätze.
• Beachten Sie, dass einige der Bugfixes sind sicherheitsrelevante; daher Sites sollten entweder aktualisieren oder zu beschränken Berechtigungen auf, wer auf Condor Jobs vertrauenswürdigen Benutzern übermitteln.