Allgemein

Core

Maven Struktur

Allgemein

Im April haben wir die Maven Infrastrukturänderung umgesetzt. Goobi workflow sieht weiterhin so aus wie gewohnt, unter der Haube hat sich aber einiges getan. Gerade für Entwickler und Systemadministratoren ist das interessant.

Die neue Struktur ermöglicht jetzt einfachere Refaktorisierungsarbeiten und das einfachere pflegen von Abhängigkeiten an zentraler Stelle.

Entwickler

Für Entwickler gibt es jetzt nicht mehr das goobi-workflow Repository alleine, sondern es gibt workflow-base und goobi-workflow-core. Wir empfehlen Entwicklern alle lokalen Repositories zu löschen und neu von Github auszuchecken.

Der Core und die Plugins definieren jetzt workflow-base als parent.

Ebenfalls hat sich der Ort für die Artefakte im Nexus geändert. Sie liegen nicht mehr unter de.intranda.goobi.workflow, sondern unter io.goobi.workflow.

Systemadministratoren

Für Systemadministratoren hat sich die Benennung der Artefakte in den Plugins geändert. Hier wurde konsequent die Schreibweise von .jar Plugindateien und .xml Konfigurationsdateien angeglichen und vereinheitlicht. Bei Updates muss genau darauf geachtet werden, dass keine alten Artefakte liegen bleiben.

Snippets

• Für einen Kunden wurde ein größeres Set an Spezialplugins fertiggestellt

• Die Arbeiten im Kontext Vokabulare und Archiv gehen voran

Allgemein

Core

Config Editor

Der frisch integrierte Konfigurationseditor wurde dahingehend erweitert, dass jetzt auch komplette Dateien hoch- und runtergeladen werden können. Weiter werden die im Hintergrund geschriebenen Backups der Dateien in der Oberfläche optional zum Download angeboten

Regelmäßige Aufgaben

In dem Abschnitt für die Verwaltung der Quartz-Jobs gab es kleinere Änderungen an der Benutzeroberfläche. Wenn eine Aufgabe pausiert ist, wird jetzt auch kein Zeitplan und Datum für die nächste Ausführung angezeigt. Außerdem wurde das Icon zum einmaligen Ausführen geändert.

Vokabulare

Im Bereich der Vokabulare wurde begonnen die Bedienbarkeit bei dem Im- und Export von Datensätzen zu vereinheitlichen.

Archive

Im Bereich der Archive wurde damit begonnen die Java Logik für die Suche in Beständen neu zu implementieren.

Plugins

Export: ADM - BSME

Ein Export Plugin wurde entwickelt, dass beim Erzeugen spezieller Exportformate in die Software Imagen Media Archive Management unterstützt.

Schritt: ALMA API

Das ALMA API Plugin kann jetzt bei Variablen auch Bedingungen enthalten.

Schritt: Metadatenanreicherung via Excel-Datei

Das neue Schritteplugin erlaubt es, dass Metadaten aus einer Excel-Datei gelesen und zu bestehenden Strukturelementen hinzugefügt werden.

An dieser Stelle geben wir einen detaillierten Einblick in unsere aktuellen Entwicklungen. Wir versuchen, diese relativ aktuell zu halten und für möglichst jeden Monat zusammenzufassen, was es an Neuerungen oder Änderungen gab.

Im Inhaltsverzeichnis auf der linken Seite findet sich eine Auflistung der jeweiligen Monate, zu denen eine solche Zusammenstellung bereits vorliegt. Und zusätzlich sind im Folgenden auch einmal die letzten Digests verlinkt:

Core

Tabellen

Endlich kann die Spaltenbreite innerhalb von Goobi workflow individuell angepasst werden. Dabei wird die Information im local Storage des Browsers gespeichert. Eine einmal gemachte Einstellung ist also an den PC und den Browser gekoppelt und nicht serverseitig hinterlegt. Dadurch können auf verschiedenen PCs mit verschiedenen Bildschirmen auch jeweils verschiedene Einstellungen vorgenommen werden, die sich dann nicht immer gegenseitig im Weg stehen.

GoobiScript

Wenn mehrere Export Schritte in einem Vorgang existieren, dann kann man jetzt im GoobiScript den Titel übergeben, damit der richtige Export getriggert wird. Beispiel:

---
# This GoobiScript allows to export Goobi processes using the default export mechanism. It either uses the default export or alternativly an export plugin that was configured in one of the workflow steps.
action: export

# Decide if the images shall get exported additionally to the metdata (`true`).
exportImages: false

# Decide if the OCR results shall get exported additionally as well (`true`).
exportOcr: false

# Decide which export plugin shall be used by giving the name of this export plugin. It has the highest priority if it is configured. [OPTIONAL]
pluginName: 

# Decide which export plugin shall be used by giving the name of the export step. If it is configured then it will try to find this export step first, and only when there is no such step, will the standard choice be used instead. [OPTIONAL]
stepName: "Export into the Goobi viewer"

Snippets

• Es wurden verschiedene kleinere Stylinganpassungen im Bereich Breadcrumbs oder Menüs vorgenommen

• Intern wurden erste Vorbereitungen für eine Java 17 Unterstützung vorgenommen

• Die Message Queue hat Performanceverbesserungen erhalten

• Eine abgekündigte und seit vielen Jahren nicht mehr gepflegte Java Library für die Verarbeitung von regulären Ausdrücken wurde entfernt und durch eine alternative Lösung ersetzt.

Plugins

Schritt: Herunterladen und verifizieren von Dateien

Ein Schritteplugin um Dateien herunterzuladen, zu verifizieren und dann an das externe System eine Rückmeldung zu geben wurde entwickelt.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.12.3. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.12.3</version>
</dependency>

Allgemein

Core

Benutzereinstellungen

Die Anzahl der Bilder innerhalb eines Vorgangs kann bereits seit einiger Zeit als zusätzliche Tabellenspalte angezeigt werden. Bisher war es aber nicht möglich diese Einstellung generell zu aktivieren, sondern sie musste nach jedem Anmelden neu gesetzt werden. Ab dem Januar Release ist es möglich die Option in den Benutzereinstellungen zu speichern, so dass sie für einen Account standardmäßig aktiv ist.

Suche

Ab sofort ist es möglich nach allen Vorgängen zu suchen die eine Aufgabe mit einem bestimmten Titel haben. Bisher musste der Status der Aufgabe mit angegeben werden (steplocked:, stepopen:, stepinwork:, stepdone:, ...). Ab jetzt funktioniert auch einfach step: gefolgt von einem Titel oder einem Teil eines Titels.

Harvester

Der im Oktober eingeführte Harvester wurde für den Typ OAI-PMH um einen Testmodus erweitert. Ist dieser aktiviert wird nicht das komplette Trefferset abgefragt, sondern nur die erste Seite. Der resumptionToken wird dabei ignoriert.

Außerdem können können statische from und until Werte gesetzt werden. Sind die Werte leer, wird inkrementell nach allen neuen Daten seit der letzten Abfrage gesucht.

Barrierefreiheit

Im Januar Release wurde an vielen kleinen Baustellen im Kontext einer verbesserten Bedienbarkeit und Barrierefreiheit gearbeitet. So wurden teilweise Seitentitel eingepflegt, die Bedienung via Tastatur unter Firefox verbessert, alternative Texte für graphische Elemente eingepflegt und die Seitenstruktur verbessert. Die Änderungen sind erst dann bemerkbar, wenn Goobi workflow mit einem Screenreader oder ohne Maus bedient wird.

Sicherheit

Seit einiger Zeit wird das Journal auch bei Benutzeraccounts angezeigt. Ab dem Januar Release wird dort automatisch eine Nachricht hinterlassen, wenn das Benutzerprofil von einem Administrator betreten wurde.

Snippets

• Im GoobiScript setPriority ist die Option steptitle jetzt optional.

• Ein Fehler, der bei einer leeren Suche nach Normdaten aufgetreten ist, wird jetzt abgefangen.

Plugins

Import: Excel

Das generische Importplugin für Excel-Dateien kann das Anlegen der Vorgänge jetzt auch via GoobiScript abarbeiten.

OPAC: Soutron

Das Soutron OPAC Plugin unterstützt jetzt auch die neue XML API.

Codeanalyse

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 24.01.2. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Allgemein

Core

Config Editor

Das ehemalige Plugin für den Goobi workflow Konfigurationseditor wurde in den Core integriert und steht ab diesem Release ohne zusätzliche Installation zur Verfügung.

Frontend Buildsystem

Die Oberfläche von Goobi workflow wird über die klassischen Webtechnologien CSS und Javascript maßgeblich mitgestylt. Die Entwicklung findet aber zum Beispiel in SASS oder LESS Dateien statt, die dann zu CSS kompiliert werden. Auch in Javascript gibt es verschiedene Einzeldateien, die dann für die Applikation in eine Datei zusammengefasst werden. Früher passierte das Kompilieren und Zusammenfassen auf dem PCs des Entwicklers, der die fertigen Dateien dann mit in das Repository eingecheckt hat. Ab dem Februar Release erfolgen diese Arbeitsschritte in der CI Umgebung automatisch. Das vereinfacht den Entwicklungsprozess und reduziert das Potential für merge-Konflikte.

Snippets

• Der Komperator für Dateinamen wurde grundlegend überarbeitet, so dass auf- und absteigende Sortierungen von Dateien im Core und in Plugins einfacher und fehlerfreier zur Verfügung stehen.

Plugins

Export: VLM

Das VLM Export-Plugin kann jetzt basierend auf Metadaten und Bedingungen unterschiedliche Konfigurationsblöcke verwenden.

Schritt: Rename-Files

Das Schritteplugin um Dateien umzubenennen wurde massiv erweitert und kann jetzt mit in der neuen Konfigurationssektion <namepart /> mehrere <condition /> und <replace /> Argumente enthalten.

Schritt: Metadata-Edition

Im Schritteplugin zum Bearbeiten von Metadaten gab es einen Bugfix um Informationen zum Repräsentanten korrekt zu speichern.

Codeanalyse

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 24.02.2. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Core

Harvester

Große Teile der Funktionalität des intranda Harvesters sind in den Goobi workflow Core integriert worden. Ab sofort können Repositories von unterschiedlichen Typen angelegt und konfiguriert werden. Der Harvester in einer festgelegten Abfragefrequenz ein Repository, zum Beispiel vom Typ OAI-PMH ab und lädt die Datensätze in einen angegebenen Ordner herunter. Dabei können Repositories einzeln auf eingeschaltet oder deaktiviert werden.

Es besteht die Möglichkeit ein Skript zu definieren, dass auf jeden heruntergeladenen Datensatz angewendet werden soll. Dadurch ist es sehr einfach möglich die heruntergeladenen Dateien noch zu modifizieren.

Sofern gewünscht können dann auch Vorgänge in Goobi workflow angelegt werden. Dafür muss ein Projekt und eine Produktionsvorlage sowie das Importformat ausgewählt werden. Bei den Importformaten steht das Mapping aus dem Regelsatz zur Verfügung.

Über die erfolgte Integration können zum Beispiel aus Goobi workflow heraus Datensätze geharvestet, via Skript aufbereitet und dann direkt an den Hotfolder des Goobi viewers weitergeleitet werden. Ein anderes Szenario ist, dass zum Beispiel MARC-XML Datensätze aus einer OAI-PMH Schnittstelle heruntergeladen und Vorgänge in Goobi workflow angelegt werden um damit dann weiter zu arbeiten.

LIDO

Die Java Bibliothek UGH wurde dahingehend erweitert, dass es auch leere Elemente erzeugen kann, wie es für das LIDO Format notwendig ist. Mit dem folgenden Exportmapping wird zum Beispiel ein Element auch dann erzeugt, wenn es keinen Wert gibt:

        <Metadata>
          <InternalName>Person</InternalName>
          <WriteXPath>./lido:eventActor/lido:displayActorInRole</WriteXPath>
          <exportEmptyNode>false</exportEmptyNode>
        </Metadata>

Plugins

Dashboard: Barcode

Das Dashboard Plugin erlaubt es einen Barcode in eine Eingabebox abzuscannen und direkt eine vorher ausgewählte Aktion auszuführen. So kann zum Beispiel eine Aufgabe angenommen oder auch angenommen und direkt wieder abgeschlossen werden.

Import: Liechtensteiner Volksblatt

Für die Durchführung des Imports des Liechtensteiner Volksblatts wurde ein spezielles Importplugin entwickelt.

Codeanalyse

Der folgende Screenshot zeigen die SonarCloud Analyse des aktuellen Releases. Weitere Informationen gibt es direkt auf der Projektseite.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.10.2. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.10.2</version>
</dependency>

Core

Vorgangseigenschaften

Die in Goobi workflow vorhandenen Vorgangseigenschaften können jetzt auch als Textarea dargestellt werden. Die Konfiguration erfolgt über die bekannte goobi_processProperties.xml. Eine Beispielkonfiguration ist wie folgt:

    <property name="Beschreibung" container="0">
        <project>*</project>
        <showProcessCreation access="write" template="*" />
        <type>Textarea</type>
        <defaultvalue></defaultvalue>
    </property>

Snippets

• Wurde das GoobiScript zum löschen von Vorgängen mehrfach hintereinander über das gleiche Trefferset aufgerufen, kam es zu einem Fehler, der einen Neustart der Applikation notwendig machte. Das Verhalten wurde abgestellt.

• Die Standardkonfiguration von ActiveMQ wurde angepasst, so dass der Dienst nur noch auf localhost lauscht.

• Ein Fehler, der bei der Wiederholung von bestimmten Variablen in Skriptschritten aufgetreten ist, wurde behoben

Plugins

Import: Charité - Ärztinnen im Kaiserreich und verfolgte Ärzte

Für den Import von den beiden Datenbanken "Ärztinnen im Kaiserreich und in der Weimarer Republik" und "Verfolgte Ärztinnen und Ärzte des Berliner Städtischen Gesundheitswesens (1933-1945)" und der Überführung in METS/MODS Dateien wurde ein spezielles Importplugin entwickelt.

Schritt: Metadaten pro Bild

Ein sehr mächtiges Schritteplugin wurde in diesem Monat fertiggestellt. Damit kann für jedes Bild eines Vorgangs eine vielzahl von Metadaten und Verlinkungen erfasst werden.

Schritt: Aufgaben duplizieren

Das Plugin ermöglicht es, eine Vorgangseigenschaft auszulesen und einen bestehenden Workflow-Schritt für jede Zeile in der Eigenschaft mehrfach zu duplizieren. Zusätzlich dupliziert es die Eigenschaften auch in einzelne Eigenschaften pro Zeile aufgesplittet.

Schritt: PDF Dateien extrahieren

Das bereits bekannte Plugin für die vollautomatische Aufbereitung von PDF-Dateien wurde um eine freie Dateibenennung und eine aktualisierte Dokumentation ergänzt.

Codeanalyse

Der folgende Screenshot zeigen die SonarCloud Analyse des aktuellen Releases. Weitere Informationen gibt es direkt auf der Projektseite.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.11.1. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.11.1</version>
</dependency>

Core

Bedienbarkeit

Die Anlegemaske von Goobi workflow hat schon immer verhindert, dass ein Vorgang mit identischem Namen ein erneutes Mal angelegt werden konnte. Man erhielt dann eine kurze Fehlermeldung, die sagt, dass der Vorgang bereits existiert. Dies wurde erweitert, so das man ab jetzt auch die Details über den bereits existierenden Vorgang einsehen kann.

GoobiScript

Die GoobiScript Aufrufe metadataAdd und metadataReplace können jetzt auch Normdatenwerte anlegen oder manipulieren. Damit ist es zum Beispiel möglich die GND-ID für Personen nachträglich in Masse anzupassen.

In dem gleichen Zuge wurde das GoobiScript metadataReplaceAdvanced eingeführt. Der Aufruf erlaubt es zusätzlich mit regulären Ausdrücken zu arbeiten.

REST

Der September bring ebenfalls Änderungen an der REST Schnittstelle, zwei neue Endpoints wurden hinzugefügt. Der erste erlaubt eine Suche und liefert eine Liste an VorgangsIDs zurück:

Der zweite erlaubt es Aufgaben mit einem definierten Titel zu abzuschließen:

Plugins

Import: Excel zu EAD

Ein Importplugin um aus einer Excel-Datei eine EAD Archivstruktur mit Metadaten zu erstellen wurde entwickelt.

Coming soon

• GoobiScript Anpassungen

• Dokumentation der Schrittedetails

Core

GoobiScript Templates

Immer wieder kommt es vor, dass man mehrere GoobiScript Aufrufe hintereinander aufrufen muss. Oft wiederholen sich die Aufrufe dann auch noch weil zum Beispiel in einem bestimmten Projekt unter bestimmten Bedingungen immer mal wieder erforderlich ist einen bestimmten Schritte einzufügen.

Hierfür gibt es jetzt einen neuen Mechanismus um diese Aufgaben angenehmer zu gestalten. Im Bereich "Administration" wurde der neue Bereich GoobiScript Templates eingeführt. Dort können mehrere Aufrufe elegant verkettet und als Template abgespeichert werden. Jedes Template hat einen obligatorischen Namen und eine optionale Beschreibung.

In der Liste der GoobiScript Templates werden die selbst definierten Templates als Badges mit eigener Farbe angezeigt. Die Beschreibung wird angezeigt, wenn mit der Maus über den Badge gefahren wird. Für die Templates gelten dieselben Möglichkeiten zur dedizierten Rechteverwaltung wie für die fest eingebauten GoobiScript Aufrufe.

Eigenschaften beim Vorgang anlegen

Beim Anlegen eines Vorgangs können die Vorgangseigenschaften jetzt auch über die zentrale Konfigurationsdatei goobi_processProperties.xml verwaltet werden. Dafür wurde in der Konfigurationsdatei das neue XML-Element <showProcessCreation /> hinzugefügt. Als Attribute gibt es access="" und template="". Die Werte des Attributs access sind analog zu den anderen bereits in der Datei vorhandenen Möglichkeiten. Mit dem template Attribut wird gesteuert für welche Produktionsvorlage die Einstellung gilt. Das XML-Element ist wiederholbar um unterschiedliche Produktionsvorlagen konfigurieren zu können. Es ist möglich beim template Attribut ein * zu definieren, damit die Einstellung für alle Produktionsvorlagen gilt.

Mit dieser Änderung ist es erstmalig möglich die Metadaten, die aus dem Katalog importiert werden, von den Eigenschaften, die beim Anlegen eines Vorgangs mit erhoben werden sollen und dadurch inhaltlich etwas komplett anderes sind, visuell zu trennen. Bisher wurde beides vermischt im oberen Bereich mit der Überschrift "Metadaten importieren" angezeigt.

Hier ein Beispiel für eine Konfiguration und ein Screenshot wie es in der goobi_projects.xml bisher gemacht werden musste und aussah:

<item from="prozess" multiselect="false">
    Schrifttyp
    <select label="Antiqua">antiqua</select>
    <select label="Fraktur">fraktur</select>
    <select label="kein OCR">no_ocr</select>
</item>
<item from="prozess" required="true">Fachcode</item>
<item from="prozess" multiselect="false" required="true">
    Digistandort
    <select label="Haus 2">Haus 2</select>
    <select label="Haus 1">Haus 1</select>
</item>
<item from="prozess" multiselect="false" required="true">
    Öffnungswinkel
    <select label="180">180</select>
    <select label="110">110</select>
</item>
<item from="prozess" multiselect="false">
    Glasplatte
    <select label="Ja">true</select>
    <select label="Nein">false</select>
</item>
<item from="prozess" multiselect="false" required="yes">
    Viewerexport
    <select label="Nein">false</select>
    <select label="Ja">true</select>
</item>

Dieselbe Konfiguration kann jetzt über die goobi_processProperties.xml abgebildet werden. Dafür wird dann eine eigene Box angezeigt, in der die Einstellungen vorgenommen werden können. Dadurch kann eine klarer strukturierte und dadurch übersichtlichere Oberfläche realisiert werden.

<?xml version="1.0" encoding="UTF-8"?>
<config_processProperties>
    <property name="Schrifttyp" container="0">
        <project>*</project>
        <showProcessCreation access="write" template="*" />
        <type>List</type>
        <value>Antiqua</value>
        <value>Fraktur</value>
        <value>kein OCR</value>
    </property>

    <property name="Fachcode" container="0">
        <project>*</project>
        <showProcessCreation access="writeRequired" template="*" />
        <type>Text</type>
        <defaultvalue></defaultvalue>
    </property>

    <property name="Digistandort" container="0">
        <project>*</project>
        <showProcessCreation access="writeRequired" template="*" />
        <type>List</type>
        <value>Haus 2</value>
        <value>Haus 1</value>
    </property>

    <property name="Öffnungswinkel" container="0">
        <project>*</project>
        <showProcessCreation access="writeRequired" template="*" />
        <type>List</type>
        <value>180</value>
        <value>110</value>
    </property>

    <property name="Glasplatte" container="0">
        <project>*</project>
        <showProcessCreation access="write" template="*" />
        <type>List</type>
        <value>Ja</value>
        <value>Nein</value>
    </property>

    <property name="Viewerexport" container="0">
        <project>*</project>
        <showProcessCreation access="writeRequired" template="*" />
        <type>List</type>
        <value>Nein</value>
        <value>Ja</value>
    </property>
</config_processProperties>

Snippets

• Der Zeitungsexport für die DDB schreibt nun erweiterte Informationen um DFG-Viewer Darstellungsanforderungen zu erfüllen.

Codeanalyse

Der folgende Screenshot zeigen die SonarCloud Analyse des aktuellen Releases. Weitere Informationen gibt es direkt auf der Projektseite.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.07.2. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.07.2</version>
</dependency>

Coming soon

• GoobiScript Templates

• Dokumentation der Schrittedetails

Core

API Token

In den Einstellungen des eigenen Benutzeraccounts gibt es einen neuen Reiter, in dem ein API Token generiert und mit entsprechenden Rechten ausgestattet werden kann.

Das Recht einen Token zu erstellen haben nur Superadministratoren, oder Benutzeraccounts, die einer Gruppe angehören, der das entsprechende Recht zugewiesen wurde.

Dieser Token kann dann mit einer Basic Auth verwendet werden um die vorher freigeschalteten Kommandos abzufragen.

Vorgang anlegen

Beim Anlegen eines Vorgangs kann die Maske über die Datei goobi_projects.xml konfiguriert werden. Dabei konnten auch Multiselect Felder mit dem Attribut multiselect="true" definiert werden. Wurden dann mehrere Werte ausgewählt so landeten diese hintereinander in dem konfigurierten Metadatum oder der festgelegten Eigenschaft.

Ab diesem Release wird für jeden Wert ein eigenes Metadatum oder eine eigene Eigenschaft geschrieben.

Plugins

Schritt: OCR zu Metadatum

Es wurde ein neues Schritteplugin entwickelt, dass es erlaubt den OCR Text aller Bilder eines Vorgangs in ein Metadatum zu überführen.

Snippets

• Die ALTO Bearbeitung im Metadateneditor kann jetzt auch Dateien in S3 speichern.

• Das Plugin zur automatischen PDF-Extraktion hat kleinere Verbesserungen erhalten, zum Beispiel bei fehlenden Leerzeichen im Volltext.

Core

Bedienbarkeit

Immer wieder suchen wir uns kleine Bereiche in der Oberfläche heraus um bei dieser gezielt die Bedienbarkeit zu verbessern. Im August war es der Bereich der Aktionen innerhalb einer angenommenen Aufgabe, bei der wir alleine durch eine Anpassung der verwendeten Terminologie versucht haben Klarheit zu schaffen.

Hier zwei Screenshots von dem Bereich vor dem Update:

Verwirrung gab es vor allem, weil der erste Reiter "Aufgabe ausführen" hieß und die Visualisierung einen Button suggerierte. Klickte man darauf passierte aber nichts. Die zweite Verwirrung gab es dann im Bereich der Fehler und Korrekturmeldungen bei dem eine "Korrektur angefordert" und eine "Fehlerlösung gemeldet" wurde. Erwartet wurde hier eher, dass man einen "Fehler meldet" und eine "Korrektur sendet". Alleine durch die Anpassung der entsprechenden Übersetzungen konnte das Benutzerinterface klarer gestaltet werden. Hier das Ergebnis:

GoobiScript

Das GoobiScript openNextStep wurde neu hinzugefügt um die ersten gesperrte Aufgabe eines Vorgangs aus dem Trefferset auf offen zu setzen, sofern keine andere Aufgabe offen ist. Wenn es sich um eine automatische Aufgabe handelt wird diese auch automatisch gestartet.

Außerdem besteht bei dem addStep GoobiScript jetzt die Möglichkeit mit der Einstellung number: end die Aufgabe am Ende des Vorgangs einzufügen, auch ohne die genaue Nummer zu kennen. Diese wird bei der Einstellung automatisch ermittelt.

REST

In der REST API ist ein neuer Endpoint hinzugefügt worden um offene automatische Aufgaben zu starten.

Außerdem wurde der Endpoint zum Anlegen von neuen Vorgängen dahingehend erweitert, dass auch Metadaten und Eigenschaften optional gleich mitgegeben werden können.

Plugins

Export: VLM

Der VLM Export unterstützt neben einem Passwort jetzt auch die Möglichkeit die SFTP-Funktionalität mit einem SSKH Key zu verwenden.

Export: Heris

Ein Spezialplugin für den Export von fünf ausgewählten Bildern sowie Metadaten als JSON Datei wurde für das Bundesdenkmalamt in Österreich entwickelt.

Import: Nürnberger Hausbücher

Für den Import von den Nürnberger Hausbüchern und der Überführung von einer SQL Datenstruktur in METS/MODS Dateien wurde ein spezielles Importplugin entwickelt.

Schritt: Bildauswahl

Ein Schritteplugin zur Auswahl und festlegen einer Reihenfolge von Bildern sowie Speichern des Ergenisses für die weitere Verarbeitung als Prozesseigenschaft wurde fertiggestellt.

Codeanalyse

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.08. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Coming soon

• Dokumentation der Schrittedetails

• Personalisierte API Token

Core

Fehler- und Korrekturmeldungen

In einer angenommenen Aufgabe können Fehler- und Korrekturmelden gesendet werden. Neu ist, dass jetzt ein optionales DropDown Menü zur Verfügung steht, in dem eine Liste an klassischen Fehlertypen konfiguriert werden kann.

Die Konfiguration erfolgt sowohl für die Fehler- als auch für die Korrekturmeldungen in der zentralen goobi_config.properties Datei. Hier eine Beispielkonfiguration:

Mailversand

Der Mailversand aus dem Goobi workflow heraus wurde vereinheitlicht und verschiedene Plugins, die ebenfalls E-Mails versenden können, können jetzt auf dieselbe Konfiguration zugreifen. Dadurch entfallen Redundanzen im Code, der Wartungsaufwand wird minimiert und die Konfiguration wird einfacher.

Codequalität

Seit einiger Zeit arbeiten wir in Goobi workflow mit Sonarcloud zur statischen Analyse von Codequalität. Im Juli letzte Jahres sind wir mit gut 4.600 angemerkten Issues gestartet. Mit diesem Release sind wir bei gut 1.600 Issues angekommen. Alleine im letzten Monat konnten rund 1.000 Issues bearbeitet werden. Zusätzlich konnten rund 75 Unit Tests in den Core übernommen werden.

Performance

Beim Anlegen und Löschen von Vorgängen mit sehr vielen Schritten (sagen wir mal mehr als 50) gab es Performanceprobleme. Diese konnten durch Umstellungen an SQL Aufrufen und Java Code behoben werden.

Plugins

Import: Excel-Import

Das Excel-Importplugin erlaubt nun für die Generierung von Vorgangstiteln - analog zu der Konfiguration in der goobi_projects.xml - die Angabe eines replacewith Attributs, um zum Beispiel Leerzeichen durch einen Unterstrich zu ersetzen

Schritt: PDF-Generierung

Das Schritteplugin zur PDF-Generierung erlaubt jetzt die Angabe und Nutzung der vor kurzem im ContentServer eingeführten PDF-Generiervarianten. Dadurch können zum Beispiel als Schritt innerhalb einer Produktionsvorlage valide PDF-A Dateien erzeugt und an einem bestimmten Ort abgelegt werden.

Codeanalyse

Der folgende Screenshot zeigen die SonarCloud Analyse des aktuellen Releases. Weitere Informationen gibt es direkt auf der Projektseite.

Ein paar Worte zu der fehlschlagenden Analyse:

In SonarCloud lassen sich Qualitätsanforderungen, sogenannte Quality Gates, definieren. Die Quality Gates werden einmal auf den gesamten Quelltext angewendet und einmal auf den Quelltext der in den letzten 30 Tagen geändert wurde. Das jetzt fehlschlagende Quality Gate in Goobi workflow bezieht sich auf den angepassten Quelltext in den letzten 30 Tagen. Dort wird eine Testabdeckung von mindestens 25% gefordert und die Duplucations sollen unter 10% sein. Da wir mit diesem Release sehr viel Quelltext angefasst haben erfüllen wir diese Vorgaben - bezogen auf den Quelltext der letzten 30 Tage nicht.

Das Quality Gate für den gesamten Quelltext wird aber erfüllt.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.05.1. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Coming soon

• Portierung der Benutzeroberfläche auf neues Framework

• Regelmäßige Aufgaben

• Dokumentation der Schrittedetails

Core

ALTO Editor

Der ALTO Editor zur OCR Korrektur, der bei Bedarf im Metadateneditor geöffnet werden kann, unterstützt jetzt auch Rechts-nach-links Sprachen. Die Umschaltung erfolgt automatisch auf Basis der gewählten Einstellung im Metadateneditor selbst.

Bedienbarkeit

Nach und nach fließen kleinere Änderungen für die Bedienbarkeit in die Oberfläche ein. In diesem Digest möchten wir auf einen winzigen Teilbereich eingehen und aufzeigen was das in der Praxis bedeutet.

Ausgangslage ist in diesem Fall der Metadateneditor und die Möglichkeit ein weiteres Metadatum hinzuzufügen. Das sah bisher wie folgt aus:

Wir haben diesen kleinen Teilbereich beleuchtet und dabei folgende Punkte notiert:

• Die Überschrift "Neue Metadaten anlegen" suggeriert durch den Plural, dass man hier mehrere gleichzeitig "anlegen" kann. Das ist aber nicht möglich denn in der Maske kann immer nur eines "angelegt" werden.

• Das Wort "anlegen" ist von der Terminologie eher mit "Vorgang anlegen" verknüpft. Das Wort "hinzufügen" ist hier passender, da ja zu einem bestehenden Vorgang ein neues Metadatum hinzugefügt werden soll

• Auch das Wort "Neu" in dem Zusammenhang ist eigentlich zuviel. "Metadatum hinzufügen" ist ebenfalls klar und eindeutig. Es wird an der Stelle ja nicht den Regelsatz editiert.

• Mit "Typ" wird eher so etwas wie "Text, MultiSelect, DropDown, Textarea" assoziiert, nicht aber "Weitere Titel". Ein Metadatum vom Typ "Weitere Titel" ist komisch. Besser ist schlicht "Name".

• "Die Änderungen speichern" sagt aus das man etwas geändert hat. Aber es wird doch etwas "angelegt" beziehungsweise ist nicht "Hinzufügen" die richtige Terminologie hier?

Das Ergebnis der Überlegungen sieht wie folgt aus:

Natürlich gibt es noch viel mehr was man sich an der Stelle Fragen kann:

• Warum ist die Box ein- und ausklappbar?

• Ist es aus UX Perspektive richtig den Abbrechen und Hinzufügen Button visuell gleichwertig gewichtet zu haben?

• Warum wird das nicht einfach in einem Modal als Overlay geöffnet?

• ...

Aber diese Fragen sind komplexer zu beantworten und wir gehen kleine Schritte. Dieses Beispiel soll nur aufzeigen wie wir an verschiedensten Stellen und nach und nach Dinge besser machen.

Plugins

Schritt: Metadatenbearbeitung

Das Schritteplugin um Metadaten direkt aus dem angenommenen Aufgabe heraus bearbeiten zu können kann jetzt leere Felder ausblenden. Das war bisher nicht möglich und hat bei Anwendungsfällen wo das Plugin für die schnelle Prüfung von Metadaten eingesetzt wurde zu sehr langen Listen geführt.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.01. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Ankündigungen

Der Dezember war im Projekt geprägt von dem anstehenden Jahresende: Viel Housekeeping und der Versuch noch Kleinigkeiten aufzuräumen und abzuschließen um mit Luft und einem sauberen Schreibtisch / Projekt erst in den Urlaub und dann auch so in das neue Jahr zu starten.

Aus diesem Grund gibt es nichts neues was in dem Dezember-Digest an Featureentwicklungen zu berichten wäre. Deswegen wollen wir einen Ausblick wagen auf das was wir für das kommende Jahr sehen.

Ausblick

Oberfläche

Schon länger arbeiten wir im Hintergrund daran die bestehende Oberfläche im Unterbau auf andere Füße zu stellen. Viele hundert Stunden sind dort bereits hineingeflossen und das Ergebnis wird erst einmal annähernd genauso aussehen wie vorher. Allerdings erlauben uns diese Arbeiten dann deutlich einfacher an der Oberfläche zu arbeiten. Änderungen müssen nicht mehr an vielen einzelnen Stellen gemacht und geprüft werden, sondern können an einer zentralen Stelle umgesetzt werden und wirken sich dann auf alle Stellen aus.

Sobald wir mit diesen Arbeiten durch sind wollen wir an der Bedienbarkeit in der Oberfläche arbeiten. Diese erstrecken sich über verschiedene Bereiche. Beispiele dafür ist die Benennung von Funktionalität die überall einheitlich sein soll oder die Verwendung von immer denselben Icons für dieselbe Aktion. Aber auch die konsistente Platzierung von Bedienelementen über die Applikation hinweg gehört dazu, Stichwort: "Erwartbarkeit".

Zuletzt gehören auch visuelle Umgestaltungen dazu. Hierzu später mehr.

REST API

Wir möchten die veralteten Command-Plugins entfernen und durch die REST API ersetzen. Außerdem soll die Möglichkeiten die über die REST API zur Verfügung stehen massiv erweitert werden.

Angedacht ist zum Beispiel via REST auch Zugriff auf Funktionalitäten aus GoobiScript zu geben. Dadurch könnte dann zum Beispiel aus Skripten heraus ein Massenexport getriggert oder in einzelnen Vorgängen die Manipulation von Metadaten erlaubt werden.

Diese Arbeiten sollen Anstoß dafür sein auch die Softwarearchitektur zu überdenken.

Dateizugriff

Es gibt viele Stellen in der Oberfläche bei denen man auf die Dateien eines Vorgangs zugreifen kann, darf, soll oder möchte. Über die Jahre haben sich hier verschiedene Stellen gebildet die aber allesamt eher als Abkürzungen und Insellösungen zu sehen sind und es fehlt ein gradliniger Weg. Das möchten wir im kommenden Jahr auf verschiedenen Ebenen angehen. So möchten wir die Stellen in der Oberfläche zusammentragen an denen Zugriffs aufs Dateisystem möglich ist und uns fragen wofür die Funktionalität an genau dieser Stelle benötigt wird. Dann wollen wir einen zentralen Weg für den Zugriff konzipieren und entwickeln und zu guter Letzt auch im Java Code eine zentrale Stelle schaffen die für alle Dateioperationen genutzt werden soll.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.12. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>22.12</version>
</dependency>

Coming soon

• Portierung der Benutzeroberfläche auf neues Framework

• Dokumentation der Schrittedetails

• Verbesserte PDF-A Generierung

• REST-API

Core

Regelmäßige Aufgaben

Schon länger kann Goobi workflow bestimmte Aufgaben periodisch anstoßen. Es gibt interne Aufgaben, die einmal täglich ausgeführt werden, aber auch Plugins wie der DataPoller oder zum zeitlichen pausieren von Schritten (Delay-Plugins) zählen dazu. Diese Funktionalität arbeitet stabil und verlässlich, hatte aber zwei Einschränkungen die wir mit diesem Release angegangen sind.

Zum Einen fand alles im verborgenen statt. Es gab keine Übersicht darüber welche regelmäßigen Aufgaben es gibt, wann diese laufen und ob es dabei einen Fehler gab oder nicht. Für diese Übersicht gibt es jetzt eine neue Seite im Bereich "Administration" das die angesprochenen Informationen auflistet. Auch ein individuelles Ausführen oder Pausieren von Aufgaben ist dort möglich.

Der zweite Teil war die Konfigurationsmöglichkeiten. Entweder waren Dinge gar nicht konfigurierbar oder sie wurden in Sekunden seit Mitternacht angegeben. Um etwas um 15:30 Uhr zu starten musste dann der Wert 55800 angegeben werden. Nicht gerade intuitiv. Jetzt wird die Cron-Syntax verwendet, die deutlich intuitiver zu lesen und auch mächtiger in der Konfiguration ist. Die Syntax für 15:30 Uhr jeden Tag ist jetzt 0 30 15 * * ?

Sortierung für zusätzliche Spalten

Schon länger können in den Einstellungen eines Benutzeraccounts zusätzliche Spalten für die Tabelle auf der Seite "Vorgänge" und "Meine Aufgaben" konfiguriert werden. Ab sofort sind diese auch sortierbar sofern sie in der Datenbank stehen. Das ist zum Beispiel für Variablen wie {db_meta.XYZ}, {process.XYZ}, {product.XYZ} oder {template.XYZ} der Fall. Andere Variablen wie {origpath} oder auch {meta.XYZ} sind nicht sortierbar.

Bedienbarkeit

Das Thema Bedienbarkeit geht in kleinen Schritten voran. Diesen Monat haben wir uns die Projektkonfiguration vorgenommen und dort vor allem den Reiter "METS Parameter" der zu "Inhaltliche Einstellungen" umbenannt wurde. Die Bezeichnung der Zeilen wie auch die Inline Hilfe wurden massiv überarbeitet und mit sinnvollen Beispielen versehen.

Snippets

• In den Warteschlangen wird die Fehlertabelle jetzt automatisch und regelmäßig geleert.

• In den Projekteinstellungen kann im Bereich der "Inhaltlichen Einstellungen" eine eigene URL für die DFG-Viewer METS-Datei hinterlegt werden.

Coming soon

• Portierung der Benutzeroberfläche auf neues Framework

• Regelmäßige Aufgaben

• Dokumentation der Schrittedetails

Core

Performance

Es konnte ein Flaschenhals bei der Performance von SQL Queries mit "Like"-Queries identifiziert und behoben werden wenn. Das war zum Beispiel der Fall, wenn Suchanfragen nach Schrittetiteln ausgeführt wurde. Die Ladezeiten konnten teilweise von 155 Sekunden auf 3,2 Sekunden reduziert werden.

Auch im Bereich der automatischen Aufgaben konnte durch eine Umstellung der SQL-Queries ein deutlicher Geschwindigkeitszuwachs erzielt werden.

Das Ergebnis ist in bestimmten Situationen eine schneller reagierende Oberfläche.

Suche

Benutzer können sich jetzt individuelle Sucheinstiege konfigurieren. Dafür steht in den Benutzereinstellungen im Bereich "Allgemein" ein neuer Eingabebereich für individuelle Sucheinstellungen zur Verfügung.

Jede Zeile ist nach dem Name=Suchfilter Prinzip aufgebaut wobei der Platzhalter {} für den Suchbegriff steht. Eine Beispielkonfiguration könnte zum Beispiel wie folgt sein:

Default={}
Eigenschaft={} |processproperty:Template:{}
Projekt={} |project:{}
mit Leerzeichen="{}" "|processproperty:Material type:{}" 
Metadaten={} |meta:TitleDocMain:{}

Sofern konfiguriert erscheint auf der Seite "Vorgänge" vor dem Suchschlitz oberhalb der Tabelle ein Dropdown Menü mit den konfigurierten Werten.

Plugins

Schritt: Dateien umbenennen

Das Plugin zum Umbenennen von Dateien hat bisher automatisch in allen Vorgangsordnern umbenannt. Jetzt kann es auch nur in bestimmten Ordnern arbeiten. Der Anwendungsfall ist dabei, dass man verschiedene Uploadschritte hat, die Dateien jeweils in einen temporären Ordner zwischenspeichert, anschließend das Plugin die Dateien individuell benennt und diese dann mit einem Skript in den _master Ordner verschoben werden. Dadurch kann man eine individuelle und dennoch einheitliche Benennung der Dateien sicherstellen.

Schritt: Workflow ändern

Das Plugin zum Ändern des Workflows auf Grundlage von Vorgangseigenschaften kann jetzt auch die Priorität für einzelne oder alle Schritte eines Vorgangs beeinflussen. Der Hintergrund zu der Erweiterung ist, dass innerhalb eines Workflows die Entscheidung stattfindet ob der Vorgang aus Gründen auf die Überholspur muss, oder nicht. Wenn Überholspur, dann bekommen alle Schritte im Vorgang eine höhere Priorität und tauchen entsprechend weiter oben in den Aufgaben auf.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.02. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.02</version>
</dependency>

Coming soon

• Dokumentation der Schrittedetails

• Verbesserte PDF-A Generierung

Core

Benutzeroberfläche

Mehrere hundert Stunden haben wir im Hintergrund daran gearbeitet und im Ergebnis ändert sich an der Oberfläche erst einmal nur wenig... Im Unterbau aber dafür eine ganze Menge: Dort wo mit der Zeit Quelltext kopiert und modifiziert wurde ist jetzt wieder ein einheitliches System vorhanden. Neue Strukturen wurden aufgebaut, Redundanzen entfernt, Code und Markup für gleiche Dinge vereinheitlicht und dadurch der gesamte Aufbau vereinfacht.

Vermutlich fällt als erstes nur auf, dass alles ein klein bisschen luftiger ist und hier und dort einige Dinge jetzt vielleicht sogar ein bisschen komisch aussehen. Ungewohnt auf alle Fälle. Aber der grundsätzliche Aufbau und auch das Design bleibt gleich.

Auf der Basis dieser Arbeiten können wir jetzt jedoch beginnen an der Bedienbarkeit zu arbeiten: Wie wollen wir Buttons wo anordnen und benennen? Wo wird von der Terminologie im Plural gesprochen und wo Singular? Welche Boxen werden wo angezeigt, wie ist die Reihenfolge der Informationen und wie heben wir relevante Dinge hervor, blenden irrelevante oder nebensächliche aus oder reduzieren den Fokus? Was ist ein einheitlicher und verlässlicher Weg zu einem Ziel und wo wollen wir bewusst Abkürzungen schaffen? Mit dieser Basis können wir viele Dinge an einer zentralen Stelle ändern und sie wirkt sich automatisch auf alle Bereiche aus. Vorher hätten wir sehr sehr viele Stellen einzeln betrachten müssen.

Bitte meldet uns Dinge die jetzt komisch aussehen oder unverständlich sind.

REST API

Im April haben wir im Rahmen eines Projektes begonnen die REST API neu zu beleuchten und unserer Ansicht nach essentielle Funktionalität zu entwickeln, zu refaktorisieren und bestehenden Code auch zu konsolidieren.

Konkret haben wir dabei Vorgänge, Schritte, Eigenschaften und das Journal bedacht und folgende Funktionalitäten implementiert:

• Vorgänge anlegen, Informationen auslesen, aktualisieren oder Vorgänge löschen

• Schritte für einen Vorgang auslesen, aktualisieren, neu hinzufügen, löschen oder ausführen

• Journal auslesen und Einträge hinzufügen, aktualisieren oder löschen

• Eigenschaften auslesen, hinzufügen, bearbeiten und löschen

Die Logik nutzt - wo möglich - vorhandenen Code aus GoobiScript. Auch die Terminologie ist identisch gewählt, so dass es hier beim Arbeiten Wiedererkennungseffekte geben sollte. Der neue Code hat eine sinnvolle Testabdeckung erhalten und die REST Kommandos sind auch in der Swagger Dokumentation alle aufgeführt und beschrieben.

Die neuen REST Endpoints erlauben über eine standardisierte Schnittstelle im Goobi workflow Core eine Integration von Funktionalität mit externen Systemen.

Hier einmal vier Beispielaufrufe für die Möglichkeiten die für das Journal zur Verfügung stehen:

Plugins

Schon länger können die in einer Instanz installierten Plugins über die Oberfläche eingesehen werden. Auf der Seite ist ebenfalls zu sehen, ob das Plugin gegen die installierte Goobi workflow Versionsnummer getestet wurde.

Mit dem April Release haben wir begonnen die Plugins nicht nur auf die Kompatibilität zu testen, sondern auch mit einer identischen Versionsnummer zu taggen. Dadurch ist es jetzt möglich auch im Plugin Repository sofort die Commits zu erkennen, die die Kompatibilität zu einer bestimmten Core Version sicherstellen.

Wir müssen die jetzt gefundene Lösung noch beobachten und eventuell auch noch nachjustieren, aber unserem Ziel: "Pluginversionen analog zum Goobi workflow Core zu haben", sind wir dadurch schon einen großen Schritt näher gekommen.

Codeanalyse

Der folgende Screenshot zeigen die SonarCloud Analyse des aktuellen Releases. Weitere Informationen gibt es direkt auf der Projektseite.

Versionsnummer

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 23.04.3. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
    <groupId>de.intranda.goobi.workflow</groupId>
    <artifactId>goobi-core-jar</artifactId>
    <version>23.04.3</version>
</dependency>

Core

Generierung von URLs für die SRU Schnittstelle und das IIIF Manifest

In den Projekteinstellungen gibt es nun im Reiter METS Parameter zwei zusätzliche Felder zur Erfassung der URL zur SRU Schnittstele des Goobi viewers und der URL des IIIF Manifests für das Gesamtwerk.

Beispielhafte Einträge könnten hierbei wie folgt aussehen:

http://viewer.example.org/sru/$(meta.CatalogIDDigital)
https://viewer.example.org/api/v1/records/$(meta.CatalogIDDigital)/manifest/

Das Ergebnis innerhalb einer so erzeugten METS-Datei ist entsprechend dann wie folgt:

<dv:links>
<dv:iiif>https://viewer.example.org/api/v1/records/1234567889/manifest/</dv:iiif>
<dv:sru>http://viewer.example.org/sru/1234567889</dv:sru>
</dv:links>

Anpassungen für die Bildkommentare

Vor nicht allzu langer Zeit haben wir die neuen Bildkommentare hier vorgestellt. Mit deren erster Nutzung an verschiedenen Einrichtungen ist uns allerdings aufgefallen, dass der interne Speicherort für die Daten nicht ideal war. Aus diesem Grund haben wir hierfür eine Änderung vorgenommen. Wer diese Funktionalität also bereits in Verwendung hatte, sollte daher beim nächsten Update unsere hier bereitstellte Updateanleitung beachten:

GoobiScript metadataChangeType korrigiert

Bei dem GoobiScript metadataChangeType funktionierte der Parameter any nicht wie erwartet. Dies wurde korrgiert und erlaubt nun wie gewünscht die Änderung von Metadaten auf allen Ebenen einer METS-Datei.

Der Vollständigkeit halber hier nochmal der Link zur ausführlichen Dokumentation von GoobiScript:

Logging beim Applikations-Stop verbessert

Administratoren lieben Logging. Das hilft, um im Fehlerfall besser nachvollziehen zu können, warum ein Problem aufgetreten ist und was als Auslöser für ein Fehlverhalten in Betracht gezogen werden kann. Für einen verläßlichen Betrieb produktiver Applikationen ist ein sinnvolles Logging nicht nur hilfreich, sondern oft auch einfach zwingend notwendig. Umso besser ist es, wenn die Entwickler einer Software eng mit den Admistratoren zusammenarbeiten, die die Software tatsächlich betreiben.

Ergebnis einer solchen Zusammenarbeit im Kontext Goobi ist, dass wir permanent versuchen, dass eben auch das Logging von Goobi workflow verbessert wird. In diesem Monat haben wir das Logging beim Applikations-Stop einmal näher betrachtet und einiges verbessert. Denn zu viel Logging ist manchmal schließlich auch nicht richtig.

Plugins

Verarbeitung von Zeitungen

Auf den Goobi-Tagen hatten wir darüber schon einmal berichtet. In den letzten Monaten kamen unsere Entwicklungen für die Verarbeitung von Zeitungen aber immer häufiger in den Einsatz. Deswegen möchten wir das Thema zusammen mit den letzten Entwicklungen noch einmal explizit aufgreifen:

Für Goobi besteht bereits seit einger Zeit die Möglichkeit, dass Zeitungsausgaben semiautomatisch erkannt und mit Metadaten erschlossen werden. Dazu erfolgt im Workflow zunächst eine automatische Erkennung von Zeitungsausgaben auf der Basis von trainierten Modellen. Diese haben wir kürzlich noch einmal deutlich erweitert und mit mehr Ground-Truth-Daten gefüttert. Somit ist die Erkennungsgenauigkeit von Zeitungsausgaben um ein vielfaches besser geworden.

Nach dieser automatischen Erkennung steht in Goobi worklow ein Plugin zur Anreicherung der Zeitungsausgaben mit ausgabenbezogenen Metadaten bereit. Dieses erlaubt relativ bequem, dass Ausgabennummern, Datumsangaben sowie auch die Erscheinungstage samt Morgens- und Abendausgaben erfasst werden können, ohne dass man dies für jede Ausgabe einzeln machen müsste. Stattdessen greift hier ein Semi-Automatismus, der mit wenigen Angaben eines Nutzers die Folgeausgaben entsprechend hochzählt, mit Datumsangaben anreichert und auch benennt.

Darüber hinaus lassen sie hier auch Beilagen schnell erzeugen, so dass anschließend eine umfangreiche METS-Datei erzeugt wird, die über normierte Datumsangaben verfügt und im Goobi viewer z.B. über einen Kalendereinstieg recherchierbar ist.

Um den Anforderungen der Deutschen Digitalen Bibliothek und des DFG-Viewers gerecht zu werden, gibt es seit kurzem übrigens auch ein zusätzliches Export-Plugin, dass die Daten entsprechend den Vorgaben aufbereitet und bereitstellt.

An diesen hier beschriebenen einzelnen Komponenten haben wir in den letzen Monaten viel gearbeitet und immer wieder Optimierungen auch hinsichtlich der Bedienung vorgenommen. Einiges wird in den nächsten Wochen hier auch noch weiter passieren. Gern können wir das in einem Workshop auf den kommenden Goobi-Tagen auch einmal detailliert vorstellen.

Massenimporte mit Archivbestand-Anreicherung

Bisher hatten wir auf die verschiedenen neueren Import-Plugins noch gar nicht hingewiesen, die wir in letzter Zeit für einige spezifische Massenimporte umgesetzt hatten. Für diese Plugins existieren bisher auch noch keine ausführlichen eigenständigen Dokumentationen.

Uns ist aber dennoch wichtig einmal darauf hinzuweisen, dass es mehrere neue Massenimporte gibt, die ihrerseits oft nicht nur Vorgänge in Goobi workflow anlegen sondern ebenso immer häufiger sogar ganze Archivbäume mit einer Tektonik erzeugen oder anreichern.

Je nach Projekt können hierbei im Übrigen auch wie bei anderen Importern für Goobi workflow strukturierte METS-Dateien erzeugt werden, wo jeweils Strukturelmente und zugehörige Metadaten samt Normdaten zu den zugehörigen Bilddateien eingespielt werden.

Bessere Volltextextraktion aus PDF-Dateien

Das Step-Plugin intranda_step_pdf-extractionerlaubt, dass Volltexte aus PDF-Dateien extrahiert und als ALTO-Dateien gespeichert werden können. Dabei ist uns allerdings kürzlich ein Fehler in der Verarbeitung aufgefallen, der dafür verantwortlich war, dass innerhalb von manchen Wörtern unpassende Lücken entstanden sind, unter anderem durch eine vorhandene Silbentrennung in den Wörtern.

Die Ursache dieses Problems konnten wir nun finden und beheben. Dokumentiert war das Plugin übrigens hier schon:

Veröffentlicht haben wir das Plugin ist unter der folgenden URL, wo nun auch die korrigierte Fassung heruntergeladen werden kann:

Dokumentationen

Im Bereich unserer Dokumentationen ist auch wieder viel passiert:

Inline-Dokumentation für GoobiScript

Bei dem GoobiScript addToProcessLog waren die enthaltenen Erläuterungen nicht ideal. Hier gab es eine kleine Korrektur, die nun so aussieht:

Kleine Umstellung in der Updateanleitung

Damit die Updateanleitung für Goobi workflow intuitiver ist, ist sie nun nicht mehr nach Datum gegliedert, sondern nach der jeweils veröffentlichten Version. Diese Umstellung gilt nur für alle künftigen Hinweise, die dort aufgenomnmen werden und nicht rückwirkend. Sie sollte es für Administratoren hoffentlich künftig etwas übersichtlicher machen.

Konfigurationsdateien

Wir haben wieder ein beachtliches Maß an Energie in die Dokumentation weiterer Konfigurationsdateien gesteckt. Annähernd alle Konfigurationsdateien sind dort nun bereits vorbildlich dokumentiert. Ein paar Restarbeiten stehen noch an. Wer aber einmal schauen mag findet hier einige Beispiellinks zu neuen Dokumentationen:

Konfiguration für Laufzettel:

Konfiguration der Warteschlangen:

Konfiguration für Eigenschaften:

Konfiguration für Übersetzungen:

Konfiguration für die Web-Api:

Konfiguration für die Normdaten:

Konfiguration für die Feldanzeige im Metadateneditor:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.07. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>22.07</version>
</dependency>

Opac Plugin für Kalliope dokumentiert

Lange gibt es das Plugin schon. Aber irgendwie haben wir wohl noch keine Zeit gefunden, dass Plugin einmal zu dokumentieren, und so könnte man fast meinen, dass Goobi keine Anbindung an Kalliope hätte. Das stimmt aber nicht, denn diese Dokumention beweist, dass es ein solches Plugin schon längst gibt:

Wenn man genau im Quellcode schaut, der bei GitHub veröffentlicht wurde, dann sieht man sogar, dass es das Plugin bereits seit November 2014 gibt. Wer hätte das gedacht?

Opac Plugin für Ariadne erweitert

Für die Anbindung von Ariadne haben wir bereits vor längerer Zeit ein Plugin implementiert. Dieses wurde nun erweitert, um den Publikationstyp flexibler steuern zu können. Und bei der Gelegenheit haben wir das Plugin auch gleich einmal ausführlich dokumentiert und bei GitHub veröffentlicht.

Hier findet sich die ausführliche Dokumentation für das Plugin:

Und hier haben wir das Plugin bei GitHub veröffentlicht:

Neues flexibleres DOI-Plugin

Vor ca. 1,5 Jahren haben wir bereits ein Plugin veröffentlicht, das die Registrierung von DOIs erlaubte. So ganz glücklich waren wir mit der Implementierung aber nicht. Insbesondere wenn man sich einmal genau anschaut, was bei der Registrierung der Persistenten Identifier bei DataCite in einem eigenen Metadatenschema gemeldet werden kann, erkennt man, dass die bisherige Lösung dort enge Grenzen hatte. Aus diesem Grund haben wir nun ein zweites DOI-Plugin implementiert, dass deutlich flexibler ist und auf der Basis von XSLT nahezu alle erdenklichen Datenformate erzeugen könnte.

Hier haben wir das Plugin einmal genau dokumentiert:

Der Quelltext für das Plugin wurde hier bei GitHub veröffentlicht:

Umbau der Inline-Hilfe

Goobi worklow hat schon seit geraumer Zeit eine integrierte Hilfe. Diese erlaubt, dass insbesondere bei verschiedenen Formularen Hilfetexte eingeblendet werden können, die für die Eingabe eine Unterstützung sind. Unglücklicherweise war dort bisher das Problem, dass beim Umschalten dieser integrierten Hilfe auch stets die Seite neu geladen wurde, so dass bereits im Formular eingetragene oder geänderte Werte wieder zurückgesetzt wurden, wenn diese noch nicht gespeichert waren.

Hier gab es jetzt eine Umstellung, wie die Anzeige der Hilfe aktiviert wird. Sie lädt ab nun allein über JavaScript und kann somit auch ohne ein Neuladen der Seite eingeblendet werden. Das vermeidet die Problematik, dass ungespeicherte Inhalte versehentlich zurückgesetzt werden.

(Weiter-)Entwicklung eines Plugins für einen flexiblen Export

Wir haben bereits vor einigen Jahren ein Export-Plugin entwickelt, dass einen sehr flexiblen Export erlaubt und wo sich unter anderem steuern liess, welche Bildverzeichnisse alle für den Export berücksichtigt werden sollten. Dieses Plugin haben wir nun noch einmal massiv erweitert und auch vorbildlich dokumentiert. Es erlaubt nun unter anderem auch, dass innerhalb eines Exportaufrufs abhängig von einem vorhandenen Metadatum ein Export in mehrere Goobi viewer erfolgen kann und dabei z.B. unterschiedlichen Bildverzeichnisse genutzt werden und ein verschiedener Umgang mit OCR-Daten erfolgen soll.

Mehr Informationen gibt es wie gewohnt hier in der neuen Dokumentation:

Und hier haben wir das neue Plugin bei GitHub veröffentlicht:

Erweiterung des Goobi-Handbuchs für Konfigurationsdateien

Im Grunde war der ganze Monat stark auf Dokumentation ausgerichtet. Denn neben den frisch erstellten Dokumentationen für neue und auch schon bestehende Plugins ist insbesondere in dem Bereich der Konfigurationsdateien viel Neues hinzugekommen.

Folgende Konfigurationsdateien von Goobi workflow sind neu dokumentiert oder in ihrer bestehenden Dokumentation massiv überarbeitet worden:

goobi_metadataDisplayRules.xml

Diese Konfigurationsdatei ist maßgeblich dafür, wie sich die Eingabefelder innerhalb des Metdateneditors verhalten sollen:

goobi_rest.xml

In dieser Konfigurationsdatei wird festgelegt, auf welche Bereich der REST-API externe Dienste zugreifen dürfen und wie sie sich authentifizieren müssen:

goobi_opac.xml

Diese Konfigurationsdatei legt die Kataloge fest, aus denen Goobi workflow Daten importieren können soll:

goobi_opacUmlaut.txt

Diese Konfigurationsdatei steuert, wie mit Umlauten, die bei der Katalogabfrage zurückgegeben werden, verfahren werden soll:

goobi_projects.xml

Diese umfangreiche Konfigurationsdatei erlaubt einen Einfluß darauf zu nehmen, wie genau die Anlegemaske von Goobi aufgebaut sein soll:

Korrektur für GoobiScript bei Ausführung von mehreren setTaskProperty-Aufrufen

Es gab einige besondere Ausnahmefälle, bei denen die Ausführung mehrerer GoobiScripte nur das jeweils letzte der gleichzeitig abgesendeten Kommandos ausgeführt hat. Dies konnte glücklicherweise nun aber gefunden und behoben werden, so dass auch solche gleichartigen Kommandos nun an Goobi übergeben werden können und korrekt ausgeführt werden.

---
action: setTaskProperty
steptitle: "My step"
property: readimages
value: true

---
action: setTaskProperty
steptitle: "My step"
property: writeimages
value: true

---
action: setTaskProperty
steptitle: "My step"
property: metadata
value: false

---
action: setTaskProperty
steptitle: "My step"
property: exportdms
value: false

Gültigkeitsdauer der Session

Goobi workflow hatte über viele Jahre schon die Möglichkeit, dass Nutzer sich ein individuelles Session-Timeout einstellen können. Davon haben nur sehr wenige Nutzer Gebrauch gemacht und dies auch nur deswegen, weil der Standardwert auf zu kurze 30 min eingestellt war. hier haben wir nun eine Änderung vorgenommen. Der neue Standardwert ist ab nun 4 Stunden.

Verarbeitung und Bereitstellung von E-Pflicht-Publikationen - Work in Progress

Zusammen mit der Zentral- und Landesbibliothek Berlin (ZLB) entwickeln wir gerade eine ganz neue Funktionalität für die Verarbeitung und Bereitstellung von E-Pflicht-Publikationen. Hierbei handelt es sich ingesamt um ein recht sportliches Vorhaben mit teilweise enormer Komplexität. Aus diesem Grund wird sich die Entwicklung der Funktionalität auch noch über ein paar Wochen erstrecken. Um die Welt da draußen aber nicht ewig auf die Folter zu spannen, möchten wir hier einmal einen kleinen Einblick in den aktuellen Status quo der Entwicklungen ermöglichen, indem wir hier einmal verschiedene Screenshots der (noch) nur deutschsprachigen Oberfläche zeigen:

Auf einer eigens angepassten Oberfläche im Corporate Design können sich die Abliefernden in Goobi workflow einloggen oder registrieren.

Abliefernde Einrichtungen legen sich in einer möglichst intuitiv bedienbaren Oberläche eigene Benutzerkonten an.

Nachdem die ZLB neu registrierte Nutzer für die Ablieferung freigeschaltet hat, können diese weitere Daten zu der abliefernden Institution ergänzen.

Nach vollständiger Registrierung der abliefernden Einrichtung sind verschiedene Aktionen möglich, so unter anderem die Ablieferung von eigenständigen Werken.

Innerhalb der Nutzeroberfläche ist es über eine eingebettete Hilfefunktion jederzeit möglich, sich Hilfetexte zur Eingabe anzeigen zu lassen.

Innerhalb der regulären Oberfläche von Goobi workkflow sorgt ein besonderes Administrationsplugin dafür, dass die ZLB einen Überflick über alle abliefernden Einrichtungen behält, die in Goobi als Mandanten vorliegen.

Auch die zugehörigen Nutzer einer abliefernden Einrichtung lassen sich über die administrativen Bereiche verwalten.

Unter anderem ist auch die Datenschutzerklärung in diesem Bereich bearbeitbar, die die Abliefernden während der Registrierung akzeptieren.

Alles in allem ist hier also bereits schon viel geschehen. Die Arbeiten sind aber noch in vollem Gang und werden noch einiges an Zeit in Anspruch nehmen. Manche Funktionen und Oberflächen werden sich vermutlich auch noch einmal deutlich ändern in den kommenden Wochen. Aber als ein erster Einblick zeigen die Screenshots hier bereits gut, was in den nächsten Wochen und Monaten als weitere Funktionalität für alle Interessierten als Open-Source-Lösung bereitstehen wird.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.06. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>22.06</version>
</dependency>

Core

Allgemeine Layout-Umstellung auf Bootstrap 5

Angekündigt hatten wir es ja schon. So mancher Nutzer wird es vielleicht auch schon bemerkt haben, dass sich das Layout (zunächst) minimal ändert: Sukzessive stellen wir das Layout von Goobi workflow auf Bootstrap 5 um. Erste Seiten sind bereits umgezogen.

Aber wer hätte es gedacht: Es ist aufwendiger als erwartet. Es begleitet uns als Thema also auch noch weiterhin ein bisschen.

Bereinigung der Anzeige der aktiven Sessions

Wir haben am Bereich des Logins und Logout in den letzten Monaten schon einige Umstellungen vorgenommen, die unter anderem die Anzeige der aktiven Nutzer und auch das Logging betrafen. Uns ist allerdings aufgefallen, dass nach dem Ausloggen von Nutzern dessen Session nicht sofort komplett bereinigt wurde bisher. Hier haben wir noch einmal einiges angepasst und anschließend auf Herz und Nieren durchgetestet. Damit sind wir jetzt zufrieden, der Speicherplatz für die Sessions fällt nun etwas kleiner aus und es kann aus unserer Sicht so bleiben.

Datenbankanbindung für Produktionsvorlagen optimiert

Auf einigen Goobi-Systemen, insbesondere denjenigen mit umfangreichem Datenbestand, viel auf, dass die Auflistung der Produktionsvorlagen signifikant langsamer war als die Auflístung der Vorgänge. Das haben wir uns in diesem Monat einmal genauer angeschaut und konnten feststellen, dass hier die umfangreichere Rechteprüfung der Projektmitgliedschaften einen wesentlichen Einfluß hat. Das ließ sich glücklicherweise aber ganz gut beheben, so dass jetzt keine Performanceeinbußen bei den Produktionsvorlagen mehr erkennbar sein sollten.

Prüfung der Passwortlänge korrigiert

Uns ist leider ein kleiner Bug aufgefallen, der die Prüfung der Passwortlänge von Nutzern betrifft. Die Länge des Passworts wurde fälschlicherweise auch dann geprüft - und als zu kurz angemerkt, wenn Daten eines bestehenden Nutzers geändert werden sollten, ohne dass überhaupt ein Feld für die Passworteingabe in der Nutzeroberfläche angezeigt wurde. Wir haben den Fehler in diesem Release korrigiert.

Automatische Unit-Tests

Um die Qualität von Software sicherzustellen, können Softwareentwickler automatische Tests implementieren. Solche Tests können dann automatisiert einzelne Funktionalitäten der Gesamtsoftware prüfen und werden mindestens vor der Veröffentlichung eines Release ausgeführt.

Goobi workflow hat bereits seit vielen Jahren einige hundert solcher Tests. Dennoch ist es unser Ziel, dass wir möglichst viel des Quellcodes mit Tests abdecken, um somit einerseits die Codequalität sicherzustellen und andererseits auch, um bei Neuentwicklungen und Anpassungn stets sicher sein zu können, dass die vorhandene Funktionalität auch weiterhin gewährleistet ist.

Mit dem Release in diesem Monat sind ca. 230 neue Tests hinzugekommen. Das bemerkenswerte hierbei ist allerdings nicht nur die Anzahl der Tests allein. Denn gerade die neu hinzugekommenen Tests beziehen sich hier auf einen der komplexesten Bereiche von Goobi workflow, indem wir nun auch im Metadateneditor eine deutliche bessere Testabdeckung erreicht haben.

Code-Qualität

Neben der Steigerung der Testabdeckung mittels automatisierter Tests haben wir uns intensiv mit der Code-Qualität von Goobi workflow auseinandergesetzt. Dafür haben wir Goobi workflow nun auch innerhalb von Sonarcloud mit registriert, so dass wir dort automatisch Codeanalyseergebnisse erhalten und sukzessive Verbesserungen am Quellcode der Software vornehmen können.

Dort läßt sich nun beispielsweise nachvollziehen, wie wir in diesem Monat eine Einstufung auf Level A erreicht haben für alle wichtigen Bereiche der Qualitätsanalyse:

Hier kann man auch noch einmal einen Vergleich zwischen Vorher und Nachher einsehen:

Wer einmal selbst im Detail schauen möchte, wir die Qualität des Quellcodes von Goobi workflow aussieht, der kann hier einmal Einblick nehmen:

Plugins

Erweiterung des URN-Plugins für besonderen Aufbau

Vor gar nicht allzu langer Zeit haben wir hier über ein neues Plugin für die Registrierung von URNs berichtet, das die REST-API der Deutschen Nationalbibliothek nutzt. Dieses Plugin ist nun bereits bei den ersten Goobi-Nutzern in den Regelbetrieb gegangen. In dem Zusammenhang haben wir dann noch einmal eine zusätzliche Funktionalität ergänzt: Der Aufbau der URNs kann nun auf Wunsch den Timestamp der Registrierung einsetzen.

Bisherige Verwendung mit einem Zähler:

...
urn:nbn:de:gbv:48-goobi-10
urn:nbn:de:gbv:48-goobi-11
urn:nbn:de:gbv:48-goobi-12
urn:nbn:de:gbv:48-goobi-13
...

Neue Möglichkeit mit Nutzung eines Timestamps:

...
urn:nbn:de:gbv:48-goobi-2022-08-17-06-30-15
urn:nbn:de:gbv:48-goobi-2022-08-17-06-31-17
urn:nbn:de:gbv:48-goobi-2022-08-17-06-31-23
urn:nbn:de:gbv:48-goobi-2022-08-17-06-31-42
...

Bei der Gelegenheit haben wir auch gleich die Log-Meldungen im Vorgangslog noch einmal etwas übersichtlich gestaltet, so dass diese alle einen Präfix erhalten und so klar von anderen Log-Meldungen unterscheidbar sind, wie in diesem Beispiel:

URN PLUGIN: Running URN generation for process ID 1234
URN PLUGIN: Finished URN generation for process ID 1234

Und natürlich haben wir auch die Doku erweitert und um die neuen Möglichkeiten ergänzt:

Hier auch noch einmal der Link zu dem Quellcode und der kompilierten Fassung des Plugins bei GitHub:

Löschen von mehreren Bildern im Plugin Image-QA

Wir haben eine Fehlfunktion im beliebten Image-QA-Plugin gefunden. Dort ist es ja möglich, dass auch Bilder gelöscht werden können, sofern dies aktiviert wurde. Hier hatte sich aber scheinbar ein Fehler eingeschlichen, der bei der Auswahl mehrerer Bilder zum Löschen dafür sorgte, dass nicht immer die ausgewählten Bilder gelöscht wurden. Dies ist jetzt korrigiert.

Mehr Informationen zu dem Plugin finden sich hier in der Dokumentation:

Und wer das Plugin noch nicht einsetzt, sollte es unbedingt mal testen. Hier läßt es sich beziehen:

Export-Package-Plugin mit ZIP-File-Funktionalität ausgestattet

Mit dem Plugin Export-Package steht ein Plugin zur Verfügung, das nahezu alle erdenklichen Exporte der Daten an Drittsysteme erlaubt. Dabei läßt sich genau steuern, welche Daten im Export vorhanden sein sollen, wo die Daten hingeliefert werden sollen und vieles mehr. Sogar eine Konvertierung der METS-Dateien in dritte Formate kann hierbei erfolgen, indem eine xslt-Transformation angewendet wird. Was allerdings bisher noch nicht ging war, dass das exportierte Ergebnis nicht mehr nur als Verzeichnis exportiert sondern im Anschluß gezippt werden soll. Diese Funktion haben wir nur entwickelt und auch entsprechend in der Dokumentation ergänzt.

Hier findet sich die ausführliche Dokumentation des Plugins:

Und wie gehabt befindet sich der Quellcode des Plugins zusammen mit der kompilierten Fassung des Plugins hier:

Neues Plugin für Massenimport aus Excel-Dateien mit EAD-Anreicherung

Wir haben ein neues Plugin für den Massenimport von Excel-Dateien implmeentiert und veröffentlicht. Die Besonderheit hierbei ist, dass aus jeder Excel-Datei, die importiert wird, mehrere Strukturelemente erzeugt werden, jeweils ein Element pro Zeile. Darüber hinaus kann hierbei auch ein vorhandener EAD-Baum mit weiteren Knoten angereichert werden, so dass ein umfangreicher Bestand entsteht.

Im Detail kann die Funktionalität des Plugins hier in der Dokumentation eingesehen werden:

Und hier befindet sich der Quellcode des Plugins:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.08. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>22.08</version>
</dependency>

Projekte

easydb

Wir haben für einen Partner eine Prozesskette entwickelt, die es erlaubt aus einer easydb exportierte Datensätze vollautomatisch in Goobi workflow zu importieren, zu verarbeiten und in einen Goobi viewer zu exportieren.

Für diese Prozesskette wurden drei Plugins verwendet und erweitert um die Anforderungen an das Projekt zu erfüllen.

Das kann ab jetzt nicht nur eine entfernte API abfragen, sondern auch XML Dateien aus dem Dateisystem lesen.

Der (ehemals CataloguePoller) wurde im Rahmen des Projektes um die Möglichkeit erweitert, nicht nur über ein Filterset von Vorgängen zu arbeiten, sondern auch über die Dateien in einem Ordner zu iterieren. Neu ist auch die Funktionalität, dass die einzelnen Arbeitsaufträge über die interne Ticket Queue abgearbeitet werden.

Das hat kleinere Anpassungen erfahren um zum Beispiel Dateien ohne Dateiendung zu finden, mit doppelten Dateinamen umzugehen oder um Fehlermeldungen bei fehlenden Bildern zu überspringen.

Die Prozesskette funktioniert auch periodisch und legt neue Vorgänge an oder aktualisiert bestehende. Einmal importiert durchlaufen die Datensätze wie gewohnt die einzelnen Schritte des Workflows.

Core

Plugins im Metadateneditor

Der Kern von Goobi workflow wurde um die Möglichkeit erweitert innerhalb des Metadateneditors Plugins anzubieten. Diese binden sich oben in der blauen Kopfzeile ein und stellen ihre Funktionalität zur Verfügung.

Ausschlaggebend für die Entwicklung war die Anforderung innerhalb des Metadateneditors den Publikationstyp wechseln zu können. Hierfür sollten Templatevorgänge angelegt und bestimmte, gekennzeichnete Metadaten bei dem Wechsel übernommen werden.

Metadatengenerierung

Immer wieder kommt es vor, dass bestimmte Metadaten automatisch aus anderen Werten gebildet werden sollen. Ein Beispiel könnte der Haupttitel eines Briefes sein, der immer wie folgt gebildet werden soll: "Brief von [Absender] an [Empfänger] an [Ort], [Datum]"

Um diese Funktionalität im Metadateneditor zur Verfügung stellen zu können wurde der die Konfigurationsdatei goobi_metadataDisplayRules.xml um die Möglichkeit erweitert für bestimmte Metadaten unter konfigurierbaren Bedingungen Werte aus anderen Metadatenwerten generieren zu können.

Eine Konfiguration für das oben genannte Beispiel könnte wie folgt aussehen:

PDF Download im Metadateneditor

Innerhalb des Metadateneditors besteht jetzt die Möglichkeit zu jeder Zeit ein PDF aller Bilder zu generieren. Dafür befindet sich ein neuer PDF-Button in der linken Spalte mit dem Strukturbaum

Plugins

Schritt: Vorgang umbenennen

Es gibt ein neues Schritteplugin um innerhalb eines Workflows einen Vorgang umzubenennen. Dafür kann auf die in Goobi workflow vorhandenen Variablen zurückgegriffen werden. Zusätzlich sind Unterstriche und Minus als Zeichen erlaubt. Leere Variablen werden übersprungen und Leerzeichen entfernt.

Export: Zeitungsexport

Das Plugin um einen Export für das DDB Zeitungsportal zu realisieren wurde für eine bessere Anzeige der Daten im DFG-Viewer angepasst.

Dokumentation

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.11. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Core

Bessere Anzeige von Validierungsergebnissen im Metadateneditor

In Goobi workflow läßt sich durch den Regelsatz steuern, welche Metadaten beispielsweise wie häufig vorkommen dürfen, wo sie erlaubt sind und welche Inhalte darin möglich sind. Auf diese Weise läßt sich eine Qualitätsanforderung an die zu erfassenden Metadaten gut steuern und einhalten. Damit der Nutzer diese Anforderungen gut einhalten kann, zeigt der Metadateneditor Validierungsmeldungen an, die auf Probleme hinweisen. In der Vergangenheit wurden diese Meldungen allerdings immer nur global anzeigt, nicht direkt am betreffenden Metadatum selbst und auch nicht am zugehörigen Strukturelement. Mit anderen Worten: Man war ein bisschen ratlos als Nutzer, welches Feld nun wo genau nicht valide war. Man musste sich erst einmal auf die Suche machen.

An dieser Stelle gibt es ab sofort einige größere Änderungen. Validierungsmeldungen erscheinen unmittelbar am Feld in roter Farbe und weisen mit einer hilfreichen Meldung direkt auf die Probleme hin.

Und auch in der Baumanzeige der Strukturelemente im linken Bereich werden die Validierungsprobleme jetzt hervorgehoben und ermöglichen dem Nutzer jetzt, sehr schnell das betreffende Metadatum zu finden, für das eine Meldung vorliegt.

Wenn man dabei den Mauszeiger über ein Strukturelement mit Fehlern hält, sieht man in einem Popup sofort die zugehörige Meldung.

Ausserdem haben wir bei der Gelegenheit übrigens auch eine neue Tastenkombination für die Durchführung der Validierung eingeführt. Sie lautet: CTRL + SHIFT + V.

Suchschlitz in der Vorgangsliste endlich wieder bequem nutzbar

Nachdem durch kleinere optische Anpassungen der Suchschlitz innerhalb der Vorgangsliste von Goobi workflow zu klein geraten ist, war er in letzter Zeit etwas zu mühsam in der Benutzung. Man konnte einfach nicht mehr gut überblicken, welche Suchbegriffe man schon eingetragen hatte, wenn die Suchanfrage etwas länger wurde.

Ab diesem Monat gehört dieser Umstand der Vergangenheit an. Der Suchschlitz ist jetzt grundsätzlich deutlich länger auf regulären Displays.

Und auch auf Mobilgeräten ist die Bedienbarkeit so, dass man vernünftig mit der Suche arbeiten kann:

Korrektur der URLs für Vokabulardatensätze

Goobi workflow verfügt ja seit einiger Zeit schon über eine Vokabularverwaltung, die unter anderem dafür verwendet werden kann, dass de Metadateneditor mittels Auswahlfeldern mit kontrollierten Listen möglichst bequem bedient werden kann. Dabei ist es auch möglich, dass die Werte nicht nur in einem Auswahlfeld zur Verfügung stehen sondern ebenso nach Nutzung einer Suchmaske aus einer Trefferliste ausgewählt werden können.

Übernommen wird in einem solchen Fall nicht nur der ausgewählte Wert für die anschließende Anzeige der Digitalisate im Goobi viewer. Stattdessen wird außerdem eine URL für die Verlinkung auf den entsprechenden Vokabulardatensatz eingetragen.

Hier hatte sich unglücklicherweise ein kleiner Fehler eingeschlichen, so dass diese URLs ggf. nicht korrekt waren. Dieses Verhalten haben wir nun korrigiert, so dass die URLs jetzt stimmen. Bitte prüfen Sie aber, ob Sie diese Funktionalität bisher bereits verwendet haben. In diesem Fall sollten die bereits eingetragenen URLs gegebenenfalls noch bei Ihnen korrigiert werden.

Erste Layoutumstellungen gehen live

Wir hatten schon angekündigt, dass wir hinsichtlich Accessibility und Usability einige größere Umbauten im Hintergrund vornehmen. Bei der Administrationsmaske für die Benutzer ist es jetzt soweit, dass wir diese Änderungen langsam in Betrieb nehmen. Wie angekündigt gehen damit kleinere optische Änderungen einher. Dies sollte sich bald dann auch flächendeckend auf andere Bereiche auswirken.

So sieht es jetzt schon aus:

GoobiScript nun auch zur Änderung von Metadaten innerhalb von Metadatengruppen

Es gab schon seit einiger Zeit verschiedene GoobiScripts, um Daten innerhalb der Metadaten zu ändern. Leider war dies jedoch bisher nicht ohne weiteres auch für Metadatengruppen möglich. Hier gab es in diesem Monat nun jedoch einige Änderungen, so dass die bestehenden GoobiScripte jeweils auch für Metadatengruppen anwendbar sind, wenn die jeweiligen Parameter korrekt gesetzt sind.

Da die Änderungen recht umfangreich sind, haben wir auch die Dokumentation gleich angepasst bzw. erweitert. Sie findet sich wie gehabt unter folgender Adresse:

Aufrufe von Skripten im Journal besser nachvollziehbar

Innerhalb des Journals (früher Vorgangslog) sind die einzelnen Aktivitäten eines Workflow üblicherweise gut nachvollziehbar. Unter anderem wurden dort auch bereits in der Vergangenheit schon die Aufrufe von Skripten protokolliert, um diese in Problemfällen auch besser nachvollziehen zu können. Was allerdings fehlte war, das innerhalb der Skriptaufrufe auch die verwendeten Variablen in ihrer ersetzten Form angezeigt werden. Dies ist jetzt angepasst worden, so dass nach jedem Aufruf eines Skriptes innerhalb des Journals sowohl der Skriptaufruf in seiner ursprünglichen Form als auch in seiner aufgelösten Form aufgeführt wird.

Im Fall eines einfachen Skripts wie diesem hier:

... sieht so der Aufruf innerhalb des Journals nun aus:

Bei der Gelegenheit haben wir übrigens auch gleich einmal die Höhe der Box angepasst, so dass diese den verfügbaren Platz besser ausnutzt und man ohne zu scrollen gleich mehr Informationen auf einmal einsehen kann.

Super-Admins haben jetzt immer alle Rechte

Goobi workflow verfügt über ein ziemlich granular steuerbares Rechtesystem. Es ist dabei so flexibel, dass sogar Plugins eigene Rechte definieren können, über die ein Nutzer verfügen muss, damit er mit dem Plugin arbeiten kann.

Um den Administratoren (also auch uns selbst) das Leben etwas einfacher zu machen, haben wir nun eingeführt, dass alle Nutzer, die über den Status Super-Administrator verfügen, auch automatisch stets über sämtliche Rechte in Goobi verfügen inklusive derjenigen individuellen Rechte, die Plugins mitbringen.

Plugins

Neues Plugin für flexible Dateivalidierungen

Im Rahmen unserer Entwicklungen der Lieferung von elektronischen Pflichtexemplaren benötigten wir eine flexible Möglichkeit, dass die von Nutzern hochgeladenen Dateien validiert und auf die Einhaltung von Anforderungen hin geprüft werden. Hierfür sollte es unter anderem möglich sein, dass beliebige externe Tools zur Validierung verwendet werden können und dass die Einhaltung definierter Level sichergestellt wird.

Herausgekommen ist in der Entwicklung nun ein extrem flexibles Validierungsplugin, dass sich sehr granular konfigurieren läßt. Eine umfangreiche Dokumentation für das Plugin haben wir hier auch samt mehrerer sinnvoller Konfigurationsbeispiele veröffentlicht:

Und wie gewohnt findet sich der Quellcode des Plugins sowie eine kompilierte Fassung bei GitHub:

Dokumentation

URN-Plugin erlaubt nun den Einsatz hinter einem Proxy

Dies dürfte nur wenige Nutzer betreffen, aber für diejenigen ist es wichtig:

Das noch recht neue Plugin für die Registrierung von URN konnte bisher nicht verwendet werden, wenn der Goobi- Server nur über einen Proxy auf das Internet zugreifen darf. Hier haben wir jetzt eine Anpassung vorgenommen, die ab sofort auch den Betrieb hinter einem Proxy erlaubt.

Die Dokumentation haben wir für diese Änderung auf den aktuellen Stand gebracht:

Das Plugin findet sich wie gehabt hier auf GitHub:

Dokumentation für das Artist Dictionary Plugin ist online

Nach langer Entwicklung an dem Plugin zur Erfassung von verlinkten Entitäten haben wir nun auch die zugehörigen Plugins abgeschlossen und bei GitHub veröffentlicht. Hierbei handelt es sich einerseits um ein besonderes Dashboard-Plugin:

Andererseits wird ausserdem dieses Workflow-Plugin benötigt:

Die Installation und Konfiguration dieser Plugins sind nun auch vollständig und sehr granular dokumentiert. Sie stehen wie gewohnt auf unserer Dokumentationsplattform zur Verfügung:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.10. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Erweiterung der Benutzereinstellungen zur individuellen Konfiguration des Anzeigemodus

Innerhalb der Benutzereinstellungen gibt es nun im Bereich Allgemein die Möglichkeit, dass sich jeder Nutzer selbst den Anzeigemodus individuell festlegt. Hierbei kann zwischen Normaler Anzeige, Low Vision Modus sowie dem WCAG kompatiblen Modus ausgewählt werden.

Diese Option besteht natürlich zusätzlich zu der Möglichkeit, dass jeder Nutzer sich über eigene CSS-Definitionen das Layout von Goobi selbst anpassen kann.

Anpassungen am Konfigurationseditor

Im Konfigurationsdateien-Editor-Plugin ist es ab jetzt möglich, eine Liste von Verzeichnissen, in denen Dateien zum Bearbeiten gesucht werden sollen, zu konfigurieren. Die neue Konfiguration sieht erweitert nun wie folgt aus:

In dem Zusammenhang wurde bedacht, dass der Editor nicht dafür genutzt werden sollte, seine eigene Konfigurationsdatei zu ändern. Dies hätte andernfalls ermöglicht, dass sich berechtigte Anwender zusätzliche Pfade für den Editor festlegen, um auch tiefgreifendere Eingriffe in das System vorzunehmen.

Die Dokumentation für das Plugin findet sich an dieser Stelle:

Skip Link

Im Rahmen unserer permanenten Verbesserung der Nutzeroberfläche zur Steigerung der Barrierefreiheit haben wir nun auch einmal den zentralen Skip Link genauer anschaut. Dieser befindet sich auf allen Seiten ganz oben und erlaubt, dass Nutzer mit einer Tastatursteuerung über die TAB-Taste sofort zu dem Inhaltsbereich der Seite navigieren können. Hier gab es nun also eine kleine Korrektur für die richtige Reihenfolge des Durchlaufens der Seitenelemente.

Aufgaben aus Produktionsvorlagen nicht mehr im Dashboard

Innerhalb des Dashboards, was die Mehrheit der Goobi workflow Nutzer einsetzen, werden die zuletzt abgeschlossenen Aufgaben angezeigt. Dort wurden bisher auch versehentlich Aufgaben mit aufgelistet, die aus kürzlich bearbeiteten Produktionsvorlagen stammen. Hier gab es nun eine Korrektur, die diesen Anzeigefehler vermeidet.

Kommentare zu einzelnen Bildern nun möglich

Mit den neuen Entwicklungen ist es von nun an möglich, Kommentare zu einzelnen Bildern zu schreiben. Diese Kommentar-Funktion ist an mehreren Stellen in Goobi workflow integriert: im METS-Editor, im ImageQA Plugin sowie auch im LayoutWizzard. Um diese neue Funktionalität nutzen zu können, muss sie innerhalb der zentralen Konfigurationsdatei goobi_config.properties aktiviert werden:

Thumbnailauswahl hat nur Auswirkung auf Paginierung

Bisher hat innerhalb des Metadateneditors ein Klick auf ein Thumbnail immer auch die aktuelle Seite in der Paginierung gesetzt, selbst wenn man sich zum Beispiel in der Strukturdaten-Ansicht befunden hat. Dadurch konnte es versehentlich zu Fehlbedienungen kommen, wenn später weitere Paginierungsarbeiten erfolgen sollen. Durch eine Änderung der Bedienlogik ändert ein Klick auf die Thumbnails von nun an nur noch die in der Paginierung ausgewählte Seite, wenn man auch tatsächlich in der Paginierung ist.

Fehler im Vorgangslog bei Enter

Es gab ein Fehlverhalten innerhalb des Vorgangslogs, wenn ein Nutzer nach Eingabe eine Nachricht Enter gedrückt hat. Dort wurde die Anzeige gewechselt, statt die Nachricht abzusenden. Dieser Fehler ist nun behoben.

Überprüfung aller Buttons

Sämtliche Buttons innerhalb von Goobi workflow wurden einmal intensiv geprüft, um sicherzustellen, dass diese nach den umfangreichen Accessibility-Umstellungen auch weiterhin funktionieren und richtig angezeigt werden. Sollten wir hierbei doch einen Button oder eine Funktionalität übersehen haben, so freuen wir uns über eine Rückmeldung.

Invalide Goobiscript-Syntax verweigert nun direkt die Arbeit

Bisher hat der GoobiScript-Parser bei invalide verwendeter Syntax des YAML-Formats zunächst die Sicherheitsabfrage angezeigt und dann erst ganz oben auf der Seite einen Fehler angezeigt. Das hat zu Verwirrungen bei den Nutzern geführt, weil das zuvor abgesendete GoobiScript doch nicht wie erwartet ausgeführt wird. Aus diesem Grund wird ab jetzt das GoobiScript direkt nach dem Abschicken auf Validität überprüft und bei einem eventuellen Fehler eine Fehlermeldung direkt oberhalb des GoobiScript-Bereichs angezeigt.

GoobiScript "addUserGroup" kann nun erfolgreich mehrfach aufgerufen werden

Im GoobiScript addUserGroup gab es ein Fehlverhalten, das bei mehrfachem Aufruf dazu geführt hat, dass lediglich die zuletzt hinzugefügte Nutzergruppe zu der gewünschten Aufgabe hinzugefügt wurde. Dieses Verhalten wurde nun behoben und das GoobiScript verhält sich von nun an korrekt.

Keine führenden oder endenden Leerzeichen mehr in der Vokabularverwaltung

In der Vokabularverwaltung werden ab jetzt bei allen Textfelder (Input, Textara, HTML) vorangestellte und nachfolgende Leerzeichen entfernt, um solche versehentlichen Eingaben und die sich daraus potentiell ergebenden Probleme zu vermeiden.

Metadatenanpassungen via GoobiScript nutzen VariablenReplacer

Die GoobiScripte metadataChangeValue, metadataAdd, metadataDelete und metadataReplace setzen nun für Änderungen von Inhalten den Variablenreplacer ein und erlauben somit eine sehr flexible Verwendung unter Einbeziehung anderer Metadatenfeldinhalte oder auch Informationen über den Vorgang, zu dem die Metadaten gehören.

Ein beispielhafter Aufruf sieht so aus:

Mehr Informationen gibt es wie gehabt hier zum Variablensystem von Goobi workflow:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.01. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Neues GoobiScript zum Ändern von Personen-Rollen

Es gibt bereits seit einiger Zeit verschiedene GoobiScripts, die sehr bequem Änderungen sogar an Metadaten in Masse vornehmen können. Dabei haben wir uns in der Vergangenheit oft auf reguläre Metadaten konzentriert. Mit einem neuen GoobiScript erlauben wir jetzt auch Änderungen bei Personen. Hierbei geht das darum, dass eine bequeme Möglichkeit benötigt wurde, um die Rollen von Personen in Masse ändern zu können, um beispielsweise in 100.000 Vorgängen aus verkehrt zugewiesenen Personenrollen als Autoren stattdessen Erfinder machen zu können. In einem solchen Fall würde der Aufruf des neuen GoobiScripts wie folgt aussehen:

Dieses und die vielen anderen GoobiScripts finden sich wie immer in der Online-Doku detailliert beschrieben.

Hier der Link zur weiteren Hilfe:

Neue Dokumentation für Entwickler

Lang hat es gedauert. Aber dafür ist es auch wirklich gut geworden: Es gibt nun eine sehr ausführliche Dokumentation für künftige Goobi workflow Entwickler. Dort wird detailliert aufgezeigt, wie man sich eine Entwicklungsumgebung aufsetzt, welche Tools für die Inbetriebnahme benötigt werden und welche Einstellungen man hier und da vornehmen sollte, damit die Entwicklung flüssig von der Hand geht.

Um es den künftigen Entwicklern möglichst einfach zu machen haben wir innerhalb der Anleitung auch gleich noch dokumentiert, wie man sich sehr bequem einen kleinen sinnvollen Datenbestand einrichtet, damit die Entwicklung auch mit tatsächlichen sinnvollen Daten möglich ist. Hierzu kamen uns die vielen Erfahrungen im Umgang mit Goobi-to-go zugute.

Wer also schon immer mal an Goobi mitentwickeln wollte, hat es nun einfacher denn je. Hier gehts zur Doku:

Export-Button nun in der Spalte "Aktionen" der Vorgangsdetails

Goobi worklow erlaubt schon seit einiger Zeit, dass innerhalb eines Workflows Exporte auch über Plugins stattfinden können. Diese ist für individuelle Exporte zu besonderen Systemen mit besonderen Formatanforderungen manchmal notwendig. Wenn allerdings innerhalb eines Workflows mehrere Exporte stattfinden sollen, dann war es bisher für Administratoren nicht möglich einen bestimmten Export eines Workflows gezielt auszuführen. Im Rahmen des Durchlaufens des Workflows hingegen funktionierten die Exporte jedoch bereits so wie gewünscht.

Um es nun auch für die Goobi Administratoren zu vereinfachen, dass gezielt einzelne Export-Schritte selektiv manuell aufzurufen, werden Export-Buttons nun innerhalb der Vorgangsdetails direkt neben den betreffenden Aufgaben angezeigt. Damit ist ein Aufruf jetzt wie gewünscht möglich geworden.

Besseres Looging beim Ändern eines Schrittstatus via GoobiScript

Uns ist aufgefallen, dass das Logging innerhalb des Vorgangslogs noch verbesserungswürdig war, wenn mittels GoobiScript der Status von Aufgaben geändert wurde. Wir wollten gern, dass sowohl der alte als auch der neu gesetzte Status im Vorgangslog noch weiterhin gut nachvollziehbar sein sollten. Aus diesem Grund gab es hier jetzt eine kleine Anpassung, die solche Statusänderungen besser nachvollziehbar macht.

Benennung der Backup-Dateien im Editor für Konfigurationsdateien und Regelsätze

Wir hatten kürzlich bereits die Benennung der Backup-Dateien für die METS-Dateien der Goobi-Vorgänge dahingehend geändert, dass diese im besser nachvollziehbar sind, nicht weiter rotieren und damit unnötige Schreibzugriffe auf langsame Speicherbereiche verursachen. Um dieses Benennungsschema nun konsequent umzusetzen, wenden wir diesen Mechanismus ab sofort ebenfalls für die automatisch erzeugten Backups der Dateien an, die innerhalb der noch recht neuen Editoren für die Konfigurationsdateien und Regelsätze erzeugt werden.

Auch hier ist die Benennung der Backup-Dateien nun so, dass aus dem Dateinamen unmittelbar das Datum und die Zeit des Backups ersichtlich wird und hilft im Falles des Falles gut weiter.

WCAG: Änderungen hier und da

Dass uns das Thema der Barrierefreiheit nicht nur interessiert sondern auch Vollzeit beschäftigt haben wir ja schon des öfteren beschrieben. Insofern ist es nur konsequent, dass wir auch in diesem Monat wieder viele Kleinigkeiten zugunsten der Accessibility verbessert haben. Dies betraf nun vor allem die Darstellung des Vorgangslogs und einige Anpassungen für die Anzeige der Vorgangsliste.

Es wird aber sicher nicht das letzte Mal sein, dass dieser Punkt hier in den Digests aufgeführt wird. 😀

Implementierung einer ARK-Registrierung

Wir haben in der Vergangenheit bereits verschiedene Mechanismen für persistente Identifier in Goobi workflow integriert. So fanden neben URN auch Handle und DOI ihren Weg in das Goobi-Universum. Neu hinzugekommen ist kürzlich die Unterstützung von ARK-Identifiern. Hierbei handelt es sich um ein weiteres System, das im Zusammenspiel mit dem Goobi viewer eine dauerhafte Verlinkung von Werken und auch eine granulare Verlinkung auf Seitenebene erlaubt. Im Gegensatz zu anderen Systemen erfordern ARK-Identifier keine Lizenzkosten und können eigenständig frei vergeben werden. Mehr Informationen zu ARK im Allgemeinen finden sich hier:

Und hier findet sich die Dokumentation für das von uns entwickelte Plugin:

Der Quellcode zum Plugin findet sich bei GitHub hier veröffentlicht:

Regelsatz als neue Spalte für Vorgänge und Produktionsvorlagen

Manchmal ist es hilfreich, wenn man gleich auf einen Blick sieht, welcher Regelsatz für eine Produktionsvorlage Verwendung findet. Aus diesem Grund kann der Regelsatz ab sofort innerhalb der Auflistung von Vorgängen und Produktionsvorlagen eingeblendet werden. So sieht das dann aus:

Plugin zum Versenden von Mails

Es wurde ein neues Plugin für das Versenden von Mails innerhalb einer Aufgabe entwickelt. Die Liste der Empfänger und der Text lassen sich dabei für verschiedene Schritte individuell konfigurieren. Dabei stehen auch alle Felder aus dem Variablen-Replacer zur Verfügung. Somit kann auch auf Metadaten oder Informationen zum Vorgang, Schritt oder Projekt zurückgegriffen werden, um diese innerhalb der Mail zu verwenden.

Die ausführliche Dokumentation für die Inbetriebnahme des Plugins findet sich hier:

Und an dieser Stelle findet sich das Plugin als Quellcode und in kompilierter Fassung:

Erweiterung der Benutzereinstellungen zur individuellen Konfiguration des Anzeigemodus

Im Bereich "Allgemein" gibt es nun die Möglichkeit, den Anzeigemodus individuell festzulegen. Hier kann zwischen Normaler Anzeige, Low Vision Modus und WCAG kompatiblen Modus gewählt werden.

Plugin zum Export von Zeitungen in das DDB Zeitungsportal

Wir haben ein neues Plugin für den Export von Zeitungen für das Zeitungsportal der DDB entwickelt. Das Plugin dient zur Erstellung der spezifischen METS-Struktur, die von Seiten der DDB für Zeitungen gefordert werden. Dabei wird für die Gesamtaufnahme einer Zeitung eine METS-Anchor Datei erzeugt. (https://wiki.deutsche-digitale-bibliothek.de/display/DFD/Gesamtaufnahme+Zeitung+1.0)

Für jeden exportierten Jahrgang wird eine weitere METS-Anchor Datei erzeugt und innerhalb der Gesamtaufnahme verlinkt. Der Jahrgang enthält weitere Strukturen für Monat und Tag. (https://wiki.deutsche-digitale-bibliothek.de/display/DFD/Jahrgang+Zeitung+1.0)

Jede Ausgabe hingegen wird als einzelne METS-Datei erstellt und in der METS-Anchor Datei des jeweiligen Jahrgangs verlinkt. Die Ausgabe kann weitere Strukturdaten wie Artikelbeschreibungen oder Beilagen enthalten. Hier wird auch auf die digitalisierten Bilder verwiesen. (https://wiki.deutsche-digitale-bibliothek.de/display/DFD/Ausgabe+Zeitung+1.0)

Eine detaillierte Dokumentation für das Plugin findet sich hier:

Und an dieser Stelle findet sich dann sowohl der Quellcodes des Plugins als auch die kompilierte Fassung des Plugins:

Umfangreiche Umstellungen in der internen Projektstruktur

Die Entwicklung an Goobi workflow startete bereits im Jahr 2004. In der Zwischenzeit hat sich funktioniell viel Neues ergeben und die Applikation ist um ein vielfaches gewachsen. Um hierbei einerseits den Überblick weiterhin gut zu bewahren aber auch um etablierte Best-Practice für Software-Entwicklung einzuhalten (Maven-Verzeichnisstruktur) sowie künftig auch noch einfacher stets auf aktuellem Stand der verwendeten Programmbibliotheken zu bleiben, haben wir die Projektstruktur massiv überarbeitet. Dies sollte funktioniell für die Anwender keine Änderung mit sich bringen. Für uns als Entwickler sind das allerdings umfangreiche Eingriffe in den Arbeitsalltag und die Projektorganisation. Wenn Ihnen bei der Benutzung von Goobi workflow in kommender Zeit unerwünschte Seiteneffekte auffallen sollten, die sicher nicht gewünscht sein sollten, so lassen Sie uns dies bitte wissen.

Im Übrigen haben sich durch diese Umstellungen auch bereits einige positive Ergebnisse gezeigt. Die durch die Umstellung vorgenommenen Updates verschiedener Programmbibliotheken führten bereits zu einer messbaren Steigerung der Sicherheit potentiell angreifbarer Code-Bestandteile externer Bibliotheken und eine bessere Automatisierbarkeit des Testens auf mögliche künftige Sicherheitslücken.

Darstellungsfehler in einem Dropdown in den eigenen Aufgaben

Es gab einen kleinen Darstellungsfehler innerhalb der eigenen Aufgaben. Dort bestand ein eigenwilliger Zeilenumbruch mit ungewöhnlicher Zeichendarstellung, die dort nicht hingehörte. Dies haben wir korrigiert. Nix passiert. 😀

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.03. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Flip-Funktionalität im QA-Plugin

Innerhalb des Plugins für die Qualitätskontrolle von Dateien besteht bereits seit einiger Zeit die Möglichkeit, dass gezielt einzelne Dateien auch verändert werden können, sofern dies in der Konfiguration aktiviert wurde. So lassen sich Bilder beispielsweise dauerhaft rotieren oder gar löschen. Neu hinzugekommen ist nun, dass Bilder von nun an auch gespiegelt werden können. Dies ist sowohl horizontal wie auch vertikal möglich.

Zur Nutzung dieser Funktionalität muss die Konfiguration entsprechend den Vorgaben angepasst werden. Die Details dazu finden sich wie bisher innerhalb der Plugin-Dokumentation:

Verständlichere Meldung von Fehlern bei Extraktion von PDF-Dateien

Wenn innerhalb des Workflows mit PDF-Dateien gearbeitet werden soll, stehen hierfür Routinen zur Verfügung, die die Inhalte der PDF-Dateien automatisch extrahieren und zu Bildern konvertieren. Hier gab es in der Vergangenheit allerdings gelegentlich eine Anzeige von irritierenden Meldungen im Falle von aufgetretenen Fehlern. Das wurde entsprechend geändert und ist nun für die Anwender deutlich aussagekräftiger und hilfreicher.

Sortierung der Benutzer jetzt intuitiver

Die Sortierung der Anzeige der Benutzer innerhalb von Goobi workflow erfolgte bisher nicht ganz intuitiv. Dies ist nun behoben und die Sortierung ist intuitiver, ohne das Groß- und Kleinschreibung von Namen unerwartete Nebeneffekte haben.

Neues GoobiScript zum Klonen von Vorgängen

Es gibt mal wieder ein neues GoobiScript. Dieses Mal geht es darum, dass wir eine Funktionalität benötigten, die es erlaubt bestehende Vorgänge in Goobi workflow vollständig zu duplizieren samt ihrer zugehörigen Daten. Dabei kann der zu verwendende Titel des Vorgangs unter Nutzung von Variablen frei definiert werden. Auch läßt sich festlegen, ob nur die Daten aus der Datenbank oder auch alle internen Verzeichnisse mit dupliziert werden sollen.

So sieht das neue Goobi-Script nun beispielhaft aus:

Und wie auch bisher findet sich die vollständige Dokumentation zu GoobiScript unter dieser Adresse:

Ausführung eines Plugins aus den Vorgangsdetails schreibt nun eine Nachricht ins Vorgangslog

Bisher war es so, dass der Aufruf eines Plugins aus den Vorgangsdetails nicht innerhalb des Vorgangslogs mitgeführt wurden. Zur besseren Nachvollziehbarkeit wäre dies aber immer mal wieder praktisch. Aus diesem Grund haben wir die Logik der Ausführung nun so geändert, dass solche Ausführungen auch im Vorgangslog mitgeführt werden.

Regelsatz-Datei nun per Dropdown auswählbar

Für die Konfiguration von Regelsätzen innerhalb der administrativen Oberfläche von Goobi workflow mussten bisher die Dateinamen der Regelsätze im zentralen Regelsatzverzeichnis /opt/digiverso/goobi/rulesets/ angegeben werden. Hier gab es jetzt eine kleine Umstellung. Statt den Dateinamen manuell eintragen zu müssen, kann dieser von nun an aus einer Auswahlliste ausgewählt werden. Dadurch werden eventuelle Tippfehler bei der Angabe von Regelsätzen für die Zukunft vermieden.

Breadcrumbs nach dem Anlegen eines Vorgangs korrgiert

Wenn man innerhalb von Goobi workflow einen neuen Vorgang angelegt und gespeichert hat, besteht die Möglichkeit, von dort direkt zu dem neu erzeugten Vorgang zu gelangen, indem man auf den Link Den erzeugten Vorgang öffnen klickt. Die dort angezeigte Breadcrumb zur Navigation zur Gesamtliste aller Vorgänge führte bisher gelegentlich zu einer leeren Trefferliste. Dies wurde nun korrgiert, so dass die Navigation korrekt funktioniert und an der Stelle alle Vorgänge auflistet.

Rechteverwaltung: Bug behoben

Goobi workflow erlaubt ja, dass einzelne Plugins sogar eigene Rechte festlegen können, über die ein Nutzer verfügen muss, damit er das Plugin ausführen kann. Entsprechend ist es möglich solche flexiblen Rechte in der Nutzerverwaltung von Goobi worklow zu konfigurieren. Dort war es allerdings bis vor kurzem auch möglich, dass leere Rechte hinzugefügt werden konnten, ohne dass also eine Angabe eines Rechts erfolgte. Dies wurde jetzt korrigiert, so dass eine solche Fehlerfassung nicht mehr möglich ist.

Regelsatzdatei in den Vorgangsdetails einsehbar

Bei der Arbeit mit mehreren Regelsätzen musste man in der Vergangenheit öfter noch einmal im Bereich Administration - Regelsätze prüfen, um welche Regelsatzdatei es sich tatächlich handelt (z.B. für den Regelsatz Standard). Um diese Recherche einfacher zu machen, haben wir nun eine kleine Funktionalität implementiert, die diesen Dateinamen innerhalb der Vorgangsdetails direkt anzeigt, wenn man den Mauszeiger über den Regelsatznamen hält.

Die gleiche Funktionalität haben wir übrigens auch an verschiedenen anderen Bereichen in der Vergangenheit schon implementiert. So zum Beispiel bei den Eigenschaften:

Und auch bei den Metadaten gibt es diese versteckte Funktion:

Neues Backupsystem für meta.xml und meta_anchor.xml

Das alte Backup-System in Goobi workflow hat für die Namen der Backups bisher lediglich mit einem Zähler am Ende der Datei gearbeitet. Die Datei mit dem höchsten Zähler war dabei bisher entsprechend das älteste Backup:

Dieses System hatte insbesondere in hierarchischen Dateisystemen Probleme, da dort die selten genutzte Dateien auf einen langsameren Speicherbereich ausgelagert werden. Da mit dem bisherigen Backupsystem allerdings auch immer die älteren Backups mit umbenannt wurden, kam es hier teilweise zu sehr langen Speicherzeiten. Daher haben wir den Mechanismus der Benennung dieser Backupdateien überarbeitet und verwenden hier nun einen Zeitstempel, um die Backupdateien zu benennen. Das Namensschema sieht dabei wie folgt aus:

Dabei handelt es sich bei ii um die Millisekunden in der Sekunde. Ein Beispiel für eine neue Backup-Datei sieht folgendermaßen aus:

Backup Rotation: Nur von Goobi verwaltete Dateien werden behandelt

Mit der alten Backup-Lösung in Goobi workflow wurden in der Vergangenheit auch nicht von Goobi verwaltete Dateien mit in die Rotation einbezogen (zum Beispiel meta.xml.MYBACKUP). Dies hat dazu geführt, dass manuell erstellte Backups wegrotiert wurden oder die manuell erstellte Datei nicht auf der Festplatte gespeichert werden konnte. Ab diesem Release betrachtet Goobi nur noch die Dateien meta.xml.1, meta.xml.2, meta.xml.3 etc. und die nach dem neuen Schema erstellten Backups für die Rotation. Manuell erstellte Backups hingegen bleiben unverändert bestehen.

Bessere Metadatenerfassung für Bildbereiche

Dass im Metadateneditor mittlerweile Metadaten auch für Seitenbereiche erfasst werden können, geht schon seit etwa 1-2 Jahren. Was während der Verwendung im täglichen Einsatz allerdings auffiel war, dass noch eine besser Bedienbarkeit benötigt wurde, um zu einem Strukturelement mehrere Seitenbereiche hinzuzufügen oder auch um solche Seitenbereich in ihrer Größe anzupassen oder gar zu löschen. Hier haben wir nun so einige Verbesserungen implementiert.

Für ein Strukturelement können im Bereich zum Ändern von Strukturelementen nun weitere Seitenbereiche ergänzt werden:

Und hier lassen sich bereits angelegte Seitenbereiche auch wieder einfach entfernen.

Excel import kann nun bei fehlenden Bildern kontrolliert fehlschlagen

Bisher hat das Excel Import plugin fehlende Bildordner ignoriert und mit dem nächsten Vorgang fortgefahren. Unser Anliegen war allerdings, dass in einem solchen Anwendungsfall eine transparente Kommunikation mit dem Nutzer erfolgt, damit dieser auch besser von den fehlenden Bildern erfährt. Mit der Erweiterung des Plugins ist dies nun möglich geworden. Der folgende Ausschnitt aus der Konfiguration verdeutlicht, wie von nun an mit solchen Situationen umgegangen werden kann:

Verbesserungen beim Update des Datenbank Schemas

Nach einem Update überprüft Goobi workflow, ob das Datenbank-Schema noch aktuell ist. Ist es nicht aktuell, wird üblicherweise automatisch ein Update durchgeführt und damit die Version des Schemas auf die aktuelle Version gebracht. In einigen Fällen konnte es allerdings passieren, dass bei diesem Update etwas schief ging und die Versionsnummer in der Datenbank trotzdem erhöht wurde. Dies hat zu einem veralteten Schema mit aber aktueller gespeicherter Versionsnummer geführt. Hier wurden nun jedoch die Fehlerbehandlung verbessert, so dass nun nicht mehr nach einem Fehler die aktuelle Version in die Datenbank geschrieben wird. Dies verhindert eventuelle Inkompatibilitäten in der Zukunft.

GoobiScript executeStepAndUpdateStatus schließt nun auch bei Schritte-Plugins den Schritt

Im GoobiScript executeStepAndUpdateStatus gab es ein Fehlverhalten, das verhindert hat, dass Schritte, in denen ein Plugin konfiguriert ist, korrekt geschlossen wurden. Dieses Verhalten wurde nun korrgiert, so dass die Arbeitsschritte beim Aufruf durch dieses GoobiScript jetzt verläßlich geschlossen werden.

Anzahl der Metadaten und Bilder ermitteln: Reihenfolge der Tabellen geändert

Wenn man unterhalb der Tabelle der Vorgänge in Goobi workflow auf den Link Anzahl der Metadaten und Bilder ermitteln klickte, wurde bisher zuerst die Tabelle mit den Ergebnissen für jeden einzelnen Vorgang angezeigt. Da die meisten Anwender allerdings eher an der Tabelle mit der Zusammenfassung interessiert sind, haben wir uns dazu entschlossen, die Reihenfolge der Tabellen zu tauschen, so dass die Zusammenfassung nun zuerst erscheint, ohne zunächst über alle Vorgänge scrollen zu müssen.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.02. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Core

Speichern im Metadateneditor

Innerhalb des Metadateneditors ist uns aufgefallen, dass verschiedene Browser unterschiedlich reagierten, wenn Nutzer auf den Speichern-Button geklickt haben. Speziell war es so, dass die Webbrowser Chrome und Safari beim Klick auf den Speichern-Button keinerlei Funktion ausgeführt haben, während Firefox beispielsweise korrekt funktionierte.

Der Button mit dem Titel Speichern und Zurück war von diesem Problem im Übrigen nicht betroffen.

Nach einigem Hin und Her und viel Ursachenrecherche konnten wir das Problem letztlich lösen und haben mit dem Release einen Fix bereitstellen können.

Neue Journalfunktionalität

Seit bestimmt 8 Jahren schon gibt es die Möglichkeit in Goobi workflow, das verschiedene Informationen und Kommunikationen über das Vorgangslog nachvollziehbar sind. Auch bestand schon seit einiger Zeit die Möglichkeit, dass dort Dateien (z.B. für Restaurationsdokumente) hochgeladen werden können. Erweitert wurde dies vor ca. 1,5 Jahren nochmals um die Möglichkeit, dort auch Schadensdokumente gleich beim Anlegen von Vorgängen mit speichern zu können.

Mit anderen Worten: das Vorgangslog ist einfach praktisch. So praktisch, dass wir es auch an anderen Stellen gern haben wollten. Dazu mussten wir es dummerweise umbenennen, dass es ja nicht mehr nur bei Vorgängen verwendet werden soll.

Herausgekommen ist das Journal. Funktional ist es so geblieben wie bei den Vorgängen bisher. Nun allerdings steht es auch bei den den Einrichtungen zur Verfügung und zumindest in einem besonderen Anwendungfall (Lieferung von Pflichtexemplaren) auch bei Benutzern.

Uns würden noch weitere Stellen in Goobi workflow einfallen, wo das Journal eine Hilfe sein könnte (z.B. bei Projekten). Vielleicht findet sich dazu bald einmal eine Gelegenheit, weil es jemand anders ebenso praktisch fände. In dem Fall werden wir das Journal dann erweitern können und berichten hier wieder davon.

Beschleunigtes Ladeverhalten für umfangreiche Werke

Insbesondere bei sehr umfangreichen Werken kam es bei dem Einsatz von S3 als Speichersystem immer wieder zu enormen Verzögerungen in der Ladegeschwindigkeit. Ursache hierfür ist, dass ein S3-System keine Ordnerhierarchie besitzt und alle Dateien stattdessen enorm lange Dateinamen aufweisen. Dies sieht beispielsweise wie folgt aus:

Dieser abweichende Aufbau sorgte dafür, dass bei der Ermittlung bspw. des Master-Verzeichnisses stets alle Dateien durchlaufen werden mussten, um dabei jeweils zu prüfen, ob der gesuchte Verzeichnisname vertreten ist. Insbesondere bei sehr umfangreichen Werken hat hierbei die Performance stark gelitten.

Das haben wir nun geändert, so dass bei einer Ordnersuche in der gewünschten Hierarchiestufe alles nach dem nächsten Slash (/) nicht mehr beachtet wird und so bei einer Suche innerhalb des images-Ordners deutlich weniger zu prüfende Dateinamen aufgeführt werden.

Daneben haben wir die Dateisuche nun auch immer auf den tatsächlich relevanten Ordner beschränkt, so dass auch bei einer Suche nach den master-Bildern nicht mehr die Daten aller Ordner eines Vorgangs abgefragt werden.

Eine weitere große Verbesserung in der Performance ergab sich dadurch, dass wir in der IIIF-API nun nicht mehr pro Bild prüfen, ob ein Verzeichnis mit dem Namen thumbs existiert, sondern das Ergebnis eine eine Weile cachen. Dadurch haben wir auch die Anzahl der Anfragen an das System noch einmal deutlich verringern können.

Schönheitsfehler bei leeren Tabellenspalten beseitigt

Bei der Detailanzeige von Workflowinformationen einzelner Arbeitsschritte kam es gelegentlich einmal vor, das leere Tabellenspalten angezeigt wurden.

Dies haben wir einmal geprüft und überarbeitet. Damit tritt dieser kleine Anzeigefehler nun nicht mehr auf.

Bessere Prüfung des verfügbaren Speicherplatzes

Uns ist aufgefallen, dass der Metadateneditor keine nutzerfreundliche Meldung darüber angezeigt hat, wenn während der Bearbeitung der Metadaten nicht mehr genug Speicherplatz auf dem Goobi-Server zur Verfügung steht, um die Metadaten zu speichern. Dieser Falle sollte natürlich im Idealfall innerhalb des Alltags möglichst gar nicht vorkommen. Passiert es dennoch, so fällt Goobi der fehlende Speicherplatz nun besser auf und es wird eine gut verständliche Meldung für den Nutzer angezeigt.

Zusammenarbeit mit einem Proxy verbessert

Wenn es notwendig ist, dass Goobi selbst über einen Proxy mit anderen Diensten kommunizieren soll, so war dies bisher bereits recht problemlos möglich. Eine neue Anforderung jedoch ergab sich durch die zunehmende Verbreitung des Archivmanagements. Hierfür ist nämlich eine Kommunikation mit einer weiteren lokalen Datenbank notwendig, wofür wiederum keine Kommunikation über einen Proxy erwünscht ist.

Mit dieser Version ist daher eine neue Konfigurationsmöglichkeit ergänzt worden, die es ab sofort erlaubt, dass Goobi für die Kommunikation mit dem eigenen Server (localhost) der Proxy nicht verwendet wird. Konfiguriert wird dies mit dem neuen Schalter so:

Erweiterter LIDO-Support

Wenn Goobi verwendet wird, um statt METS insbesondere im Falle von Museumsobjekten das Format LIDO zu verwenden, besteht ab dieser Version die Möglichkeit, das auch leere Elemente innerhalb der erzeugten XML-Dateien geschrieben werden. Dazu wurde eine neue Konfigurationsmöglichkeiten für die Regelsätze geschaffen, intern dort das Folgende angegeben wird:

An einem konkreten Beispiel veranschaulicht sieht dies so aus:

Das Ergebnis innerhalb des generierten LIDO würde dann so aussehen:

Die vorgenommene Konfiguration hat hier den folgenden Einfluss:

Wenn das betroffene Metadatum existiert, wird es ganz normal exportiert. Existiert es hingegen nicht, wird geprüft, ob es im aktuellen Strukturelement erlaubt ist. Falls dies der Fall ist, wird ’WriteXPath’ ebenfalls ausgeführt. Dabei kann eine solche Konfiguration auch für eine Gruppe oder bei einem Metadatum in einer Gruppe angegeben werden.

Wird eine solche Konfiguration nicht vorgenommen, entfällt im generierten LIDO diese Zeile:

Mehr zu den Möglichkeiten der Konfiguration für die Metadatenexporte findet sich in der folgenden Dokumentation:

Plugins

Plugin für die Bearbeitung von Personendaten kurz vor Fertigstellung

Auch in diesem Monat ist wieder viel Energie in die Fertigstellung eines neuen Plugins für die granulare Erfassung von Personendaten geflossen. Neben verschiedenen kleinen und großen Fehlerbehebungen wurde unter anderem die Nutzeroberfläche noch einmal grundlegend geprüft und angepasst.

Wir gehen davon aus, dass wir das Plugin im Oktober abschließen und dann auch gründlich dokumentieren können werden. Wir halten Euch auf dem Laufenden.

Erweiterung des Catalogue Pollers

Der Catalogue Poller dient dazu, dass die Metadaten innerhalb der METS-Dateien für zahlreiche Vorgänge periodisch automatisch aktualisiert werden. Auf diese Weise können Katalogänderungen automatisch übernommen werden und werden im Anschluß auch für die Präsentation der Digitalisate berücksichtigt. Dieses Plugin wurde nun einmal grundlegend überarbeitet und mit weiteren Funktionen ausgestattet. Neben einigen Änderungen an der Nutzeroberfläche kam hierbei vor allem die neue Möglichkeit hinzu, dass der Catalogue Poller nun auch Testläufe ausführen kann, die es ermöglichen, dass man ohne tatsächliche Änderung der Daten einsehen kann, welche Änderungen an den Daten stattfinden würden. Das Ergebnis eines solchen Testlaufs ist dabei als Excel-Datei herunterladbar.

Ebenfalls neu ist außerdem die Möglichkeit, dass innerhalb der Konfiguration der zu berücksichtigenden Metadaten nicht mehr nur die Felder benannt werden können, die nicht geändert werden sollen (Blacklist). Stattdessen ist nun auch möglich, dass nur diejenigen Felder benannt werden können, die geändert werden sollen (Whitelist). Hier dazu einmal ein Ausschnitt aus der Konfiguration:

Die Dokumentation des Plugins findet sich in aktualisierter Form unter der folgenden Adresse:

Das Plugin kann wie gehabt hier von GitHub heruntergeladen werden:

Plugin für die Generierung von PDFs erweitert

Seit einiger Zeit schon gibt es ein Plugin, das während der Workflowausführung automatisch PDFs erzeugen kann. Bisher war dessen Konfigurierbarkeit allerdings eingeschränkt. Dies ist mit der neuen Version besser geworden, so dass sich so auch pro Projekt und Titel eines Arbeitsschritts eine individuelle Konfiguration festlegen lassen kann. Diese kann beispielsweise so aussehen:

Auf diese Weise lässt sich das Plugin so auch mehrfach in einem Goobi in unterschiedlichen Projekten und Workflows und mit jeweils verschiedener Einstellung betreiben.

Neues REST Plugin für MARC-Datenbezug

Im Kontext unserer Entwicklungen für die elektronischen Pflichtexemplare bestand die Anforderung, dass von externen Systemen ein Datenabzug ausgewählter Vorgänge aus Goobi workflow möglich sein sollte. Hierfür steht folgende Funktionalität zur Verfügung:

Innerhalb des Workflows existiert zunächst ein Arbeitsschritt für den MARC-Export, der die Metadaten als marcxml exportiert. Hierfür kommt das folgende Plugin zum Einsatz:

Die somit exportierten Daten landen im Anschluss in einem Verzeichnis, das vom neuen REST-Plugin überwacht wird. Hierbei handelt es sich um das folgende Plugin:

Innerhalb dieses REST-Plugins stehen verschiedene Befehle zur Verfügung, um eine Kommunikation zwischen Goobi Workflow und einem Bibliothekskatalog zu ermöglichen.

Folgende Kommandos stehen zur Verfügung:

Auflistung aller importierbaren Daten

Mit diesen Kommando werden alle Datensätze aufgelistet, die aktuell bereitliegen.

Aufruf der REST-API:

Antwort der REST-API:

Abfrage eines konkreten Datensatzes

Mit diesem Kommando kann ein einzelner Datensatz gezielt abgefragt werden.

Aufruf der REST-API:

Die REST-API antwortet anschließend mit dem abgefragtes MARC Datensatz.

Erfolgreiche Datenübernahme

Dieser Aufruf bestätigt die erfolgreiche Übernahme des Datensatzes und meldet die Katalog-ID (aDIS ID). Anschließend wird der Arbeitsschritt geschlossen.

Aufruf der REST-API:

Meldung über einen Fehler bei der Datenübernahme

Dieses Kommando dient dazu, dass ein Datensatz an Goobi gemeldet werden kann, dessen Datenübernahme nicht erfolgreich war. Es wird hierbei der Fehler gemeldet und der Arbeitsschritt in den Fehlerstatus gesetzt.

Aufruf der REST-API:

Bei den beiden letztgenannten Aufrufen wird jeweils ein Arbeitsschritt geschlossen bzw. in den Fehlerstatus gesetzt. Anschließend wird der MARC-Datensatz aus dem export-Verzeichnis entfernt, damit er bei der nächsten Suche nicht erneut aufgelistet wird.

Dokumentation

Updatehinweise für das XMP-Plugin ergänzt

Uns ist aufgefallen, dass in der Updateanleitung im Juli 2020 noch ein Hinweis für die notwendigen Anpassungen der Konfiguration des XMP-Header-Plugins fehlten. Diese haben wir nun ergänzt, so dass alles auf aktuellem Stand sein sollte.

Die Updateanleitung findet sich wie gehabt unter der folgenden Adresse:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.09. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Step-Plugin zur Laufzettelgenerierung

Wir haben ein neues Plugin entwickelt, dass die Generierung von Laufzetteln während des Workflows automatisiert. Bisher war es ja bereits möglich, dass Laufzettel unmittelbar nach dem Erzeugen von Vorgängen oder aber auch mit einem Plugin innerhalb von Aufgaben heruntergeladen werden konnten. Neu ist hinzugekommen, dass Laufzettel mit einem neuen Plugin als PDF oder Bilddatei erzeugt werden können sollen und dass diese automatisch in gewünschter Auflösung innerhalb eines konfigurierbaren Verzeichnisses gespeichert werden können.

Mehr Details zu dem Plugin finden sich in der ausführlichen Dokumentation hier:

Der Quellcode des Plugins findet sich bei GitHub veröffentlicht:

Bildbereiche besser erfassbar

Nicht in allen Fällen war sichergestellt, dass die Bildbereichserfassung im Metadateneditor nur dann angezeigt war, wenn die zugehörigen Regelsätze dies auch erlauben. Dies haben wir noch einmal intensiv getestet und auch Änderungen an der Logik vorgenommen, um hier Fehler zu vermeiden. Wenn wir dabei an alle Bereiche gedacht haben, dann dürften hier keine Schwierigkeiten mehr zu erwarten sein für das Neuanlegen von Bildbereichen, das Hinzufügen weiterer Bildbereiche und das Löschen von Bildbereichen für Strukturelemente.

Um sicherzustellen, dass wir dies für Updates dennoch gut berücksichtigen, ist auch die Updateanleitung diesbezüglich aktualisiert worden. Dort findet sich entsprechend ein Hinweis auf die vorzunehmenden Anpassungen innerhalb der Regelsätze:

Erweiterung der Editoren für Konfigurationsdateien und Regelsätze

Dass die beiden noch recht neuen Plugins zur Bearbeitung von Konfigurationsdateien und Regelsätzen so schnell so beliebt werden, hätten wir nicht erwartet. Im Zuge der raschen Verbreitung merkten wir dann recht bald, dass wir dort noch einiges optimieren sollten. So fiel uns unter anderem auf, dass die Benennung der Backup-Dateien noch einmal geändert werden sollten, dass eine Prüfung und Visualisierung der Schreibrechte für die Backup-Dateien und die zu bearbeitenden Dateien sinnvoll wäre und dass die Art und Weise, wie wir die Erfolgs- oder Fehlermeldungen anzeigen, noch einmal ändern sollten.

Alles in allem sollten beide Editoren nun also noch ein kleines bisschen praktischer sein, als sie ohnehin bereits waren. :)

Hier noch einmal die Links zu den aktualisierten Dokumentationen:

Icon für Bestände im Archiv-Management

Es ist zwar nur eine Kleinigkeit, aber letztlich hat es uns selbst so gestört, dass wir nun froh sind über die Änderung: Der oberste Knoten eines jeden Bestandes innerhalb des Archiv-Management-Plugins wurde grundsätzlich fälschlicherweise mit einem Datei-Icon visualisiert. Um Missverständnisse zu vermeiden, ist dieser oberste Knotenpunkt nun adäquat ausgezeichnet und damit selbsterklärend für alle Anwender.

Automatische Generierung von Vorschaubildern

Bei einem Arbeitsschritt kann nun konfiguriert werden, dass Vorschaubilder für die Anzeige im Metadateneditor oder Image-QA-Plugin erzeugt werden sollen. Die Generierung dieser Vorschaubilder findet statt, wenn der Arbeitsschritt geöffnet werden soll. Wenn hierbei die interne Message Queue aktiv ist, findet die Bearbeitung darüber statt, ansonsten werden die Bilder direkt erzeugt. Erst nachdem die Erzeugung dieser Vorschaubilder erfolgreich abgeschlossen wurde, wird anschließend der Arbeitsschritt für die Nutzer freigegeben, um diese annehmen zu können. Automatische Aufgaben hingegen werden nach der Erzeugung der Vorschaubilder direkt geschlossen.

Eine Konfiguration für die Erzeugung solcher Vorschaubilder sieht beispielhaft so aus:

In den jeweiligen Verzeichnissen entstehen somit die Vorschaubildern, wie konfiguriert.

Passwortlänge über Konfiguration steuerbar

Um sicherstellen zu können, dass die Nutzer sichere Passwörter verwenden, ist von nun an steuerbar, welche Mindestlänge Passwörter aufweisen müssen, wenn diese neu vergeben werden, wenn sie zurückgesetzt werden oder ein Nutzer sich selbst das Passwort ändern möchte.

In der Konfigurationsdatei goobi_config.properties kann ab jetzt der folgende optionale Wert für die Mindestlänge angegeben werden:

Dokumentiert ist dieser Konfigurationsschalter sowie auch viele andere im Goobi workflow Handbuch hier:

Neues Plugin zur Metadatenanreicherung aus einer Excel-Datei

Es gib ein neues Plugin zur Anreicherung bestehender METS-Dateien auf der Basis vorliegender Excel-Dateien. Hierbei werden Metadaten und Personen aus einer konfigurierbaren Datei gelesen und in die Metadaten des Vorgangsübernommen.

Genauere Details zu dem Plugin und dessen Konfiguration finden sich hier:

Der Quellcode des Plugins wurde hier veröffentlicht:

Neues Plugin zur Datenübername aus einem Verzeichnis

Ein weiteres neues Plugin wurde entwickelt, um vorliegende Daten aus einem Verzeichnis zu lesen und nach METS zu übernehmen. Hierbeit werden Metadaten, Strukturdaten und auch Paginierungsinformationen aus den Verzeichnissen übernommen. Genaueres findet sich hierzu in der Dokumentation:

Und auch dieses Plugin ist bei GitHub veröffentlicht:

Neues Plugin für Manipulationen innerhalb der METS-Dateien

Für einen konkreten Anwendungsfall benötigten wir eine Möglichkeit, dass innerhalb von vorhandenen METS-Dateien automatisiert einzelne Metadaten ermittelt und interpretiert werden, um daraus anschließend eigenständige Metadaten innerhalb der METS-Datei zu erzeugen. Der bisherige Anwendungsfall ist derzeit noch sehr auf die Bedürfnisse des Stadtarchivs Kiel zugeschnitten und damit unter Umständen kaum für andere Goobi-Nutzer unverändert nachnutzbar. Das Plugin bietet aber eine gute Grundlage, um ähnliche Vorgaben in Zukunft auf dieser Basis zukünftig ebenso umzusetzen.

Die ausführliche Dokumentation für dieses neue Plugin findet sich hier:

Der Quellcode des Plugins wurde unter dieser Adresse bei GitHub veröffentlicht:

Auswahl eines Massenimport-Plugins vereinfacht

In den meisten Anwendungsfällen sind innerhalb von Goobi nicht mehrere Massenimport-Plugins installiert. Aus diesem Grund haben wir eine kleine Änderung vorgenommen, um die Auswahl von Plugins in der Nutzeroberfläche zu vereinfachen. Steht dort nur ein Plugin zur Auswahl, so wird dieses nun stets sofort ausgewählt. Dies ist nicht nur logisch und bequemer sondern spart darüber hinaus auch noch unnötige Mausklicks.

Erweiterung des Plugins zur Bearbeitung von Metadaten

Das bestehende Plugin zur Bearbeitung von Metadaten wurde erweitert, um dort die Metdaten auf die gleiche Art und Weise hinzufügen und löschen zu können, wie diese auch im Metadateneditor bereits der Fall ist. Dadurch die die Bedienlogik für den Anwender besser nachvollziehbar und das Plugin erlaubt zusätzliche Anwendungsszenarien. Die Dokumentation des Plugins findet sich nach wie vor unter dieser Adresse:

Archivmanagement: Benennung von hochgeladenen EAD-Dateien

Bei der Möglichkeit, dass innerhalb des Archiv-Management-Plugins direkt EAD-Dateien hochgeladen können werden, wurden einige Nutzerszenarien zunächst nicht bedacht. Ein solches Szenario ist beispielsweise, dass die hochgeladenen Dateien ungünstige Dateibenennungen aufweisen können oder auch die Dateiendung fehlt. Solche Fälle werden jetzt abgefangen und auch Leerzeichen durch Unterstriche ersetzt. Auf diese Weise dürften Benennungsprobleme von EAD-Dateien der Vergangenheit angehören. Wenn aber dennoch Probleme mit künftigen Dateinamen für EAD-Dateien auftreten, so freuen wir uns über Rückmeldungen hierzu, um doch noch einmal Anpassungen vorzunehmen.

Fehler beim GoobiScript metadataAdd werden besser geloggt

Bei der Ausführung des GoobiScripts metadataAdd erfolgte bisher kein vorbildliches Logging im Fehlerfall. Speziell haben wir dort die Anzeige von Informationen innerhalb des Vorgangslogs vermisst. Dies ist korrigiert worden.

Überarbeitung des SRU-Clients

Für Techniker ist es vermutlich spannender als für andere: Wir haben die Implementierung des SRU-Clients komplett überarbeitet, da die dort verwendeten Programmbibliotheken End-of-Life erreicht haben. Mit einer Neuimplementierung, die auch in vielen OPAC-Plugins z.B. Verwendung findet sind wir hier nun wieder auf aktuellem Stand der Technik.

Logging innerhalb des Plugins für den Massenupload

Uns ist aufgefallen, dass das Logging innerhalb des Massenupload-Plugins deutlich zu granular und dadurch für die Administratoren nicht mehr wirklich hilfreich war. Hier haben wir Änderungen vorgenommen, damit das Logging ab jetzt in dem Maße erfolgt, dass dieses für eventuell notwendige Fälle auch sachdienliche Hinweise darauf geben kann, was während des Upload passierte.

Logging auch für das Ausloggen von Nutzern hilfreicher

Mehr Goobi-Anwender bringen immer auch mehr potentiell andere Nutzungsfälle und andere Infrastrukturen. Und so fällt uns dann durchaus auch einmal auf, wo wir etwas für uns selbst verbessern können oder sollten. So auch hier im Bereich des Ausloggens von Nutzern. Hier wünschten wir uns bereits ein besseres Logging, wenn Nutzer sich eingeloggt haben. Und jetzt haben wir dies ebenso für das Ausloggen nachgeholt. Darüber freut sich doch jeder Admin, oder?

Bugfix für die Statistik "Speicherzuwachs über Zeit"

Im "Speicherzuwachs über Zeit" Statistikmodul konnte es bei großen Datenmengen zu Problemen bei der Darstellung kommen. Dies lag vor allem daran, dass der eingegebne Startzeitpunkt nicht übernommen und stattdessen der erste Eintrag in der Datenbank als Startdatum genommen wurde. Dies führte zu sehr großen Datenmengen (über 2500 Datensätze), mit denen die eingesetzte Visualisierungsbibliothek nicht mehr umgehen konnte. Das Startdatum wird mit den vorgenommenen Änderungen nun korrekt übernommen und die Darstellung nicht zu großer Zeiträume funktioniert wieder.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.04. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Anzeige der Bilderanzahl in Aufgaben und Vorgängen

Innerhalb der Nutzeroberfläche ist es ab sofort möglich, sich die Anzahl der Bilder als Spalte einblenden zu lassen. Dies kann sowohl innerhalb der Vorgangsliste erfolgen als auch in den eigenen Aufgaben. Dies sieht dann beispielhaft so aus:

Installierte Plugins besser überschaubar

Die unheimlich praktische Anzeige der installierten Plugins und deren Versionsstände haben wir leicht überarbeitet. Dort werden nun alle vorhandenen Plugins richtig sortiert aufgelistet und es werden auch die Pfadangaben zu den Verzeichnissen aufgeführt.

Bessere Sortierbarkeit der Vorgänge und Aufgaben

In der Liste der Vorgänge haben wir einige Verbesserungen hinsichtlich der Sortierung vorgenommen. Der größte merkliche Unterschied wird dabei vermutlich nur den Administratoren auffallen:

Alle Spalten sortieren jetzt lexikographisch aufsteigend, wenn man die Sortierung einer Spalte aktiviert. Nur die Spalte mit der ID verhält sich anders und sortiert beim ersten Klick absteigend, um die aktuellsten Vorgänge sofort oben anzuzeigen. Administratoren wird es freuen. :)

Projektstruktur optimiert

Goobi workflow verwendet seit einigen Jahren Maven als Buildsystem. Im vergangenen Monat wurde die Projektstruktur innerhalb von Maven weiter konsolidiert, so dass es ein dediziertes Modul für die Ausführung von automatischen Tests und Checks innerhalb der Continous Integration Infrastruktur gibt.

Die bereits vorher existierenden Module, um eine .war Datei für das Deployment der bekannten Applikation innerhalb eines Tomcats zu erstellen und das Modul um eine .jar Datei zu bauen, wurden aufgeräumt und sind jetzt nur noch für das Kompilieren der Artefakte zuständig. Neu hinzugekommen ist ein CI-Modul, dass vorher verstreute Schritte im Lifecycle bündelt und auch neue Checks integriert. Das sind im einzelnen:

• Das Ausführen der JUnit Tests

• Überprüfung der verwendeten Abhängigkeiten auf bekannte Sicherheitslücken (OWASP)

• Erstellen einer Analyse, wie viel Code mit Unit Tests abgedeckt ist (Jacoco)

• Überprüfung des Quelltexts auf Verstöße gegen ausgewählte Checkstyle Regeln

• Durchführen einer statischen Codeanalyse mittels Sonar

In dem gleichen Zuge wurde die Ausführung der Unit Tests von einer suite-basierten Infrastruktur auf eine klassenbasierte umgestellt. Die Anzahl der regelmäßig geprüften Tests konnte dabei massiv erhöht werden. Außerdem wurden letzte Codestellen aufgeräumt werden, die ein kompilieren mit Java 8 erforderten und explizite Compileroptionen benötigten.

Die veränderte Projektinfrastruktur ermöglicht jetzt ein schnelleres Bauen der einzelnen Module und dadurch weniger Overhead in der Entwicklung sowie eine erweiterte und verbesserte Prüfung der täglichen Arbeiten zur Erhöhung der Codequalität.

Wer unseren Fortschritt hinsichtlich der Codequalität nachvollziehen möchte kann dies hier gern jederzeit tun:

Noch zeigen die Diagramme auf, dass wir noch einiges vor uns haben. Aber wir sind auf dem Weg.

Und bei uns intern sieht der Fortschritt in etwa so aus momentan:

Es geht also voran. Wir berichten künftig öfter darüber hier.

Bessere Log-Informationen über ausgeführtes GoobiScript

In der Vergangenheit ist uns des öfteren aufgefallen, dass wir uns mehr Logging gewünscht hatten, wenn einmal ein GoobiScript nicht das tut, was man sich erhofft hatte. Diese Thematik sind wir nun angegangen und haben es nun so gelöst, dass Administratoren in den Logdateien künftig gut nachvollziehen können, was aufgerufen wurde. Dort sieht es nun also in etwa so aus:

Erweiterungen für das AEON-Plugin

Vor einiger Zeit hatten wir bereits darüber berichtet, dass wir eine umfangreiche Schnittstelle zu der Software AEON implementieren. Hier gab es wieder zahlreiche Erweiterungen. So wurde unter anderem die Optik der Oberfläche massiv überarbeitet.

Eigenschaften können für ganze Datenbestände oder auch für einzelne tatsächlich zu digitalisierende Objekte individuell angepasst oder übernommen, wobei Abweichungen von den Default-Werten klar visualisiert werden. Außerdem ist es nun möglich, dass Vorgänge, deren Digitalisierungsworkflow bereits in Bearbeitung ist, nun gestoppt werden können, sofern nicht bereits ein konfigurierbarer Status erreicht wurde.

Alles in allem also große Fortschritte, die aber auch noch weiter in Bearbeitung sind.

GoobiScripte für Metadatenmanipulationen erweitert

Es gibt ja wirklich schon eine Menge an GoobiScripten. Und doch fällt immer mal wieder auf, dass eine bestimmte Funktionalität doch mal praktisch wäre. Diesmal ist uns aufgefallen, dass es doch schon ganz praktisch wäre, wenn wir die Manipulationen an Metadaten nicht nur in den logischen Bereichen der METS-Dateien vornehmen könnten, sondern auch innerhalb der Metadaten für die Bilder. Gesagt, getan. Neben den Parametern work top child und any ist es von nun an möglich, dass die GoobiScripte zur Manipulation der Metadaten auch physical verstehen und anwenden. Genaueres gibt es hier in der Dokumentation:

Umstellungen des Datenbanktreibers

Damit Goobi workflow besser auch mit neueren MySQL-Datenbanken umgehen kann, haben wir den Treiber für die Kommunikation mit der Datenbank ersetzt. Von nun an setzen wir den folgenden Treiber ein:

Damit ist es nun möglich, Goobi workflow mit den MySQL Versionen 5.7 und 8 zu betreiben. Die früheren Versionen hingegen werden damit nun nicht mehr unterstützt. Dies muss bei künftigen Updates also entsprechend berücksichtigt werden.

Innerhalb der Updateanleitung ist dies auch bereits aufgeführt:

Erweiterung des Goobi-Handbuchs

Wie man an unseren Digests und den Plugins bereits gut nachvollziehen kann, steht bei uns die Dokumentation der Entwicklungen seit einigen Jahren sehr im Vordergrund. Aktuell haben wir uns hier übrigens auch den Konfigurationsdateien zugewendet. Der Bereich ist noch Work-in-Progress. Aber wer einmal schauen möchte, findet hier schon ein paar gute Beispiele:

Hier wird sich noch einiges tun in den nächsten Wochen.

Bessere Anzeige von Informationen im Vorgangslog

Im Falle fehlgeschlagener Skriptaufrufe, war das Vorgangslog bisher nicht wirklich sehr hilfreich. Dies ist angepasst worden, so dass fehlerhafte Aufrufe nun mit einer klaren Fehlermeldung im Vorgangslog auftauchen.

Neuer User: Passwort war kein markiertes Pflichtfeld

Fälschlicherweise wurde beim Anlegen neuer Nutzer nicht angezeigt, dass ein Passwort für einen neuen Account ein Pflichtfeld ist. Dies ist korrigiert worden.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 22.05. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

Coming soon

• Erweiterung des Plugins zur Ausgabenerkennung von Zeitungen

• Support von S3 als Speicher in weiteren Plugins

• Erweiterte Accessibility für Tabellen

• AEON Plugin Entwicklung

• Dokumentationen und Code-Veröffentlichungen

Erweiterung der Anzeige verfügbarer Nutzerrechte

Bereits seit einer großen Umstellung vor einigen Jahren können Plugins eigene Nutzerrechte mitbringen. Diese lassen sich dann zusätzlich zu denjenigen Rechten, die Goobi workflow selbst bereits mitbringt verwendet werden. Dies erfolgt üblicherweise so, dass man aus dem Plugin den Namen des benötigten Rechts erfährt, indem man dieses öffnet.

Anschließend kann man innerhalb der Benutzergruppen das erforderliche Recht im rechten unteren Bereich eintragen und somit auch der Nutzergruppe zuweisen.

Im Falle von sehr komplexen Rechten, von denen einzelne Plugins auch mehrere mitbringen können, ist die Ermittlung der benötigten Rechte manchmal zu umständlich. Aus diesem Grund wurde Goobi workflow nun dahingehend erweitert, dass innerhalb der zentralen Goobi-Konfigurationsdatei all diejenigen Rechte bekannt gemacht werden können, die Goobi innerhalb der Auflistung der zur Verfügung stehenden Rechte aufführen sollen. Auf diese Weise sind die Rechte von Plugins genauso auswählbar und anklickbar wie diejenigen, die Goobi selbst bereits mitbringt.

Die Konfiguration diese zusätzlichen Rechte erfolgt innerhalb der Konfigurationsdatei goobi_config.properties. Sie sieht beispielhaft wie folgt aus:

userRight=RightA
userRight=RightB
userRight=RightC

Sollen die somit eingetragenen Rechte darüber hinaus auch noch mit passenden Übersetzungen angezeigt werden, so müssen diese entsprechend innerhalb der lokalen messages_XY.properties Dateien eingetragen sein. Dies muss beispielhaft so erfolgen:

rights_RightA=Right A for the user group
rights_RightB=Right B for the user group
rights_RightC=Right C for the user group

Neues Plugin, um Batch-Vorgänge auf einen gemeinsamen Stand zu bringen

Im Rahmen eines Projektes, wo Goobi ein anderes technisches System (AEON) über eine API benachrichtigen soll, wenn alle Vorgänge eines Batches einen bestimmten Status erreicht haben, wurde ein neues Plugin implementiert. Es handelt sich hierbei um ein Step-Plugin, das die weitere Ausführung des Workflows für den jeweiligen Vorgang stoppt, sofern es noch weitere Vorgänge gibt, die zu dem gleichen Batch gehören und noch nicht den gleichen Status innerhalb des Workflows erreicht haben. Er der letzte Vorgang, der den gewünschten Status erreicht, löst damit aus, dass alle Vorgänge nun wieder gemeinsam in den jeweils nächsten Arbeitsschritt wechseln und somit den Workflow weiter durchlaufen. Dieses Plugin dient also dazu, alls Vorgänge wieder auf den gleichen Stand im Workflow zu bringen. Sofern gewünscht kann dabei das Plugin außerdem eine Anfrage an AEON über REST senden, um über die Änderung des Status zu informieren.

Eine detaillierte Dokumentation für das Plugin findet sich hier:

Und an dieser Stelle findet sich dann sowohl der Quellcodes des Plugins als auch die kompilierte Fassung des Plugins:

Catalogue-Request-Plugin und Catalogue-Poller erweitert

Die beiden Plugins, die einfache oder auch wiederholte Katalogabfragen während des bereits laufenden Workflows erlauben, wurden erweitert, um mit den neuen Funktionen des JSON-OPAC-Plugins arbeiten zu können. Da dort nämlich mehrere Felder für eine einzige Abfrage aus einem Katalog verwendet werden können, um also mit mehreren Suchparametern ein Ergebnis zu importieren, hat sich die Konfiguration beider Plugins ändern müssen. Für Updates von Goobi bzw. den Plugins müssen entsprechend die Konfigurationsdateien berücksichtigt werden. Details dazu finden sich sowohl innerhalb der Dokumentation der Plugins hier:

... und hier:

Und natürlich sind die erforderlichen Anpassungen auch innerhalb der Updateanleitung detailliert aufgelistet:

Neues Plugin für die Bearbeitung von Konfigurationsdateien

In der Vergangenheit war es schwierig kleine Anpassungen an Goobi vorzunehmen, wenn kein unmittelbarer Zugriff auf den Server vorlag. Mit dem neuen Plugin für die Bearbeitung von Konfigurationsdateien direkt aus der Nutzeroberfläche von Goobi ist dies nun anders. Verfügt ein Nutzer über die erforderlichen Rechte im System besteht nun die Möglichkeit, dass eine Änderung von Konfigurationen direkt aus Goobi heraus erfolgen kann.

Im Hintergrund erzeugt das Plugin dabei Backups in festlegbarer Anzahl, so dass ein Administrator auch noch einmal eine frühere Version auf dem Server herstellen kann. Darüber hinaus bietet das Plugin auch die Möglichkeit einer integrierten Hilfe. Hier können Sie selbst festlegen, ob für die Bearbeitung von Konfigurationsdateien eigene Hilfetexte angezeigt werden sollen. Diese müssen dann entsprechend innerhalb der sogenannten messages-Dateien hinterlegt werden und können sogar auch Formatierungsangaben beinhalten.

Mehr Details über das Plugin finden sich in der sehr ausführlichen Dokumentation hier:

Der Quellcode und eine kompilierte Fassung des Plugins finden sich wie gewohnt hier:

Logging und Login

Wenn sich Nutzer in Goobi workflow anmeldeten, war im Falle von technischen Problemen für uns als Entwickler schwer nachvollziehbar, woran dies manchmal lag. Aus diesem Grund haben wir uns dieser Thematik mal in Ruhe angenommen und das Schreiben von Log-Dateien speziell im Hinblick auf das Einloggen gründlich überarbeitet. Die Gratwanderung ist hierbei natürlich, dass wir im Hinblick auf die DSGVO so wenige Daten wir möglich loggen dürfen und auf der anderen Seite aber soviel Information wie benötigt in Log-Dateien schreiben, damit wir im Falle von Fehlern hier nun auch besser nachvollziehen können, woran es liegen mag. An all diese Themen haben wir nun gedacht und das Logging entsprechend angepasst. So können wir künftig gut damit arbeiten. Und falls es mal jemand in Aktion sehen möchte, kann er auf Serverseite einfach mal folgenden Befehl ausprobieren:

cat goobi.log | grep "LOGIN PROCESS"

Einrichtungen werden nur noch bedingt angezeigt

Vor ca. zwei Jahren haben wir Goobi workflow massiv erweitert, um eine bessere Mandantenfähigkeit zu erlauben. Diese basiert darauf, dass in einer Goobi-Instanz nun mehrere Einrichtungen/Mandanten definiert werden können.

Wurden allerdings in einer Goobi-Instanz nicht mehrere Einrichtungen definiert, so stand in vielen Bereich unnötigerweise ein neues Auswahlfeld zur Verfügung, in dem zumeist dann doch nur die eine Einrichtung ausgewählt werden konnte, weil der Use Case mehrerer Einrichtungen in einer Instanz relativ selten vorkommt. Daher haben wir nun an verschiedenen Stellen Änderungen vorgenommen, um diese Anzeige von Einrichtungen nur noch dann anzuzeigen, wenn auch wirklich mehrere Einrichtungen vorliegen. Andernfalls wird sowohl das Auswahlfeld als auch die die Tabellenspalte grundsätzlich versteckt. So bleibt die Oberfläche aufgeräumt und übersichtlich und zeigt keine unnötigen Informationen an.

Namen von Projekten prominenter in der Bearbeitung

Sukzessive stellen wir einige optische Feinheiten um, so dass die Bedienung von Goobi noch intuitiver wird. Eine solche Feinheit ist z.B. dass wir beim Bearbeiten von Datensätzen, den Namen des jeweiligen Datensatzes nun deutlich prominenter in dem Titel der Seite aufführen. Der hier aufgeführte Screenshot verdeutlicht dies ganz gut, weil er den Namen des bearbeiteten Projektes groß im oberen Bereich anzeigt, auch wenn man sich auf einer Registerkarte innerhalb des Bearbeitungsformulars befindet. So wird jederzeit deutlich, an welchem Projekt man beispielsweise gerade Änderungen vornimmt.

Neues Plugin zum Bearbeiten der Regelsätze

Um die Bearbeitung von Regelsatz-Dateien nicht mehr nur ausschließlich über einen Serverzugang zu ermöglichen haben wir ein neues Plugin entwickelt. Es erlaubt eine Bearbeitung der Regelsätze als xml-Dateien unmittelbar aus der Oberfläche von Goobi heraus.

Der Verlust von Änderungen, die man innerhalb der Dateien vorgenommen hat, wird dadurch vermieden, dass ein Wechsel zu anderen Regelsätzen immer auch prüft, ob vielleicht ungespeicherte Daten vorliegen.

Für den Fall dass dabei mal etwas schiefgeht erzeugt das Plugin dabei im Hintergrund automatisch Backups in definierbarer Anzahl, so dass auch versehentliche Änderungen zur Not von einem Administrator auf dem Server noch einmal rückgängig gemacht werden können.

Bitte beachten Sie: Auch mit diesem Plugin sollte man wissen, was man hier wie konfiguriert. Der erleichterte Zugriff auf die Regelsätze kann bei fehlerhafter Bedienung zu schwerwiegendem Datenverlust zuvor erfasster Metadaten führen.

Eine sehr ausführliche Dokumentation für das Plugin findet sich unter der folgenden Adresse:

Der Quellcode des Plugins zusammen mit einer kompilierten Fassung des Plugins findet sich bei GitHub:

Bessere Rückmeldungen beim Upload von Dateien

Beim Hochladen von Dateien mit dem File-Upload-Plugin kamen in der Vergangenheit irreführende Fehlermeldungen, wenn eine Validierung die hochgeladenen Dateien nicht akzeptieren wollte. Bisher kam dann jeweils die gleiche nicht wirklich hilfreiche Meldung, dass keine Objekte vorgefunden werden können. Der eigentliche Grund der Meldung war in solchen Fällen jedoch eigentlich, dass zwar Dateien vorgefunden werden, diese aber nicht der Validierungsregel entsprachen. Dies haben wir nun überarbeitet und zeigen jetzt deutlichere Meldungen für solche Anwendungsfälle an.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.10. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.10</version>
</dependency>

Coming soon

• Entwicklung eines neuen Erfassungsplugins für die Integration mit Atlas AEON

• Entwicklunge eines neuen Plugins für die Bearbeitung von Konfigrationsdateien aus der Nutzeroberfläche

• Entwicklung eines neuen Plugins zur Bearbeitung von Regelsätzen aus der Nutzeroberfläche

• Entwicklung eines Plugins für die gleichzeitige Bearbeitung von Metadaten aus mehreren Vorgängen

Keine neuen Vorgänge für deaktivierte Projekte

Bisher war es möglich, dass auch innerhalb der Produktionsvorlagen weiterhin Vorgänge angelegt werden können innerhalb von Projekten, die eigentlich als deaktiviert markiert sind. Hier gab es nun eine Umstellung, die die Bedienung vereinfachen und intuitiver machen soll.

Die Buttons zum Anlegen einzelner Vorgänge und auch diejenigen für den Massenimport werden für deaktivierte Projekte jetzt rot dargestellt und zeigen bei Verwendung eine erklärende Warnmeldung an. Darüberhinaus wird auch der Projektname ausgegraut dargestellt, um auf die Deaktivierung des Projektes hinzuweisen. Innerhalb der Dropdown-Felder, die sich mittels Klick auf das Pfeil-Icon des Buttons öffnen, werden deaktivierte Projekte nun nicht mehr aufgelistet.

Ausblenden von nicht benötigen Buttons

Innerhalb der Konfiguration von Benutzern können unter anderem die erforderlichen Benutzergruppen und Projekte zugewiesen werden, die zu einem Nutzer gehören sollen. An dieser Stelle haben wir eine kleine Optimierung vorgenommen, die die Bedienung logischer macht.

In beiden Bereichen wird der Button zum Hinzufügen von Projekten und Benutzergruppen nun nur noch dann angezeigt, wenn noch weitere Projekte und Benutzergruppen zur Verfügung stehen, die noch nicht bereits zugewiesen wurden. Der Button wird entsprechend also nur noch angezeigt, wenn er auch wirklich eine Änderung ermöglicht. Das dürfte die Bedienung etwas intuitiver machen.

Verbesserungen an der Nutzeroberfläche für das Archiv-Management

Um die Verwendung des Archiv-Management-Plugins noch einmal zu verbessern, haben wir einige zusätzliche interne Prüfroutinen implementiert und geben mehr informative Meldungen innerhalb der Nutzeroberfläche aus als bisher.

Ist beispielsweise die Verbindung zur Datenbank nicht vorhanden oder es fehlen erwartete Angaben z.B. für die Auswahl des zu bearbeitenden Bestandes, so werden nun hilfreiche Fehlermeldungen für den Bearbeiter angezeigt.

Anpassungen am Menü

Im Zuge verschiedener interner Menü-Umbauten haben wir auch das vorher noch in einer eigenen Datei gepflegte mobile Menü (für Smartphones und andere schmale Geräte) in eine Datei zusammengefasst. Als Anwender merkt man davon hoffentlich nichts. Für uns als Entwickler hingegen ist diese Herangehensweise nun wesentlich einfacher, da neu hinzuzufügende Menüeinträge somit nur noch an einer zentralen Stelle berücksichtigt werden müssen.

Bei der Gelegenheit haben wir auch einige minimale optische Anpassungen vorgenommen und die farbliche Hervorhebung von aktiven Seiten angepasst. Hier gab es eine zwischenzeitlich farbliche Inkonsistenzen zwischen einigen blauen und einigen grauen hervorgehobenen Menüeinträgen. Nun werden wieder alle aktiven Menüeinträge in grau dargestellt.

Neues Plugin zum Prüfen der Regelsatzkonformität

Wir haben ein neues Plugin entwickelt, von dem wir alle nicht wussten, dass wir es eigentlich schon seit langem brauchen. Der Bedarf fiel deswegen auf, weil insbesondere große Massenexporte von Daten gelegentlich in Fehlern resultierten, die sich durch zwischenzeitliche Anpassungen an Regelsätzen ergeben. Solche Situationen können sich beispielsweise ergeben, weil Metadaten zu einem späteren Zeitpunkt anders definiert werden. Wenn beispielsweise Metadaten nicht mehr vorkommen dürfen, in der Vergangenheit aber erlaubt waren, lassen sich die METS-Dateien nicht korrekt öffnen. Ältere Goobi-Vorgänge wurden entsprechend in der Vergangenheit erfolgreich und valide exportiert, verstoßen mit einem aktualisierten Regelsatz aber nun ggf. gegen dessen neue Regeln.

Dieses neue Plugin macht es einfacher, solche Vorgänge zu ermitteln. Es kann einfach für eine gefilterte Liste an Vorgängen ausgeführt werden und prüft dabei die erfolgreiche Lesbarkeit der vorliegenden METS-Dateien. Im Falle von Fehlern werden diese in einer Tabelle aufgelistet und es besteht die Möglichkeit, direkt den METS-Editor für den entsprechenden Vorgang zu betreten.

Der Quellcode des Plugins wurde hier auf GitHub veröffentlicht:

Die ausführliche Dokumentation zu Installation, Konfiguration und Betrieb findet sich unter der folgenden Adresse:

Neues Plugin zum Zurücksetzen der Paginierung

In einem anderen Projekt hatten wir den besonderen Anwendungsfall, dass wir für sehr viele Vorgänge die Paginierung komplett zurücksetzen mussten, da die Anzahl der Dateien für hunderte Vorgänge sich änderte. In dem Kontext ist uns aufgefallen, dass es in Goobi workflow bisher keinerlei Automatismus gab, der eine solche benötigte Änderung bei vielen Vorgängen in Masse machen konnte.

Aus diesem Grund haben wir ein Plugin entwickelt, dass das Zurücksetzen der Paginierung für große Datenmengen erlaubt. Mit Hilfe eines frei wählbaren Filters läßt sich das Plugin so auch für tausende Vorgänge einsetzen.

Der Quellcode des Plugins wurde hier auf GitHub veröffentlicht:

Die ausführliche Dokumentation zu Installation, Konfiguration und Betrieb findet sich unter der folgenden Adresse:

Darstellungsfehler in den Benutzereinstellungen

Wenn Benutzer innerhalb der Benutzereinstellungen viele Projekte zugewiesen hatten, so war die Anzeige der Informationen nicht optimal. Hier haben wir daher im August eine kleine optische Anpassung vorgenommen, damit auch sehr umfangreiche Listen an Projekten korrekt dargestellt werden.

Und weil diese Darstellung auch für die Benutzergruppen sinnvoll ist, haben wir diese ebenfalls mit geändert. Diese kleine Anpassung ist allerdings erst im kommenden Release des Septembers enthalten.

Änderung an der Konfiguration

Die Speicherung der Keystore-Informationen erfolgt nun nicht mehr aus der Nutzeroberfläche von Goobi workflow heraus. Für eine bessere Nutzung von Keystores auch durch andere Programme wurde die Konfiguration umgestellt und erfolgt daher über die zentrale Konfigurationsdatei goobi_config.properties. Dort kann nun ein Keystore wie folgt definiert werden:

truststore = /path/to/file
truststore_password = password

Diese und auch weitere Änderungen, die für Updates bedacht werden müssen haben wir im Übrigen in der öffentlich einsehbaren Updateanleitung eingepflegt. Wer sie noch nicht kennt, findet sie hier:

Datenbank-Optimierungen für größere Datenbestände

So langsam aber sicher erreichen einige Goobi-Installationen eine Datenmenge, bei der Datenbankabfragen mit unoptimierten Tabellen und Datenbankabfragen zu langsam werden. Wir haben uns aus diesem Grund einige Datenbankabfragen und Tabellen einmal genau angeschaut und Änderungen vorgenommen. Diese Anpassungen werden von uns bei der Durchführung von Goobi-Update stets mit ausgeführt. Wenn Sie hingegen das Update selbst durchführen, finden sich weitere Details zu den Änderungen wie gehabt in der Updateanleitung:

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.08. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.08</version>
</dependency>

November 2021

Bessere Anzeige im Falle nicht importierbarer Metadatan

Wenn ein Vorgang in Goobi workflow angelegt wird und dafür Daten aus einem Katalog übernommen werden sollen, kann es gelegentlich passieren, dass nicht für alle bereitgestellten Metadaten bereits konfiguriert wurde, wo innerhalb der internen METS-Datei die Metadaten gespeichert werden sollen. Dies war bisher für den Nutzer nicht transparent, so dass wir eine Änderung vorgenommen haben. Metadaten, die nicht übernommen werden können, werden nun im Anlegeprozess deutlich visualisiert.

ALTO-Editor kann aus der Thumbnail-Ansicht aufgerufen werden

Seit einigen Versionen verfügt Goobi workflow über die Möglichkeit, dass man direkt aus dem Metadateneditor heraus die Ergebnisse einer Volltexterkennung im ALTO-Format anzeigen und bearbeiten kann. Diese Funktionalität war bisher nur aus der Einzelseitenanzeige heraus betretbar. Mit den vorgenommenen Änderungen ist dies jedoch auch aus den Thumbnails heraus möglich und erlaubt anschließend eine Navigation zwischen den Bildern innerhalb der geöffneten Bearbeitungsmaske.

ALTO-Editor unterstützt ALTO 4.0

Der bereits angesprochene Editor für die Volltexte im ALTO-Format unterstützt nun das ALTO Dateien in der Version 4.0 und erlaubt deren Anzeige und Bearbeitung. Damit ist es nun auch möglich, z.B. die Volltexte von Transkribus anzeigen und bearbeiten zu können.

Verschiedene Erweiterungen am Archiv-Management-Plugin

Das Archiv-Management kommt in immer mehr Projekten in den produktiven Einsatz. In dem Kontext tauchen immer mal wieder neue Wünsche, notwendige Anpassungen oder auch optische Änderungsnotwendigkeiten auf, die wir sukzessive mit umsetzen. Hier gab es in letzter Zeit mehrere eher optische Anpassungen an der Erfassungsmaske, die es lohnen, mal wieder einen Blick auf die Funktionalität zu werfen.

Zur Erinnerung hier nochmal die ausführliche Dokumentation des Plugins:

Accessibility als Dauerthema

Bei manchen Entwicklungen ist man auch mit viel Berufserfahrung noch immer überrascht, welche Ausmaße sie annehmen können, und womit man alles nicht gerechnet hätte. Das Thema Accessiblity ist ein gutes Beispiel dafür. Wir haben hier bereits unzählige Stunden investiert, um die Barrierefreiheit für Goobi workflow zu optimieren und erfüllen auch bereits gängige Validatoren. Und doch gibt es immer mal wieder neue Überraschungen, wie das folgende Beispiel zeigt:

Dieser Screenshot zeigt, welche Effekte Umstellungen haben können, wenn man beispielsweise Links zu Buttons ändert, damit u.a. Screenreader auch besser damit umgehen können. Natürlich haben wir das so nicht gelassen, sondern wieder hübsch gestyled. Wenn Sie aber dennoch einmal etwas ähnliches an einer anderen Stelle von Goobi workflow vorfinden, so freuen wir uns über Rückmeldung, damit wir das korrigieren können.

Feinschliff für die Barrierefreiheit

Einige Monate nach dem Abschluss der eigentlichen Barrierefreiheitsarbeiten, sind uns noch ein paar Details aufgefallen, die verbessert werden konnten. Dabei ging es unter anderem um die richtigen Attribute in Tabellen, damit Screenreader diese richtig interpretieren können.

Die Kompatibitlität mit den gängigen Validatoren bleibt bei uns unter ständiger Beobachtung und wir versuchen, die 100% Kompatibilität zu behalten. Hierbei muss man allerdings vor Augen haben, dass die Validatoren über die Zeit Änderungen hinsichtlich der Anforderungen haben und somit eine konstante Beobachtung der Kompatibilität notwendig bleibt. Das Thema ist also als solches vermutlich nie wirklich abgeschlossen. Momentan sieht es für Goobi workflow aber so aus, als ob wir unsere Hausaufgaben gut gemacht haben:

Massenupload Plugin Anpassungen

Das Massenupload-Plugin ist vor allem dann praktisch, wenn viele Vorgänge in Goobi worklow automatisch mit den zugehörigen Bilddateien beliefert werden sollen. Das klappt erfahrungsgemäß ziemlich gut. Allerdings erlaubte der Button zum Zuordnen der Bilder zu den ermittelten Vorgängen eine doppelte Ausführung durch wiederholten Klick darauf. Dies führte dann zu undefiniertem Verhalten, so dass dies geändert werden musste. Der entsprechende Button wird daher von nun an nicht mehr angezeigt, wenn er bereits geklickt wurde und gerade Bilder in die Vorgänge einsortiert werden.

Bei der Gelegenheit haben wir übrigens noch eine kleine Korrektur vorgenommen: Wenn in der Konfiguration der Parameter use-barcodes auf true gesetzt war und bei dem Upload von Bildern kein Barcode ermittelt werden konnte, wird nun eine sprechende Fehlermeldung ausgegeben.

Korrektur am Excel-Import

Aus der Kategorie "Unerwartete Seiteneffekte" kommt dieser Punkt: Tatsächlich konnte eine fehlerhafte Konfiguration des Excel-Import-Plugins dazu führen, dass das Dashboard und die Auflistung von Produktionsvorlagen in Goobi workflow nicht mehr richtig angezeigt wurden. Hier haben wir Korrekturen vorgenommen, so dass alles wieder gut aussieht.

Tabellenlayout in der Benutzerverwaltung verbessert

Innerhalb der Benutzerverwaltung war die Darstellung der Spalte mit den Buttons zu schmal geraten, so dass die Buttons ungünstig umgebrochen sind. Das wurde durch eine Mindestbreite der Spalte behoben und sieht somit auch bei vielen Projekten und Benutzergruppen gut aus.

Gelöschte und anonymisierte Nutzer aus den Aufgaben entfernt

Wenn Nutzer in Goobi gelöscht werden, so wird im Hintergrund der Datensatz des Nutzers nicht wirklich gelöscht, sondern komplett anonymisiert. Dies erfolgt, damit die Daten insgesamt noch vollständig bleiben. Zur Verdeutlichung, dass solche Nutzer auch tatsächlich nicht im Workflow aktiv sein können, werden solche gelöschgten Nutzer nun auch aus der Liste der berechtigten Nutzer für eine Aufgabe entfernt, sofern sie dort zugewiesen waren. Dies ist in erster Linie eine optische Korrektur, da die Nutzeraccounts bereits deaktiviert waren und sich entsprechend auch nicht mehr einloggen können.

Automatische Veröffentlichung nahezu aller Plugins als kompilierte Dateien

Dass Goobi worklow und nahezu alle Plugins unter eine Open-Source-Lizenz stehen, dürfe sich bereits rumgesprochen haben. Derzeit existieren etwas über 300 Plugins für Goobi workflow und bereits ca. 130 sind auch bereits bei GitHub unter https://github.com/intranda veröffentlicht. Sehr viele der Plugins verfügen auch bereits über eine ziemlich ausführliche Dokumentation unter https://docs.goobi.io, die unter anderem erläutert, wie eine Installation der Plugins erfolgt. Bisher musste man für die Inbetriebnahme allerdings noch selbst die Plugins als Quellcode herunterladen und kompilieren. Dies war umständlich und sehr technisch. Daher haben wir dies so geändert, dass bei GitHub nun automatisch kompilierte Fassungen der Plugins abgelegt werden, immer wenn wir eine Änderung an einem Plugin vornehmen oder eine neue Goobi Version veröffentlichen. Man gelangt zu diesen kompilierten Plugins, indem man bei dem jeweiligen Plugin im rechten Bereich auf Releases klickt.

Anschließend erhält man Einblick in die herunterladbaren Dateien, die sowohl das Plugin selbst als auch die eventuell benötigten Konfigurationsdateigen umfassen. Diese Dateien kann man nun herunterladen und gemäß der Anleitung korrekt installieren, so dass die Inbetriebnahme deutlich vereinfacht wurde.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.11. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.11</version>
</dependency>

Coming soon

• Neues Plugin für die Bearbeitung von Konfigurationsdateien

• Neues Plugin für die Bearbeitung von Regelsätzen

• Anpassungen der Institutionsanzeige

• AEON-Plugin

Druckansicht für Metadaten überarbeitet

Vor ca. zwei Jahren hatten wir eine ganz neue Druckansicht für die Metadaten implementiert. Diese führte nicht nur neu ein, dass man ein Bild des Repräsentanten mit erhalten hatte. Vor allem konnte man damit nun auch die Hierarchie des Strukturbaums mit den zugehörigen Personen- und Metadaten druckbar machen.

Was wir bei der Implementierung jedoch nicht mit bedacht hatten, war dass die Goobi-Anwender diese Funktion auch wirklich sofort intensiv benutzen werden, selbst für sehr tiefe Hierarchien. Wir hatten zunächst nur die Berücksichtigung von von zwei Hierarchiestufen implementiert. Mit der aktuellen Überarbeitung gehen wir nun jedoch bis zu acht Ebenen tief in der Auflistung auf der Druckansicht.

Neu in dem Kontext ist dabei ebenso, dass nun auch die zugehörigen Seiten mit aufgeführt werden. Zu jeden Strukturelement werden nun sowohl die Bildnummern als auch die logischen Seitenzahlen als Seitenbereich mit aufgeführt.

Verständlichere Anzeige innerhalb von GoobiScript

Es gab wieder einmal einige kleinere Änderungen innerhalb der Ausführung von GoobiScript und der Anzeige der Ergebnisse. Ein gutes Beispiel für eine solche kleinere Änderung ist z.B. dass nun die Beschreibung, wie der Status eines GoobiScripts lautet, etwas aussagekräftiger ist. So wird z.B. für das GoobiScript zum Ändern der Projektzuhörigkeit nun eine verständliche Information angezeigt statt der zuvor recht kryptischen Information, mit der nicht einmal wir als Entwickler etwas anfangen konnten. :)

Bessere Dokumentation für das XMP-Header Plugin

Während der Inbetriebnahme des XMP-Header Plugins auf einem Produktivsystem ist uns aufgefallen, dass die Dokumentation nicht ganz up-to-date war. Diese wurde nun noch einmal überarbeitet und in dem Zusammenhang auch gleich einige Änderungen an dem Plugin vorgenommen, die ein noch besseres Logging erlauben, für den Fall das das Plugin während der Ausführung auf Fehler stößt.

Hier findet sich die aktuelle Fassung der Dokumentation online:

Kleinere Überarbeitungen an der Inline-Hilfe

An einigen Stellen von Goobi workflow gab es wieder mehrere kleinteilige Änderungen, um die Bedienung zu vereinfachen. Diese Änderungen sind zu viele und zu klein, als dass alle hier aufgeführt werden sollen. Als ein Beispiel soll daher hier einmal die Erweiterung der Inline-Hilfetexte dienen, die unter anderem bei der Konfiguration der Dateigruppen für die Erzeugung von METS-Dateien etwas umgeschrieben wurde.

Von solchen Änderungen gab es einige im Hintergrund. Im besten Fall fallen dem Nutzer diese kleinen Anpassungen noch nicht einmal auf.

Verbessertes Speichern-Verhalten bei Benutzeradministration und Projektadministration

In der Benutzeradministration können nun Änderungen an den Zugehörigkeiten für Projekte und Gruppen mit dem Button Abbrechen rückgängig gemacht werden. Das ging bisher nicht. Eine ähnliche Anpassung haben wir bei der Gelegenheit auch bei den Projekten vorgenommen, wo die Einstellungen zu den Dateigruppen sich nun ähnlich verhält.

Überarbeitung der Nutzeroberfläche für Benutzergruppen

Im Bereich der Benutzergruppen war die Oberfläche für die Nutzer noch nicht ideal. Dies betraf vor allem die Zuweisung von individuellen Berechtigungen, die von einzelnen Plugins mitgebracht werden können. Die Möglichkeit der Eingabe solcher individuellen Berechtigungen gab es zwar bisher schon. Sie war allerdings nicht intuitiv genug, so dass man die Eingabemöglichkeit zu einfach übersehen konnte. Diese ist mit einer Überarbeitung nun deutlich besser geworden.

Bei der Gelegenheit haben wir auch noch berücksichtigt, dass ein Nutzer noch besser erkennen können sollte, wenn keine weiteren Berechtigungen mehr zuweisbar sind. In einem solchen Fall erfolgt nun eine Anzeige eines kurzen Hilfetextes.

Verbessertes Mapping von Metadaten bei der Nutzung von Datacite DOI

Eine Entwicklung am DOI-Plugin ermöglicht es uns, dass jetzt auch Metadaten aus mehreren Ebenen eines Dokuments und dessen übergeordneter Einheit bei mehrbändigen Werken für die Registrierung von DOIs genutzt werden können, um sie als XML Elemente an Datacite zu übergeben, oder auch um sie als Liste von Elementen mit Attributen für die Registrierung der DOIs zu nutzen.

Hier noch einmal der Link zur Dokumentation des DOI-Plugins:

Und hier der Link zum Quellcodes des Plugins:

Übersichtlicheres Vorgangslog in den Aufgaben

Das Vorgangslog hilft häufig, wenn es darum geht nachzuvollziehen, warum ein Vorgang in welchem Status ist, welche vorherige Kommunikation dazu bereits vorliegt und was gegebenenfalls auch einem schiefgegangen ist.

Bisher wurde das Vorgangslog innerhalb der Aufgaben nur als kleine Box angezeigt, die es bei vielen Inhalten erschwerte, die Ereignisse bequem zu lesen. Aus diesem Grund ist die Box des Vorgangslogs nun expandierbar und nimmt die ganze Breite des Browerfensters ein. Darüber hinaus zeigt sie alle Inhalte so an, dass ein Scrollen innerhalb der Box nicht mehr notwendig ist.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.09. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.09</version>
</dependency>

Sicherheitslücke Log4j

Wie viele andere bekannte Softwarelöungen und Webseiten war auch Goobi workflow von der Sicherheitslücke innerhalb der Programmbilbiothek Log4j betroffen. Zumindest theoretisch. Wir haben noch am gleichen Tag als die Sicherheitslücke bekannt wurde, die Applikation aktualisiert, eine neue Version von Goobi workflow veröffentlicht und ca. 200 Server aktualisert. Sicherheitsprobleme sind daher bei keinem der von uns betreuten Systeme aufgetreten.

Im weiteren Verlauf des Monats haben wir uns aber dennoch weiter intensiv mit der Thematik Log4j, dem Logging allgemein und weiteren Update beschäftigt, und wir haben verschiedene automatische junit-Tests entwickelt.

Neues GoobiScript: metadataBackup

Es gibt mal wieder ein neues GoobiScript. Dieses heisst metadataBackup und erlaubt es, dass ganz bequem Backups der Dateien meta.xml und meta_anchor.xml erstellt werden können. Hierbei handelt es sich um die wichtigen internen METS-Dateien, die zu jedem Vorgang gehören. Eine solches Backup ist vor allem dann sinnvoll, wenn automatisiert Änderungen an diesen Dateien vorgenommen werden sollen und daher eine Sicherheitskopie zuvor erstellt werden soll.

Der Aufruf dieses GoobiScripts erfolgt einfach ohne weitere Parameter:

---
# This GoobiScript allows to create a backup of meta.xml and meta_anchor.xml.
action: metadataBackup

Excel-Exports in Statistiken korrigiert

Für einen kurzen Moment waren einige Goobi-Installation davon betroffen, dass aus den Statistiken keine Excel-Dateien mehr erzeugt werden konnten. Ursache hierfür war das zwischenzeitliche Update eine Programmbibliothek für Excel-Dateien und die damit verbundene Änderung des Dateiformats. Dies haben wir mit dem Update korrigiert.

Korrigierter Fehler beim Speicherintervall

Wenn Nutzer den Zeitraum für das automatische Speichern der Metadaten angepasst haben, so führte dies zu Ladeproblemen beim Betreten des Metadateneditors. Dies wurde behoben.

Erweiterung des Plugins zum automatischen Löschen von Inhalten

Das Plugin zum automatischen Löschen von Inahlten aus Goobi workflow wurde erweitert. Es ist damit nun möglich, dass auch gezielt Metadaten und Eigenschaften gelöscht können. Dies ist zum Beispiel dann sinnvoll, wenn Daten nach einem festgelegten Zeitraum automatisch anonymisiert werden sollen.

Die Konfgurationsmöglichkeiten sind für diesen Anwendungsfall erweitert und dokumentiert worden:

Das Plugin selbst für die Installation sowie der Quellcode befinden sich wie gehabt bei GitHub unter folgender URL:

Erweiterung des Delay-Plugins für mehrere Konfigurationen

Das Delay-Plugin für eine automatische Pausierung von Workflows für eine konfigurierbare Zeit wurde deutlich erweitert. Statt wie bisher nur eine zentrale Konfiguration zu erlauben, ist es nun möglich, dass wie bei den meisten anderen Plugins auch, ein einzelner Konfigurationsblock pro Projekt oder Arbeitsschritt erzeugt werden kann. Somit läßt sich das gleiche Plugin mehrfach in verschiedenen Projekten und Arbeitsschritten verwenden und kann sich dabei unterschiedlich verhalten.

Eine beispielhafte Konfiguration sieht dabei wie folgt aus:

Und auch dieses Plugin ist natürlich unter GitHub veröffentlicht:

GoobiScript executeStepAndUpdateStatus angepasst

Das GoobiScript executeStepAndUpdateStatus hat beim Aufruf an Arbeitsschritten bisher die eigentlich hierfür konfigurierte Warteschlangen ignoriert. Das wurde nun behoben, so dass die Ausführung regulär in die konfigurierte Message-Queue eingereiht und somit korrekt priorisiert ausgeführt wird.

Ausführen von Scripten innerhalb der Vorgangsdetails

Auch die Ausführung von Scripten innerhalb der Vorgangsdetails hat die Ausführung innerhalb einer Warteschlange bisher ignoriert. Diese Stelle wurde korrigiert, so dass diese nun ebenfalls innerhalb der Message-Queues ausgeführt und korrekt priorisiert ausgeführt werden.

Pluginübersicht zeigt nun auch Inhalte aus dem goobi/lib Ordner an

Die praktische Pluginbersicht mit ihrer darin enthaltenen Versionsanzeige für jedes einzelne Plugin hilft den Goobi-Administratoren für die Wartung sehr. Schließlich läßt sich so gut überblicken, ob alle Plugins mit der jeweils installierten Goobi-Version kompatibel sind. Gefehlt haben in dieser Auflitung allerdings bisher noch diejenigen Plugins, die in dem Verzeichnis goobi/lib abgelegt sind. Um auch diese in der Auflistung sehen und bequem auf ihren Status hin überprüfen zu können wurde die Übersichtsseite erweitert.

Accessibility: Dropdown-Buttons überarbeitet

Auch diesen Monat gab es wieder einige Verbesserungen an der Accessibility. So wurden unter anderem alle Buttons, die über eine Dropdown-Funktionalität verfügen, so angepasst, dass ihr Zustand (geöffnet vs. geschlossen) gut von Screenreadern verarbeitet werden können.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.12. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.12</version>
</dependency>

Coming soon

• Performance Optimierungen für sehr große Datenbestände

• Entwicklung eines neuen Erfassungsplugins für die Integration mit Atlas AEON

• Entwicklung eines Plugins für die gleichzeitige Bearbeitung von Metadaten aus mehreren Vorgängen

• Entwicklung eines neuen Konfigurationseditors

Erweiterung des Archiv-Management-Plugins

Die Entwicklung eines Plugins für die Kombination der Bearbeitung von Archivbeständen mit der Möglichkeit, diese selektiv zu digitalisieren, erweckt immer mehr Interesse und ist schon in mehreren Einrichtungen im Produktiveinsatz. In dem Kontext fallen dann naturgemäß noch einmal Bereiche auf, die noch nachjustiert werden sollten, um weitere Einsatzzwecke mit abdecken zu können:

Anpassungen für das Anlegen von Vorgängen in Masse

Bisher konnte man innerhalb des Archiv-Management-Plugins einzelne Verzeichnungseinheiten auswählen, um für diese einen Vorgang erzeugen zu lassen, der dann seinen Workflow durchläuft. Neu ist nun, dass dies auch für einen ganzen Bereich von Verzeichnungseinheiten möglich ist.

Dazu wählt man einfach einen übergeordneten Knoten aus dem Bestand aus und wählt die zu verwendende Produktionsvorlage. Anschließend wird für jede Verzeichnungseinheit, für die bisher noch kein Vorgang existiert, ein neuer Vorgang erzeugt und erlaubt dessen Verarbeitung.

Überarbeitung der Bedienlogik bei leerem Datenbestand

Neben der neuen geschilderten Funktionalität für das Erzeugen von Vorgängen, gab es auch einige kleinere Änderungen in der Bedienlogik. Insbesondere wenn es darum ging, dass noch kein Archivbestand vorliegt und daher ein ganz neuer Bestand angelegt werden sollte, gab es Verbesserungsbedarf, den wir in Angriff genommen haben.

Das Hinzufügen neuer Bestände ist entsprechend nun einfacher und im Fall auftretender Probleme auch besser nachvollziehbar.

Arbeit mit mehreren Tabs jetzt möglich

Ein Feature dass wir uns alle schon lange gewünscht haben, ist endlich umgesetzt worden: Die Arbeit in Goobi innerhalb mehrerer Tabs bzw. Browserfenster.

In der Vergangenheit war es immer wieder mal ein beobachtetes Problem, dass Anwender von Goobi workflow versucht haben, Informationen z.B. aus einem Projekt auch bei einem anderen Projekt einzutragen und sie daher mit mehreren Fenstern gleichzeitig arbeiten wollten. Dies war allerdings bisher nicht ganz unproblematisch, da Goobi im Hintergrund jeweils nur ein solches Element gleichzeitig laden konnte. Aus diesem Grund war im Hintergrund stets das zuletzt betretene Objekt dasjenige, das geladen war und das auch entsprechend gespeichert wurde. Dies führte in der Vergangenheit des Öfteren zu großen Irritationen. Nun jedoch ist diese Einschränkung beseitigt, so dass eine Arbeit mit dem gleichen Browser in der gleichen Session und mit mehreren Tabs möglich geworden ist.

Eine Einschränkung gilt hier derzeit noch: Es können momentan maximal 64 Tabs gleichzeitig mit Goobi verwendet werden. Wenn dies eines Tages aber doch einmal zu wenig sein sollte, können wir den Wert aber auch auf maximal 1024 Tabs hochsetzen. :)

Ankündigung: Java 11 wird ab dem 01.09.2021 zur zwingenden Voraussetzung

Bereits seit einiger Zeit verwenden wir Java 11 schon für die Entwicklung von Goobi workflow. Auch bei Neuinstallationen und Updates werden die installierten Systeme mittlerweile auf Java 11 umgestellt.

Ab dem 1. September 2021 werden wir Java 11 nun für alle Syteme zu einer verpflichtenden Voraussetzung machen. Sollte ein System entsprechend bisher noch nicht auf Java 11 aktualisiert worden sein, so muss dies nach diesem Termin spätestens mit dem nächsten Goobi workflow Update zwangsläufig erfolgen.

Export von Vorgängen nur wenn gewünscht

Bisher konnten Vorgänge, die keinen expliziten Exportschritt im Workflow enthalten, über die administrativen Ansichten (z.B. mittels GoobiScript) dennoch exportiert werden. Da dieses Verhalten für Materialien mit Schutzrechten allerdings nicht immer gewünscht war, haben wir hier eine Änderung vorgenommen. und das Verhalten angepasst. Exporte sind somit nur noch für Vorgänge möglich, wenn diese auch einen Arbeitsschritt enthalten, der als Export gekennzeichnet ist.

Diese Änderung wurde für folgende Bereiche berücksichtigt:

• GoobiScript für die Durchführung von Massenexporten

• Button in der Vorgangsauflistung

• Button innerhalb der Vorgangsdetails

• Das Command-Plugin für den Export

Download der Logdatei für Vorgänge

Innerhalb der Vorgangsliste von Goobi workflow stehen bereits seit langem verschiedene erweiterte Funktionen zur Verfügung. So kann man dort unter anderem die Laufzettel nachträglich generieren lassen und herunter laden. Auch die interne Logdatei des gewählten Vorgangs ließ sich an dieser Stelle generieren. Allerdings wurde sie bisher ausschließlich in den Benutzerordner des Anwenders innerhalb des Server-Dateisystems gespeichert, so dass ein Zugriff darauf bisher recht umständlich war. Dies wurde angepasst. Die Logdatei ist nun genauso herunterladbar wie beispielsweise der Laufzettel und eine Gesamt-PDF-Datei des jeweiligen Vorganges auch.

Neues Plugin für das Übernehmen von Bildern aus dem Dateisystem

Wir haben ein neues Plugin entwickelt, das die Übernahme von Bildern vereinfachen soll. Dies wird insbesondere bei Massenimporten interessant. Der Bedarf entstand bei uns, um nach der automatischen Erzeugung von Vorgängen aus einem vorgandenen Archivbestand einer EAD-Datei im Archiv-Management-Plugin die Bilder übernommen werden sollten, die innerhalb der EAD-Datei in einem Metadatum allerdings in unvollständiger Form aufgeführt wurden. Mit diesem Plugin ist es daher möglich, dass solche Informationen ausgewertet, anhand von Trennzeichen aufgesplittet und dann mit zusätzlichen Pfadangaben versehen werden, um so anschließend die Dateien tatsächlich zu übernehmen.

Eine Dokumentation für dieses Plugin wurde noch nicht veröffentlicht und folgt in den nächsten Tagen. Das gleiche gilt ebenso für die Veröffentlichung des Plugins bei Github.

Benutzergruppen und Projekte hinzufügen

Wenn die Details eines Benutzers bearbeitet werden, so konnte man bisher stets auch festlegen, zu welchem Projekt und zu zu welcher Benutzergruppe der Benutzer gehören soll. An dieser Stelle wurde bisher der Button zum Hinzufügen von Benutzergruppen und Projekte auch dann angezeigt, wenn der Nutzer bereits zu allen vorhanden Gruppen und Projekten gehörte.

Die Nutzeroberfläche wurde nun daraufhin angepasst, dass die Buttons zum Hinzufügen nur noch dann angezeigt werden, wenn sie auch eine Funktion erfüllen können, es also noch Benutzergruppen und Projekte gibt, bei denen der Benutzer noch kein Mitglied ist. Damit ist die Administration von Benutzern noch einmal etwas einfacher geworden.

Erweiterte Suche nach Batches

Die erweiterte Suche nach Batches ermöglicht es, alle Vorgänge eines bestimmten Batches zu finden. Die Suchsyntax für eine solche Suche sieht z.B. so aus:

"batch:42"

Mit dieser Suche werden alle Vorgänge gefunden, die sich im Batch mit der ID 42 befinden. Das Gegenteil dieser Suche, also all derjenigen Vorgänge, die nicht im Batch 42 sind, war bisher nicht möglich. Diese neue Suchmöglichkeit wurde nun implementiert und sieht entsprechend folgendermaßen aus:

"-batch:42"

Die Erweiterung dieser Suchmöglichkeit ist innerhalb des Goobi Handbuches auch bereits dokumentiert:

OAI-PMH Harvester für EAD-Dateien

Für ein Projekt war es notwendig, EAD-Dateien aus einer OAI-Schnittstelle zu harvesten. Dazu haben wir ein neues Plugin entwickelt, was für alle Daten der konfigurierten Schnittstelle Vorgänge in Goobi workflow anlegt, sofern diese noch nicht existieren.

Während der Ausführung des Plugins werden gemäß einer Konfiguration von XPath-Ausdrücken die Metadaten selektiv nach METS überführt.

Eine Dokumentation für dieses Plugin wurde noch nicht veröffentlicht und folgt in den nächsten Tagen. Das gleiche gilt ebenso für die Veröffentlichung des Plugins bei Github.

Institution wird nicht mehr immer angezeigt

Seit noch nicht allzu langer Zeit verfügt Goobi workflow über die Möglichkeit, dass mehrere Institutionen mit jeweils eigenen Administratoren in einer Instanz arbeiten können. Da eine solche Arbeitsweise jedoch sehr selten im Alltag vorkommt, haben wir die Anzeige von Institutionen nun etwas dynamischer gestaltet.

Von nun an werden Institutionen innerhalb der Auflistungen von Benutzern, Gruppen und Projekten nur noch angezeigt, wenn mehr als eine Institution konfiguriert wurde. Dies macht die Arbeit mit Goobi an dieser Stelle wieder etwas übersichtlicher.

Nutzer-Verwaltung jetzt mit besserer Suche und Sortierbarkeit

In der Nutzer-Verwaltung ließ sich bisher nur nach dem Namen der Nutzer suchen. Mit den neuesten Änderungen ist es nun möglich, auch alle weiteren Felder zu durchsuchen. Außerdem ist eine Sortierung jetzt auch über alle Spalten der Nutzertabelle möglich.

Anzeige der aktiven Nutzer

In der Vergangenheit gab es öfter Verwirrung bei Goobi-Nutzern, die sich über unbekannte IPs in der Auflistung der eingeloggten Nutzer bzw. der Anzeige unbekannter aktiver Sessions wunderten. Hier wurden in der Vergangenheit auch fälschlicherweise Sicherheitsprobleme befürchtet. Um diese Verwirrungen künftig zu vermeiden wird die Liste der Sessions jetzt für die Anzeige der aktiven Nutzer gefiltert und nur noch diejenigen angezeigt, die auch tatsächlich eingeloggt sind. So vermeiden wir potentielle Missverständnisse und Fehlinterpretationen, die sich aus der Anzeige ergeben könnten.

Anpassungen am Metadateneditor

Im Bereich des Metadateneditors gab es wieder viele Änderungen, auf die wir hier kurz eingehen möchten:

Integration der Normdatenbank KulturNav

Dank der Unterstützung von @hemed aus der Universitätsbibliothek Bergen ist Goobi nun in der Lage, die insbesondere in Skandinavien sehr populäre Normdatenbank KulturNav zu durchsuchen und Normdaten aus dieser zu übernehmen. Diese Entwicklung war tatsächlich bisher der erste größere Pull-Request, den wir auf GitHub von einem externen Entwickler entgegen genommen haben.

Hier finden sich die technischen Details zu den Entwicklungen zusammen mit der umfangreichen Kommunkation zwischen den beteiligten Entwicklern:

Dank Dir @hemed für diese großartige Zusammenarbeit und Euren Beitrag zu Goobi workflow!

Kleine visuelle Anpassung im Menü

Im oberen Menü des Metadateneditors gab es eine kleine Inkonsistenz, wenn man die Maus über die Einzelbild/Thumbnail Buttons bewegt hat. Die Anzeige wurde angepasst und sollte sich damit jetzt erwartungskonform verhalten.

Fokus in der Seitenauswahl

Bei der Thumbnailanzeige während der Paginierung kam es zu unerwünschten Scrolleffekten, wenn man ein Bild angeklickt hat. Dieser Fehler wurde behoben.

Zurücksetzen der Paginierung im Metadateneditor jetzt mit Warnung

Im Metadateneditor gibt es einige Aktionen, bei denen die METS-Datei unmittelbar gespeichert wird. Beispiele dafür sind unter anderem die beiden Buttons, die die Paginierung zurücksetzen bzw. anhand der tatsächlich vorhandenen Bilddateien neu erzeugen. Dieses Verhalten trifft Anwender oft unerwartet und deshalb wird jetzt vor der Durchführung dieser Aktionen eine Warnung angezeigt, dass die Änderungen direkt gespeichert werden und nur durch einen Administrator rückgängig gemacht werden können.

Anlegen von Vorgängen

Auch in dem Bereich, der für das Neuanlegen von Vorgängen verantwortlich ist, haben wir einige Änderungen vorgenommen:

Verbesserte Fehlerbehandlung beim Erzeugen von Vorgängen

Im Falle, dass es beim Neuanlegen von Vorgängen zu unerwarteten Fehlern kommt, wird nun detaillierter auf die aufgetretenen Fehler hingewiesen. Fehlerhaft erzeugte Vorgänge sollten durch diese Anpassungen noch seltener auftreten.

Eine ähnliche Anpassung haben wir auch für den Fall vorgenommen, dass z.B. aufgrund von besonderen Regelsatzkonfigurationen keine Metadatendatei meta.xml angelegt werden konnte. Auch hier erfolgt nun eine hilfreiche Anzeige einer Fehlermeldung und unterbindet das fehlerhafte Anlegen eines Vorgangs ohne Metadatendatei.

Anlegen von Vorgängen in deaktivierten Projekten

Wenn Projekte auf inaktiv gesetzt werden, werden von nun an die Buttons zum Neuanlegen von Vorgängen bei den Produktionsvorlagen in rot dargestellt und mit einer Warnung versehen, dass das zugehörige Projekt deaktiviert ist. Darüber hinaus wird auch der Projektname grau eingefärbt, um auf dessen Deaktivierung hinzuweisen.

Bearbeiter für das Neuanlegen von Vorgängen ist nicht mehr bei allen Schritten eingetragen

Beim Neuanlegen von Vorgängen wurde derjenige Benutzer, der die Vorgänge erzeugt auch bei sämtlichen Arbeitsschritten des Workflows als der letzte Bearbeiter eingetragen, noch bevor die Arbeitsschritte tatsächlich bearbeitet wurden. Dies hat in der Vergangenheit zwar nicht gestört und auch sonst keinen unerwünschten Seiteneffekt aufgewiesen. Irritierend fanden wir es dennoch und haben es jetzt einmal verbessert.

Anpassungen am erweiterten Dashboard

Das erweiterte Dashboard ist superbeliebt und fast in jeder Goobi-Installation im Einsatz. Hier haben wir in diesem Monat einige Anpassungen vorgenommen:

Vorgänge pro Monat nur für berechtigte Projekte

Auf dem Dashboard wird üblicherweise ein Diagramm angezeigt, dass die Anzahl der hinzugefügten Vorgänge der letzten Monate visualisiert. Dabei wurden bisher alle Vorgänge aufgeführt, die in der Goobi-Instanz vorliegen. Mit einer Änderung an dieser Stelle verhält sich das Diagramm nun etwas hilfreicher: Es werden von nun an nur noch diejenigen Vorgänge in dem Diagramm berücksichtigt, die in Projekten sind, bei denen der Nutzer auch Mitglied ist. Dies ist für den Anwender deutlich intuitiver.

Widgets ohne Inhalt werden ausgeblendet

So hilfreich das Dashboard auch ist und so viel es auch anzeigen kann; manchmal sind einige der Widgets nicht mit Daten gefüllt, weil sie schlichtweg nicht vorliegen. Dass dann allerdings leere Widgets angezeigt wurden, fanden wir unschön. Aus diesem Grund ist die Anzeige jetzt überarbeitet und blendet leere Widgets jetzt aus.

Weitere Anpassungen

Es gab wieder zahlreiche kleinere Anpassungen in verschiedenen Bereichen, die nicht unerwähnt bleiben sollen.

Vorgangstitel im Firefox wieder markierbar

Durch die Umstellung auf Buttons aus Accessibility-Gründen waren im Firefox die Vorgangstitel in der Vorgangslisten nicht mehr markierbar. Dies war umständlich, wenn man einen solchen Titel doch einmal in die Zwischenablage kopieren wollte. Aus diesem Grund haben wir hier eine Änderung vorgenommen, damit dies wieder möglich ist.

Anpassungen bei Umbenennung von Vorgängen

Wenn in Goobi ein Vorgang umbenannt wird, werden im Hintergrund auch alle Verzeichnisse im Vorgangsverzeichnis umbenannt, damit diese zum neuen Vorgangsnamen passen. Bisher wurden symbolische Links hierbei ausgelassen. Das wurde geändert und symbolische Links werden von nun an ebenfalls mit umbenannt.

Vorgangslog: Bei allen Icons einheitliche Titel

Innerhalb der Vorgangsdetails wurden nicht für alle Buttons konsistente Mouse-over-Texte angezeigt. Dies haben wir vereinheitlicht.

Versionsbezeichnung

Die aktuelle Versionsnummer von Goobi workflow lautet mit diesem Release: 21.07. Innerhalb von Plugin-Entwicklungen muss für Maven-Projekte innerhalb der Datei pom.xml entsprechend folgende Abhängigkeit eingetragen werden:

<dependency>
  <groupId>de.intranda.goobi.workflow</groupId>
  <artifactId>goobi-core-jar</artifactId>
  <version>21.07</version>
</dependency>

Coming soon

• Erweiterung der Unterstützung von Metadatengruppen

• Flex-Editor für die Erfassung von Handschriften und anderes

• Neuer Paginierungstyp für Doppelseiten

• Auszeichnung von Doppelseiten in METS

• Unterstützung von IIIF URLs innerhalb des Variablen Replacers

GoobiScript Umbau

GoobiScripte sind aus dem Werkzeugkasten des gewieften Goobi-Anwenders nicht mehr wegzudenken. Doch obwohl sie überaus praktisch und hilfreich sind, gab es immer mal wieder Probleme mit steckenbleibenden Warteschlangen oder hoher Auslastung des Systems, wenn viele GoobiScripte auf Ihre Ausführung warteten. Außerdem kam es ab und an zu Problemen mit der parallelen Ausführung. Diese Probleme gehören nun allesamt der Vergangenheit an, denn die interne GoobiScript-Verwaltung und -Ausführung wurden komplett neu durchdacht und implementiert. Dadurch ist GoobiScript jetzt effizienter als je zuvor.

Abgestufte Rechte für GoobiScript

Goobi workflow erlaubt mit der Ausführung von GoobiScript umfangreiche Operationen, um Vorgänge, deren Workflows, Metadaten oder auch andere Bereiche zu beeinflussen und dies dabei gleich auf tausende Vorgänge einheitlich anzuwenden. Insofern ist GoobiScript oft eine großartige Hilfe, wenn es um Massenänderungen geht. Doch leider waren diese Optionen in der Vergangenheit lediglich einem sehr beschränkten Nutzerkreis zugänglich, da mittels GoobiScript natürlich auch versehentlich größere unerwünschte Eingriffe in die Vorgänge erfolgen könnten und somit oft nur Admistratoren Zugriff auf GoobiScript erhielten.

Mit den Neuentwicklungen am Rechtesystem von Goobi workflow gibt es an dieser Stelle einige Verbesserungen, so dass es jetzt möglich wird, einzelne Nutzergruppen gezielt mit ausgewählten Rechten für die Ausführung von definierten GoobiScripten auszustatten. Auf diese Weise läßt sich beispielsweise erlauben, dass Nutzer das GoobiScript für die Durchführung des Exports auch für viele Vorgänge ausführen können, nicht jedoch andere GoobiScripte wie das Ändern von Metadaten oder Eingriffe in den Workflow.

Die Konfiguration dieser Rechte ist relativ einfach gehalten. Im Bereich der Benutzergruppen können hier spezifisch einzelne Kommandos hinzugefügt werden, wie im folgenden Screenshot ersichtlich.

Das überarbeitete Rechtemanagement für die Steuerung des Zugriffs auf GoobiScript ist innerhalb des Goobi Handbuchs anschaulich beschrieben. Hier läßt sich dies einmal nachlesen:

Übrigens haben wir auch die Dokumentation der GoobiScripte allgemein deutlich überarbeitet, um deren Ausführung und Arbeitsweise besser zu erklären. Diese Dokumentation findet sich nach wie vor unter folgender Adresse:

Verbessertes Handling für Message Queues

Dass rechenintensive bzw. zeitaufwendige Automatismen über eine sog. Message Queue ausgeführt werden können, ist noch immer relativ neu und bringt insbesondere für größere Projekte enorme Vorteile mit sich, weil so beispielsweise die Berechnungen auch über mehrere Server verteilt werden können. Überarbeitet haben wir hier, dass Aufgaben, die während der Verarbeitung hängen geblieben sind, weil eine der zur Verfügung stehenden Queues nicht erreichbar war, nicht mehr in einem ungewissen Zustand verbleiben. Stattdessen werden sie jetzt in einen formellen Fehlerstatus gesetzt, so dass deren fehlerhafte Verarbeitung ersichtlich wird und sich entsprechend auch sich deren Ausführung so auch korrigieren läßt.

Neuer Schrittstatus für automatische Workflowschritte

Es wurde ein völlig neuer Schrittstatus INFLIGHT eingeführt. Dieser neue Status wird dann gesetzt, wenn ein automatischer Workflowschritt auf einem anderen System bearbeitet werden soll, dorthin übertragen wird, aber noch nicht von dem externen System aufgegriffen wurde und entsprechend noch nicht bearbeitet wird. Durch diesen neuen Schrittstatus kann somit zu jedem Zeitpunkt abgefragt werden, wie ausgelastet das Gesamtsystem ist und ob ggf. noch weitere Server zur Abarbeitung von rechenintensiven Aufgaben zugeschaltet werden sollten.

Accessibility: Links werden zu Buttons

Für eine gute Accessibility ist es besonders wichtig, dass die HTML-Elemente die richtige Semantik haben. So bedeutet ein <a> (ein Link, oder auch anchor), dass eine neue Seite betreten wird und nicht, dass eine Aktion ausgeführt wird. Ein <button> hingegen deutet darauf hin, dass eine Aktion ausgeführt wird. Aus historisch-technischen und auch optischen Gründen war in Goobi workflow bisher jede Aktion als Link umgesetzt. Im Zuge der großen Accessibility-Anstrengungen der letzten Monate haben wir auch hier größere Umstellungen vorgenommen. Somit wurden alle Links, die eigentlich eine Aktion auslösen und nicht nur zur Navigation dienen in Buttons überführt worden.

Am äußeren Erscheinungsbild sollte diese Umstellung für den Nutzer keine Änderung bedeuten. Sollten funktionell Überraschungen auftreten, weil eine der zahlreichen Umstellungen nicht reibungslos erfolgte, so freuen wir uns über Rückmeldungen, so dass wir hier dann Anpassungen vornehmen können wenn nötig.

Individuelle Validierungsmeldungen für Metadaten

Lang gewünscht und jetzt sind sie da: Individualisierbare Validierungsmeldungen im Metadateneditor.

Für die sehr granular steuerbaren Validierungsprüfungenen, die innerhalb der Regelsätze festgelegt werden können, wurden in der Vergangenheit Meldungen im Metdateneditor angezeigt, die nicht für jeden verständlich waren, da sie zu technisch waren. Mit den Entwicklungen in diesem Kontext sind diese Meldungen jetzt steuerbar und können innerhalb der Regelsätze individuell und mehrsprachig festgelegt werden. Innerhalb der Regelsätze sieht dies beispielsweise so aus:

In der Nutzeroberfläche wird diese Meldung dann entsprechend beim Verstoß gegen die Validierungsvorgaben beispielsweise so angezeigt:

Lokale Übersetzungs-Dateien werden beim Start angelegt, wenn sie nicht existieren

In Goobi workflow gibt es lokale Übersetzungsdateien, die im Konfigurationsverzeichnis liegen. Die in diesen Dateien hinterlegten Übersetzungen überschreiben die von Goobi workflow selbst mitgelieferten Übersetzungen. Auf diese Weise ist es möglich, dass in jeder Goobi workflow Instanz auch individuelle Texte verwendet werden können, die in der Nutzeroberfläche angezeigt werden sollen.

Goobi überwacht diese Dateien stets auf Änderungen und lädt diese lokalen Übersetzungen neu, wenn sich an den Dateien etwas geändert hat. Allerdings funkioniert diese Routine nur, wenn die Dateien bereits beim Start von Goobi vorliegen. So kam es in der Vergangenheit öfter vor, dass Goobi neu gestartet werden musste, nur um eine Übersetzung zu ändern bzw. anzuzeigen. Mit den Änderungen, die wir nun vorgenommen haben überprüft Goobi bereits beim Start zusätzlich, ob alle eventuell benötigten Übersetzungsdateien im entprechenden Verzeichnis vorhanden sind und legt ggf. fehlende Dateien sonst automatisch an.

Automatische Workflows sind nun pausierbar

Durch eine Einstellung in den Vorgangsdetails läßt sich nun in einzelnen Vorgängen die Abarbeitung der automatischen Arbeitsschritte pausieren. Dies ist vor allem dann besonders praktisch, wenn ein Werk eher als geplant in Goobi workflow eingespielt wurde, der weitere Workflowverlauf aber vollautomatisch stattfindet. Durch diese Änderung kann der automatische Export, der noch nicht stattfinden soll, durch nur zwei Klicks verhindert werden.

Pausieren von gruppierten automatischen Workflowschritten (Jobtypen)

Im Menü Administration gibt es nun einen neuen Menüpunkt Automatische Schritte. Dieser ermöglicht es, automatische Schritte zu sogenannten "Jobtypen" zu gruppieren. Diese Jobtypen können dann pausiert werden. Dadurch lassen sich mehrere vollautomatische Vorgänge auf einmal an einer bestimmten Stelle pausieren. Wenn zu einem späteren Zeitpunkt der Jobtyp wieder gestartet wird, werden alle pausierten Schritte erneut gestartet.

JWT Authentifizierung für alle Endpoints in der Goobi API

Goobi workflow erlaubt ja, Anfragen an dessen API per JSON Web Token (JWT) zu authentifizieren. Solche JWTs werden dabei von Goobi workflow selbst erstellt und an einen Drittservice versandt, der sie dann später nutzt, um die Ausführung einer Aktion in Goobi zu legitimieren. Die Verwendung einer solchen JWT-Methode hat den großen Vorteil, dass ein JWT immer nur einen sehr bestimmten Endpoint authentifiziert (zum Beispiel einen einzelnen Workflowschritt von einem einzelnen konkreten Vorgang zu abzuschließen). Darüber hinaus erlaubt diese Herangehensweise, dass ein solches JWT nach einer gewissen Zeit abläuft. Somit ist also auch der potentielle Verlust eines JWTs wesentlich weniger problematisch als der Verlust eines unbegrenzt für mehrere Endpoints gültigen Tokens oder eines Passworts.

Um diese Funktionalität zu nutzen. muss innerhalb der zentralen Konfigurationsdatei von Goobi workflow goobi_config.properties ein zentrales JWT-Secret hinterlegt werden. Die Konfiguration kann beispielsweise so aussehen:

Unterstützung von Körperschaften innerhalb des Metadateneditors

Nach einigen Monaten Arbeit ist es uns nun gelungen, dass Goobi workflow Körperschaften vollständig unterstützt. Diese werden nun ähnlich wie bisher Personen, Metadaten und Metadatengruppen als eigener Bereich innerhalb des Metadateneditors aufgeführt und erlauben die Erfassung mehrerer zugehöriger Metadaten.

Natürlich ist hierbei auch gleich berücksichtigt worden, dass auch die Anbindung an gängige Normdatenbanken unterstützt wird. Entsprechend kann hier nun auch nach Körperschaften gesucht und deren Daten übernommen werden.

Die Definition von Körperschaften ist innerhalb der zentralen UGH-Dokumentation für die Verarbeitung von Metadaten erläutert:

Einfachere Konfiguration mehrerer Projekte

Eine zentrale Konfigurationsdatei von Goobi workflow ist die Datei goobi_projects.xml. Sie steuert in erster Linie, wie sich die Anlegemaske für Vorgänge verhalten soll, welche Felder angezeigt werden sollen und inwieweit dies pro Publikationstyp unterschiedlich sein soll.

Grundsätzlich ist diese Konfiguration von Goobi bereits eine der eher komplexeren Dateien und nicht unbedingt selbsterklärend. Hinzu kam bisher der Umstand, dass diese Konfigurationdatei prinzipiell schon erlaubte, dass für verschiedene Projekte unterschiedliche Konfigurationen festgelegt werden konnten. Dazu mussten jedoch bisher stets die gesamten zumeist sehr umfangreichen Blöcke mehrfach in der Datei vorkommen, was häufig zu unnötigen Redundanzen und Wiederholungen führte. Mit einer Umstellung an dieser Stelle soll diese Konfiguration nun etwas einfacher werden und solche Wiederholungen vermeiden. Daher erlauben die bisherigen project-Elemente nun eine wiederholbare Nennung von mehreren Projektnamen, für die der jeweilige Abschnitt gelten soll. Bei der unmittelbaren Gegenüberstellung wird gut nachvollziehbar, wo sich hier die Neuerungen ergeben:

Bisherige Konfiguration

Bisherige Konfiguration von mehreren Projekten, bei der die Konfiguration für das Manuscript-Project und das Archive-Project identisch ist und vom default abweicht:

Neue Konfiguration

Künftige Konfiguration mehrerer gleich zu behandelnder Projekte zusammengefasst in einem Block:

Eine Dokumentation über den Aufbau der Konfigurationsdatei goobi_projects.xml findet sich unter der folgenden URL:

Coming soon

• Implementierung eines ALTO-Editors zur Bearbeitung von Volltexten

• Erweiterungen des Dashboards

• Anpassungen am Caching

Großumbau bei den Metadatengruppen

Der Metadateneditor erlaubt nun, Metadatengruppen innerhalb von anderen Metadatengruppen anzulegen. Dies ist insbesondere für museale Inhalte von Interesse, um beispielsweise Daten aus dem Format LIDO korrekt abbilden zu können. Zur Umsetzung dieser Funktionalität wurde die Metadatenbibliothek ugh massiv erweitert und auch der Metadateneditor in Goobi hat einige Zeilen neuen Code bekommen. Außer den Gruppen innerhalb von Gruppen werden nun wiederholbare Felder, Pflichtfelder, Duplizieren oder Löschen von einzelnen Feldern oder Untergruppen sowie die Auswertung der DefaultDisplay="true"-Direktive innerhalb von Gruppen unterstützt.

Weitere Accessibility-Anpassungen

Das Großthema Accessibility begleitet uns leider noch immer. Aber wenn es gut werden soll, dann muss man hier halt auch einmal Durchhaltevermögen aufbringen. Also haben wir auch in diesem Monat wieder viele kleine unscheinbare aber sinnvolle Anpassungen vorgenommen. In erster Linie ging es hierbei noch einmal darum auch weitere bisherige Links auf Buttons umzustellen.

Hier gibt es übrigens mal einige spannende Links zu der Thematik Button vs. Links:

Neuer Paginierungstyp für Doppelseiten

Für ein Schweizer Projekt war es notwendig, dass Goobi workflow und Goobi viewer besser mit Digitalisaten umgehen, die bereits als Doppelseite vorliegen. Die besondere Schwierigkeit lag dabei darin, dass solche Doppelseiten nur vereinzelt innerhalb von digitalisierten Werken vorhanden sein sollten, die Blätterlogik innerhalb des viewers dann davon allerdings nicht betroffen ist und eine Doppelseitenanzeige für Einzelseiten ebenso nahtlos erlaubt wie auch eine korrekte Anzeige der einzelnen Doppelseite.

Im Metadateneditor von Goobi workflow besteht nun die Möglichkeit, dass Doppelseiten als solche gekennzeichnet werden. Die betrifft einerseits die Markierung der Seite, um diese innerhalb der METS-Dateien korrekt zu klassifizieren. Andererseits wurden hierbei auch die Paginierungsmöglichkeiten erweitert, so dass nun Möglichkeiten für eine Doppelseitenzählung bestehen.

Im Endergebnis einer solchen generierten METS-Datei sind die so erfassten Informationen korrekt ausgezeichnet und lassen sich dort nachvollziehen. Der Goobi viewer kann damit dann entsprechend umgehen und die Bildanzeige hierfür korrekt erlauben.

Erweiterung der Suchmöglichkeiten für Metadatengruppen

Nachdem wir in letzter Zeit einiges an der Bearbeitung von Metadatengruppen neu implementiert haben, ist uns aufgefallen, dass die bisherige Suche nach Metadatengruppen noch nicht im gewünschten Umfang möglich war. Daher haben wir die Indexierung der Metadaten nun um diejenigen der Metadatengruppen erweitert.

Veranschaulicht am konkreten Beispiel läßt sich dies ganz gut aufzeigen. Eine Metadatengruppe wird im Regelsatz beispielsweise so konfiguriert:

Diese könnte dann innerhalb eines konkreten Vorgangs mit solchen Informationen gefüllt werden:

Für die Suche nach einem dieser Felder kann nun eine Suchanfrage wie diese verwendet werden:

IIIF URLs für Skripte und an weiteren Stellen

Über die zunehmende Verbreitung von IIIF haben Sie sicher auch schon einmal gehört. Wir verwenden dies vor allem im Kontext des Goobi viewers auch bereits sehr viel. Kürzlich ergab sich jedoch, dass wir hiervon auch im Kontext von Goobi workflow noch mehr profitieren können. Daher haben wir den sogenannten VariablenReplacer dahingehend erweitert, dass er neben gängigen Variablen wie der Vorgangs-ID, Metadaten aus der METS-Datei und Verzeichnispfaden nun auch die zugehörigen Bilddateien eines Vorgangs als IIIF Image URLs erzeugen kann. Dies ist dann praktisch, wenn eine externe Applikation oder ein Skript beispielsweise Zugriff auf alle Bilddateien eines Vorgangs haben soll, um auf deren Basis eine Verarbeitung durchzuführen.

Verwendet wird dies ebenso wie andere Variablen auch z.B. im Aufruf von Skripten:

Zur Verfügung stehen die folgenden beiden Variablen:

Die Rückgabe einer solchen Variable sieht beispielsweise wie folgt aus:

Mehr Informationen über die Verwendung des VariablenReplacers finden sich im Handbuch von Goobi unter folgender Adresse:

Überarbeitung der Anzeige der aktiven Nutzer

Bei der Anzeige der aktiven Nutzer innerhalb der Goobi workflow Nutzeroberfläche wurden gelegentlich Nutzer aufgeführt, deren Session bereits abgelaufen waren oder die aus anderen Gründen noch angezeigt wurden. Dies war insbesondere dann störend, wenn wir die Systeme warten wollten und auf die vermeintlich aktiven Nutzer Rücksicht nehmen wollten. Bei genauer Analyse fanden wir hier ein Fehlverhalten von Goobi, was wir letztlich auch beheben konnten. Damit gehören die Geisternutzer nun der Vergangenheit an.

Massenimport von Daten mit Anreicherung von Archiv-Tektonik

Für eine Einrichtung in Luxemburg wurde benötigt, dass wir einen großen Datenbestand an Akten automatisiert nach Goobi importieren und dabei zugleich auch den bereits vorhanden Bestand, der in einer EAD-Datei vorlag anreichern sollten.

Das Plugin, das wir hierzu entwickelt haben ist noch sehr auf den konkreten Anwendungsfall von der Einrichtung zugeschnitten und so noch nicht direkt für andere Anwendungsfall ohne Anpassungen einsetzbar. Falls aber Interesse an solchen Importen besteht, können wir diese Plugin weiterentwickeln und generische gestalten. In den nächsten Wochen werden wir dieses Plugin zusammen auch mit vielen anderen Plugins noch veröffentlichen und dokumentieren. Bis dahin gebt uns bitte einfach bescheid, wenn schon vorher ein Interesse an dem Plugin besteht.

Neues Plugin für DOI Registrierung

Nachdem wir bereits vor kurzem ein Plugin entwickelt haben, dass eine Handle-Registrierung bei dem EPIC-Service der GWDG ermöglicht, haben wir nun zusätzlich noch ein weiteres ähnliches Plugin erstellt. Hierbei handelt es sich nun um die Möglichkeit, Werke bei Datacite zu registrieren, um hierfür DOIs zu erhalten. Dabei ist zu beachten, dass DOIs stets für Veröffentlichungen vergeben werden, nicht für Strukturelemente oder gar Seiten. Mit den Erweiterungen, die sich allerdings am Goobi viewer ergeben in nächster Zeit lassen sich dort auf Basis der sog. Web-Fragments auch granulare URLs beispielsweise für Seiten auf der Grundlage von DOIs ermöglichen.

Der Quellcode des Plugins wurde hier auf GitHub veröffentlicht:

Die ausführliche Dokumentation zu Installation, Konfiguration und Betrieb findet sich unter der folgenden Adresse:

Verschiedene interne Anpassungen

Intern gab es in diesem Monat einige größere Arbeiten, die optisch weniger in Erscheinung treten und für die meisten Nutzer weniger wichtig erscheinen mögen. Inhaltlich sind solche Arbeiten allerdings auch immer wieder mal nötig, um mit einer etablierten Software up-to-date zu bleiben und sich an technologische Entwicklungen anzupassen, um auch in Zukunft kompatibel zu sein. In diesem Monat haben daher einige der etablierten Programmbibliotheken für die Verarbeitung von XML-Dateien aktualisiert und durchgetestet. Dies betrifft vor allem Bibliotheken wie saxon, poi, xerces, xmlbeans und jaxb. Im besten Falle resultiert das darin, dass der Nutzer keine Änderung bemerkt und alles wie gewohnt weiter funktioniert.

Eine weitere interve Änderung, die wir vorgenommen haben betrifft übrigens auch die Verwendung sogenannter Session Storage Variablen. Dort hatten sowohl Goobi workflow als auch der Goobi viewer versehentlich einen gleichen Namen gewählt. Dies resultierte darin, dass der Scrollstatus applikationsübergreifend gleich war und einige Nutzer darüber erstaunt waren, dass im Metadateneditor unerwartetet und wie von Geisterhand gescrollt wurde, weil sie zuvor im Goobi viewer gescrollt hatten. Dieses ungewöhnliche Fehlerbild haben wir mit dem Update behoben.

Coming soon

• Erweiterung des Archiv-Management-Plugins

• Erweiterter Java 11 Support

• Anpassungen der Exportmöglichkeiten

• Erweiterung des Umgangs mit musealen Daten aus LIDO

Neue Funktionalität zur Volltextbearbeitung im Metdateneditor als ALTO-Dateien

Der Goobi workflow Metadateneditor erlaubt es schon seit einiger Zeit, sich die OCR-Ergebnisse im Textformat anzusehen. Wenn man dann allerdings einen Erkennungsfehler entdeckt hat, blieben einem nur drei Möglichkeiten:

1. Das Transkriptionsplugin in Goobi workflow nutzen und Text anstelle von ALTO-XML zu exportieren, was allerdings die Markierung von Suchtreffern auf einem Bild im Goobi viewer verhindert.

2. Die ALTO-Datei mit einem separaten Texteditor im Dateisystem editieren. Das ist sehr aufwändig und für Laien kaum machbar.

3. Den Erkennungsfehler nicht korrigieren und versuchen trotzdem ruhig zu schlafen.

Seit dieser Goobi workflow Version gibt es eine neue Möglichkeit:

Man kann den neuen integrierten ALTO-Editor innerhalb des Metadateneditors nutzen. Die Koordinaten der Wörter bleiben so erhalten und der Volltext lässt sich fast wie regulärer Fließtext bearbeiten.

Eine Hervorhebung der Zeilen und Wörter erlaubt, dass einfach ersichtlich wird, an welcher Stelle der Seite das jeweilige Wort gedruckt ist.

Die Dokumentation für die neue Funktionalität ist auch bereits im online zugänglichen Goobi workflow Handbuch zu finden:

Layout-Anpassungen im Metadateneditor und schnellere Ladezeiten

Wenn im Metadateneditor eine Aktion ausgelöst wird, wird selten die gesamte Seite neu geladen, damit der Arbeitsfluss nicht unterbrochen und die Scrollposition der einzelnen Container beibehalten werden kann. Bei dieser Art des Aktualisierens der Seite kann der Entwickler entscheiden, welche Teile der Seite genau aktualisiert werden sollen.

In der Vergangenheit wurden bei einigen Aktionen auch Teile der Seite aktualisiert, bei denen es nicht nötig war. Deshalb haben einige Aktionen, wie zum Beispiel das Setzen des Repräsentanten ungewöhnlich lange gedauert. Wir haben den Metadateneditor komplett auf dieses Problem hin überprüft und die Aktualisierung bei allen Aktionen optimiert.

Vermeidung ungewünschten Cachings für Layouts

In der Vergangenheit war es oft der Fall, dass nach einem Update beim ersten Betreten des gerade frisch aktualisierten Goobi das Layout und/oder einige Stylings völlig kaputt waren. Das lag nicht daran, dass die Entwickler schlecht gearbeitet haben, sondern daran, dass Browser wie Chrome oder Firefox Dateien auf dem lokalen Gerät zwischenspeichern, um Ressourcen und Bandbreite zu sparen. Die Dateien werden nur dann neu vom Server heruntergeladen, wenn sie sich geändert haben. Deshalb ist es nach einem Update manchmal vorgekommen, dass sich alte Dateien mit neuen Dateien gemischt haben und deshalb das Layout zerschossen war. In diesem Fall musste die Seite komplett neu geladen werden (mit der Tastenkombination Strg+Shift+R), um die zwischengespeicherten Dateien zu verwerfen und neu zu laden.

Damit dies in der Zukunft nicht mehr geschieht, hängen wir nun bei jedem Goobi Release einen eindeutigen, zur Version gehörenden Text an die Adresse jeder Datei an, die potentiell lokal zwischengespeichert sein könnte. Dadurch fragt der Browser bei neuen Versionen auf jeden Fall stets eine neue Datei an und das Layout sieht nach dem Update sofort korrekt aus, ohne dass geheime Tastenkombinationen gedrückt werden müssen.

Besserer Umgang mit Vorgängen ohne Metadaten

Goobi workflow wird sehr vielseitig eingesetzt. So gibt es auch einige Einrichtungen, die nicht an Metadaten im METS/MODS oder LIDO Format interessiert sind. Bei diesen Einrichtungen ist es aufgefallen, dass Skriptaufrufe zwingend eine meta.xml Datei im Vorgangsordner verlangen, da sie sonst mit einem Fehler abgebrochen werden. Dies wurde nun geändert, so dass die Datei meta.xml bei Skriptaufrufen nur noch dann gelesen wird, wenn auch tatsächlich Metadateninformationen innerhalb des Skriptaufrufs benötigt werden.

Anpassungen an der Funktionalität von GoobiScript

Nachdem im letzten Monat die GoobiScript-Runtime komplett neu implementiert wurde, sind noch einige Probleme mit GoobiScripts aus Plugins aufgetaucht, die dazu geführt haben, dass die Plugins nicht richtig funktioniert haben. Diese Probleme wurden nun behoben und alles funktioniert wieder so wie gewohnt.

Neue Funktionen und Einstellmöglichkeiten des Dashboards

Das erweiterte Dashboard wurde noch weiter erweitert. Es gibt zwei neue Widgets: Das Widget Änderungen der letzten 7 Tage zeigt Schritte an, die in den letzten 7 Tagen abgeschlossen, in Bearbeitung genommen wurden oder Fehler hatten. Das zweite neue Widget zeigt die Schritte an, die sich derzeit in der Warteschlange befinden. Dabei wird der im letzten Monat eingeführte neue INFLIGHT Status zugrunde gelegt.

Neu ist außerdem dass das Layout des Dashboards nun individuell über die Nutzereinstellungen konfiguriert werden kann. Diese Konfiguration kann vorgenommen werden, indem innerhalb der nutzerspezifischen Benutzerkonfiguration im Reiter Allgemein die Einstellung Anordnung der Dashboard-Elemente bearbeitet. Jede Zeile innerhalb der Textbox fügt ein Element zum Dashboard hinzu. Dabei besteht jede Zeile aus zwei Teilen, getrennt durch ein Leerzeichen: Zuerst wird eine Zahl angegeben, die die Spalte festlegt, in der das Widget angezeigt werden soll. Der zweite Teil nach dem Leerzeichen ist dann der Name des hinzuzufügenden Widgets.

Die Liste der aktuell verfügbaren Widgets lautet: assignedSteps, batches, htmlBox, itm, processSearch, processTemplates, queue, rss, statisticsProcesses2, statisticsProcesses, taskHistory, tasksLastChanges.

Eine Beispielkonfiguration könnte dabei folgendermaßen aussehen:

Coming soon

• Flex-Editor für die Erfassung von Handschriften und anderes

• Erweiterung des Rechtemanagements für individuelle GoobiScripte

• Erweiterung des Dashboards

• Bessere Unterstützung von Körperschaften