EAD Datenübernahme

Einführung
Die vorliegende Dokumentation beschreibt die Installation, die Konfiguration und den Einsatz einer XML-basierten Datenbank, um damit EAD Dateien zu verwalten und in Goobi zu integrieren.
Details
​
Identifier
intranda_opac_ead
Source code
​https://github.com/intranda/goobi-plugin-opac-ead​
Lizenz
GPL 2.0 oder neuer
Kompatibilität
Goobi workflow 3.0 und neuer
Dokumentationsdatum
28.02.2019
Vorbereitung des EAD-Speichers
Als technische Lösung für die Datenübernahme von EAD-Dateien wurde das Konzept eines EAD-Speichers gewählt. Dabei handelt es sich um eine XML-Datenbank, die wiederholt mit mehreren aktualisierten EAD-Dateien beliefert werden kann und anschließend ähnlich zu einem abfragbaren Katalog als Datenquelle dient, die sowohl von Goobi workflow als auch vom Goobi viewer abgefragt werden kann, um neben Detailinformationen eines Datensatzes ebenfalls Informationen über die Tektonik abfragen zu können.
Durch die Zwischenschaltung dieses EAD-Speichers ist sichergestellt, dass auch die EAD-Dateien jederzeit aktualisiert werden können und die einzelnen Datensätze daraus stets mit aktuellem Kontext angezeigt werden, auch wenn dieser sich seit der ersten Datenübernahme zwischenzeitlich geändert haben sollte.
Installation der XML-Datenbank BaseX
BaseX ist eine XML-Datenbank, in der die EAD Dateien verwaltet, analysiert und abgefragt werden können. Voraussetzung für die Installation von BaseX ist Java 1.8.
Zunächst muss der Download der Datenbank erfolgen:
​http://basex.org/download/​
Für die Installation von BaseX auf einem Linux System muss zunächst die zip Datei herunterladen und auf dem Server installiert werden. Dies könnte beispielsweise in diesem Pfad erfolgen:
1
/opt/digiverso/basex
Copied!
Anschließend muss die Jetty-Konfiguration angepasst werden, so dass die Applikation nur auf localhost erreichbar ist. Dafür muss in der Konfigurationsdatei /opt/digiverso/basex/webapp/WEB-INF/jetty.xml sichergestellt werden, dass der host auf 127.0.0.1 steht:
jetty.xml
1
  <Set name="host">127.0.0.1</Set>
Copied!
Anschließend wird die Systemd Unit File an diesen Pfad installiert:
1
/etc/systemd/system/basexhttp.service
Copied!
Diese hat folgenden Aufbau:
basexhttp.service
1
[Unit]
2
Description=BaseX HTTP server
3
​
4
[Service]
5
User=tomcat8
6
Group=tomcat8
7
ProtectSystem=full
8
ExecStart=/opt/digiverso/basex/bin/basexhttp
9
ExecStop=/opt/digiverso/basex/bin/basexhttp stop
10
​
11
[Install]
12
WantedBy=multi-user.target
Copied!
Anschließend muss der Daemon neu geladen, die Unit-File aktiviert und die Datenbank neu gestartet werden:
1
systemctl daemon-reload
2
systemctl enable basexhttp.service
3
systemctl start basexhttp.service
Copied!
Damit das Admin-Interface auch von extern erreichbar ist, kann dieses im Apache zum Beispiel mit dem folgenden Abschnitt konfiguriert werden:
1
    redirect 301 /basex http://bastel.fritz.box/basex/
2
    <Location /basex/>
3
            Require ip 188.40.71.142
4
            ProxyPass http://localhost:8984/ retry=0
5
            ProxyPassReverse http://localhost:8984/
6
    </Location>
Copied!
Im Anschluß daran muss noch das Apache Modul proxy_http aktiviert und der Apache neu gestartet werden, damit die Anpassungen wirksam werden:
1
a2enmod proxy_http
2
systemctl restart apache2
Copied!
Datenbank einrichten
Die XML Datenbank kann nach der Installation unter folgender URL erreicht werden:
​http://localhost:8984/dba/login​
Die Zugangsdaten lauten admin/admin. Nach dem ersten Anmelden sollte daher als erstes ein neues Passwort vergeben werden. Dazu muss der Menüeintrag Users geöffnet werden. Hier kann der Accountname angeklickt und das neue Passwort gesetzt werden.
Anschließend kann eine neue Datenbank für die EAD Dateien erzeugt werden. Dazu muss der Menüeintrag Databases ausgewählt werden. Mittels Create gelangt man in den Dialog dazu. Hier muss einTitel für die Datenbank vergeben werden. Alle anderen Einstellungen können so bleiben.
Dateien hinzufügen und löschen
Nachdem die Datenbank erstellt wurde, können nun EAD-XML-Dokumente hinzugefügt werden. Dazu kann unter Databases die erstellte Datenbank ausgewählt werden. Daraufhin öffnet sich ein Fenster, in dem die zur Datenbank gehörenden Dateien verwaltet werden können. Neue Dateien lassen sich über den Dialog Add auswählen und hochladen. Hier kann im Feld Input eine EAD-Datei ausgewählt werden. Mittels Add wird die Datei hinzugefügt und die Übersichtsseite geladen. Hier können auch Dateien entfernt werden. Dazu müssen sie mittels Checkbox markiert und dann über Delete gelöscht werden. Das Aktualisieren einer EAD-Datei ist nur über Löschen und erneutes Hinzufügen möglich.
Definition der Suchanfrage
Um das Interface zur Abfrage für Goobi einzurichten, muss der Datenbank bekannt gemacht werden, wie eine Anfrage aussieht, was damit geschehen soll und wie das Ergebnis auszusehen hat. Dafür bietet BaseX verschiedene Optionen an. Wir haben uns für RESTXQ entschieden, da diese im Gegensatz zur REST Schnittstelle keine Authentication benötigt.
Dazu muss im Verzeichnis /opt/digiverso/basex/webapp/ eine neue Datei eadRequest.xq erzeugt werden.
eadRequest.xq
1
(: XQuery file to return an ead record :)
2
module namespace page = 'http://basex.org/examples/web-page';
3
declare default element namespace "urn:isbn:1-931666-22-9";
4
​
5
declare
6
  %rest:path("/search/{$identifier}")
7
  %rest:single
8
  %rest:GET
9
function page:getRecord($identifier) {
10
    let $ead := db:open('CHANGEME')/ead[//c[@level="file"][@id=$identifier]]
11
    let $record :=$ead//c[@level="file"][@id=$identifier]
12
    let $header := $ead/eadheader
13
    return
14
        <ead>
15
            {$header}
16
            {for $c in $record/ancestor-or-self::c
17
            return
18
                <c level="{data($c/@level)}" id="{data($c/@id)}">
19
                    {$c/did}
20
                    {$c/accessrestrict}
21
                    {$c/otherfindaid}
22
                    {$c/odd}
23
                    {$c/scopecontent}
24
                    {$c/index}
25
                </c>
26
            }
27
        </ead>
28
};
Copied!
Dieses xquery-Modul wird ausgeführt, wenn Anfragen via GET an die Adresse /search/{$identifier} gestellt werden. Wenn ein anderer endpoint genutzt werden soll, kann dies im Bereich declare angepasst werden. Sobald eine Anfrage gestellt wird, wird die Funktion page:getRecord ausgeführt. In der ersten Zeile der Funktion muss der zu verwendende Datenbankname definiert werden. Für den Fall, dass die Informationen auf mehrere Datenbanken aufgeteilt wurden, müssen daher auch mehrere Dateien mit dieser Funktion verwendet werden. Dabei muss die Variable rest:path eindeutig definiert werden.
Ob die Konfiguration korrekt ist, kann mit einer Anfrage an die Datenbank getestet werden: http://localhost:8984/search/A91x07542461156845020181205140345849​
Änderungen an den Dateien oder den Datenbanken können jederzeit im laufenden Betrieb vorgenommen werden.
Goobi Anbindung
Nachdem die Datenbank eingerichtet wurde, kann sie in Goobi konfiguriert werden. Da sich die Metadaten deutlich von den bibliographischen Metadaten von Bibliotheken unterscheiden, sollte in Goobi ein eigenes Projekt und ein eigener Regelsatz genutzt werden. Zusätzlich muss das OPAC-Plugin goobi-plugin-opac-ead installiert werden.
Konfiguration der Datei goobi_opac.xml
Die Datei goobi_opac.xml muss um zwei weitere Einträge erweitert werden. Zum einen muss der zu verwendende Dokumententyp definiert werden. Dies passiert im Bereich <doctypes>:
goobi_opac.xml
1
<type isContainedWork="false" isMultiVolume="false" isPeriodical="false" rulesetType="SingleRecord" tifHeaderType="Record" title="Record">
2
    <label language="de">Akte</label>
3
    <label language="en">Record</label>
4
    <mapping>SingleRecord</mapping>
5
</type>
Copied!
In diesem Beispiel wird der Typ Akte (SingleRecord im Regelsatz) verwendet.
Außerdem muss die Datenquelle definiert werden:
goobi_opac.xml
1
<catalogue title="EAD Import">
2
    <config address="http://localhost:8984/search/" database="hu-ead-example" description="EAD Import" iktlist="IKTLIST-GBV.xml"
3
            port="80" ucnf="UCNF=NFC&amp;XPNOFF=1" protocol="http://" opacType="ead" />
4
    <searchFields>
5
        <searchField  label="Identifier" value="8000" />
6
    </searchFields>
7
</catalogue>
Copied!
Das Attribut title enthält den Namen, unter dem die Datenquelle in Goobi auswählbar ist. Das Element <config> enthält in address die URL zur zuvor definierten REST-Schnittstelle und in database den Namen der Datenbank.
Konfiguration des Plugins innerhalb von plugin_opac_ead.xml
Diese Datei ist im Ordner /opt/digiverso/goobi/config/ zu finden und enthält das Mapping der EAD-Elemente zu Goobi-Metadaten.
plugin_opac_ead.xml
1
<?xml version="1.0" encoding="UTF-8"?>
2
<config_plugin>
3
    <namespaces>
4
        <namespace prefix="ead" uri="urn:isbn:1-931666-22-9" />
5
        <namespace prefix="oai" uri="http://www.openarchives.org/OAI/2.0/" />
6
    </namespaces>
7
​
8
    <documenttype isanchor="false">SingleRecord</documenttype>
9
​
10
<!--    
11
    <documenttype isanchor="true">VolumeRun</documenttype>
12
    <documenttype isanchor="false">Record</documenttype>
13
-->
14
​
15
    <mapping>
16
        <metadata name="TitleDocMain" xpath="//ead:c[@level='file']/ead:did/ead:unittitle" level="topstruct" xpathType="Element"/>
17
        <metadata name="CatalogIDDigital" xpath="//ead:c[@level='file']/@id" level="topstruct" xpathType="Attribute"/>
18
        <metadata name="CatalogIDSource" xpath="//ead:c[@level='file']/@id" level="topstruct" xpathType="Attribute"/>
19
        <metadata name="Dating" xpath="//ead:c[@level='file']/ead:did/ead:unitdate/@normal" level="topstruct" xpathType="Attribute"/>
20
        <metadata name="PublicationYear" xpath="//ead:c[@level='file']/ead:did/ead:unitdate" level="topstruct" xpathType="Element"/>
21
        <metadata name="shelfmarksource" xpath="//ead:c[@level='file']/ead:did/ead:unitid[@type='Signatur']" level="topstruct" xpathType="Element"/>
22
        <metadata name="AccessLicense" xpath="//ead:c[@level='file']/ead:accessrestrict/ead:p" level="topstruct" xpathType="Element"/>
23
        <metadata name="TitleDocSub1" xpath="//ead:c[@level='class']/ead:did/ead:unittitle" level="topstruct" xpathType="Element"/>
24
        <metadata name="Genre" xpath="//ead:c[@level='file']/ead:did/ead:physdesc/ead:genreform" level="topstruct" xpathType="Element"/>
25
        <metadata name="History" xpath="//ead:c[@level='collection']/ead:scopecontent[/ead:head/text() = 'Bestandsgeschichte']/ead:p" level="topstruct" xpathType="Element"/>
26
        <metadata name="Description" xpath="//ead:c[@level='collection']/ead:scopecontent[/ead:head/text() = 'Beschreibung']/ead:p" level="topstruct" xpathType="Element"/>
27
        <metadata name="SizeSourcePrint" xpath="//ead:c[@level='file']/ead:odd/ead:p" level="topstruct" xpathType="Element"/>
28
        <metadata name="Contains" xpath="//ead:c[@level='file']/ead:did/ead:abstract[@type='Enthält']" level="topstruct" xpathType="Element"/>
29
        <metadata name="singleDigCollection" xpath="concat(//ead:eadheader/ead:filedesc/ead:titlestmt/ead:titleproper\,'#'\, //ead:c[@level='collection']/ead:did/ead:unitid)" level="topstruct" xpathType="String"/>
30
    </mapping>
31
</config_plugin>
Copied!
Im oberen Bereich werden die zur Verfügung stehenden Namespaces definiert, anschließend der zu erzeugende Strukturtyp. Hier kann mit Hilfe des Attributes isanchor="true/false" definiert werden, ob ein mehrbändiges Objekt oder ein eigenständiges Objekt erzeugt werden soll. Im Anschluss erfolgt im Bereich <mapping> das Mapping der Metadaten. Da in EAD die Unterscheidung zwischen Personen und anderen Metadaten nicht vorgesehen ist, können hier nur normale Metadaten angelegt werden. Jedes <metadata> enthält in name das Metadatum, so wie es im Regelsatz definiert wurde. In level wird angegeben, an welcher Stelle das Metadatum erzeugt werden soll. Mögliche Werte sind physical, topstruct und anchor.
In xpath steht der XPath Ausdruck, der auf den Datensatz angewendet wird, um den Wert des Metadatums zu ermitteln. Das Attribut xpathType beschreibt den Rückgabewert des XPath-Ausdrucks. Dieser kann entweder Element, Attribut oder String sein.
Projektkonfiguration innerhalb der Datei goobi_projects.xml
Die Datei goobi_projects.xml benötigt eine neue Definition für den Publikationstyp und die neuen Metadaten.
goobi_projects.xml
1
<project name="EAD-Import">
2
    <createNewProcess>
3
        <itemlist>
4
​
5
            <!-- Title for Records -->
6
            <item docstruct="topstruct" from="prozess" isnotdoctype="multivolume" metadata="TitleDocMain" required="true" ughbinding="true"> Titel </item>
7
            <item docstruct="topstruct" from="prozess" isnotdoctype="multivolume" metadata="TitleDocSub1" required="false" ughbinding="true"> Weitere Titel</item>
8
​
9
            <!-- Identifer -->
10
            <item docstruct="topstruct" from="prozess" isdoctype="Record" metadata="CatalogIDDigital" required="true" ughbinding="true">Identifier</item>
11
​
12
            <!-- Sammlung -->
13
            <item docstruct="topstruct" from="prozess" isdoctype="Record" metadata="singleDigCollection" required="true" ughbinding="true">Sammlung</item>
14
​
15
            <item docstruct="topstruct" from="prozess" isdoctype="Record" metadata="Dating" ughbinding="true"> Datierung </item>
16
            <item docstruct="topstruct" from="prozess" isdoctype="Record" metadata="PublicationYear" ughbinding="true"> Erscheinungsjahr </item>
17
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="shelfmarksource"> Signatur </item>
18
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="AccessLicense"> Zugriffsbeschränkung </item>
19
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="Genre"> Genre </item>
20
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="History"> Bestandsgeschichte </item>
21
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="Description"> Beschreibung </item>
22
            <item from="prozess" isdoctype="Record" ughbinding="true" docstruct="topstruct" metadata="SizeSourcePrint"> Umfang </item>
23
            <processtitle isdoctype="Record">Identifier</processtitle>
24
            <hide>collections</hide>
25
        </itemlist>
26
        <opac use="true">
27
            <catalogue>EAD Import</catalogue>
28
        </opac>
29
        <templates use="true" />
30
        <defaultdoctype>Record</defaultdoctype>
31
        <metadatageneration use="true" />
32
    </createNewProcess>
33
    <tifheader>
34
        <Record>'|[[TYPE]]'+$Doctype+'|[[TITLE]]'+Title+'|[[AUTHORS]]'+Authors+'
35
            |[[YEAR]]'+Publishing year+'|[[PLACE]]'+Publishing place+'|[[FOLDER]]'+ATS+'_'+Identifier digital (a)+'|'
36
        </Record>
37
    </tifheader>
38
    <dmsImport />
39
    <validate/>
40
</project>
Copied!
Nachdem diese Konfiguration abgeschlossen wurde, steht innerhalb von Goobi eine neue Datenquelle innerhalb der Anlegemaske für Vorgänge zur Verfügung. Diese kann nun mittels der Identifier in gleicher Weise abgefragt werden wie andere Datenquellen und Kataloge auch.

Opac Plugins - Previous

MARC Import

Next - Opac Plugins

Generischer XML Import

Last modified 1yr ago

Copy link

Contents

Einführung

Vorbereitung des EAD-Speichers

Installation der XML-Datenbank BaseX

Datenbank einrichten

Dateien hinzufügen und löschen

Definition der Suchanfrage

Goobi Anbindung

Konfiguration der Datei goobi_opac.xml

Konfiguration des Plugins innerhalb von plugin_opac_ead.xml

Projektkonfiguration innerhalb der Datei goobi_projects.xml