BASE Weblog - Kategorie Indexierung

High North Research Documents ist eine Datenbank für frei zugängliche wissenschaftliche Dokumente mit thematischem Fokus auf nördliche Polarforschung. Dieser neue Service wurde von der Universitätsbibliothek Tromsø entwickelt, BASE fungiert in diesem Projekt als OAI-Dataprovider, d.h. aus den BASE-Daten selektieren unsere norwegischen Kollegen automatisch die Metadaten, die für das Themengebiet relevant sind. Das Projekt ist ein gutes Beispiel dafür, wie durch Verbreitung und Nachnutzung von OAI-Metadaten und fachliche Fokussierung die Sichtbarkeit von Dokumenten auf den entsprechenden Repositories weiter gesteigert werden kann.

Die vom Stifterverband für die Deutsche Wissenschaft veranstaltete Online-Wahl zur Hochschulperle des Jahre 2011 hat das studentische Mentoren Projekt "Rock your Life" mit rund 25% der abgegebenen Stimmen gewonnen. Vom BASE-Team Glückwunsch an den verdienten Gewinner! Mit einigem Abstand, aber immerhin mit 2.420 Stimmen (rd. 18%), hat BASE den zweiten Platz erreicht. Wir bedanken uns bei allen, die uns unterstützt und ihre Stimme gegeben haben.

Wir bitten um Ihre Unterstützung bei der Wahl zur Hochschulperle des Jahres 2011! Hochschulperlen sind innovative Projekte an Hochschulen, BASE wurde im Mai 2011 vom Stifterverband für die Deutsche Wissenschaft als Hochschulperle des Monats Mai 2011 ausgezeichnet. Wir würden uns freuen, wenn Sie uns beim Online-Voting zur Hochschulperle des Jahres Ihre Stimme geben würden. Die Wahl geht bis zum 23. Januar 2012, 12.00 Uhr, jeder Internetnutzer ist stimmberechtigt, einmal pro Tag und Nutzer darf eine Stimme abgegeben werden.

Stimmen Sie für BASE, verbreiten Sie die Nachricht in Ihren Blogs, auf Twitter oder in Ihrem sozialen Netzwerk!

Vielen Dank

Ihr BASE-Team

Bei Aufruf der Webseite base-search.net werden Smartphone-Clients automatisch auf die neuen BASE-Mobil-Seiten umgeleitet. Neben dem IPhone-App  unterstützt BASE damit jetzt auch alle weiteren gängigen Plattformen (Android, IOS, Windows Phone, u.a.).

Bei Aktivierung des Radio-Buttons "Synonyme (Eurovoc Thesaurus)" in der BASE-Suchoberfläche kann die Suchanfrage um Synonyme und anderssprachige  Begriffe aus dem Eurovoc-Thesaurus erweitert werden. Im Idealfall finden Sie bei Eingabe eines z.B. deutschsprachigen Suchbegriffs wie Abfallwirtschaft auch Dokumente, in denen dieser Term nur in anderen Sprachen und ggf. synonym vorkommt, in diesem Beispiel also "affaldsbehandling", "Afvalbeheer", "Abfallentsorgung", "waste", "lixo", usw.. Voraussetzung ist allerdings, dass bei erfolgter Aktivierung dieser Suchoption die Begriffe aus der Suchanfrage im Eurovoc-Thesaurus verzeichnet sind. 

Der Eurovoc-Thesaurus wird vom Amt für amtliche Veröffentlichungen der Europäischen Gemeinschaften erstellt und enthält rd. 239.000 Einträge (6.500 Basisbegriffe in 21 Sprachen plus Synonyme sofern vorhanden).

Schon seit einiger Zeit setzen wir ein automatisches Verfahren
zur Dokumentenklassifikation nach der Dewey-Dezimalklassifikation
(DDC) in BASE ein. Die Software dafür wurde während des DFG-geförderten
Projekts Automatische Anreicherung von OAI-Metadaten entwickelt
und basiert auf Methoden des Text Minings und des maschinellen Lernens.

Der auf dem letzten Bibliothekartag gehaltene Vortrag Automatische Sacherschließung elektronischer Dokumente von Mathias Lösch ist jetzt auf dem Publikationsserver des BIB zugänglich. Die Präsentation fasst den bislang erreichten Stand des DFG-Projekts Automatische Anreicherung von OAI-Metadaten zusammen. Mit der wenn auch zunächst nur groben fachlichen Klassifikation von OAI-Metadaten werden die Voraussetzungen für eine automatische Schlagwortvergabe in BASE sowie die Lieferung von Subsets aus BASE an entsprechende fachspezifische Repository-Dienste wesentlich verbessert.

Der von Mathias Lösch entwickelte BASE OAI-PMH Validity Checker (OVAL) erleichert uns intern schon eine ganze Weile das Einbinden neuer Quellen in BASE. Wir machen ihn heute öffentlich zugänglich, weil wir glauben, dass er auch Repository Managern helfen kann, die Qualität der angebotenen OAI-Schnittstelle zu überprüfen und eventuell zu verbessern. Über ein entsprechendes Feedback zu diesem Tool würden wir uns natürlich freuen.

Andrew Nagy - VuFind-Entwickler und jetzt bei Serials Solutions tätig - schrieb mir gestern folgende Mail:

"Hi Dirk - Congratulations on your launch of VuFind with BASE. This is really exciting to see. As the original founder and developer of VuFind, it has been really exciting to see so many large collections adopting VuFind and adapting it to fit their needs so well. Your site is very fast and very nicely done - I really like the refine your search drop downs on the right.

...

All the best
Andrew"

Nach drei Monaten Test im BASE Lab haben wir heute den neuen, aktuellen und wesentlich umfangreicheren BASE Index unter Lucene/Solr sowie die neue Benutzeroberfläche unter VuFind freigeschaltet. Die FAST-Version des BASE-Index wird noch für einige Zeit im Hintergrund für die Nutzer der BASE-Search-API laufen, in den nächsten Tagen wird eine Dokumentation der API für den neuen Index veröffentlicht, so dass der Umstieg für diesen Nutzerkreis ebenfalls in Ruhe vonstattengehen kann. Wir freuen uns, dass wir diesen wichtigen Meilenstein geschafft haben und bedanken uns für die Geduld und die Unterstützung während der Umstellung.

Wir freuen uns über die Auszeichnung von BASE als Hochschulperle des Monats Mai 2011. Laut Presseerklärung des Stifterverbands für die Deutsche Wissenschaft trägt BASE maßgeblich zur Verbreitung des Open-Access-Gedankens bei.

Marek Imialek hat ein iPhone-App für unsere Suchmaschine BASE geschrieben, das seit einigen Tagen im App-Store freigeschaltet ist. Das App zielt auf den neuen Index im BASE-Lab, der seit dem letzten Blog-Eintrag wieder um einige Quellen erweitert wurde und jetzt 27.834.516 Dokumente aus 1.753 Quellen umfasst.

Der Base-Lab-Index enthält jetzt 27.483.695 Dokumente aus 1.738 Quellen. Die Behandlung von Sonderzeichen wurde verbessert, z.B. führen Suchanfragen mit oder mit aufgelösten Umlauten jetzt zu der gleichen Treffermenge.

Mit Hilfe von VuFind haben wir das DDC-Browsing überabeitet, auf Ebene der einzelnen Klassen werden jetzt auch die entsprechenden Dokumentzahlen aktuell angezeigt. Darüber hinaus sind erstmals 10 Quellen automatisch mit DDC-Informationen angereichert worden, weitere Details dazu finden Sie im Wiki zum laufenden DFG-Projekt "Automatische Anreicherung von OAI-Metadaten".

Des Weiteren beschäftigen wir uns jetzt intensiver mit der search-api des neuen Index. Um diese unter Praxisbedingungen zu testen, werden im Bielefelder Katalog die Suchanfragen per Ajax jetzt auf den neuen Index gelenkt. Wenn hier keine Probleme auftauchen, können wir unseren externen Nutzern die neue API zu Verfügung stellen.

Für die technisch Interessierten: BASE Lab wurde auf das offizielle Release Apache Solr 3.1.0 umgestellt.

Ein interessanter Artikel zu Lucene/Solr bei heise:

http://heise.de/-1214998

Der BASE Index im BASE Lab wurde aktualisiert und umfasst nunmehr 26.920.383 Dokumente aus 1.725 Quellen. In der Standardsuche und in der Erweiterten Suche kann für das Feld "gesamtes Dokument" die Wortformensuche jetzt auch ausgeschaltet werden, d.h.in diesem Fall wird auf ein Indexfeld zugegriffen, in dem zuvor kein Stemming englischsprachiger Begriffe durchgeführt wurde. Des Weiteren wurde Lucene/Solr von unserem Entwickler Bernd Fehling jetzt voll Unicode-fähig gemacht.