Migration Slot Juli/August 2011

MPDL

Sammlung von ToDos und offene Fragen für die einzelnen Institute während des Migrations-Slots Alle Daten, die für den Sommer-Migrations-Slot relevant sind, werden in SVN abgelegt: https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011

=MPI für Gesellschaftsforschung (MPI GF)=

Status:
 * Daten geliefert und abgelegt in SvN (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_GF)
 * OUs, Context und User liegen vor
 * import_user_gesellschaftsforschung
 * pubman
 * ID comment ist in eDoc2PubMan Export integriert.
 * Testdatensatz liegt ab (inkl. ID Comment)
 * CoNE ist eingespielt
 * Mapping weitgehend konsolidiert
 * Antwort auf Fragenkatalog ging an Institut.
 * Erledigt: Sammelband als Quelle für "Beitrag in Sammelband" festlegen
 * Erledigt: CoNE-Bestände bereinigt
 * Erledigt: Zuordnung von ISSN bei Rezension prüfen => Sehe ich Idealerweise beim Sonderheft. (escidoc:285923:1)
 * Erledigt: Dito ISBN bei Beitrag in Sammelband (escidoc:285917:1)
 * Komplettimport liegt ab
 * Grünes Licht vom Institut für Live-Migration nach Beseitigung der letzten Mängel
 * OUs, Kontext, User af Live angelegt:
 * import_user_MPIfG
 * pubman
 * Erledigt: Wenn bei den Urhebern eines Buches ein corporate body vorhanden ist, dann soll das Genre Sammelband sein
 * Erledigt: Sobald es mindestens einen Editor gibt (auch neben Autoren): Genre=Sammelband
 * Erledigt: Forschungspapiere: Seiten- und Bandzahl werden nicht gemappt: escidoc:322397:1, escidoc:322403:1
 * Erledigt: MHT-Format
 * Erledigt: Format-Probleme: XPS (571733, mp3 (520943), htm (26905)
 * Erledigt: Gesamtseitenzahl bei Forschungspapieren wird nicht übernommen (escidoc:329106): Soll zur Publikation
 * Erledigt: URLs bereinigen
 * Erledigt: Klären, welche Sichtbarkeit die "restricted" Files bekommen sollen. Alle "restricted" Files sollen auf das Institut beschränkt werden. Awu 10:15, 3 April 2012 (CEST)
 * Erledigt: Klären: Bei Gästen wurden die externen Affiliations (im CoNE-File enthalten) manchmal in CoNE übernommen (Bsp.:Dahrendorf) und manchmal nicht (Bsp.:Fetzer). Ursache war ein Fehler im alten XSL-File. Die external Affiliations wurden in CoNE (Live-Server) manuell nachgetragen. Die Bearbeitung der Datensätze übernimmt das Instiut. Awu 10:16, 3 April 2012 (CEST)

Live-Import liegt ab!
 * Produktivkontext und Nutzer angelegt.

ToDos:
 * Sichtbarkeit der Volltexte: eDoc "INSTITUT" und "INTERNAL" --> PubMan Beschränkung auf das Institut. - Awu 10:16, 3 April 2012 (CEST)

=MPI für Neurobiologie (MPI NEURO)=

Status:
 * Daten geliefert und in SvN abgelegt (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_NEURO)
 * OUs angelegt. Context und User vorhanden. Testdatensatz liegt ab.
 * import_user_neuro
 * wednesday21
 * CoNE-Nachrag vom Institut liegt ab (Excel) + Anpassungen bei bestehenden CoNE-Einträgen
 * Cone-Nachtrag eingespielt, Änderungen vorgenommen
 * Problem Frank und Franz Weber ("Weber, F.")ist behoben.
 * External Affils können bleiben
 * Institut möchte so schnell wie möglich Migration abschließen -> prüft letzten Testimport
 * OU-Struktur schon einmal auf Live angelegt
 * Vollständiger Export liegt in SVN
 * Context und User auf Live angelegt
 * import_user_Neurobiology
 * pubman
 * Vollimport auf MigServer liegt ab.
 * Nachimport (pending items) ebenfalls
 * Michel Zimmer nach Absprache gelöscht
 * Erledigt: Published-Online-Regel erneut anpassen
 * Erledigt: CoNE und Mapping auf live
 * Erledigt: Prod-Accounts angelegt und Schulung erhalten

Live-Import liegt ab!

ToDO
 * Beschränkte Volltexte:
 * eDoc: "MPG" -> MPG
 * eDoc: "Internal" -> MPI Neuro

=MPI für Sonnensystemforschung (MPI S)=

Status:
 * Deadline zur Abgabe der Migrations-Dateien verlängert bis 15. Juli
 * CoNE Excel auf SVN abgelegt.
 * OU-Struktur auf dem Migrations-Server angelegt.
 * BibTeX Mapping steht (von funktionaler Seite) -> http://colab.mpdl.mpg.de/mediawiki/PubMan_Func_Spec_Bibtex_Mapping#Mapping_BibTeX_to_eSciDoc_Metadata_Set_for_Publications_.28for_BibTeX_import.29
 * Pat hat Test-File geschickt
 * Erweitertes CoNE-File wurde geschickt. Es liegt auf SVN ab.
 * Autoren sind neu eingespielt
 * BibTex Mapping ist implementiert
 * Login:
 * import_user_sonnensystemforschung
 * pubman
 * Klemmern implementiert
 * Groups & Projekte eingespielt
 * Erledigt: DEV & Support: Test-File von Patrick importieren und checken
 * Erledigt: Affiliation "MPI for Aeronomy" nur bis 2004, falls auch in "Department Planets and Comets" - Mwalter 12:13, 21 March 2012 (CET)
 * Erledigt: "Axel Korth erscheint zweimal als 'Axel Korth', statt einmal als 'A. Korth'" (war im CoNE-File schlicht so --> händisch geändert) - Mwalter 12:24, 21 March 2012 (CET)
 * Erledigt: Rückmeldung von Pat prüfen
 * Erledigt: Feedback zu Pats Rückmeldung: - Mwalter 11:23, 22 March 2012 (CET)
 * Bei der Überprfüfung der angeblichen Mapping-Fehler darauf gestoßen, dass unsere Liste teilweise Mappings verspricht, die so nicht existieren. MPIS betroffen in folgenden Fällen:
 * institution --> publishinginfo.publisher (mappen wir gar nicht --> implementieren)
 * series --> Title of 2nd source for @inbook and @incollection (@inproceedings wird nicht beachtet --> sollten wir auch mappen)
 * type --> degree (mappen wir gar nicht --> implementieren) - Mwalter 16:10, 22 March 2012 (CET)
 * Neuer Testimport liegt ab
 * Erledigt: Feedback zu Pats Rückmeldung:
 * Parsing-Fehler bei Authoren:
 * Fehlgeschlagen: and Rosenbauer{}, H. and Sternberg, R. and {The COSAC Team} --> relativ hoher Aufwand (noch einmal klären)
 * Fehlgeschlagen: J. Cernicharo and Goicoechea, J. R. and Daniel, F. and Ag{\'u}ndez, M. and Caux, E. and de Graauw, T. and De Jonge, A. and Kester, D. and Leduc, H. G. and Steinmetz{}, E. and Stutzki, J. and Ward, J. S. --> Ag{\'u}ndez legitim, dann müsste Parser angepasst werden (relativ hoher Aufwand) -> Sonderzeichen-Problem generell klären.
 * --> Kleiner Test mit den neuen Mappings hat gezeigt, dass der Title in den Testdaten immer in doppelter Klammerung steht und deshalb in einfacher Klammerung in PubMan geschrieben wird - klären, ob das so gewollt ist.

Masterthesis -> Thesis, type diploma instead of type masters
 * Erledigt: CoNE-Eintrag von Medvedev, Alexander S. ergänzt
 * Erledigt: Jarchow, Christopher prüfen/nachfragen (nur eine OU übernommen, obwohl zwei im CoNE-File sind und auch richtig umgewandelt werden)
 * ErledigtNumber in @techreport is missing; was to become new type "Report-Nr" - Mwalter 14:33, 5 June 2013 (CEST)
 * Erledigt: Editor Affiliation (mit {}) CoNEn - Mwalter (talk) 09:33, 13 June 2013 (UTC)
 * Erledigt:
 * Masterthesis -> Thesis, type diploma instead of type masters --> this is implemented more 'intelligent': If @masterthesis (or something similar) the 'type'-attribute is used to check which kind of degree it is (eg. type contains *diplom* --> Diplom)
 * Gruppen werden nicht anerkannt: The COSAC Team   wird   The Team, COSAC
 * Series and number (of book) missing; were to become Source.Title and Source.Issue --> source was removed, due to missing source-genre - Mwalter 14:33, 5 June 2013 (CEST)
 * Testimport liegt ab - Martin (talk) 14:19, 24 July 2013 (CEST)
 * AuthorDecoder für MPIS angepasst, damit er auch Doppelnamen und ähnliches erkennt. - Mwalter (talk) 17:30, 14 August 2013 (CEST)
 * Erledigt: *Project 'JUICE' gesucht bei {Sterken:2012-215}
 * Erledigt: Anpassung für Editors: - Mwalter (talk) 10:42, 21 August 2013 (CEST)
 * Für BibTex Genres: conference, inbook, incollection, inproceedings, article
 * Wenn das Feld "booktitle" oder "journal" vorhanden ist (=Source wird angelegt), dann sollen Editors zur Quelle gemappt werden.
 * Da die Quelle zu diesem Zeitpunkt bereits besteht wird nur geprüft, ob sie einen Titel besitzt. - Mwalter (talk) 10:42, 21 August 2013 (CEST)
 * Falls o.g. Felder fehlern, bitte wie gehabt zur Publikation mappen.


 * OUs, Kontext, User auf Live angelegt (Department geändert): - Martin (talk) 15:29, 2 September 2013 (CEST)
 * Login: import_user_MPS
 * Pass: friday13


 * Neue Projekte in Migration-CoNe hinzugefügt - Martin (talk) 15:47, 2 September 2013 (CEST)
 * Erledigt: CoNE auf LIVE übertragen - Mwalter (talk) 11:38, 8 October 2013 (CEST)
 * Achtung: Department ändert Namen: "Department Physics of the Interior of the Sun and Sun-like Stars" --> "Department Solar and Stellar Interiors". In CoNE anpassen.
 * Erledigt: Projects und Groups in MPIS Kontexten aktivieren (Classification) - Import-Kontext: escidoc:1835111; Publications: escidoc:1835112 (noch nicht geöffnet) - Mwalter (talk) 13:47, 8 October 2013 (CEST)
 * Erledigt: MPIS Projects und Groups auf Live-CoNE übetragen - Mwalter (talk) 14:34, 11 October 2013 (CEST)
 * Erledigt:Projects und Groups in MPIS Kontexten aktivieren (Classification) - Import-Kontext: escidoc:1835111; Publications: escidoc:1835112 (noch nicht geöffnet) - Mwalter (talk) 14:37, 11 October 2013 (CEST)
 * Erledigt: transformation.jar muss auf LIVE eingebunden werden, da die AuthorDecoder angepasst wurden. (marc4j-2.4.jar in die PubMan-EAR kopieren und application.xml anpassen) - Mwalter (talk) 11:03, 12 October 2013 (CEST)
 * Erledigt: import Final_mps-pm.bib starten - Mwalter (talk) 11:19, 12 October 2013 (CEST)
 * Erledigt:
 * 2 Exporte, um die bekannten Fehler bereinigt: "Final_mpae-pm.bib" und "Final_mps-pm.bib". Getrennt importieren: "Import MPS" und "Import MPI Aeronomy".
 * Ertst mal geschoben: Label in der Item View für Projects und Groups anpassen (Unterstrich) - Martin (talk) 09:48, 21 August 2013 (CEST)
 * Geht leider nur wenn wir alle Klassifikationen anpassen, da das über ENUMS läuft bisher

ToDos:
 * Mapping anpassen:
 * "Institution" laut Mapping
 * "School" laut Mapping


 * Pat hat noch einmal in den Daten korrigiert:
 * Live-Import muss wiederholt werden
 * ggf. vorher CoNE-Nachträge

=MPI zur Erforschung multireligiöser und multiethnischer Gesellschaften (MPI MMG)=

Status:
 * Daten wurden pünktlich am Freitag geliefert (PUBMAN-SUPPORT:4084)
 * Auf SVN abgelegt (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_MMG)
 * OU-Struktur, Context, User bereit
 * import_user_MMG
 * thursday15
 * Testdaten liegen ab
 * CoNE ist eingespielt
 * Vollimport auf dem MigServer liegt ab
 * OU-Struktur schon eimal auf Live angelegt.
 * Endpage wird automatisch ignoriert, wenn sie mit der Startpage übereinstimmt.
 * Context und User auf Live angelegt:
 * import_user_MPIMMG
 * pubman
 * OU bei Boris Nieswand (Ethnoforschung) auf Live hinzugefügt.
 * Mit Institut abklären, ob nach Migration "falsche" Affiliations entfernt werden müssen
 * Erledigt: CoNE vom Migrationsserver überspielen
 * Erledigt: Mapping übertragen

Live-Import liegt ab!

ToDos:
 * Nach Feedback vom Institut: Produktivkontext + User anlegen.

=MPI für Pflanzenzüchtungsforschung (MPI PZ)=

Status:
 * alle Daten erhalten und in SVN abgelegt (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_PF)
 * OUs, Context, User vorhanden. Testdatensatz liegt ab.
 * import_user_MPIPZ
 * pubman
 * Testimport liegt ab
 * Antwort wegen "Meyer/Grunewald" erhalten, CoNE-Excel angepasst.
 * Voller Import drin
 * Doppelte CoNE-Einträge gelöscht für "Rosleff Sorensen, T." und "Brautigam, A." (="Harzen, A.").
 * Institut ist benachrichtigt.
 * OU-Struktur schon einmal auf Live angelegt.
 * Frau Hoffmann lebt!
 * Martini, N. in CoNE nachgetragen
 * Context + User auf Live angelegt:
 * import_user_MPIPZ
 * friday13
 * Neuer Komplettexport liegt in SVN
 * Erledigt: CoNE auf Live überspielen
 * Erledigt: Mapping auf Live übertragen.

Live-Import liegt ab!
 * Produktivkontext und Nutzer angelegt. Workflow zunächst "simple". Könnte später erweitert werden.

ToDos:

=MPI für Informatik (MPI INF)=

Status:
 * Daten vom MPI erhalten un din SVN abgelegt (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_INF)
 * OUs, Context und User angelegt
 * Login: import_user_MPII
 * Passwort:friday13
 * Export-Jahrgänge 1998 und 2010 auf SVN abgelegt.
 * Mapping steht
 * Testimport durchgeführt.
 * Institut hat Liste mit beschädigten PDF
 * OU-Struktur schon einmal auf Live angelegt
 * Beschädigte/nicht vorhandene Volltexte werden beimbeim Import ignoriert
 * Erledigt: Doppelung "Christoph Meyer" - "Christoph Kirsch"
 * Institut hat Rückmeldung zum Testbericht bekommen.
 * Publishing Info für nicht-abhängige Genre zugelassen.
 * Erledigt: Bestehende Datensätze auf PubMan löschen
 * Date of Approval ist rätselhafterweise doch im Export vorhanden und wird übernommen.
 * Erledigt: Wenn Genre = Report und editiondescription gefüllt und title of series vorhanden, dann Mapping von editiondescrition auf source.volume.
 * Erledigt: "Local-ID:" vor die entsprechenden Werte setzen.
 * Erledigt: Dummy-Titel ("Untitled Event") setzen, wenn Veranstaltungsdaten (Ort, Beginn-, Enddatum), aber kein Veranstaltungstitel vorhanden sind.
 * Erledigt: Löschen von geschweiften Klammern im Titel.
 * Komplettimport liegt ab.
 * Erledigt: Mime-Types hinzufügen
 * Für die Live-Migration bitte den 2004er Jahrgang weglassen - ist doppelt auf eDoc vorhanden.
 * Fehlende Verlagsnamen auf eDoc nachgetragen
 * Files ohne Dateiendung auf eDoc gelöscht
 * Context und User auf Live angelegt:
 * Login: import_user_MPII
 * Pass: pubman
 * Gelöscht: Wagner, Markus (Computer Graphics, MPI for Informatics, Max Planck Society; persons/resource/persons102633)-> Nach der Migration neu anlegen
 * Jahrgänge in SVN abgelegt

Live-Import liegt ab!

ToDos:
 * Nach Feedback vom Institut: Produktivkontext + User anlegen.

=MPI für Medizinische Forschung (MPI MF)=

Status: Zusätzlich sollen weitere Datumsangaben übernommen werden, die im Feld abgelegt sind: PUBLISHED:2001-08-16 ACCEPTED:2001-07-23 SUBMITTED:2001-04-09
 * alle Daten erhalten und in SvN abgelegt (https://subversion.mpdl.mpg.de/repos/smc/trunk/05_Implementation/01_System/PubMan/eDoc_Migration/Migrationen_Juli_August2011/MPI_MF)
 * CoNE hat RDF-Format (Skript von Wulf Kaiser)
 * Testdatensatz liegt ab
 * OUs, Context, User liegen vor
 * import_user_mpimf
 * friday13
 * Testimport liegt ab
 * Feedback von Herrn Kaiser: beim Testimport wurden keine Fehler festgestellt
 * Gesamtimport auf Migration eingespielt.
 * CoNE Dubletten beseitigt.
 * Beschädigte Volltexte: Institut kümmert sich nach Migration darum
 * Liste mit beschädigten Volltexten ging an Institut
 * Liste mit fehlerhaften Datumsangaben ging an das Institut
 * Simple Validation beim Import ist OK
 * Sämtliche Datumsangaben "0001-01-01 BC" auf eDoc gelöscht
 * Neuer Komplettimport ist drin.
 * Doppelter "von der Lieth" mit großem "V" aus CoNE gelöscht
 * Lütcke aus MPI MF CoNE gelöscht beim Import wird der vom BPC erkannt.
 * Gesamtdaten wurden neu in eDoc eingespielt und liegen jetzt auf SVN ("Gesamtimport_voellig_neu").
 * Erledigt: Mapping anpassen: Date Published wird nach den bisherigen Regeln übernommen. - Mwalter 17:30, 10 April 2012 (CEST)
 * Erledigt: Externe Autoren beim CoNEen berücksichtigen - Martin 08:54, 11 April 2012 (CEST)
 * Herr Lütcke vom BPC wird ignoriert (zu kompliziert) - Martin 08:54, 11 April 2012 (CEST)
 * Gesamtimport liegt ab - Martin 11:30, 12 April 2012 (CEST)
 * Erledigt: OUs anpassen - Martin 11:01, 24 May 2012 (CEST)
 * Erledigt: neues CoNE einspielen - Mwalter 14:53, 25 May 2012 (CEST)
 * Prüfen: Errors/Problems:
 * Erledigt: Verlagsname verlangt: "Any Publisher" einsetzen - Mwalter 08:37, 12 June 2012 (CEST)
 * Erledigt: Exception Prüfen (String Index) (war ein Problem mit Authordecoder) - Mwalter 09:19, 12 June 2012 (CEST)
 * neuer Gesamtimport auf Migration - Mwalter 15:23, 14 June 2012 (CEST)
 * Mime-Type -> prüfen

aus Migration-CoNE und dem XML gelöscht - Martin 16:23, 20 June 2012 (CEST)
 * Doppelte CoNE-Autoren:
 * Meyer zum Alten Borgloh, Stephan
 * Großmann, Silvie
 * Rückermann, Andreas
 * Von der Lieth, Claus Wilhelm
 * In CoNE und XML angepasst: Hoffmann−Berling, Hartmut: mit langem "-" ergänzt - Martin 16:39, 20 June 2012 (CEST)


 * Aufgrund von falschen zugriffen im Classloader komplettes package "de.mpg.escidoc.services.commom.util.creators" umgebaut und umbenannt ("de.mpg.escidoc.services.transformation.util.creators"). Bitte ein Auge auf Fehlverhalten haben - Mwalter 14:03, 13 June 2012 (CEST)
 * ACHTUNG: MPI in neuem CoNE umbenannt ohne Bescheid zu geben "MPI for Medical Research" --> "Max Planck Institute for Medical Research" - Mwalter 10:46, 14 June 2012 (CEST)
 * OUs, Context, User auf Live angelegt: - Martin 14:01, 20 July 2012 (CEST)
 * import_user_MPIMF
 * pubman
 * Erledigt:Vor der Live-Migration: Zwei Direktoren (Winfried Denk, Herr Helmstaedter) wechseln mit ihren Abteilungen zur Neurobiologie (Martinsried). Sie möchten ihre alten Publikationen auch auf den dortigen Seiten haben. Vor der Migration muss gecheckt werden, ob sie schon über die Neuros in CoNE vorhanden sind. In jedem Fall brauchen sie die konkreten Affiliations beider MPIs.
 * Unser Vorschlag: Beide Direktoren bekommen CoNE-Eintrag beider Institute, werden aber nur ind en Context der MF importiert. Neuros müssen zum Einbinden in Institutswebseiten nach den Personen abfragen.

Live-Import liegt ab!


 * Erledigt: CoNE auf LIVE gelöscht und nur interene Personen (mit korrigierter Affiliation) wieder importiert - Mwalter (talk) 16:44, 20 November 2013 (CET)

ToDos:
 * Problems prüfen:
 * Keine Urheber in CoNE gefunden
 * 615327
 * 615314
 * 616365


 * Nachname Urheber
 * 615241
 * 615242