Differences between revisions 1 and 3 (spanning 2 versions)

Import af poster til M5

Denne gang er alle importer kørt med p_file_06 der checker data (i et vist omfang).

Køretiden var ca. 12 timer.

For de meget interesserede kan alle data- og logfiler ses her

Bibliografiske poster

Fra Mads kom der følgende kommentar da han afleverede data:

Jeg har konverteret data fra Eriks dump med dato 2009-09-29.

Jeg har lagt resultatet i en zip-fil her:

O/dorete/konvertering/total.out.2009-09-29.zip

Logfilen fra kørslen kan også findes i zip-filen. Ligesom sidste gang er der nogle OWN-koder, der bliver konverteret til UFEJL. Ifølge Dorete så er det helt i orden, men det er naturligvis altid godt lige at kigge på dem for at se, at der ikke er dukket nogle nye op, der eksplicit skal håndteres.

Derudover er der en enkelt fejl pga. sorteringstegn fra Horizon. Den fejl skal løses i dumpet fra Horizon.

Da jeg kikkede loggen igennem noterede jeg mig

Der er ca 200 linier som omhandler delfelt 5 problemer, såsom:
2009-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error converting OWN code for record: 32656 --- Error looking up subfield 5 value: ALM P. Returning OWN code UFEJL.
2009-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error looking up subfield 5 value: Alm P for record: 32656. Using empty string as subfield 5.
2009-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error looking up subfield 5 value: Alm P for record: 32656. Using value of subfield 5 as subfield 6.

Der var ikke nogen yderligere kommentarer i logfilerne fra Aleph.

Eksemplarposterne

Bjørn havde følgende bemærkninger til posterne:

Eksemplare: 3401965 læst, 63009 skippet, 11093 fejl
Eksemplar fejlene er primært radio/tv poster f.eks
Loc: SB-ratv, BNEW1901775) unable to translate itype: r/tv to item
status for m
Der er ca 9000 af den type, de resterende ca 2000 fejl ser ud til
primært at være AU materialer af typen periodica men uden copy poster i 
horizon.
Skippede eksemplare er eksemplare tilhørende filialer, der ikke skal 
konverteres.

Importen til Aleph gav anledning til en del fejl af følgende typer:

0208 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000010298
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000011184
0207 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-PROCESS-STATUS
%Errors found for record in line 000000519

Lån

Bjørn gav følgende kommentar med:

Lån: 121006 læst, 1 skippet, 27 fejl
Det skippede lån ligger på et materiale, der ikke skal konverteres,
fejlene skyldes primært fejl i eksemplar posterne.

Der var ingen kommentarer fra Aleph ved importen, udover

Start check/correct of records...
Program is not exists: correct_z36

Reservationer

Bjørns kommentar:

Bestillinger/reservationer:  13476 læst, 1936 skippet, 0 fejl
Poster skippet er fravalgt ifølge konverterings specifikationen.

Importen til Aleph gav et antal kommentarer af typen

0202 : Z37-PICKUP-LOCATION is not valid
%Errors found for record in line 000000008
0212 : Z37-END-REQUEST-DATE should be latest then Z37-REQUEST-DATE
%Errors found for record in line 000005201

Copy-poster med tilhørende items

Aleph importen af subscriptions gav en del fejl såsom

0209 : Wrong Borrower ID (Z16-ID)
%Errors found for record in line 000000132
0208 : conflict between Z16-SUB-LIBRARY and Z16-ITEM-STATUS (check tab15)
%Errors found for record in line 000000660
0207 : Z16-CLAIM-2 (-3, -4) can not be empty when Z16-CLAIM  is "Y"
%Errors found for record in line 000165166

De tilhørende copyissue og copyitem poster gav følgende typer af fejl:

0110 : Z30-MATERIAL is not valid
0208 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000093720

Vendor poster

Importen ef vendor (SOL50 z70 og z72) poster gav ingen klager.

-  ⇤ ← Revision 1 as of 2009-10-02 12:32:00 → 
  Size: 5145
  Editor: NielsBaggesen
  Comment:
+   ← Revision 3 as of 2010-02-23 14:38:18 → ⇥
  Size: 4155
  Editor: localhost
  Comment: converted to 1.6 markup
-Deletions are marked like this.
+Additions are marked like this.
 Line 7:
-For de meget interesserede kan alle data- og logfiler ses [http://rastaban:30080/milestone/m5/ her]


= Det følgende er en kopi fra M4 ... så stop læsningen her! =
+For de meget interesserede kan alle data- og logfiler ses [[http://rastaban:30080/milestone/m5/|her]]
-Line 17:
+Line 13:
-Jeg har konverteret data fra Eriks dump med dato 2009-08-31.
+Jeg har konverteret data fra Eriks dump med dato 2009-09-29.
-Line 21:
+Line 17:
-O/dorete/konvertering/total.out.2009-08-31.zip
+O/dorete/konvertering/total.out.2009-09-29.zip
-Line 23:
+Line 19:
-Jeg har vedhæftet logfilen fra kørslen. De fejl, de har med NOBELF burde
have været ordnet, men et eller andet er åbenbart gået galt med den fil
jeg læser konverteringskoderne fra. Det kommer på plads til næste
kørsel.
+Logfilen fra kørslen kan også findes i zip-filen. Ligesom sidste gang er der nogle OWN-koder, der bliver konverteret til UFEJL. Ifølge Dorete så er det helt i orden, men det er naturligvis altid godt lige at kigge på dem for at se, at der ikke er dukket nogle nye op, der eksplicit skal håndteres.
-Line 28:
+Line 21:
-Derudover er der 87 fejl pga. sorteringstegn, som så vidt jeg er husker
skal løses i horizon.
+Derudover er der en enkelt fejl pga. sorteringstegn fra Horizon. Den fejl skal løses i dumpet fra Horizon.
-Line 35:
+Line 27:
--09-02 10:00:48,812 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.
HOLConvert - Error looking up subfield 5 value: SV. Returning OWN code UFEJL.
2009-09-02 10:00:48,812 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.
HOLConvert - Error looking up subfield 5 value: SV. Returning empty string as subfield 5.
2009-09-02 10:00:48,812 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.
HOLConvert - Error looking up subfield 5 value: SV. Returning value of subfield 5 as subfield 6.
+-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error converting OWN code for record: 32656 --- Error looking up subfield 5 value: ALM P. Returning OWN code UFEJL.
2009-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error looking up subfield 5 value: Alm P for record: 32656. Using empty string as subfield 5.
2009-09-29 18:38:21,790 [main] WARN  dk.statsbiblioteket.alephimportexport.marc.HOLConvert - Error looking up subfield 5 value: Alm P for record: 32656. Using value of subfield 5 as subfield 6.
-Line 42:
+Line 31:
-En enkelt linie har et problem med Aleph escape code i et 909 *a
-Line 49:
+Line 37:
-3364615 poster læst
57806 skippet da eksemplarenre tilhører filialer, der ikke skal konverteres
47 poster kunne ikke konverteres på grund af fejl i eksemplar data,
f.eks ugyldige filial og samlings kombinationer
+Eksemplare: 3401965 læst, 63009 skippet, 11093 fejl
Eksemplar fejlene er primært radio/tv poster f.eks
Loc: SB-ratv, BNEW1901775) unable to translate itype: r/tv to item
status for m
Der er ca 9000 af den type, de resterende ca 2000 fejl ser ud til
primært at være AU materialer af typen periodica men uden copy poster i 
horizon.
Skippede eksemplare er eksemplare tilhørende filialer, der ikke skal 
konverteres.
-Line 56:
+Line 50:
+: conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000010298
-Line 57:
+Line 53:
-%Errors found for record in line 000000300
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000301
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000376
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000380
0208 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000000395
0208 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000000396
+%Errors found for record in line 000011184
0207 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-PROCESS-STATUS
%Errors found for record in line 000000519
-Line 72:
+Line 60:
-poster læst
1 post skippet da filialen ikke skal konverteres
6 poster droppet på grund af fejl, dvs 3 lån på ikke eksisterende
eksemplarer og 3 lån på materialer i ugyldig tilstand.
+Lån: 121006 læst, 1 skippet, 27 fejl
Det skippede lån ligger på et materiale, der ikke skal konverteres,
fejlene skyldes primært fejl i eksemplar posterne.
-Line 85:
+Line 73:
-poster læst
11544 poster skrevet
1677 poster filtreret fra på grund af deres type/status eller ugyldige afhentningssteder.
+Bestillinger/reservationer:  13476 læst, 1936 skippet, 0 fejl
Poster skippet er fravalgt ifølge konverterings specifikationen.
-Line 92:
+Line 80:
-%Errors found for record in line 000000014
+%Errors found for record in line 000000008
0212 : Z37-END-REQUEST-DATE should be latest then Z37-REQUEST-DATE
%Errors found for record in line 000005201
-Line 94:
+Line 84:
-Der er også et antal fejl som
+== Copy-poster med tilhørende items ==
Aleph importen af subscriptions gav en del fejl såsom
-Line 96:
+Line 87:
-:36:34 Error (get_buf_z30_like) : io_z30.read for "SOL50.z30.003529483000010" failed
}}}
De kan muligvis skyldes de førstnævnte problemer med importer der fejlede, som kan have givet anledning til manglende poster på det tidspunkt hvor bestillingerne blev lagt ind. Det skal afgøres ved en omkørsel.
== Copy-poster med tilhørende items ==
Aleph importen af copy-poster gav en del fejl, såsom
{{{
0210 : Invalid Collection
%Errors found for record in line 000000009
0210 : Invalid Collection
%Errors found for record in line 000000010
0210 : Invalid Collection
%Errors found for record in line 000000014
0210 : Invalid Collection
%Errors found for record in line 000000031
0210 : Invalid Collection
%Errors found for record in line 000000033
+: Wrong Borrower ID (Z16-ID)
%Errors found for record in line 000000132
-Line 113:
+Line 90:
-%Errors found for record in line 000000072
+%Errors found for record in line 000000660
-Line 115:
+Line 92:
-%Errors found for record in line 000000103
+%Errors found for record in line 000165166
-Line 119:
+Line 96:
-: Z30-COLLECTION is not valid
%Errors found for record in line 000000071
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000072
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000073
0206 : Z30-COLLECTION is not valid
%Errors found for record in line 000000074
+: Z30-MATERIAL is not valid
0208 : conflict between Z30-SUB-LIBRARY and Z30-ITEM-STATUS
%Errors found for record in line 000093720
-Line 129:
+Line 102:
-Importen ef vendor (SOL50 z70 og z72) poster gav klager som
{{{
0201 : Z70-CURRENCY-1 is not correct
%Errors found for record in line 000000001
0201 : Z70-CURRENCY-1 is not correct
%Errors found for record in line 000000002
}}}
hvilket skyldes at vi manglede z82 tabeller der definerer møntfødder. De er siden lavet i hånden.
+Importen ef vendor (SOL50 z70 og z72) poster gav ingen klager.

Diff for "ImportM5"

Generel vejledning alle moduler

Koder

Udlån

Katalogisering

Accession/tidsskrifter

AU-specielt

Diverse