<commit_before>* Marc21
** Neue Hörbucher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract (=Annotation)
6. Spieldauer in Minuten
7. „gelesen von:“ Sprecher (falls es mehrere sind: mit „u.a.“)
8. Produzent (Kürzel der übertragenden Organisation), Stadt. Falls es sich um ein kommerzielles Hörbuch handelt, zusätzlich: „Hörbuch aus dem Handel“
9. Signaturen (zuerst Ausleihe, dann Verkauf mit Preisangabe in Franken)

** Neue Braillebücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. Produzent (Kürzel), Stadt. Falls es sich um ein Rucksackbuch handelt, zusätzlich: „Rucksackbuch“
7. Schriftart, Bandangabe, Signaturen (zuerst Ausleihe, dann allenfalls Verkauf, gefolgt von Preisangabe in Franken)

** Neue Grossdruckbücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. Signatur: „Ausleihe“: Bandangabe und Signatur, „Verkauf“: Preis

** Neue E-Books
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. „Ausleihe“: Signatur

** Neue Hörfilme
1. Titel, Untertitel
2. „Regie:“ Name Regisseur
3. „Schauspieler:“ Namen der Hauptdarstellern
4. Land, Erscheinungsjahr (des Originalfilms)
5. Filmkategorie (Spielfilm, Dokumentarfilm, Mundartfilm)
6. Abstract
7. Produzent
8. „Ausleihe“: Signatur

** Neue Spiele
1. Autor
2. Titel, Untertitel
3. Verlag (Originalproduzent)
4. Systematikgruppe
5. Abstract
6. Materialdetails
7. „Ausleihe“: Signatur

** Neue taktile Bücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Abstract
5. Produzent (Kürzel), Stadt
6. Schriftart und Bemerkungen, Bandangabe, Begleitmaterialien, Signaturen

** Neue Musiknoten
1. Komponist: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere
   sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an
   verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Abstract
5. Produzent (Kürzel), Stadt
6. Schriftart und Bemerkungen, Bandangabe, Begleitmaterialien,
   Signaturen

** Aggregated
 1. Record-id
 2. Autor
 3. Titel
 4. Untertitel
 5. Bandangabe
 6. Verlag
 7. Erscheinungsjahr
 8. Genre
 9. Abstract
 10. Spieldauer
 11. Sprecher
 12. Produzent
 13. Produzent Stadt
 14. kommerziell?
 15. rucksackbuch?
 16. Signaturen
 17. Preis
 18. Schriftart
 19. Bandangabe
 20. Regie
 21. Schauspieler
 22. Film_Land
 23. Filmkategorie
 24. Spiel-Systematikgruppe
 25. Spiel-Materialdetails


* Layout
** Neue Hörbucher
*<NAME>: [[http:online.link][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique. 
  697 Min., gelesen von: <NAME>[ u.a]. DZB, Leipzig[, Hörbuch aus dem Handel].
  *Ausleihe:* DY 12345
  *Verkauf:* DY 456789, CHF 21.90
  
** Neue Braillebücher
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique. 
  DZB, Leipzig[, Rucksackbuch Nr. XX].
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679

Schriftart = ["Kurzschrift" "Vollschrift" "Weitzeilige Vollschrift"]

** Neue Grossdruckbücher
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  *Ausleihe:* GD 12345, 3 Bd.
  *Verkauf:* CHF 21.90

** Neue E-Books
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  *Ausleihe:* EB 12345

** Neue Hörfilme
*[[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel.
  Regie: <NAME>, Schauspieler: <NAME>, <NAME>.
  Schweiz, 1955.
  Mundartfilm.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  Präsens-Film.
  *Ausleihe:* VI 12345

** Neue Spiele
*[[foo][Die Siedler von Catan]].* Untertitel. Klaus Teuber.
  Kosmos.
  Systematikgruppe.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  Materialdetails.
  *Ausleihe:* XX 12345
** Neue taktile Bücher
*Muster, Hans: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  DZB, Leipzig.
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679
** Neue Musiknoten
*Muster, Hans: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  DZB, Leipzig.
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679


* Validation
** Neue Hörbucher
- missing :sub-genre
  - ist ein Problem weil das Buch nicht im Katalog eingeordnet werden kann
- missing :source-date
  - wahrscheinlich nicht so schlimm
- missing :source-publisher
  - wahrscheinlich nicht so schlimm<commit_msg>Tactile books should show the genre<commit_after>* Marc21
** Neue Hörbucher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract (=Annotation)
6. Spieldauer in Minuten
7. „gelesen von:“ Sprecher (falls es mehrere sind: mit „u.a.“)
8. Produzent (Kürzel der übertragenden Organisation), Stadt. Falls es sich um ein kommerzielles Hörbuch handelt, zusätzlich: „Hörbuch aus dem Handel“
9. Signaturen (zuerst Ausleihe, dann Verkauf mit Preisangabe in Franken)

** Neue Braillebücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. Produzent (Kürzel), Stadt. Falls es sich um ein Rucksackbuch handelt, zusätzlich: „Rucksackbuch“
7. Schriftart, Bandangabe, Signaturen (zuerst Ausleihe, dann allenfalls Verkauf, gefolgt von Preisangabe in Franken)

** Neue Grossdruckbücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. Signatur: „Ausleihe“: Bandangabe und Signatur, „Verkauf“: Preis

** Neue E-Books
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Genre
5. Abstract
6. „Ausleihe“: Signatur

** Neue Hörfilme
1. Titel, Untertitel
2. „Regie:“ Name Regisseur
3. „Schauspieler:“ Namen der Hauptdarstellern
4. Land, Erscheinungsjahr (des Originalfilms)
5. Filmkategorie (Spielfilm, Dokumentarfilm, Mundartfilm)
6. Abstract
7. Produzent
8. „Ausleihe“: Signatur

** Neue Spiele
1. Autor
2. Titel, Untertitel
3. Verlag (Originalproduzent)
4. Systematikgruppe
5. Abstract
6. Materialdetails
7. „Ausleihe“: Signatur

** Neue taktile Bücher
1. Autor: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Abstract
5. Produzent (Kürzel), Stadt
6. Schriftart und Bemerkungen, Bandangabe, Begleitmaterialien, Signaturen

** Neue Musiknoten
1. Komponist: Nachname, Vorname (nur 1 Name, selbst wenn es mehrere
   sind; ohne „u.a.“)
2. Titelbereich: Titel, Untertitel, Bandangabe (die Bandangabe kann an
   verschiedenen Orten innerhalb des Titelbereichs sein)
3. Verlag, Erscheinungsjahr
4. Abstract
5. Produzent (Kürzel), Stadt
6. Schriftart und Bemerkungen, Bandangabe, Begleitmaterialien,
   Signaturen

** Aggregated
 1. Record-id
 2. Autor
 3. Titel
 4. Untertitel
 5. Bandangabe
 6. Verlag
 7. Erscheinungsjahr
 8. Genre
 9. Abstract
 10. Spieldauer
 11. Sprecher
 12. Produzent
 13. Produzent Stadt
 14. kommerziell?
 15. rucksackbuch?
 16. Signaturen
 17. Preis
 18. Schriftart
 19. Bandangabe
 20. Regie
 21. Schauspieler
 22. Film_Land
 23. Filmkategorie
 24. Spiel-Systematikgruppe
 25. Spiel-Materialdetails


* Layout
** Neue Hörbucher
*<NAME>: [[http:online.link][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique. 
  697 Min., gelesen von: Klaus Zippel[ u.a]. DZB, Leipzig[, Hörbuch aus dem Handel].
  *Ausleihe:* DY 12345
  *Verkauf:* DY 456789, CHF 21.90
  
** Neue Braillebücher
*Muster, Hans: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique. 
  DZB, Leipzig[, Rucksackbuch Nr. XX].
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679

Schriftart = ["Kurzschrift" "Vollschrift" "Weitzeilige Vollschrift"]

** Neue Grossdruckbücher
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  *Ausleihe:* GD 12345, 3 Bd.
  *Verkauf:* CHF 21.90

** Neue E-Books
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Abenteuerromane.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  *Ausleihe:* EB 12345

** Neue Hörfilme
*[[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel.
  Regie: <NAME>, Schauspieler: <NAME>, <NAME>.
  Schweiz, 1955.
  Mundartfilm.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  Präsens-Film.
  *Ausleihe:* VI 12345

** Neue Spiele
*[[foo][Die Siedler von Catan]].* Untertitel. K<NAME>.
  Kosmos.
  Systematikgruppe.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  Materialdetails.
  *Ausleihe:* XX 12345
** Neue Taktile Bücher
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Genre: Bilderbücher
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  DZB, Leipzig.
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679
** Neue Musiknoten
*<NAME>: [[foo][Ein ellenlanger Titel]].* Ein ellenlanger Untertitel. Bandangabe. - Aufbau-Verlag, 2014.
  Lorem ipsum dolor sit amet, consectetur adipiscing elit. Ut non libero vel quam dictum tincidunt. Duis eleifend leo at neque tristique.
  DZB, Leipzig.
  *Ausleihe:* Kurzschrift, 5 Bd., DS 12345. Vollschrift, 7 Bd., DS 12346, Weitzeilige Vollschrift, 10 Bd., DS 45678
  *Verkauf:* CHF 21.90. Kurzschrift, 5 Bd., DS 12347. Vollschrift, 7 Bd., DS 12347, Weitzeilige Vollschrift, 10 Bd., DS 45679


* Validation
** Neue Hörbucher
- missing :sub-genre
  - ist ein Problem weil das Buch nicht im Katalog eingeordnet werden kann
- missing :source-date
  - wahrscheinlich nicht so schlimm
- missing :source-publisher
  - wahrscheinlich nicht so schlimm
{'fraction_non_alphanumeric': 0.09321734210340193, 'fraction_numerical': 0.04257726854798784, 'mean_word_length': 4.428023032629558, 'pattern_counts': {'":': 0, '<': 20, '<?xml version=': 0, '>': 20, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 16, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '1935511', 'n_tokens_mistral': 5887, 'n_tokens_neox': 5565, 'n_words': 1811}