{"_id": {"$oid": "6a31166821e735ae9387e8d9"}, "test_id": "T1106", "benchmark": "fraktur_adverts", "date": "2026-06-08", "tags": {"document-type": ["book-page"], "writing": ["printed"], "century": [18, 19], "language": ["de"], "layout": ["prose"], "script-style": ["fraktur"], "task": ["transcription"]}, "contributors": ["ina_serif", "maximilian_hindermann"], "hidden": false, "config": {"provider": "x-ai", "model": "grok-4.3", "dataclass": "Document", "temperature": 0.0, "role_description": "You are a historian with keyword knowledge", "prompt_file": "prompt_optimized.txt", "legacy_test": false}, "prompt": "## IDENTITY AND PURPOSE\n\nYou are an OCR and information extraction system trained to process historical newspaper pages printed in 18th-century German using Fraktur type. The pages contain mostly classified advertisements. Your task is to identify and extract each advertisement *exactly as printed*, including historical spellings, typographic errors, punctuation, and formatting.\n\n\n## INSTRUCTIONS\n\n- Extract **all advertisements** from the input image, one after the other, following the sequence on the page.\n- Maintain the **original spelling**, capitalization, and any **typos or non-standard forms**.\n- Follow these transcription rules: \n  - the long s (\u017f) is transcribed as \"s\"\n  - \"/\" is transcribed as \",\"\n- Use the masthead of the newspaper only to extract the date, ignore other content.\n- The layout is typically **two-column**; extract ads from both columns, including the ad number.\n- Return the result as a **JSON object** in the specified format and **nothing else** (no explanations, summaries, or additional text).\n- For each advertisement, include:\n  - `\"date\"`: the publication date of the page in ISO 8061 format (YYYY-MM-DD)\n  - `\"tags_section\"`: the heading under which the advertisement appears\n  - `\"text\"`: the full advertisement text\n\n## EXAMPLE OUTPUT\n\n{\n  \"advertisements\": [\n    {\n      \"date\": \"1731-01-02\",\n      \"tags_section\": \"Es werden zum Verkauff offeriert\",\n      \"text\": \"5. Ein kleines, jedoch listiges Lehrbuch der Zauberkunst, lange im Gebrauche des jungen Bartolomeus Simpson.\"\n    },\n    {\n      \"date\": \"1731-01-02\",\n      \"tags_section\": \"Es werden zum Verkauff offeriert\",\n      \"text\": \"6. Ein rarer, mit Edelsteinen besetzter Saxophon-Kasten, aus dem Besitze der Jungfer Lisa Simpson.\"\n    },\n    {\n      \"date\": \"1731-01-02\",\n      \"tags_section\": \"Es werden zu Entleihen begehrt\",\n      \"text\": \"7. Ein gar prachtvoller, jedoch etwas zerlesener Band mit Rezepten von Margaretha Simpsonin.\"\n    }\n  ]\n}\n", "results": {"text": "{\"advertisements\":[{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"1. Ein junger Mensch 20. Jahr alt von sehr honneten Eltern, wegen dessen Conduite sich in Augspurg nach Belieben kan erkundiget werden, sucher Condition als Handels-Bedienter in einem guten Hau\u00df (allwo in Scripturen recht viel zu thun ist) verspricht dem Herrn Patronen in Teutsch- und Jtalianisch auch wo es erfordert wird in Frantz\u00f6sischer Correspondentz und andern Handels-Verrichtungen gute Dienste zu leisten, und alles Vergn\u00fcgen zu geben, sintemalen er ehender keinen Heller Salarium begehret, bi\u00df er bey dem Hn. Patronen, seiner Capacit\u00e4t halben, genugsame Proben abgelegt und gezeigt haben wird, offerirt auch auff die Prob zu kommen, und die Rei\u00df-Spesen zu bestreiten, auch, wo er nicht beliebt werden sollte, seinen R\u00fcckweg auff n\u00e4mliche Condition zu nemen.\"},{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"2. Mstr. Nicolaus Broglin, wohnhafft in der Mindern Stadt an der Obern Rheingass im (sogenandten) Ru\u00dfgaslein, offerirt seine Dienste in Insonderung Schuld, und andern Sachen, es seye im Sundgau, Marggraffenland, Basler-Bisthum, Basel-Gebietb oder anderswo.\"},{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"3. Herr Georg M\u00fcller von Lyon, welcher vor geraumer Zeit seine Dienste in Verfertig, Accommodir- und Aufbesserung so wohl netter als alter Seyden-Gallerieseyden, Faden, Woll- und Baumwollener Manns, Frauen- und Jungfer-Str\u00fcmpffer, auch in Verfertigung der Bagnoletten und Frauent\u00fcchern, Taschen, offeriret, hat vergangene Woche sein Losament abge\u00e4ndert, und befindet sich nunmehro zu hinderst in der Neuen-Vorstadt in Frau Fuchsin Behausung, allwo er noch f\u00fcrba\u00df in dieser Arbeit zu Manniglichs beliebigen Diensten stehet.\"}]}", "model": "grok-4.3", "provider": "x-ai", "finish_reason": "stop", "usage": {"input_tokens": 3229, "output_tokens": 539, "total_tokens": 4604, "cached_tokens": 128, "input_cost_usd": 0.00403625, "output_cost_usd": 0.0013475, "estimated_cost_usd": 0.00538375}, "duration": 19.365607976913452, "timestamp": "2026-06-08T11:41:39.430998", "parsed": {"advertisements": [{"date": null, "tags_section": "Personen so ihre Dienste offeriren", "text": "1. Ein junger Mensch 20. Jahr alt von sehr honneten Eltern, wegen dessen Conduite sich in Augspurg nach Belieben kan erkundiget werden, sucher Condition als Handels-Bedienter in einem guten Hau\u00df (allwo in Scripturen recht viel zu thun ist) verspricht dem Herrn Patronen in Teutsch- und Jtalianisch auch wo es erfordert wird in Frantz\u00f6sischer Correspondentz und andern Handels-Verrichtungen gute Dienste zu leisten, und alles Vergn\u00fcgen zu geben, sintemalen er ehender keinen Heller Salarium begehret, bi\u00df er bey dem Hn. Patronen, seiner Capacit\u00e4t halben, genugsame Proben abgelegt und gezeigt haben wird, offerirt auch auff die Prob zu kommen, und die Rei\u00df-Spesen zu bestreiten, auch, wo er nicht beliebt werden sollte, seinen R\u00fcckweg auff n\u00e4mliche Condition zu nemen."}, {"date": null, "tags_section": "Personen so ihre Dienste offeriren", "text": "2. Mstr. Nicolaus Broglin, wohnhafft in der Mindern Stadt an der Obern Rheingass im (sogenandten) Ru\u00dfgaslein, offerirt seine Dienste in Insonderung Schuld, und andern Sachen, es seye im Sundgau, Marggraffenland, Basler-Bisthum, Basel-Gebietb oder anderswo."}, {"date": null, "tags_section": "Personen so ihre Dienste offeriren", "text": "3. Herr Georg M\u00fcller von Lyon, welcher vor geraumer Zeit seine Dienste in Verfertig, Accommodir- und Aufbesserung so wohl netter als alter Seyden-Gallerieseyden, Faden, Woll- und Baumwollener Manns, Frauen- und Jungfer-Str\u00fcmpffer, auch in Verfertigung der Bagnoletten und Frauent\u00fcchern, Taschen, offeriret, hat vergangene Woche sein Losament abge\u00e4ndert, und befindet sich nunmehro zu hinderst in der Neuen-Vorstadt in Frau Fuchsin Behausung, allwo er noch f\u00fcrba\u00df in dieser Arbeit zu Manniglichs beliebigen Diensten stehet."}]}, "conversation_id": "bad9c658-3e48-4d57-8a9d-b2559f1492ff", "score": {"fuzzy": 0.96, "cer": 0.049}, "raw_response": "{\"id\":\"ac733b1d-f5ca-946c-9ec0-9f242d7a7fb0\",\"choices\":[{\"finish_reason\":\"stop\",\"index\":0,\"logprobs\":null,\"message\":{\"content\":\"{\\n  \\\"advertisements\\\": [\\n    {\\n      \\\"date\\\": null,\\n      \\\"tags_section\\\": \\\"Personen so ihre Dienste offeriren\\\",\\n      \\\"text\\\": \\\"1. Ein junger Mensch 20. Jahr alt von sehr honneten Eltern, wegen dessen Conduite sich in Augspurg nach Belieben kan erkundiget werden, sucher Condition als Handels-Bedienter in einem guten Hau\u00df (allwo in Scripturen recht viel zu thun ist) verspricht dem Herrn Patronen in Teutsch- und Jtalianisch auch wo es erfordert wird in Frantz\u00f6sischer Correspondentz und andern Handels-Verrichtungen gute Dienste zu leisten, und alles Vergn\u00fcgen zu geben, sintemalen er ehender keinen Heller Salarium begehret, bi\u00df er bey dem Hn. Patronen, seiner Capacit\u00e4t halben, genugsame Proben abgelegt und gezeigt haben wird, offerirt auch auff die Prob zu kommen, und die Rei\u00df-Spesen zu bestreiten, auch, wo er nicht beliebt werden sollte, seinen R\u00fcckweg auff n\u00e4mliche Condition zu nemen.\\\"\\n    },\\n    {\\n      \\\"date\\\": null,\\n      \\\"tags_section\\\": \\\"Personen so ihre Dienste offeriren\\\",\\n      \\\"text\\\": \\\"2. Mstr. Nicolaus Broglin, wohnhafft in der Mindern Stadt an der Obern Rheingass im (sogenandten) Ru\u00dfgaslein, offerirt seine Dienste in Insonderung Schuld, und andern Sachen, es seye im Sundgau, Marggraffenland, Basler-Bisthum, Basel-Gebietb oder anderswo.\\\"\\n    },\\n    {\\n      \\\"date\\\": null,\\n      \\\"tags_section\\\": \\\"Personen so ihre Dienste offeriren\\\",\\n      \\\"text\\\": \\\"3. Herr Georg M\u00fcller von Lyon, welcher vor geraumer Zeit seine Dienste in Verfertig, Accommodir- und Aufbesserung so wohl netter als alter Seyden-Gallerieseyden, Faden, Woll- und Baumwollener Manns, Frauen- und Jungfer-Str\u00fcmpffer, auch in Verfertigung der Bagnoletten und Frauent\u00fcchern, Taschen, offeriret, hat vergangene Woche sein Losament abge\u00e4ndert, und befindet sich nunmehro zu hinderst in der Neuen-Vorstadt in Frau Fuchsin Behausung, allwo er noch f\u00fcrba\u00df in dieser Arbeit zu Manniglichs beliebigen Diensten stehet.\\\"\\n    }\\n  ]\\n}\",\"refusal\":null,\"role\":\"assistant\",\"annotations\":null,\"audio\":null,\"function_call\":null,\"tool_calls\":null,\"parsed\":{\"advertisements\":[{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"1. Ein junger Mensch 20. Jahr alt von sehr honneten Eltern, wegen dessen Conduite sich in Augspurg nach Belieben kan erkundiget werden, sucher Condition als Handels-Bedienter in einem guten Hau\u00df (allwo in Scripturen recht viel zu thun ist) verspricht dem Herrn Patronen in Teutsch- und Jtalianisch auch wo es erfordert wird in Frantz\u00f6sischer Correspondentz und andern Handels-Verrichtungen gute Dienste zu leisten, und alles Vergn\u00fcgen zu geben, sintemalen er ehender keinen Heller Salarium begehret, bi\u00df er bey dem Hn. Patronen, seiner Capacit\u00e4t halben, genugsame Proben abgelegt und gezeigt haben wird, offerirt auch auff die Prob zu kommen, und die Rei\u00df-Spesen zu bestreiten, auch, wo er nicht beliebt werden sollte, seinen R\u00fcckweg auff n\u00e4mliche Condition zu nemen.\"},{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"2. Mstr. Nicolaus Broglin, wohnhafft in der Mindern Stadt an der Obern Rheingass im (sogenandten) Ru\u00dfgaslein, offerirt seine Dienste in Insonderung Schuld, und andern Sachen, es seye im Sundgau, Marggraffenland, Basler-Bisthum, Basel-Gebietb oder anderswo.\"},{\"date\":null,\"tags_section\":\"Personen so ihre Dienste offeriren\",\"text\":\"3. Herr Georg M\u00fcller von Lyon, welcher vor geraumer Zeit seine Dienste in Verfertig, Accommodir- und Aufbesserung so wohl netter als alter Seyden-Gallerieseyden, Faden, Woll- und Baumwollener Manns, Frauen- und Jungfer-Str\u00fcmpffer, auch in Verfertigung der Bagnoletten und Frauent\u00fcchern, Taschen, offeriret, hat vergangene Woche sein Losament abge\u00e4ndert, und befindet sich nunmehro zu hinderst in der Neuen-Vorstadt in Frau Fuchsin Behausung, allwo er noch f\u00fcrba\u00df in dieser Arbeit zu Manniglichs beliebigen Diensten stehet.\"}]},\"reasoning_content\":\"The task is to extract advertisements from a Fraktur-printed historical newspaper page. The output must be in a specific JSON format with advertisements listed, each having date, tags_section, and tex...\"}}],\"created\":1780911681,\"model\":\"grok-4.3\",\"object\":\"chat.completion\",\"service_tier\":\"default\",\"system_fingerprint\":\"fp_eb3c003fc66c14ed\",\"usage\":{\"completion_tokens\":539,\"prompt_tokens\":3229,\"total_tokens\":4604,\"completion_tokens_details\":{\"accepted_prediction_tokens\":0,\"audio_tokens\":0,\"reasoning_tokens\":836,\"rejected_prediction_tokens\":0},\"prompt_tokens_details\":{\"audio_tokens\":0,\"cached_tokens\":128,\"text_tokens\":833,\"image_tokens\":2396},\"num_sources_used\":0,\"cost_in_usd_ticks\":73393500}}"}, "scoring": {"fuzzy": 0.868, "cer": 0.155, "cost_summary": {"total_input_tokens": 12153, "total_output_tokens": 7541, "total_tokens": 19694, "input_cost_usd": 0.01519125, "output_cost_usd": 0.018852499999999998, "total_cost_usd": 0.03404375}}, "normalized_score": 84.5}