folder structure - NEISSproject/tei_entity_enricher GitHub Wiki
(work in progress)
When all menus have been called once in the graphical interface and functions have been used, the folder structure of the project folder approximately corresponds to the following representation.
📦<project folder>
┣ 📂config
┃ ┗ 📂postprocessing
┃ ┣ 📜entity_library.json
┃ ┣ 📜furtherIds_config.json
┃ ┣ 📜gnd_apilist.json
┃ ┗ 📜link_sugesstion_categories.json
┣ 📂ner_prediction
┣ 📂ner_trainer
┃ ┣ 📂models_ner
┃ ┃ ┗ 📂example_entity_tagger
┃ ┃ ┣ 📂best
┃ ┃ ┣ 📂export
┃ ┃ ┣ 📂train
┃ ┃ ┣ 📂validation
┃ ┃ ┣ 📂variables
┃ ┃ ┣ 📜train.log
┃ ┃ ┗ 📜trainer_params.json
┃ ┣ 📂models_pretrained
┃ ┃ ┗ 📂default_bert
┃ ┃ ┗ 📂example_language_model
┃ ┣ 📂templates
┃ ┃ ┣ 📂data
┃ ┃ ┃ ┗ 📜conll_small_val.json
┃ ┃ ┣ 📂hf_cache
┃ ┃ ┣ 📂lists
┃ ┃ ┃ ┗ 📜conll_small_val.lst
┃ ┃ ┣ 📂tags
┃ ┃ ┃ ┣ 📜germeval_wp.txt
┃ ┃ ┃ ┗ 📜tags_conll.txt
┃ ┃ ┣ 📂tokenizer
┃ ┃ ┃ ┗ 📜tokenizer_de.subwords
┃ ┃ ┗ 📜__init__.py
┃ ┗ 📜trainer_params.json
┣ 📂NTD
┣ 📂tei_entity_enricher
┃ ┣ 📂tei_entity_enricher
┃ ┃ ┣ 📂images
┃ ┃ ┃ ┣ 📜logo_EU_ESF.png
┃ ┃ ┃ ┣ 📜logo_EU_Fonds.png
┃ ┃ ┃ ┣ 📜logo_MV_BM.png
┃ ┃ ┃ ┣ 📜neiss_logo_nn_pentagon01b2.png
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂interface
┃ ┃ ┃ ┣ 📂postprocessing
┃ ┃ ┃ ┃ ┣ 📜entity_library.py
┃ ┃ ┃ ┃ ┣ 📜gnd_connector.py
┃ ┃ ┃ ┃ ┣ 📜identifier.py
┃ ┃ ┃ ┃ ┣ 📜io.py
┃ ┃ ┃ ┃ ┗ 📜wikidata_connector.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂menu
┃ ┃ ┃ ┣ 📜link_sug_cat.py
┃ ┃ ┃ ┣ 📜main.py
┃ ┃ ┃ ┣ 📜menu_base.py
┃ ┃ ┃ ┣ 📜ner_evaluate.py
┃ ┃ ┃ ┣ 📜ner_prediction.py
┃ ┃ ┃ ┣ 📜ner_resume.py
┃ ┃ ┃ ┣ 📜ner_task_def.py
┃ ┃ ┃ ┣ 📜ner_trainer.py
┃ ┃ ┃ ┣ 📜tei_man_postproc.py
┃ ┃ ┃ ┣ 📜tei_ner_gb.py
┃ ┃ ┃ ┣ 📜tei_ner_map.py
┃ ┃ ┃ ┣ 📜tei_ner_writer_map.py
┃ ┃ ┃ ┣ 📜tei_postprocessing.py
┃ ┃ ┃ ┣ 📜tei_reader.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂scripts
┃ ┃ ┃ ┣ 📜ntee.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂templates
┃ ┃ ┃ ┣ 📂NTD
┃ ┃ ┃ ┃ ┣ 📜Arendt_Edition.json
┃ ┃ ┃ ┃ ┣ 📜Arendt_Edition.txt
┃ ┃ ┃ ┃ ┣ 📜GermEval14.json
┃ ┃ ┃ ┃ ┣ 📜GermEval14.txt
┃ ┃ ┃ ┃ ┣ 📜Sturm_Edition.json
┃ ┃ ┃ ┃ ┣ 📜Sturm_Edition.txt
┃ ┃ ┃ ┃ ┣ 📜UJWA_Edition.json
┃ ┃ ┃ ┃ ┣ 📜UJWA_Edition.txt
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂prediction
┃ ┃ ┃ ┃ ┣ 📂templates
┃ ┃ ┃ ┃ ┃ ┣ 📜pred_input_example1.json
┃ ┃ ┃ ┃ ┃ ┣ 📜pred_input_example2.json
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂TNG
┃ ┃ ┃ ┃ ┣ 📂Arendt_by_Sentences
┃ ┃ ┃ ┃ ┃ ┣ 📂dev
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dev_Arendt_by_Sentences.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂test
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜test_Arendt_by_Sentences.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂train
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜train_Arendt_by_Sentences.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📜Arendt_by_Sentences.json
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📂Sturm_by_File
┃ ┃ ┃ ┃ ┃ ┣ 📂dev
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140507.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140807.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140820.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140822.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141009.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150228.JVH.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150317.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150429.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150906.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151014.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151126.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151209.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151209.JVH.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160115.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200428.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200902.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19211020.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂test
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140414.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140606.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140721.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140908.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150403.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150530.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150703.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150723.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151016.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151018.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151223.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160128.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160205.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190106.JVH.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190618.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190930.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19211223.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19220217.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂train
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140115.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140119.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140121.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140124.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140125.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140125.FMA.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140322.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140409.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140421.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140512.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140514.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140601.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140608.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140610.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140612.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140627.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140703.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140704.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140708.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140727.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140730.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140831.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19140925.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141005.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141014.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141016.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141023.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141027.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141105.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141111.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141113.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141117.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141129.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141203.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141210.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19141219.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150112.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150116.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150121.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150123.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150129.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150131.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150209.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150217.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150228.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150303.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150303.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150308.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150310.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150313.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150315.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150315.FMA.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150321.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150323.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150327.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150328.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150409.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150413.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150417.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150501.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150507.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150517.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150606.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150615.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150618.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150624.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150710.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150710.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150818.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150824.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150827.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150911.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150918.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150922.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19150929.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151001.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151007.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151010.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151027.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151106.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151113.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151115.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151124.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151125.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151126.JVH.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151206.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151218.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151218.JVH.02.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19151225.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160101.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160122.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19160302.FMA.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190106.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190124.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190207.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190217.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190302.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190509.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190628.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190702.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190807.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190821.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190828.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190905.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190923.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190924.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19190927.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191004.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191107.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191116.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191209.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191212.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19191230.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200114.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200201.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200301.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200414.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200417.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200528.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19200818.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19201104.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19201208.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19201219.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19201223.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210129.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210204.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210412.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210605.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210804.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210824.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210830.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210914.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210921.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19210930.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19211025.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19211211.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜Q.01.19220402.JVH.01.xml.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📜Sturm_by_File.json
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂TNM
┃ ┃ ┃ ┃ ┣ 📜Arendt_Edition.json
┃ ┃ ┃ ┃ ┣ 📜Sturm_Edition.json
┃ ┃ ┃ ┃ ┣ 📜UJWA_Edition.json
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂TNW
┃ ┃ ┃ ┃ ┣ 📜GermEval_Prediction_Writer.json
┃ ┃ ┃ ┃ ┗ 📜UJWA_Prediction_Writer.json
┃ ┃ ┃ ┣ 📂trainer
┃ ┃ ┃ ┃ ┣ 📂template_wd
┃ ┃ ┃ ┃ ┃ ┣ 📂templates
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📂data
┃ ┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜conll_small_val.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📂lists
┃ ┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜conll_small_val.lst
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📂tags
┃ ┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜germeval_wp.txt
┃ ┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜tags_conll.txt
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📂tokenizer
┃ ┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜tokenizer_de.subwords
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📜trainer_params.json
┃ ┃ ┃ ┃ ┃ ┗ 📜trainer_params.json_backup
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂TR_Configs
┃ ┃ ┃ ┃ ┣ 📜Arendt_Edition.json
┃ ┃ ┃ ┃ ┣ 📜Standard.json
┃ ┃ ┃ ┃ ┣ 📜UJWA_Edition.json
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂test
┃ ┃ ┃ ┣ 📂base
┃ ┃ ┃ ┃ ┣ 📜test_path.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂interface
┃ ┃ ┃ ┃ ┣ 📂test_postprocessing
┃ ┃ ┃ ┃ ┃ ┣ 📜test_entity_library.py
┃ ┃ ┃ ┃ ┃ ┣ 📜test_gnd_connector.py
┃ ┃ ┃ ┃ ┃ ┣ 📜test_identifier.py
┃ ┃ ┃ ┃ ┃ ┣ 📜test_io.py
┃ ┃ ┃ ┃ ┃ ┣ 📜test_wikidata_connector.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂util
┃ ┃ ┃ ┣ 📂aip_interface
┃ ┃ ┃ ┃ ┣ 📂processmanger
┃ ┃ ┃ ┃ ┃ ┣ 📜base.py
┃ ┃ ┃ ┃ ┃ ┣ 📜evaluate.py
┃ ┃ ┃ ┃ ┃ ┣ 📜predict.py
┃ ┃ ┃ ┃ ┃ ┣ 📜resume.py
┃ ┃ ┃ ┃ ┃ ┣ 📜train.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📜base_params.py
┃ ┃ ┃ ┃ ┣ 📜evaluate_params.py
┃ ┃ ┃ ┃ ┣ 📜prediction_params.py
┃ ┃ ┃ ┃ ┣ 📜resume_params.py
┃ ┃ ┃ ┃ ┣ 📜trainer_params.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📜beacon_file_for_tests.txt
┃ ┃ ┃ ┣ 📜components.py
┃ ┃ ┃ ┣ 📜config_io.py
┃ ┃ ┃ ┣ 📜csv_file_for_tests.csv
┃ ┃ ┃ ┣ 📜exceptions.py
┃ ┃ ┃ ┣ 📜helper.py
┃ ┃ ┃ ┣ 📜json_file_for_tests.json
┃ ┃ ┃ ┣ 📜spacy_lm.py
┃ ┃ ┃ ┣ 📜tei_parser.py
┃ ┃ ┃ ┣ 📜tei_writer.py
┃ ┃ ┃ ┣ 📜train_course_helper.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┗ 📜__init__.py
┃ ┣ 📜.pre-commit-config.yaml
┃ ┣ 📜LICENSE
┃ ┣ 📜pyproject.toml
┃ ┣ 📜README.md
┃ ┣ 📜requirements.txt
┃ ┣ 📜setup.cfg
┃ ┗ 📜setup.py
┣ 📂tf2_neiss_nlp
┃ ┣ 📂tfaip_addons
┃ ┃ ┣ 📂baselayers
┃ ┃ ┃ ┣ 📜activation.py
┃ ┃ ┃ ┣ 📜util.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂transformer
┃ ┃ ┃ ┣ 📂attention
┃ ┃ ┃ ┃ ┣ 📜layers.py
┃ ┃ ┃ ┃ ┣ 📜masking.py
┃ ┃ ┃ ┃ ┣ 📜multiheadattention.py
┃ ┃ ┃ ┃ ┣ 📜positional_encoding.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┣ 📂util
┃ ┃ ┃ ┃ ┣ 📂file
┃ ┃ ┃ ┃ ┣ 📜pai_file.py
┃ ┃ ┃ ┃ ┣ 📜ref.py
┃ ┃ ┃ ┃ ┣ 📜stringmapper.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┗ 📜__init__.py
┃ ┣ 📂tfaip_scenario
┃ ┃ ┣ 📂nlp
┃ ┃ ┃ ┣ 📂bert_pretraining
┃ ┃ ┃ ┃ ┣ 📂mlm
┃ ┃ ┃ ┃ ┃ ┣ 📜model.py
┃ ┃ ┃ ┃ ┃ ┣ 📜scenario.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📂nsp
┃ ┃ ┃ ┃ ┃ ┣ 📜model.py
┃ ┃ ┃ ┃ ┃ ┣ 📜scenario.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📂sop
┃ ┃ ┃ ┃ ┃ ┣ 📜model.py
┃ ┃ ┃ ┃ ┃ ┣ 📜scenario.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂data
┃ ┃ ┃ ┃ ┣ 📂processors
┃ ┃ ┃ ┃ ┃ ┣ 📜mlm_task.py
┃ ┃ ┃ ┃ ┃ ┣ 📜ner_task.py
┃ ┃ ┃ ┃ ┃ ┣ 📜nlp_base.py
┃ ┃ ┃ ┃ ┃ ┣ 📜nsp_task.py
┃ ┃ ┃ ┃ ┃ ┣ 📜sop_task.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📜from_datasets.py
┃ ┃ ┃ ┃ ┣ 📜mlm.py
┃ ┃ ┃ ┃ ┣ 📜ner.py
┃ ┃ ┃ ┃ ┣ 📜ner_params.py
┃ ┃ ┃ ┃ ┣ 📜nlp_base.py
┃ ┃ ┃ ┃ ┣ 📜nlp_base_params.py
┃ ┃ ┃ ┃ ┣ 📜nsp.py
┃ ┃ ┃ ┃ ┣ 📜sop.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂ner
┃ ┃ ┃ ┃ ┣ 📂scripts
┃ ┃ ┃ ┃ ┃ ┣ 📜prediction_ner.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📜model.py
┃ ┃ ┃ ┃ ┣ 📜scenario.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📂util
┃ ┃ ┃ ┃ ┣ 📂tools
┃ ┃ ┃ ┃ ┃ ┣ 📜convert_old_models.py
┃ ┃ ┃ ┃ ┃ ┣ 📜evaluate_ner_csv.py
┃ ┃ ┃ ┃ ┃ ┣ 📜join_lav_json.py
┃ ┃ ┃ ┃ ┃ ┣ 📜ner_data_generator.py
┃ ┃ ┃ ┃ ┃ ┣ 📜split_ner_list_by_length.py
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📜create_vocabs.py
┃ ┃ ┃ ┃ ┣ 📜hf_helper.py
┃ ┃ ┃ ┃ ┣ 📜list_lav_callback.py
┃ ┃ ┃ ┃ ┣ 📜ner_eval.py
┃ ┃ ┃ ┃ ┣ 📜ner_eval_token.py
┃ ┃ ┃ ┃ ┣ 📜nlp_helper.py
┃ ┃ ┃ ┃ ┣ 📜transformer.py
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┗ 📜__init__.py
┃ ┣ 📂tfaip_scenario_test
┃ ┃ ┣ 📂nlp
┃ ┃ ┃ ┣ 📂workdir
┃ ┃ ┃ ┃ ┣ 📂data
┃ ┃ ┃ ┃ ┃ ┣ 📂conll
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜conll_small_val.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜small_val_std_ner.txt
┃ ┃ ┃ ┃ ┃ ┣ 📂dewcr_nsp
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dewcr_nsp_debug.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dewcr_nsp_senlist_debug.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂dewcr_sop
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dewcr_sop_debug.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dewcr_sop_debug10.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜dewcr_sop_seg_debug.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜dewcr_sop_senlist_debug.json
┃ ┃ ┃ ┃ ┃ ┣ 📂ler
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜ler.conll_fg_debug.json
┃ ┃ ┃ ┃ ┃ ┣ 📂paifile
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜a_a_l_aal23c00_88019833.tif
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜a_a_l_aal23c00_88019833.tif.json
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜test.json
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┃ ┣ 📂tags
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜ler_fg.txt
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜paifile_tags.txt
┃ ┃ ┃ ┃ ┃ ┃ ┣ 📜tags_conll.txt
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜tags_germeval_14.txt
┃ ┃ ┃ ┃ ┃ ┣ 📂tokenizer
┃ ┃ ┃ ┃ ┃ ┃ ┗ 📜tokenizer_de.subwords
┃ ┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┃ ┣ 📂lists
┃ ┃ ┃ ┃ ┃ ┣ 📜conll_json_val_small.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜conll_txt_val_small.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_full.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_msen_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_msen_nsp_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_nsp_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜dewebcrawl_seg_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜ler_debug.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜paifile_rvl.lst
┃ ┃ ┃ ┃ ┃ ┣ 📜paifile_small.lst
┃ ┃ ┃ ┃ ┃ ┗ 📜textclass_txt.lst
┃ ┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┃ ┣ 📜template.py
┃ ┃ ┃ ┣ 📜test_mlm_bert.py
┃ ┃ ┃ ┣ 📜test_ner.py
┃ ┃ ┃ ┣ 📜test_nsp_bert.py
┃ ┃ ┃ ┣ 📜test_sop_bert.py
┃ ┃ ┃ ┗ 📜__init__.py
┃ ┃ ┗ 📜__init__.py
┃ ┣ 📜COPYRIGHT
┃ ┣ 📜LICENSE
┃ ┣ 📜pyproject.toml
┃ ┣ 📜README.md
┃ ┣ 📜requirements.txt
┃ ┣ 📜setup.cfg
┃ ┗ 📜setup.py
┣ 📂TNG
┣ 📂TNM
┣ 📂TNW
┗ 📂TR_Configs