process_poleval
Skrypt do przetworzenia zbioru z PolEval-u powinien być osobnym skryptem. Parametry wejściowe:
- ścieżka do pliku json zawierającego dokumenty, tj. https://github.com/CLARIN-PL/PolDeepNer/blob/master/poldeepner/data/POLEVAL-NER_GOLD.json.7z
- ścieżka do katalogu z plikami IOB zawierającymi podział tekstów na zdania i tokeny, tj. https://github.com/CLARIN-PL/PolDeepNer/blob/master/poldeepner/data/poleval2018ner-data.7z,
- ścieżka do katalogu z modelem,
- ścieżka do katalogu z model roBERTa,
- ścieżka do pliku wyjściowego.