Basic language processing/nl: Difference between revisions
Created page with "== Stanza == Een Python NLP-pakket vele menselijke talen." |
No edit summary |
||
| (25 intermediate revisions by 4 users not shown) | |||
| Line 1: | Line 1: | ||
Onder eenvoudige taalverwerking verstaan we | <languages/> | ||
Onder eenvoudige taalverwerking verstaan we part-of-speech tagging, lemmatisering, named entity recognition, chunking en gelijksoortige taken die individuele woorden labelen. | |||
== | <span id="Contemporary_Dutch"></span> | ||
==Hedendaags Nederlands== | |||
=== Frog === | |||
Frog is een voor het Nederlands ontwikkelde integratie van memory-based natuurlijke taalverwerkingsmodules (NLP). De huidige versie van Frog zal woordtokens in Nederlandse tekstbestanden tokeniseren, taggen, lemmatiseren, en morfologisch segmenteren. Daarnaast zal Frog een afhankelijkheidsdiagram toevoegen aan elke zin, de basiszinsdelen identificeren en de tool zal proberen om alle named entities te vinden en te labelen. | |||
*[https://huggingface.co/proycon/robbert-pos-cased-deepfrog-nld POS tagger] | *[https://github.com/proycon/frog_webservice Code webservice] | ||
*[https://languagemachines.github.io/frog/ Projectwebsite] | |||
=== DeepFrog === | |||
DeepFrog streeft ernaar om een (gedeeltelijke) opvolger te zijn van het Nederlandse NLP-project Frog. Waar de verscheidene NLP-modules in Frog nog waren gebouwd op k-NN classifiers, bouwt DeepFrog op deep learning techniques en kan het een verscheidenheid aan neurale transformatoren gebruiken. | |||
*[https://huggingface.co/proycon/robbert-pos-cased-deepfrog-nld POS-tagger] | |||
Het systeem is nog niet officieel vrijgegeven. | Het systeem is nog niet officieel vrijgegeven. | ||
*[https://github.com/proycon/deepfrog Github pagina] | *[https://github.com/proycon/deepfrog Github-pagina] | ||
== LeTs == | <span id="LeTs"></span> | ||
LeTs is een | === LeTs === | ||
LeTs is een preprocessor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans. | |||
*[https://lt3.ugent.be/resources/lets/ | LeTs is een preprocessor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans. | ||
*[https://lt3.ugent.be/resources/lets/ Projectpagina] | |||
*[https://lt3.ugent.be/lets-demo/ Demo] | *[https://lt3.ugent.be/lets-demo/ Demo] | ||
== Spacy == | === Spacy === | ||
Componenten: tok2vec, morphologizer, tagger, parser, lemmatizer (trainable_lemmatizer), senter, ner. | |||
[https://spacy.io/models/nl Nederlandse modellen] | [https://spacy.io/models/nl Nederlandse modellen] | ||
== Stanza == | <span id="Stanza_-_A_Python_NLP_Package_for_Many_Human_Languages"></span> | ||
== Stanza - Een Python NLP Package voor natuurlijke talen === | |||
Stanza is een verzameling nauwkeurige en efficiënte tools voor de linguïstische analyse van veel menselijke talen. | |||
* [https://stanfordnlp.github.io/stanza/#stanza--a-python-nlp-package-for-many-human-languages Stanza-Github-pagina's] | |||
===Trankit=== | |||
Trankit is een lichte python toolkit voor meertalige NLP. Het voorziet in een trainbare pijplijn voor basis taalverwerking voor meer dan 100 talen, 90 downloadbare voorgetrainde pipelines voor 56 talen. | |||
*[https://github.com/nlp-uoregon/trankit Trankit Github pages] | |||
<span id="Historical_Dutch"></span> | |||
==Historisch Nederlands== | |||
<span id="GaLaHaD:_Generating_Linguistic_Annotations_for_Historical_Dutch"></span> | |||
===GaLaHaD: Genereren van Linguïstische Annotaties voor Historisch Nederlands=== | |||
Galahad wil annotatie en evaluatie van tools makkelijk toegankelijk maken en wil het voor ontwikkelaars makkelijk maken hun tools en modellen bij te dragen aan het platform, om ze zo te vergelijken met andere tools, getest op goudstandaard data. | |||
<div class="mw-translate-fuzzy"> | |||
[https://portal.clarin.ivdnt.org/galahad Webservice] | |||
</div> | |||
<span id="Adelheid_Tagger-Lemmatizer:_A_Distributed_Lemmatizer_for_Historical_Dutch"></span> | |||
==Adelheid Tagger-Lemmatizer: A Distributed Lemmatizer for Historical Dutch== | |||
Met deze webapplicatie kan een eindgebruiker historische Nederlandse teksten invoeren die vervolgens worden getokeniseerd, gelemmatiseerd en ge-POS-tagd. De applicatie maakt gebruik van de meest geschikte bronnen (zoals lexica) voor de desbetreffende tekst. Voor elke specifieke tekst kan een gebruiker de beste bronnen selecteren uit de beschikbare bronnen in CLARIN, waar deze ook terug te mogen vinden zijn, en waar nodig kunnen deze worden aangevuld met eigen lexica. | |||
<div lang="en" dir="ltr" class="mw-content-ltr"> | <div lang="en" dir="ltr" class="mw-content-ltr"> | ||
Unfortunately, we are not aware of any functioning instance of this application. | |||
</div> | |||
</div> | |||
<div lang="en" dir="ltr" class="mw-content-ltr"> | <div lang="en" dir="ltr" class="mw-content-ltr"> | ||
<!-- | |||
*[http://portal.clarin.nl/node/1918 CLAPOP page] | *[http://portal.clarin.nl/node/1918 CLAPOP page] | ||
*No working version found | *No working version found --> | ||
</div> | </div> | ||
Latest revision as of 18:00, 13 November 2025
Onder eenvoudige taalverwerking verstaan we part-of-speech tagging, lemmatisering, named entity recognition, chunking en gelijksoortige taken die individuele woorden labelen.
Hedendaags Nederlands
Frog
Frog is een voor het Nederlands ontwikkelde integratie van memory-based natuurlijke taalverwerkingsmodules (NLP). De huidige versie van Frog zal woordtokens in Nederlandse tekstbestanden tokeniseren, taggen, lemmatiseren, en morfologisch segmenteren. Daarnaast zal Frog een afhankelijkheidsdiagram toevoegen aan elke zin, de basiszinsdelen identificeren en de tool zal proberen om alle named entities te vinden en te labelen.
DeepFrog
DeepFrog streeft ernaar om een (gedeeltelijke) opvolger te zijn van het Nederlandse NLP-project Frog. Waar de verscheidene NLP-modules in Frog nog waren gebouwd op k-NN classifiers, bouwt DeepFrog op deep learning techniques en kan het een verscheidenheid aan neurale transformatoren gebruiken.
Het systeem is nog niet officieel vrijgegeven.
LeTs
LeTs is een preprocessor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans.
LeTs is een preprocessor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans.
Spacy
Componenten: tok2vec, morphologizer, tagger, parser, lemmatizer (trainable_lemmatizer), senter, ner.
Stanza - Een Python NLP Package voor natuurlijke talen =
Stanza is een verzameling nauwkeurige en efficiënte tools voor de linguïstische analyse van veel menselijke talen.
Trankit
Trankit is een lichte python toolkit voor meertalige NLP. Het voorziet in een trainbare pijplijn voor basis taalverwerking voor meer dan 100 talen, 90 downloadbare voorgetrainde pipelines voor 56 talen.
Historisch Nederlands
GaLaHaD: Genereren van Linguïstische Annotaties voor Historisch Nederlands
Galahad wil annotatie en evaluatie van tools makkelijk toegankelijk maken en wil het voor ontwikkelaars makkelijk maken hun tools en modellen bij te dragen aan het platform, om ze zo te vergelijken met andere tools, getest op goudstandaard data.
Adelheid Tagger-Lemmatizer: A Distributed Lemmatizer for Historical Dutch
Met deze webapplicatie kan een eindgebruiker historische Nederlandse teksten invoeren die vervolgens worden getokeniseerd, gelemmatiseerd en ge-POS-tagd. De applicatie maakt gebruik van de meest geschikte bronnen (zoals lexica) voor de desbetreffende tekst. Voor elke specifieke tekst kan een gebruiker de beste bronnen selecteren uit de beschikbare bronnen in CLARIN, waar deze ook terug te mogen vinden zijn, en waar nodig kunnen deze worden aangevuld met eigen lexica.
Unfortunately, we are not aware of any functioning instance of this application.