SpaCy 3.0

[Володимир Лісівка]

Spacy — це бібліотека для розпізнавання токенізації тексту. Зараз підтримується 69 мов, включно з українською. Доступні попередньо натреновані моделі для 18-ти мов (українська відсутня, присутня російська), та багатомовна модель для всіх 18-ти мов. З основного в новій версії — підтримка трансформерів.

Сайт: https://spacy.io/
Сторінка проєкту: https://github.com/explosion/spaCy
Оголошення: https://github.com/explosion/spaCy/releases/tag/v3.0.0

Приклад:

Код: [Вибрати]

Apple розглядає можливість купівлі стартапу з Обʼєднаного Королівства за $1 млрд.

Apple PROPN nsubj
розглядає VERB ROOT
можливість NOUN obj
купівлі NOUN nmod
стартапу NOUN nmod
з ADP case
Обʼєднаного ADJ amod
Королівства PROPN nmod
за ADP case
$ SYM nmod
1 NUM appos
млрд NOUN punct


[Re.]

Не збагну: це натренована бібліотека чи людьми написаний алгоритм?

[ysenko]

Не збагну: це натренована бібліотека чи людьми написаний алгоритм?

Ця бібліотека яка дозволяє натреневати свою модель, а також містить кілька вже готових (для української мови готового варіанту немає).

Trained models/pipelines: https://spacy.io/models
Custom models/pipelines: https://spacy.io/usage/training#quickstart

[Re.]

а також містить кілька вже готових (для української мови готового варіанту немає).

Тоді що значить «Зараз підтримується 69 мов, включно з українською»?

[Володимир Лісівка]

а також містить кілька вже готових (для української мови готового варіанту немає).

Тоді що значить «Зараз підтримується 69 мов, включно з українською»?

Можна згенерувати конфігурацію і натренувати модель під свої потреби.

[Володимир Лісівка]

До речі, Ukr-Roberta дуже хорошої думки про Лінукс. :-)