Explosion AI представила реліз 3.0 NLP бібліотеки spaCy
Вибух ШІ представив випуск бібліотеки 3.0 NLP spaCy
Explosion AI представив випуск безкоштовної бібліотеки spaCy з реалізацією алгоритмів обробки тексту природною мовою (NLP, Natural Language Processing). На практиці spaCy можна використовувати для побудови автовідповідачів, ботів, текстових класифікаторів і різних діалогових систем, що визначають значення словосполучень. Бібліотека написана на Python з елементами в Cython, розширенні Python, яке дозволяє безпосередньо викликати функції C. Код проекту поширюється за ліцензією MIT. Мовні моделі підготовлені для 58 мов.
spaCy призначений для забезпечення стійкого API, який не прив'язаний до використовуваних алгоритмів і готовий до використання в реальних продуктах. Для обробки інформації бібліотека використовує останні досягнення в області НЛП і найбільш ефективний з наявних алгоритмів. Якщо з'являється більш ефективний алгоритм, бібліотека переноситься на нього, але такий перехід ніяк не впливає на API і додатки. Особливістю spaCy є також архітектура, призначена для обробки документів в цілому, без попередньої обробки в препроцесорах, які розбивають документ на фрази. Моделі пропонуються в двох варіантах - для досягнення максимальної продуктивності і максимальної точності.
SpaCy v3.0 оснащений усіма новими трубопроводами на основі трансформаторів, які доводять точність spaCy аж до поточного сучасного стану. Ви можете використовувати будь-який попередньо підготовлений трансформатор для навчання власних конвеєрів і навіть розділити один трансформатор між кількома компонентами з багатозадачним навчанням. Тепер навчання повністю налаштовується та розширюється, і ви можете визначати власні власні моделі за допомогою PyTorch, TensorFlow та інших фреймворків. Нова система проектів spaCy дозволяє описувати цілі наскрізні робочі процеси в одному файлі , надаючи вам простий шлях від прототипу до виробництва та полегшуючи клонування та адаптацію проектів найкращої практики для ваших власних випадків використання.
