polyglot — 196개 언어를 품은 자연어 처리 파이프라인

polyglot

텍스트가 어떤 언어인지부터 시작해서, 문장이 어느 정도로 긍정적인지까지 — 언어별로 다른 도구를 갈아 끼워야 한다면 여간 번거롭지 않아요. polyglot은 대규모 다국어 애플리케이션을 지원하는 자연어 파이프라인으로, 언어 감지(Tokenization 165개 언어)부터 개체명 인식(40개 언어), 감성 분석(136개 언어), 단어 임베딩(137개 언어), 형태소 분석(135개 언어), 음역(Transliteration 69개 언어)까지 한 묶음으로 다뤄요. GPLv3 라이선스의 자유 소프트웨어이고, Rami Al-Rfou가 만들었어요.

이 카테고리의 문서

  • 소개: polyglot이 다루는 다국어 작업 전반
  • 주요 기능: 언어 감지·토큰화·개체명·감성 등 개별 기능
  • 바로 쓰기: PyPI 설치와 Text, Word 클래스로 시작하기

출처: https://github.com/aboSamoor/polyglot