Skip to content

0.23.0

Choose a tag to compare

@bab2min bab2min released this 17 Mar 15:46
· 15 commits to main since this release
5d9886e
  • Kiwi 0.23.0의 기능들(https://github.com/bab2min/Kiwi/releases/tag/v0.23.0 )이 반영되었습니다.
    • OOV 탐지 기능 고도화
      • 길이에 기반한 규칙으로 OOV에 점수를 부여하는 기존 방식 외에, 경량 문자모델과 빈도 정보에 기반하여 OOV에 점수를 부여하는 새로운 방식이 추가되었습니다.
      • OOV 탐지 방식은 oov_handling 인자를 통해 선택할 수 있습니다.
    • 오타 교정 방식 고도화
      • 오타 교정 기능 사용시 메모리 사용량이 일반 분석 시와 비슷한 수준으로 줄어들도록 최적화되었습니다.
      • 오타 교정 옵션을 Kiwi 인스턴스 생성 시점이 아니라 분석 시점에 전달하는 방식으로 변경되었습니다.
      • 이제 다어절 명사에 대해서도 오타 교정 기능이 지원됩니다.