Cấp bậc tác giả:

TRAINING

Tài nguyên xử lý tiếng Việt

Được viết bởi webmaster ngày 09/08/2020 lúc 05:37 PM
Ngoài các kỹ thuật mình giới thiệu ở trên, mục này mình sẽ để lại một số tài nguyên hữu ích cho bài toán xử lý tiếng Việt.
  • 0
  • 801

Tài nguyên xử lý tiếng Việt


Ngoài các kỹ thuật mình giới thiệu ở trên, mục này mình sẽ để lại một số tài nguyên hữu ích cho bài toán xử lý tiếng Việt.

Thư viện chuẩn hóa văn bản Tiếng Việt (Có sẵn wrapper cho Python) của anh langman (ai chơi Cộng đồng C Việt chắc khá quen nickname này). Thư viện này giúp bạn xử lý một số vấn đề thiếu nhất quán trong tiếng Việt, và một số vấn đề khác như sửa lỗi chính tả. Xem tại: https://github.com/langmaninternet/VietnameseTextNormalizer
Danh sách 400 từ teencode tiếng Việt phổ biến nhất, có thể dùng làm từ điển để chuẩn hóa text mạng xã hội. Xem tại: https://gist.github.com/nguyenvanhieuvn/7d9441c10b3c2739499fc5a4d9ea06fb

Nguồn bài viết: Sưu tầm

BÌNH LUẬN BÀI VIẾT

Bài viết mới nhất

LIKE BOX

Bài viết được xem nhiều nhất

HỌC HTML