Trang chủ Cộng đồng sáng tạo Top Ý Tưởng Sáng Tạo Việt Nam 2023 – Nhà khoa học...

Top Ý Tưởng Sáng Tạo Việt Nam 2023 – Nhà khoa học Việt dùng AI dịch chữ Nôm sang chữ Quốc ngữ

Sử dụng kho dữ liệu hàng trăm triệu từ, nhóm nhà khoa học tại TP HCM xây dựng thành công hệ thống ứng dụng trí tuệ nhân tạo (AI) chuyển chữ Nôm sang chữ Quốc ngữ.

Nhóm nghiên cứu gồm 10 giảng viên đến từ Khoa Công nghệ Thông tin, Đại học Khoa học Tự nhiên và Bộ môn Hán – Nôm, khoa Văn học, Đại học Khoa học Xã hội và Nhân văn (Đại học Quốc gia TP HCM). Nhóm xây dựng hệ thống chuyển ngữ tự động (automatic transliteration) từ năm 2020 và hiện đã hoàn thành. Người dùng có thể tra cứu tại: tools.clc.hcmus.edu.vn.

Ý tưởng xây dựng hệ thống phiên dịch tự động được PGS.TS Đinh Điền, Giám đốc Trung tâm ngôn ngữ học tính toán, Đại học Khoa học Tự nhiên ấp ủ từ hơn 20 năm trước. Tuy nhiên, thời điểm đó chưa có nhiều nguồn dữ liệu Hán – Nôm cũng như các mô hình máy học tiên tiến. Nhiều năm sau, với sự xuất hiện các mô hình học sâu (deep learning) của trí tuệ nhân tạo, họ mới bắt đầu phát triển mô hình phiên dịch tự động này.

PGS.TS Đinh Điền, Trưởng nhóm nghiên cứu dùng mô hình máy học dịch chữ Nôm sang chữ Quốc ngữ. Ảnh: Hà An

PGS.TS Đinh Điền, Trưởng nhóm nghiên cứu dùng mô hình máy học dịch chữ Nôm sang chữ Quốc ngữ. Ảnh: Hà An

Nhóm nghiên cứu thu thập nguồn tài liệu Hán – Nôm tại các viện nghiên cứu, thư viện, website, nhà khoa học trong và ngoài nước với kho dữ liệu hàng trăm triệu từ. Dữ liệu được sử dụng mô hình lai (hybrid) bằng cách kết hợp giữa mô hình máy học dịch thống kê (SMT: Statistical Machine Translation) và mô hình máy dịch theo mạng nơron (NMT: Neural Machine Translation).

Theo PGS Điền, mô hình NMT khả năng dịch ngôn ngữ tự nhiên tốt hơn, nhưng với SMT thì khả năng chuyển tự chữ Hán – Nôm sang chữ Quốc ngữ lại có ưu thế hơn do không có sự thay đổi trật tự từ như trong chuyển ngữ thường gặp. Vì vậy, tùy từng trường hợp, nhóm sẽ kết hợp sử dụng mô hình để cho kết quả tối ưu. Với việc xây dựng hệ thống chuyển ngữ hoạt động trên website, khả năng dịch của hệ thống cho độ chính xác tùy theo lĩnh vực.

Cụ thể, với các văn bản thuộc lĩnh vực lịch sử, văn học, xã hội, hệ thống cho kết quả chính xác trên 90%. Các văn bản về y học dân tộc và các tài liệu mang tính chuyên ngành, mô hình cho độ chính xác 70%. Riêng truyện Kiều mô hình có thể dịch chính xác tới 99%.

Để thuận lợi trong sử dụng, nhóm nghiên cứu đang phát triển mô hình có thể dịch chữ Nôm trên ảnh chụp. Khi người dùng đưa ảnh chụp có chứa chữ Nôm, ứng dụng sẽ xử lý chuyển thành văn bản tiếng Việt.

PGS Điền cho biết, với các văn bản cũ chữ bị mờ, thiếu nét, mô hình có thể nhận dạng sai. Tuy nhiên, nhóm đang nghiên cứu giải pháp có khả năng dự đoán chữ viết dựa trên nét chữ và ngữ cảnh trên cả văn bản để có thể đoán chính xác chữ không rõ ràng. Chức năng dịch ảnh đang trong giai đoạn thử nghiệm và chưa ứng dụng công khai. Kết quả thử nghiệm bước đầu một số ảnh chụp văn bản chất lượng thấp, nhưng mô hình có thể nhận dạng chính xác 95%.

Giao diện website chuyển tự chữ Nôm sang chữ Quốc ngữ của nhóm nghiên cứu. Ảnh: NVCC

Giao diện website chuyển tự chữ Nôm sang chữ Quốc ngữ của nhóm nghiên cứu.

Theo nhóm nghiên cứu, đây là dự án phi lợi nhuận nhằm hướng đến công cụ dịch chuẩn xác từ chữ Hán – Nôm sang chữ Quốc ngữ. Thông qua dự án, cộng đồng có thể đóng góp nguồn tư liệu chữ Hán – Nôm để cập nhật thêm kho ngữ liệu huấn luyện mô hình phong phú hơn, giúp hoạt động chính xác hơn. Thông qua website, các nhà nghiên cứu có thể hiệu chỉnh những lỗi nhận dạng chữ Hán – Nôm sai hay chuyển tự sai, giúp máy ngày càng hoàn thiện hơn.

Thử nghiệm khả năng dịch của mô hình từ ảnh chụp, độ chính xác trên 95%. Ảnh: NVCC

Thử nghiệm khả năng dịch của mô hình từ ảnh chụp, độ chính xác trên 95%. Ảnh: NVCC

TS Hồ Minh Quang, Trưởng khoa Đông Phương Học, Đại học Khoa học Xã hội và Nhân văn (Đại học Quốc gia TP HCM) đánh giá nghiên cứu có ý nghĩa lớn trong việc gìn giữ di sản ngôn ngữ Hán – Nôm. Trước đây việc đọc, hiểu chữ Nôm chủ yếu là trong giới nghiên cứu. Sản phẩm của nhóm có thể giúp người dùng nhận diện, tra cứu thông tin sang chữ Quốc ngữ. Ông cũng cho rằng, rất cần sự đóng góp dữ liệu của cộng đồng để mô hình thông minh, dịch chuẩn xác hơn.

Chữ Nôm hiện vẫn còn tồn tại nhiều trong dân gian, như trong các sắc phong, gia phả, khế ước, di chúc, bài thuốc… Các văn bản này được ghi lại cách đây hàng trăm năm, trên các chất liệu chất lượng thấp, dễ hư hỏng theo thời gian nếu không được bảo quản trong điều kiện đặc biệt. Trong các văn bản chữ Nôm, có thể có nhiều thông tin quý, nhưng người dân không tự đọc hiểu được mà phải những người biết Hán – Nôm để phiên dịch qua chữ Quốc ngữ. Nhóm nghiên cứu cũng cho rằng, việc có công cụ phiên dịch chữ Nôm sang chữ Quốc ngữ sẽ giúp người không biết Hán – Nôm vẫn có thể giải mã thông tin của nhiều tư liệu quý do tổ tiên họ để lại, trong đó có những bài thuốc dân gian, trong ngành y học cổ truyền đang lưu truyền trong nhân dân.

Theo VN Express

CÁC TIN KHÁC

Nhà khoa học kiếm tìm những bí ẩn trong lòng đất

PGS.TS Cao Đình Triều là một trong số ít những nhà khoa học, dành trọn tâm huyết, đam mê nghiên cứu địa vật lý suốt cả cuộc đời.

Kỹ sư Việt và hành trình 4 tháng hoàn thiện AI trên điện thoại hiện đại nhất

Thu âm hàng triệu tệp giọng nói, huy động hàng trăm người xử lý dữ liệu, từ con số 0 chỉ trong 4 tháng, các kỹ sư người Việt đã hoàn thiện AI tiếng Việt cho điện thoại hiện đại nhất hiện nay.

Hành trình cải tiến giúp đôi dép cao su vươn ra thế giới

Dép lốp hay còn gọi 'đôi dép Bác Hồ' làm thủ công thường bị đen chân, trơn trượt, được con cháu "Vua dép lốp Phạm Quang Xuân" cải tiến nhẹ, bám, xuất khẩu hơn 60 nước.

Trần Ngọc Long và đôi găng tay AI chuyển ngữ, giúp đỡ người khuyết tật

Nhận thấy người khiếm thính gặp nhiều khó khăn về giao tiếp, em học sinh lớp 11 ở Quảng Trị đã chế tạo đôi găng tay chuyển ngữ giúp những người kém may mắn có thể được học tập, tiếp thu kiến thức.

Kỹ sư sáng chế cỗ máy biến rác thải thành phân bón hữu cơ

Từ đống rác thải hữu cơ tưởng chừng vô dụng, qua sáng chế tài hoa của kỹ sư Nguyễn Tuấn Anh, chúng lại biến thành phân bón hữu cơ vi sinh, góp phần bảo vệ môi trường.

Thần đồng vật lý Trung Quốc khiến Đại học Harvard phá bỏ thông lệ 300 năm

Thần đồng vật lý Trung Quốc Doãn Hy với thành tích đặc biệt xuất sắc khiến Đại học Harvard của Mỹ phải phá bỏ thông lệ tồn tại suốt 300 năm để giữ chân.

Bài viết nổi bật

Đại học Sư phạm TP.HCM ‘bắt tay’ doanh nghiệp công nghệ Việt thúc đẩy chuyển đổi số

Theo hợp tác mới ký kết với Viettel Solutions, Đại học Sư phạm TP.HCM sẽ cùng doanh nghiệp này xây dựng các giải pháp công nghệ trong giáo dục tập trung vào 4 nội dung chính.

Nhóm sinh viên trường ĐH Ngoại thương giành giải ‘Olympic Kinh tế lượng và ứng dụng’

Ngày 12/6, tại Học viện Tài chính diễn ra Chung khảo Hội thi khoa học sinh viên toàn quốc 'Olympic Kinh tế lượng và ứng dụng' lần thứ VII, năm 2022. Ban Giám khảo đã chọn ra nhóm sinh viên ĐH Ngoại thương TP. Hồ Chí Minh giành giải Đặc biệt.

Bài viết mới nhất

Máy tính thiên văn hơn 2.000 năm tuổi

Lịch sử ẩn chứa vô số bí ẩn về những nền văn minh đã mất và những công nghệ tiên tiến mà họ sở hữu. Cho đến ngày nay, nhiều người vẫn tin rằng một số nền văn minh cổ đại có trình độ khoa học và kỹ thuật vượt xa so với nhận thức hiện tại của chúng ta.

TOP 100 Hồng bảo Kỷ lục Thế giới tại Việt Nam (P.72) Chùa Keo (Thái Bình): Kỳ quan gỗ lim gần 400 tuổi bên tả ngạn sông Hồng – [VIETKINGS-TOPPLUS đề cử]

(kyluc.vn) Chùa Keo Thái Bình được xây dựng hoàn toàn bằng gỗ lim, là một trong những kiệt tác kiến trúc đặc trưng thế kỷ 17. Kết cấu và cách bố trí cũng khác biệt bởi có cao thấp, lớn nhỏ, lên xuống “bồng bềnh như trong cõi Phật” song chặt chẽ, chắc chắn, tạo sự hấp dẫn, cuốn hút người thưởng thức, nghiên cứu, khám phá nghệ thuật.

Sắp có app nhận biết số điện thoại, tài khoản ngân hàng lừa đảo

Phần mềm do Hiệp hội an ninh mạng quốc gia phát hành trên smartphone có thể phát hiện số điện thoại, địa chỉ website, tài khoản ngân hàng và mã QR có dấu hiệu lừa đảo.

[WOWTIMES – VIETKINGS] Chợ Đông Ba (1887-2024) – Trung tâm thương mại Cố đô – Top 100 đơn vị trên 100 tuổi còn hoạt động tại Việt Nam 2024 – P.30

(nienlich.vn) Chợ Đông Ba là một trong những ngôi chợ có tuổi đời "thọ" nhất Việt Nam. Trải qua 137 năm hình thành và phát triển,ngôi chợ đậm chất Huế này vẫn và đang phát triển mạnh mẽ, là điểm du lịch yêu thích của nhiều du khách trong và ngoài nước.

Mực thực vật Botanical Inks của sinh viên ĐH Đà Nẵng giành giải nhất SV-Starup lần thứ VI

Vượt qua hơn 700 dự án tham gia, nhóm sinh viên của Viện Nghiên cứu và Đào tạo Việt Anh – VNUK (Đại học Đà Nẵng) giành giải nhất SV-Starup 2024 với sản phẩm mực thực vật Botanical Inks (BINKS).

Nhà thờ Trà Cổ (Quảng Ninh) – TOP 5 nhà thờ cổ trên 100 tuổi của Việt Nam được nhiều người biết đến (P.3) – [VIETKINGS-TOPPLUS – Hành trình TOP Việt Nam]

(kyluc.vn) Nhà thờ Trà Cổ thuộc giáo xứ Trà Cổ, Giáo phận Hải Phòng có địa chỉ tại phường Trà Cổ, thành phố Móng Cái, tỉnh Quảng Ninh. Nhà thờ được xây dựng từ những năm 80 của thế kỷ 19 nhằm đáp ứng nhu cầu tôn giáo khi ngày càng có nhiều gia đình giáo dân sinh sống tại khu vực Trà Cổ.