Các mô hình ASR hiện đại coi phong cách phiên âm (từng từ so với theo ý định) là biến ẩn không kiểm soát được, dẫn đến giải mã không ổn định, và lên đến 60...
论文研究HuggingFace Daily Papers(社区热门论文)
Tóm tắt thông tin AI hôm nay
Các mô hình ASR hiện đại coi phong cách phiên âm (từng từ so với theo ý định) là biến ẩn không kiểm
soát được, dẫn đến giải mã không ổn định, và lên đến 60% WER đến từ sự không khớp phong cách. Bằng cách huấn luyện bộ giải mã nhận thức chồng chéo với token nhiệm vụ trên cặp phiên âm từng từ/ý định song song, chỉ cần huấn luyện bằng tiếng Anh cũng có thể nâng F1 không trôi chảy tiếng Đức từ 10% trong zero-shot lên 79%. Tinh chỉnh attention chéo có giám sát trên giọng nói không trôi chảy lần đầu tiên vượt qua baseline điều chỉnh bắt buộc trên các dấu thời gian cấp từ, nhiệm vụ mới verbatimize có thể nâng tỷ lệ hồi tưởng từ các từ hiếm từ 6,8% lên 96,1%.
Trích đoạn bài viết gốc
arXivLabs is a framework that allows collaborators to develop and share new arXiv features directly on our website.
Have an idea for a project that will add value for arXiv's community? Learn more about arXivLabs :https://info.arxiv.org/labs/index.html.
Các mô hình ASR hiện đại coi phong cách phiên âm (từng từ so với theo ý định) là biến ẩn không kiểm soát được, dẫn đến giải mã không ổn định, và lên đến 60...