Linting Xue, Aditya Barua, Noah Constant, Rami Al-Rfou, Sharan Narang, Mihir Kale, Adam Roberts, and Colin Raffel. 2022. Byt5: Towards a token-free future with pre-trained byte-to-byte models. _Transactions of the Association for Computational Linguistics_, 10:291-306. * Yang et al. (2019) Yinfei Yang, Yuan Zhang, Chris Tar, and Jason Baldridge. 2019. PAWS-X: A cross-lingual adversarial dataset for paraphrase identification. In _Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing and the 9th International Joint Conference on Natural Language Processing (EMNLP-IJCNLP)_, pages 3687-3692, Hong Kong, China. Association for Computational Linguistics. * Yehezkel and Pinter (2023) Shaked Yehezkel and Yuval Pinter. 2023. Incorporating context into subword vocabularies. In _EACL_, pages 623-635. Association for Computational Linguistics. * Yu et al. (2023) Lili Yu, Daniel Simig, Colin Flaherty, Armen Aghajanyan, Luke Zettlemoyer, and Mike Lewis. 2023. Megabyte: Predicting million-byte sequences with multiscale transformers. _arXiv preprint arXiv:2305.07185_. * Zellers et al. (2019) Rowan Zellers, Ari Holtzman, Yonatan Bisk, Ali Farhadi, and Yejin Choi. 2019. Hellaswag: Can a machine really finish your sentence? In _ACL (1)_, pages 4791-4800. Association for Computational Linguistics. * Zhang et al. (2022) Shiyue Zhang, Vishrav Chaudhary, Naman Goyal, James Cross, Guillaume Wenzek, Mohit Bansal, and Francisco Guzman. 2022. How robust is neural machine translation to language imbalance in multilingual tokenizer training? In _Proceedings of the 15th biennial conference of the Association for Machine Translation in the Americas (Volume 1: Research Track)_, pages 97-116, Orlando, USA. Association for Machine Translation in the Americas.
린팅 쉬우, 아디야 바루아, 노아 콘스탄트, 라미 알-르푸, 샤란 나랑, 미히르 칼레, 아담 로버츠, 콜린 라펠. 2022. Byt5: 사전 학습된 바이트 대 바이트 모델로 토큰 없는 미래를 향하여. _컴퓨터 언어학 협회 트랜잭션_, 10:291-306. * 양 등(2019) 양인페이, 장위안, 타르 크리스, Baldridge 제이슨. 2019. PAWS-X: 의역 식별을 위한 교차 언어적 적대 데이터 세트. _2019 자연어 처리 경험 방법 및 제9회 국제 공동 자연어 처리 컨퍼런스(EMNLP-IJCNLP) 논문집_, 페이지 3687-3692, 홍콩, 중국. 컴퓨터 언어학 협회. * 예헤젤과 핀터(2023) 샤케드 예헤젤과 유발 핀터. 2023. 서브워드 어휘에 컨텍스트 통합. _EACL_, 623-635페이지. 컴퓨터 언어학 협회. * 유 등(2023) 유리리, 다니엘 시미그, 콜린 플래허티, 아르멘 아가자냐, 루크 제틀모이어, 마이크 루이스. 2023. Megabyte: 다중 스케일 Transformer로 백만 바이트 시퀀스 예측. _arXiv preprint arXiv:2305.07185_. * 셀러스 등(2019) 로완 셀러스, 아리 홀츠만, 요나탄 비스크, 알리 파르하디, 최예진. 2019. 헬라스왐: 기계가 정말 문장을 끝낼 수 있을까? _ACL (1)_, 페이지 4791-4800. 컴퓨터 언어학 협회. * 장 등(2022) 장시위에, 비슈라브 차우다리, 고얄 나만, 제임스 크로스, 위첵 기욤, 모히트 반살, 프란시스코 구즈만. 2022. 다국어 토큰화기 훈련에서 언어 불균형에 대한 신경 기계 번역의 강건성은 어느 정도인가? _미국 오를랜도에서 열린 제15회 양차례 협회 for 머신 트랜슬레이션 인 더 아메리카스(Volume 1: 연구 트랙) 컨퍼런스 논문집_, 97-116페이지, 미국 오를랜도. 머신 트랜슬레이션 인 더 아메리카스 협회.
린팅 쉬우, 아디야 바루아, 노아 콘스탄트, 라미 알-르푸, 샤란 나랑, 미히르 칼레, 아담 로버츠, 콜린 라펠. 2022. Byt5: 사전 학습된 바이트 대 바이트 모델로 토큰 없는 미래를 향하여. _컴퓨터 언어학 협회 트랜잭션_, 10:291-306. * 양 등(2019) 양인페이, 장위안, 타르 크리스, Baldridge 제이슨. 2019. PAWS-X: 의역 식별을 위한 교차 언어적 적대 데이터 세트. _2019 자연어 처리 경험 방법 및 제9회 국제 공동 자연어 처리 컨퍼런스(EMNLP-IJCNLP) 논문집_, 페이지 3687-3692, 홍콩, 중국. 컴퓨터 언어학 협회. * 예헤젤과 핀터(2023) 샤케드 예헤젤과 유발 핀터. 2023. 서브워드 어휘에 컨텍스트 통합. _EACL_, 623-635페이지. 컴퓨터 언어학 협회. * 유 등(2023) 유리리, 다니엘 시미그, 콜린 플래허티, 아르멘 아가자냐, 루크 제틀모이어, 마이크 루이스. 2023. 메가바이트: 다중 스케일 트랜스포머로 백만 바이트 시퀀스 예측. _arXiv preprint arXiv:2305.07185_. * 셀러스 등(2019) 로완 셀러스, 아리 홀츠만, 요나탄 비스크, 알리 파르하디, 최예진. 2019. 헬라스왐: 기계가 정말 문장을 끝낼 수 있을까? ACL (1)_, 페이지 4791-4800. 컴퓨터 언어학 협회. * 장 등(2022) 장시위에, 비슈라브 차우다리, 고얄 나만, 제임스 크로스, 위첵 기욤, 모히트 반살, 프란시스코 구즈만. 2022. 다국어 토큰화기 훈련에서 언어 불균형에 대한 신경 기계 번역의 강건성은 어느 정도인가? _미국 오를랜도에서 열린 제15회 양차례 협회 for 머신 트랜슬레이션 인 더 아메리카스(Volume 1: 연구 트랙) 컨퍼런스 논문집_, 97-116페이지, 미국 오를랜도. 머신 트랜슬레이션 인 더 아메리카스 협회.