AI-DimSum粤语语料库平台正式发布
创始人
2025-12-10 05:01:20
0

南都讯 日前,第十届语言服务高级论坛暨2025年度国家应急语言服务团学术年会在广州大学(大学城校区)举行。粤语语料库建设与大模型评测广州市哲学社会科学重点实验室(下称“实验室”)研发的AI-DimSum粤语语料库平台在大会上正式发布。

据介绍,作为数字中文的关键领域,粤语不仅关涉粤港澳大湾区的文化共同体认同,更关涉中华文化全球传播的国际话语权,关涉全球华人与祖国情感的纽带。粤语作为汉语的一种方言,在海内外有上亿用户,但在网络世界中却属于低资源语言。岭南文化的传承要搭上人工智能的快车,亟待构建“技术为体,文化为本”的通用粤语语料库。

面向“数字中文建设”和粤港澳大湾区文化数字化需求,AI-DimSum多模态粤语语料库平台建设了语料采集子系统、语料标注子系统、大模型对接子系统、语料确权检索子系统、语料质量评估子系统、语料管理子系统以及应用商店子系统等七个子系统。通过子系统协同工作,实现从数据采集、清洗、标注、确权、存储检索,到模型接入与最终应用发布的一体化流程,为粤语语料库的构建、管理、利用与落地应用提供完整、模块化、可扩展的基础设施与运行机制。

AI-DimSum粤语语料库汇聚处理文本语料超过100万字,涵盖新闻、文学、社交媒体等领域;完成3000小时高保真语音标注及1TB以上的音视频资料,包括大模型训练专用语料集;功夫熊猫、小猪佩奇、哪吒、大圣归来、花木兰等包含粤语字幕与标注的动画影视作品;外来媳妇本地郎、溏心风暴等包含粤语字幕与标注的影视作品;超过1万句的多用途粤语生活场景音频+文字的语料;岭南文化图像素材10000张;构建了包含6669条权威词条、30000条扩展词条的粤语安全语料库;粤语大模型内容安全多模态评测题超过20万等。

据悉,AI-DimSum语料库平台是全球首个集文化忠实、安全可信及AI友好于一体的多模态、大规模、通用粤语语料库平台,其探索出的“技术为体,文化为本”的方言语料库建设路径与独特的“1+1+N”协同创新机制为方言文化的数字化保护与传承发展提供了可复制、可推广的数字化范式。

采写:南都N视频记者 孙小鹏 通讯员 广大宣

相关内容

热门资讯

吊扇灯电扇不转怎么办 关闭电源,检查电机接线是否正确。如果有墙壁控制,检查灯风扇开关是否连接正确。对于带遥控单元的吊扇灯,...
吊扇灯遥控器对码方法 方法很简单,首先在遥控器上找到开关按钮,下一步按住按钮5到10秒,遥控器上面的红灯就会亮起来,在这5...
空开跳闸后推上去隔一段时间又跳... 原因可能是空调的漏电保护引起跳闸,可以维修或更换故障部位解决;原因可能是内部线路短路导致跳闸,可以进...
冷热水龙头滴水怎么修就不滴水了 步骤一、将水龙头出水阀门关闭,使用螺丝刀将开关卸掉;步骤二、卸掉阀芯外面的固定轴承,取出里面的旧阀芯...
泥瓦工施工步骤流程与装修注意事... 本文介绍了泥瓦工施工步骤流程和装修注意事项。在泥瓦工施工步骤流程方面,重点包括做防水、保温层、瓦面施...
百万粉网红账号被封,曾因宠物狗... 6月25日消息,网红黄一鸣的抖音主账号“鸣鸣酱”及女儿账号“闪闪酱”已双双显示“该用户被禁止关注”,...
宁夏一农药厂多名工人中毒?官方... 澎湃新闻记者 庄岸 实习生 刘雨柔6月25日,宁夏平罗县应急管理局就媒体报道的农药厂工人中毒事件,发...
衡水二中有学子高考710分 究...   衡水二中有学子高考710分  【衡水二中有学子高考710分】6月24日,河北省高考成绩公布,衡水...
风声|终于有地方取消中考选拔了... 作者丨贾拥民均衡研究所学术顾问浙江大学跨学科中心特约研究员时值全国中考季,中考分流与升学模式再度成为...
网友反映重庆有廉租房大量转租,... 极目新闻记者 邓波6月23日深夜,有网友在重庆网络问政平台上反映,重庆市云阳县稻场社区廉租房被大量出...