南京农业大学发布“荀子”古籍大语言模型:可翻译、自动标点

12月14日消息,据“南京农业大学校友会”官方公众号,近日,南京农业大学信息管理学院王东波教授研究团队在北京发…

12月14日消息,据“南京农业大学校友会”官方公众号,近日,南京农业大学信息管理学院王东波教授研究团队在北京发布“荀子”古籍大语言模型。

 

据介绍,“荀子”大模型包含《四库全书》在内的绝大多数传世古籍文献,拥有超过 20 亿字的大型语料库,是该校团队在国家社科基金重大项目“中国古代典籍跨语言知识库构建及应用研究”的支持下,联合中华书局古联公司推出的专门进行古籍处理与研究的智能工具。

图片源自:南京农业大学校友会

南京农业大学表示,该模型拥有如下亮点:

智能标引:能够对古籍中的内容进行高质量主题标引,帮助研究人员快速了解文章主题;
信息抽取:能够自动从古籍中抽取关键信息,如人物、事件、地点等,大大节省了信息整理时间;
诗歌生成:能够根据给定的主题或关键词,自动生成符合语法规则和韵律要求的古诗,为诗词爱好者提供创作灵感;
高质量翻译:对于难以理解的古籍文献,能够进行精准的现代文翻译,帮助研究人员更好地理解原文含义;
阅读理解:能够对给出的古文文本进行分析解释,实现对古籍文本的自动阅读;
词法分析:可以完成古籍文本的自动分词和词性标注,有效提升研究效率;
自动标点:可以快速完成古籍文本的断句和标点,提升使用者对古籍文本的阅读体验

 

该模型包含基座模型 XunziALLM 和对话模型 XunziChat 两部分,用户还可根据自己的需求使用本地训练语料微调基座模型,从而使其在古籍下游处理任务上取得更优越的处理性能。

 

该模型现已作为开源公益研究成果在 GitHub 等网站发布。

本文来自网络,不代表随客网立场,转载请注明出处。