必赢线路检测3003知识图谱研究组发布大模型TechGPT2.0

发布者:杨金柱发布时间:2023-12-04浏览次数:20

20231130日,我院任飞亮副教授负责的“必赢线路检测3003知识图谱研究组”发布了大语言模型TechGPT2.0

TechGPT2.0模型延续了研究小组于2023626日发布的TechGPT-1.0知识图谱构建智能问答为核心的构建目标,在继承TechGPT-1.0全部功能与优点的基础上,新增了如下几项亮点功能:

一、TechGPT-2.0 对医学领域文本的处理能力取得了显著提升。TechGPT-2.0在处理医学文本时能够更全面地理解上下文信息,能够对疾病、药物、专业术语等实体的进行更准确识别,还能够理解医学文本中的复杂关系、疾病诊断、治疗方案等内容,可以用于协助医生阅读医学文献、提供患者诊断建议等应用场景,从而提高医学领域的信息处理效率和准确性。

二、TechGPT-2.0 能够更好地理解和解释法律文本,包括法规、合同和案例法等。TechGPT-2.0通过学习法律用语和结构,能够更准确地捕捉文本中的法律关系和条款,为用户提供更有深度和专业性的法律分析。

三、TechGPT-2.0 增强了对嵌套实体的抽取能力。即TechGPT-2.0可以更灵活地处理实体之间的复杂关系,深入挖掘文本中的层次结构,提高了对复杂文本的理解和生成能力。

四、TechGPT-2.0 在幻觉、不可回答问题、长文本处理、以及与人类价值观对齐方面进行了强化。TechGPT-2.0通过对话和理解上下文,能够更好地理解人类的感受和价值观,并能够支持最大长度12K的文本输入,这使得模型能够更好地与人类用户进行交互,更好地满足用户的需求和期望,进一步提升了人机交互的质量和用户体验。

五、TechGPT-2.0使用华为昇腾910A服务器、华为MindSpore框架、以及MindFormer套件进行开发,采用全量微调方式训练完成,具有更安全的运行环境和更低的部署硬件要求。用户使用NVIDIA 4090单机单卡、或昇腾910A单机单卡就可以部署TechGPT-2.0模型。

目前,TechGPT 2.0模型已经在Hugging FaceGitHub上开源。

其中HuggingFace开源地址为:https://huggingface.co/neukg/TechGPT-2.0-alpaca-hfhttps://huggingface.co/neukg/TechGPT-2.0-atom-hf

GitHub开源地址为:https://github.com/neukg/TechGPT-2.0

该项目目前对外提供了TechGPT-1.0与TechGPT2模型的在线体验系统,网址:http://techgpt.neukg.com/


Baidu
sogou