南宫Tele-FLM颁发!中邦电信人工智能咨议院联袂智源咨议院鞭策开源社区生长
时间:2024-04-30浏览次数:
 4月27日上午,2024中合村论坛年会“人工智能中央日”主论坛——他日人工智能前锋论坛告捷举办。会上,中邦电信人工智能推敲院(TeleAI)和北京智源推敲院合伙颁布Tele-FLM——52B高职能开源众讲话大模子。  据悉,Tele-FLM才智比肩以至横跨GPT-3.5。通过耗费预测等本事,进步了底子模子的才智,BPB loss 目标正在英文上优于Llama2-70B和 Llama3-8B,正

  4月27日上午,2024中合村论坛年会“人工智能中央日”主论坛——他日人工智能前锋论坛告捷举办。会上,中邦电信人工智能推敲院(TeleAI)和北京智源推敲院合伙颁布Tele-FLM——52B高职能开源众讲话大模子。

  据悉,Tele-FLM才智比肩以至横跨GPT-3.5。通过耗费预测等本事,进步了底子模子的才智,BPB loss 目标正在英文上优于Llama2-70B和 Llama3-8B,正在中文上优于Qwen1.5-72。经历微调的对话模子举办了客观、主动化的才智评测南宫,评测结果显示,总分上Tele-FLM实行了对GPT-3.5-Turbo的超越。正在分项得分中,Tele-FLM正在总共的11个分项中有十项抵达或横跨GPT-3.5-Turbo水准。

  仅本年,TeleAI便接踵开源7B、12B参数范围大模子,吸引邦外里开源社区开垦者平常协商和行使。此次与智源合伙颁布的52B参数范围Tele-FLM也已统统开源,底子模子已颁布正在Hugging Face上;主旨本事如超参征采、安稳操练等统统公然正在GitHub上,超参征采弧线、Loss弧线、GradNorm、流程评测等众维度操练细节也已正在本事告诉中周到阐扬。

  据悉,TeleAI将正在年内开源千亿级参数大模子,构修全尺寸开源格式, 通过更雄厚的行使场景、更平常的落地行使、更隆盛的行业生态,助力中邦大模子本事发展与落地行使。

Copyright 2012-2023 南宫28(中国.NG)官方网站 版权所有 HTML地图 XML地图--备案号:鲁ICP备09041058号  备案号:鲁ICP备09041058号  
地址:山东省淄博市高新区柳泉路125号先进陶瓷产业创新园B座606室  邮箱:qht@3583100.com  电话:0533-3583100