首页 人工智能元宇宙大数据 企业智能化 智慧城市 科技 商务
当前位置:首页 > 人工智能

360智脑7B参数大模型正式开源 最长支持约50万字输入

来源:滚动-中文科技资讯 发布日期:2024-04-16

最新新闻:

刘强东数字人直播首秀来了! 欧洲杯球票、电视空调免费送TikTok 将推图片应用 TikTok Notes 丰富内容生态由P到Pura!华为Pura 70即将亮相,全新设计或颠覆行业?厨房行业发展迎来崭新篇章深圳发布居住建筑适老化设计标准,涉及智能家居起步价不到3000,小折叠距全面普及还有多远?蔚来造车资质正式获批 新车尾标已无江淮字样张一鸣开辟新战场,瞄准微信支付宝MISTINE蜜丝婷携手李佳琦 开启“夏日入侵企画”(选定)ZIPPO打火机五折开售 京东疯狂星期六低价好物抢不停现代汽车电气化战略遇挫,插电混动和纯电车销量均大幅下滑IDC发布了《中国软件定义存储 (SDS)及超融合存储系统 (HCI)市场季度跟踪报告,2023年第四季度》。报告显示,中国超融合市场在2023年较去年同期实现2.9%增长,其中HCI 验证系统识读2300多年的战国竹简,竟只用2B端侧大模型!面壁发布新一代“小钢炮”美图Wink“AI动漫”功能升级 可将短剧作品转化为动漫风格360智脑7B参数大模型正式开源 最长支持约50万字输入Achronix和Bluespec联合推出一系列支持Linux的RISC-V软处理器华为鸿蒙HarmonyOS NEXT真机界面曝光,Q4发布商用版宝马集团发布BMW新世代概念车:将于2025年正式投产中国CR450动车组样车将在年内下线:时速400公里医疗大模型,巨头们的新赛场

360公司自主研发的7B参数大模型——360智脑,现已正式上线开源社区,并提供了基础模型以及4K、32K、360K三种不同文本长度的版本。

这一大模型在支持文本长度方面表现出色,最长可处理360K长文本,相当于约50万字的输入内容。令人惊叹的是,仅需3秒钟,它便能读完整部《三体》。

目前,在开源模型领域,360智脑7B无疑是支持文本长度最长的大模型之一。

为了方便开发者使用,360智脑7B大模型不仅提供了全套的微调训练代码和推理代码工具集,而且实现了开箱即用。这一举措极大地简化了开发流程,让行业无需再为处理长文本而犯愁。

在性能评估方面,360智脑7B大模型同样表现出色。通过OpenCompass与国内外同参数模型进行对比,其综合能力排名前三。在C-Eval、MMLU、HellaSwag、LAMBADA等多项能力测试中,360智脑7B均获得了第一的成绩,显示出强大的中英文知识和推理理解能力。即便是面对“弱智吧”贴吧的“刁难”,它也能从容不迫地作出清晰应答。

在LongBench评测中,360智脑7B大模型的长文本处理能力同样令人瞩目。在同等参数模型的测评中,它成功拿下最高分。同时,在中英文360K大海捞针效果测试中,也取得了超过98%的高分。这一成绩的背后,得益于360智脑7B采用的无损压缩技术,它摒弃了传统的滑动窗口attention、跳跃attetion等有损压缩路线,实现了超长文本的无损处理。

文章内容仅供阅读,不构成投资建议,请谨慎对待。投资者据此操作,风险自担。

分享到微信

扩展阅读大模型 360 360智脑 大模型 开源

医疗大模型,巨头们的新赛场代码、模型全开源!贾佳亚团队多模态模型 Mini-Gemini国家天文台人工智能工作组发布大模型“星语3.0”,已接Sora平替?2分钟超长AI视频模型StreamingT2V免费开源国内首个公共安全领域大模型算法“天擎”通过备案,支科技云报道:大模型加持后,数字人“更像人”了吗?Meta AI推MA-LMM:用于长视频理解的记忆增强多模态大模中山大学“梗王”大模型CLoT 靠讲笑话入选顶会CVPR巨头狂卷代码大模型开源软件 Tools4AI 将 AI 无缝集成到 Java 企业应用程

“ 19 岁,绝美青春”:绝味鸭脖再推新品引爆中国休闲卤制 IDC:2024年Q1全球智能手机出货量2.894亿部 同比增长7.8%

真我GT Neo6 SE首发6000nit无双屏,首销价1699元起 OPPO A3 Pro手机定档4月12日发布,提供三款宋韵配色

敢闯技术无人区 TCL实业斩获多项AWE 2024艾普兰奖

近日,中国家电及消费电子博览会(AWE 2024)隆重开幕。全球领先的智能终端企业TCL实业携多款创新技术和新品亮相,以敢为精神勇闯技术无人区,斩获四项AWE 2024艾普兰大奖。

重庆创新公积金应用,“区块链+政务服务”显成效

“以前都要去窗口办,一套流程下来都要半个月了,现在方便多了!”打开“重庆公积金”微信小程序,按照提示流程提交相关材料,仅几秒钟,重庆市民曾某的账户就打进了21600元。

2024全球开发者先锋大会即将开幕

由世界人工智能大会组委会、上海市经信委、徐汇区政府、临港新片区管委会共同指导,由上海市人工智能行业协会联合上海人工智能实验室、上海临港经济发展(集团)有限公司、开放原子开源基金会主办的“2024全球开发者先锋大会”,将于2024年3月23日至24日举办。