来源:AICG工具箱 责编:网络 时间:2025-05-04 21:22:29
我最近,对小尺寸AI大模型比较感兴趣。
之前国内外科技公司在大模型领域,一般是不断增加模型参数来增强模型能力,从7亿、13亿、70亿甚至200亿以上,确实越来越强,但这也会让大家自己家的电脑基本跑不动。
近期,微软发布了只有2.7亿参数的Phi-2大模型;12月初,阿里也发布了只有1.8亿参数的通义千问超迷你大模型。
这些小尺寸的大模型,不但在性能评测上,超过了一些7亿甚至13亿参数的大模型,而且因为尺寸小,基本都可以在3G以下显存甚至CPU模式下快速运行,这样一来,5年前的老电脑也可以玩了。今天分享一个通义千问1.8B超迷你大模型的懒人包,赶快随我去看看吧~
Qwen系列,现在包括Qwen基础语言模型,即Qwen-1.8B,Qwen-7B,Qwen-14B和Qwen-72B。以及Qwen-Chat聊天模型,即Qwen-1.8B -聊天、Qwen-7B-聊天、Qwen-14B-聊天和Qwen-72B-聊天。
Qwen大模型拥有强大的基础语言模型,针对多达 3 万亿个 token 的多语言数据进行了稳定的预训练,覆盖领域、语言(重点是中文和英文)等,能够实现有竞争力的基准数据集上的性能。此外,还有基于SFT和RLHF(尚未发布)的符合人类偏好的聊天模型,能够聊天、创建内容、提取信息、总结、翻译、编码、解决数学问题等,并且能够使用工具,扮演代理,甚至扮演代码解释器等。
而今天介绍的Qwen-1.8B大模型,只需要2.9GB的显存即可运行,换句话说5年前的显卡都可以玩,赶紧下载懒人包,在本地拥有一个AI助手吧~
老规矩,大家自行在本地部署比较麻烦,已经为球友大家制作好了一款离线整合包了,下载到本地解压即用。
大家下载解压到本地。
①双击“一键启动-Qwen_1.8B.exe”。
②双击一键启动程序后,会打开一个命令提示窗口,项目会自动运行。加载成功后,请自行复制以下网址在浏览器打开“ http://127.0.0.1:8000/”。
③打开链接后,可以看到Qwen-1.8B大模型可视化聊天主界面:
界面我已经为大家汉化好了~使用非常简单,可以说是10秒上手:
输入提示词:在“input”区域,直接输入提示词
发送:点击“Submit(发送)”按钮
等待片刻,即可得到通义千问1.8B大模型给你的回复了:
从我自己的体验来看,反应非常迅速,回答也比较靠谱,大家可以自行去尝试一下~
注意事项:
①该项目建议使用英伟达显卡运行,只需要3G显存,CPU也能运行,但偏慢
②请确保安装路径不包含中文,不然可能会引起奇怪的适配问题
今天就聊到这了,我是Glen,感谢你看我的文章,欢迎大家继续支持我,请
点击作者的头像,然后扫码关注我的公众号,并回复【Qwen-1.8B】,免费获得本文资源~
新一代国产AI视频生成大模型,国内短视频龙头快手出品的AI视频生成大模型「可灵」,迄今为止最接近OpenAI Sora等世界顶级模型的新产品。
商汤科技最新升级的AI文生图领域的预训练模型——秒画Artist v0 3 5版本,三个月后迭代。审美水平和专业度上达到顶尖水平,福利值(免费)直接拉满
关于Stable Diffusion的内容很多,在本篇教程里,我会先为你介绍Stable Diffusion模型的运行原理、发展历程和相较于其他AI绘图应用的区别。
Stable Diffusion 是一种基于扩散过程的图像生成模型,可以生成高质量、高分辨率的图像。它通过模拟扩散过程,将噪声图像逐渐转化为目标图像。这种模型具有较强的稳定性和可控性,可以生成具有多样化效果和良好视觉效果的图像
ChatGPT Plus会员怎么付费_如何升级ChatGPT Plus会员
国产最强文生视频模型「可灵」首发:直出2分钟超长视频,生成质量完胜OpenAI Sora丨免费体验
商汤全新AI绘图大模型“秒画Artist”v0.3.5版本上手测评:作画水平比肩Midjourney!划重点——免费
stable diffusion controlnet_stable diffusion模型哪个好
2024诺贝尔化学奖授予谷歌DeepMind CEO丨联发科发布天玑9400旗舰AI芯片丨Sora负责人被谷歌挖墙脚
ChatGPT计划在年底将订阅费涨到22美元/月丨Llama 3.2发布:手机端侧可运行丨百度世界大会将于11月12日举行
快手发布文生视频大模型「可灵」丨广东高考首次启用AI智能巡考丨支付宝推出AI毛发自测工具
字节跳动试水AI硬件研发:重整人马聚焦教育赛道与智能可穿戴终端,两条产品线同时推进
10年缘分说散就散:Ilya Sutskever官宣从OpenAI离职,麾下的“超级对齐团队”负责人也一并离职
4000亿开源大模型「天工3.0」正式上线丨国内首个音乐模型「天工SkyMusic」上线丨波士顿动力发布电动人形机器人