第四期书生大模型实战营 基础岛 第1关

已于 2024-11-17 20:09:56 修改
阅读量778 收藏 19
点赞数 29
CC 4.0 BY-SA版权
分类专栏： 第四期书生大模型实战营 文章标签： 开源 人工智能 nlp 自然语言处理 深度学习
于 2024-11-17 20:09:27 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_87331158/article/details/143836327

书生大模型全链路开源体系

一、开源历程

        2023年6月7日，InternLM发布了其首个千亿参数的浦语系列模型。随后，2023年7月6日，InternLM-7B开源并率先实现免费商用，发布了全链条的开源工具体系。接着，2023年9月20日，InternLM-20B也进行了开源，并对开源工具链进行了全面升级。2023年9月27日，开源了图文混合创作大模型——书生·浦语灵笔（InternLM-XComposer），标志着该领域的又一重要突破。

        2024年1月17日，InternLM2开源，凭借其卓越性能超越了最新同量级的开源模型；1月23日，InternLM2-Math发布，这是首个支持形式化数学语言及解题过程评价的开源模型；1月29日，书生·浦语灵笔2（InternLM-XComposer2）发布，进一步提升了个性化高质量图文创作和对话的能力，2024年5月24日，InternLM2-Math-Plus开源，刷新了开源数学模型的性能上限；6月4日，InternLM2-WQX开源，凭借200亿参数量，在2024年高考中取得了接近GPT-4的优异成绩。2024年7月4日，InternLM 2.5正式开源！

二、性能天梯图

        可以看到随着时间的推移，以及版本的迭代，书生浦语大模型的性能越来越接近GPT。InternLM2.5-20B-Chat的性能

最低0.47元/天 解锁文章

200万优质内容无限畅学
第四期书生大模型实战营 基础岛 第5关
2401_87331158的博客
11-23 1100
对于 LoRA 或者 QLoRA 微调出来的模型其实并不是一个完整的模型，而是一个额外的层（Adapter），训练完的这个层最终还是要与原模型进行合并才能被正常的使用。对于全量微调的模型（full）其实是不需要进行整合这一步的，因为全量微调修改的是原模型的权重而非微调一个新的 Adapter ，因此是不需要进行模型整合的。，在使用前我们需要准备好三个路径，包括原模型的路径、训练好的 Adapter 层的（模型格式转换后的）路径以及最终保存的路径。表示合并后的模型最终的保存路径。然后，我们可以直接启动应用。
第四期书生大模型实战营 基础岛 第3关
2401_87331158的博客
11-17 608
通过对比上述对话，可以明显发现，使用提示词后，大模型的回答的风格更加明显，回答更加精准，更加贴合用户需求。内容表达更加流畅，逻辑性也得到了显著提升，整体回答质量呈现出明显的优化。精心设计的提示词可以让大模型的回答更准确、更贴近需求，还能显得条理清晰、逻辑性更强。这说明在使用大模型的过程中，花点心思优化提示词，是非常值得的，效果会好得多。将不使用系统提示的书生浦语大模型作为 baseline 对比，提交的系统提示词要指导LLM表现出比baseline更高的性能，提供对比截图并加以分析说明即可。
第四期书生大模型实战营 基础岛 第6关
2401_87331158的博客
11-24 617
Warining不必在意。不会影响结果。
第四期书生大模型实战营-Tutorial 7
Boxun111的博客
12-03 1205
Task 1: 任务要求：利用对提示词的精确设计，引导语言模型正确回答出“strawberry”中有几个字母“r”。完成正确的问答交互并提交截图作为完成凭证；直接在浦语书生上面去试，果然出错，采用思维链的方式也回答错误；以同样的方法比较科幻小说生成，对比效果；可以看到，故事具体的细节更多，变得更丰满，而且最后多了对故事的寓言性的思考，从个人英雄主义上升到人类价值观；输入同样的问题，生成效果如下，确实效果更好，更符合现实的格式，而不使用提示工程的结果类似于故事描述；这里我选择了公文写作助手以及科幻小说生成；
第五期书生大模型实战营报名啦
qq_60666264的博客
04-13 434
书生·浦语是上海人工智能实验室大模型品牌，期待和广大的社区开发者一起建设开放、繁荣、健康的大模型开源社区！本知识库已上线飞书社区，欢迎大家来玩。
第四期书生大模型实战营 进阶岛 第2关
2401_87331158的博客
11-29 1111
首先，配置一个用于Lagent 的环境。需要耐心等待~这样就环境就配置好啦。
第四期书生大模型实战营 基础岛第6课 OpenCompass 评测书生大模型实践
qq_64858624的博客
02-07 686
如果你想要评测通过 API 访问的大语言模型 整个过程其实很简单 首先你需要获取模型的 API 密钥（API Key）和接口地址 以 OpenAI 的 GPT 模型为例 你只需要在 OpenAI 官网申请一个 API Key 然后在评测配置文件中设置好这个密钥和相应的模型参数就可以开始评测了 评测过程中 评测框架会自动向模型服务发送测试用例 获取模型的回复并进行打分分析 整个过程你不需要准备任何模型文件 也不用担心本地计算资源是否足够 只要确保网络连接正常即可。
第四期书生大模型实战营-基础岛 第四关
2401_86139790的博客
12-20 974
基于 LlamaIndex 构建自己的 RAG 知识库，寻找一个问题 A 在使用 LlamaIndex 之前 InternLM2-Chat-1.8B 模型不会回答，借助 LlamaIndex 后 InternLM2-Chat-1.8B 模型具备回答 A 的能力，截图保存。正常情况下，其会自动从互联网上下载，但可能由于网络原因会导致下载中断，此处我们可以从国内仓库镜像地址下载相关资源，保存到服务器上。messages=[{"role": "user", "content": "xtuner是什么？
【第四期书生大模型实战营入门岛】L0G1000——Linux 基础知识
weixin_46084134的博客
10-26 417
4、端口映射，这里是直接用VScode链接的，所以无需进行配置，直接可以运行hello_world.py，并打开返回的端口地址。创建虚拟环境，这里表示创建了python版本为3.10、名字为task000的虚拟环境。3、进入SSH开发机后，选择文件夹，在目录中可以生成相应的链接，方便下次直接进入该目录。2、复制ssh登录命令和密码，在本地VScode的SSH插件中与开发机进行远程链接。激活环境 task000，并安装部分库。1、首先选择开发机配置。
开源WAF新标杆：雷池SafeLine用语义分析重构网站安全边界
LT15171009269的博客
08-13 1249
当个人或企业站点上线后面临的首要威胁往往来自网络攻击——据统计，超过60%的Web应用漏洞利用尝试在流量到达服务器前即被拦截。而国产开源项目雷池（SafeLine）正是为此而生：它以反向代理形态部署，在流量抵达网站前完成智能清洗，成为防御黑客渗透的第一道防线。
ZKmall开源商城的容灾之道：多地域部署与故障切换如何守护电商系统
08-12 760
ZKmall 开源商城针对电商业务的高可用性需求，设计了一套完善的多地域部署与故障切换机制，通过 "异地多活" 架构和智能容灾策略，把系统故障的影响压到最小。不管是突发的自然灾害、机房断电，还是流量峰值导致的服务过载，都能快速切换到备用节点，确保核心交易流程不断档。
开源安全云盘存储：Hoodik 实现端到端数据加密，Docker快速搭建
baidu_24794635的博客
08-14 267
以下是对 Hoodik 的简单介绍： - Hoodik 是一个使用 Rust 和 Vue 开发的轻量级自托管安全云存储解决方案 - 采用了非对称RSA密钥对和AES混合加密策略，从文件存储加密到数据链路加密，全程保证数据安全 - 支持Docker一键私有部署，数据和服务自托管 - 该项目的开源代码地址参考：https://github.com/hudikhq/hoodik Docker快速部署与应用实践示例参考：https://blog.luler.top/d/72
一个.NET开源、轻量级的运行耗时统计库
专注于C#/.NET/.NET Core学习、工作、面试干货和实战教程分享。这里聚焦了大量的C#/.NET/.NET Core优质文章、开源项目、实用工具和学习、工作、面试心得。
08-16 347
在.NET开发中，为了准确统计对应方法的执行时间，我们最常用的方式是手动使用 Stopwatch 来显式编写计时逻辑，但是假如你需要大量的使用 Stopwatch 来进行耗时统计的话不利于保持代码的整洁和增加代码的维护成本。MethodTimer是一个.NET开源、免费（MIT License）、轻量级的运行耗时统计库，用于在编译时自动向指定方法注入计时代码，无需手动编写繁琐的计时逻辑。
开源数据发现平台：Amundsen Frontend Service 应用程序配置
船长Q的博客
08-15 766
Amundsen 是一个元数据驱动的应用程序，用于提高数据分析师、数据科学家和工程师与数据交互时的工作效率。
AI生成视频开源模型技术解析
最新发布
UMI55的博客
08-16 690
探索AI生成视频开源模型Stable Video Diffusion的核心技术：基于图像动画化生成动态视频，提供SVD（14帧）和SVD-XT（24帧）两种模型，支持每秒3-30帧速率，适用于广告、教育等多元场景。
开源数据发现平台：Amundsen 快速上手指南
船长Q的博客
08-14 887
Amundsen 是一个元数据驱动的应用程序，用于提高数据分析师、数据科学家和工程师与数据交互时的工作效率。
VS Code配置MinGW64编译GLPK（GNU Linear Programming Kit）开源库
weixin_30777913的博客
08-16 342
VS Code用MinGW64编译C++代码安装MSYS2软件并配置GLPK（GNU Linear Programming Kit）开源库和测试引用库代码的完整具体步骤。
从 LLM 到自主 Agent：OpenCSG 打造开源 AgenticOps 生态
OpenCSG的博客
08-15 711
从 LLM 到自主 Agent，不只是一次技术升级，而是一次生产关系的重构。OpenCSG 用 AgenticOps 生态，把这场变革从概念带到现实——让智能体从云端走向生产线，从研发桌面走向企业运营的每一个角落，构建可持续、可复制、可进化的智能生态。
开源 Arkts 鸿蒙应用 开发（十七）通讯--http多文件下载
ajassi2000的博客
08-16 712
本文记录了一个嵌入式开发者学习ArkTS开发HarmonyOS应用的过程，重点展示了一个多文件下载应用的实现。应用包含三个主要组件：MultipleFilesDownload主管理组件、FileDownloadItem下载项组件和ProgressButton进度按钮组件。文章详细解析了工程结构、各组件功能实现和交互逻辑，包括下载任务管理、进度显示、暂停/恢复功能等。同时提供了完整的代码示例和演示效果，并附带了相关权限配置说明和开源工程下载链接。该案例可作为HarmonyOS应用开发的参考模板。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值