文章列表-AI魔法学院

文章列表

开源的大模型数据集

大模型训练数据集的质量是提升大模型效果最有效的途径，也是最苦最累的脏活，积累前人已经整理开源的数据集，站在数据集巨人的肩膀上，持续迭代大模型。

开源模型数据集

大模型时代，数据为王，在哪里寻找开源数据集？

大模型时代，数据为王，在哪里寻找开源数据集？

开源数据训练

点评：六大向量数据库

AI研究院利用自主开发的MAP-GPT：源码-架构图智能生成系统，独家发布六大热门向量数据库的模块库架构图，包括： Milvus、Zilliz、Faiss、Qdrant、LlamaIndex和Chroma

向量数据库

颠覆数据存储方式：向量数据库的威力

它主要基于向量相似度搜索，可以更快速地处理大规模的高维数据。

编程数据库

向量数据库不是一个单独的数据库分类

其中包括图数据库、关系数据库、文档数据库以及键值数据库，甚至还包括缓存。

大模型向量数据库

windows安装向量数据库milvus

本文介绍windows下安装milvus的方法：首先要安装docker，然后安装向量库milvus

向量库 docker

大模型微调数据选择和构造技巧

大模型场景微调里面，最关键地的一个是问题是：选择什么样的数据微调？

大模型微调

GPU 性能（数据表）快速参考

o FP代表浮点运算数据格式，包括双精度（FP64）、单精度（FP32）、半精度（FP16）以及FP8等，INT代表整数格式，包括INT8、INT4等。

GPU 算力

大语言模型微调：定制自己的微调数据集

为了实现大型语言模型的微调，一个合适的微调数据集是必须的。

大模型

模拟ChatGPT流式数据——SSE最佳实践

为什么要这样传输，从使用场景上来说，ChatGPT 是一个基于深度学习的大型语言模型，处理自然语言需要大量的计算资源和时间，响应速度肯定比普通的读数据库要慢接口等待时间过长，显然不合适。

打字机 sse 大模型

主流向量数据库一览

什么是向量数据库？

向量数据库

中文对话大模型BELLE全面开源！（附：数据+模型+轻量化）

-7b1-mt（70亿参数）为基础，分别在20万，60万，100万，200万数据上进行指令微调后得到的模型Checkpoint。

belle 训练大模型

大规模中文开源数据集发布！2TB、几十亿条可商用的中文数据集书生·万卷 1.0开源~中文大模型能力可能要更上一层楼了！

随着近年来GPT-3、ChatGPT等大模型的兴起，高质量的数据集在模型训练中扮演着越来越重要的角色。

大模型

GItHub一款强大、简单、易用的高效的数据处理RPA小工具

自动化抓取网页数据？

GitHub 数据处理RPA

书生·万卷：难得的中文开源数据集

搞大模型训练，最重要的就是高质量的数据集。

大模型

<12 3 4 5 6 7 8 9 10 ...>

汇聚AI资讯，网罗AI文档，详解AI工具！

关于我们用户协议隐私条款商务合作：skillupvip

© 2023-2024 AI魔法学院

京ICP备20027199号-1