文章列表-AI魔法学院

文章列表

准备迎接超级人工智能系统，OpenAI宣布RLHF即将终结！超级对齐技术将接任RLHF，保证超级人工智能系统遵循人类的意志

即我们训练出来了一个超强的AI系统，没有对齐微调（RLHF）之前它可以生成任意不加限制和不顾好坏的结果。

OpenAI 人工智能

OpenAI视频模型Sora的推理生成成本多高？

context length 很大时，Attention 部分的计算不能忽略因此，如果 Sora 全量数据训练都是 1M seq length，则 Sora 的训练成本需要增加

Sora 推理算力

AIGC系列之一-一文理解什么是Embedding嵌入技术

我添加了一个对象“water”来显示类别之间的差异。

AIGC Embedding 嵌入技术

揭秘Baichuan 3超越GPT-4的中文实力！文心一言、GLM 4.0也甘拜下风？全方位对比测试大揭秘！

GPT-4 文心一言 4.0 GLM-4 Baichuan 3 和 GLM-4 对于上传文件理解非常具体和全面，把大纲小标题都提炼出来，而文心一言 4.0 和GPT-4需要再次用提示词才能把信息更加具体化

Baichuan 3 大模型

回望做大模型一年后的感悟

而国内则是在研究怎么能在一年内追上chatgpt，再加上之前疫情的影响，国内的researcher和国外的交流是比较匮乏的，有种“信息茧房”的感觉。

大模型感悟

截至2023年5月份业界支持中文大语言模型开源总结及商用协议分析

尽管如LLaMA、Vicuna、MPT等国外机构开源的模型支持中文，但是本土的ChatGLM、MOSS、RWKV等系列在中文指令跟随和理解中通常更加优秀。

大模型

使用知识图谱提高RAG的能力，减少大模型幻觉

ensp;HuggingFaceInferenceAPIEmbeddings(api_key=HF_TOKEN,model_name="thenlper/gte-large") ) 加载数据集

RAG 大语言模型

中文版开源Llama 2同时有了语言、多模态大模型，完全可商用

Llama 2 模型系列包含 70 亿、130 亿和 700 亿三种参数变体，相比上一代的训练数据增加了 40%，在包括推理、编码、精通性和知识测试等许多外部基准测试中展示出了优越的表现，且支持多个语种

开源模型

用户意图对齐，无需人工标注，Zephyr-7B 超越 Llama2-Chat-70B

在实际应用中，种子提示、回应和新提示会更加多样化，而且可能涉及到更复杂的主题和领域。

小型语言模型 Zephyr-7B

这可能是史上最全的 Python 算法集（附论文及python源码链接）

它能根据五次多项式计算二维路径、速度和加速度。

算法 python

阿里通义实验室薄列峰：从兵马俑跳“科目三”到照片唱歌，四大框架让AI生成的人物活起来丨GenAICon 2024

整个关系是一个统计的依赖关系，通过这样的关系和暴力的关联，再加上大数据，展现出了一定的文生视频能力，但是不代表这是我们物理世界真实运作的规律。

通义文生视频

再超Transformer！Google| 提出两个新模型(Griffin、Hawk)，强于Mamba，更省资源

对于每种模型大小，都保持每批 token 的总数固定不变，这意味着随着序列长度的增加，序列数量也会按比例减少。

transformer 训练

【语音领域-又双叒更新】阿里开源FunAudioLLM: 2大核心模型、5大亮点功能！效果炸裂！手把手带你理论+实战部署推理!

语音情感文字识别案例展示: 利用FunASR框架来加载推理 import funasr print("funasr: ", funasr.

asr tts 声音

【TTS语音克隆开源最强王者】5款爆火开源模型(Fish、F5、GPT、CosyVoice、MaskGCT)效果对比，等你来评!

快速：借助fish-tech加速技术，在Nvidia RTX 4060笔记本电脑上实时因子约为1:5，在Nvidia RTX 4090上为1:15。

语音克隆开源模型

RLHF 在 Text2SQL 领域中的探索

EX-0.746 02 RM RM 模型训练的模型以 SFT 阶段的模型为基础，参考微软代码进行训练（Hub 项目近期也会增加RLHF

Text2SQL RLHF

<...71 72 73 74 75 76 77 787980 >

汇聚AI资讯，网罗AI文档，详解AI工具！

关于我们用户协议隐私条款商务合作：skillupvip

© 2023-2024 AI魔法学院

京ICP备20027199号-1