当前位置: 首页> 财经> 产业 > 宣传推广计划怎么写_在线房屋设计_软文街_如何做好网上销售

宣传推广计划怎么写_在线房屋设计_软文街_如何做好网上销售

时间:2025/8/4 23:47:10来源:https://blog.csdn.net/Love_JavaProgram/article/details/146105911 浏览次数:0次
宣传推广计划怎么写_在线房屋设计_软文街_如何做好网上销售

什么大模型什么是模型参数

1)现在的大模型要解决的问题,就是一个序列数据转换的问题:

输入序列 X =X=[x1 ,x2 ,...,xm ], 输出序列Y=[y1 ,y2 ,…,yn ]XY之间的关系是:Y=WX

“大模型”这个词:“大”是指用于训练模型的参数非常多,多达千亿、万亿;而“模型”指的就是上述公式中的矩阵W

在这里,矩阵W就是通过机器学习,得出的用来将X序列,转换成Y序列的权重参数组成的矩阵。

2)通俗地理解,就是参数特别特别多的机器学习模型,大模型到底有多大?GPT-3是1750亿个参数,据说GPT-4是有1.76万亿个参数。目前典型的主流大模型,是像GPT-3这样千亿规模的,小一些的是百亿规模的。

3)deepseek-r1:1.5b,qwen:7b,llama:8b,这里的1.5b,7b、8b代表什么?b是英文的billion,意思是十亿,7b就是70亿,8b就是80亿,70亿、80亿是指大模型的神经元参数(权重参数weight十bias)的总量,目前大模型都是基于Transformer架构,并且是很多层的Transformer结构,最后还有全连接层等,所有参数加起来70亿,80亿,还有的上千亿。

什么是token?

模型是无法直接处理文本的,只能处理数字,就跟ASCII码表、Unicode码表一样,计算机在处理文字时也是先将文字转成对应的字码,然后为每个字码编写一个对应的数字记录在表中,最后再处理。所以模型在处理文本时,第一步就是先将文本转换成对应的字码,也就是大模型中的token

什么是向量、矩阵、张量?

张量是一个多维数组,可以看作是向量和矩阵的更底层的表示,向量和矩阵是张量的特例。例如向量是一维的张量,矩阵是二维的张量。

张量可以有任意数量的维度,而不仅仅是一维(向量)或二维(矩阵)。张量在物理学中用来表示多维空间中的物理量,如应力、应变等。在深度学习中,张量用于表示数据和模型参数的多维结构。

参考 《深入理解Transformer技术原理 https://tech.dewu.com/article?id=109
关键字:宣传推广计划怎么写_在线房屋设计_软文街_如何做好网上销售

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com

责任编辑: