什么是自注意力（Self-Attention） – AI百科知识
自注意力（Self-Attention）是一种高级的注意力机制，支持模型在处理序列数据时，对序列内部的不同部分进行关联和加权，从而捕捉序列内部的长距离依赖关系。...
排序
什么是决策树（Decision Tree） – AI百科知识
决策树通过递归选择最能区分数据的属性来构建树状模型，每个节点代表一个属性测试，每个分支代表测试结果，叶节点代表决策输出。它利用信息增益、增益率或基...
什么是指令调优（Instruction Tuning, IT） – AI百科知识
指令调优（Instruction Tuning, IT）是一种针对大型语言模型（Large Language Models，简称LLMs）的训练方法，旨在提高模型遵循自然语言指令并完成现实世界任...
什么是上下文嵌入（Contextual Embedding） – AI百科知识
上下文嵌入（Contextual Embedding）是一种将词汇映射到向量空间的技术，它为每个词生成一个基于其上下文的表示。这些表示能够捕捉词汇在不同上下文中的多样...
什么是隐藏层（Hidden Layer） – AI百科知识
隐藏层（Hidden Layer）是人工神经网络中的中间层，位于输入层和输出层之间。作用是对输入数据进行特征提取和变换，为最终的输出层提供高层次特征。隐藏层之...
什么是监督式微调（Supervised Fine-Tuning, SFT） – AI百科知识
监督式微调（Supervised Fine-Tuning, SFT）是在预训练模型的基础上，使用特定任务的标注数据集进行进一步训练的过程。预训练模型通常在大规模的无监督数据集...
什么是训练数据（Training Data） – AI百科知识
训练数据（Training Data）是机器学习过程中用于构建预测模型的数据集。包含了一系列的输入特征和相应的目标输出，这些数据被用来让模型学习如何根据特征进行...
什么是评估模型（Judge models） – AI百科知识
评估模型（Judge models）是用于评估其他模型输出质量的辅助模型，充当“裁判员”的角色，对大语言模型（LLM）的输出结果进行评估和打分。模型通过输入问题和待...
IBM 旗下 AI 平台将托管 Meta 大语言模型MetaLlama2
IBM宣布将在其企业人工智能平台WatsonX上托管MetaPlatform的AI语言模型MetaLlama2。Llama2是Meta于今年7月推出的开源人工智能语言模型的商业版本，由微软的Azure...