softmax算法——处理分类问题
本文共 732 字，大约阅读时间需要 2 分钟。
一 介绍
softmax基本可以算是分类任务的标配。本篇介绍softmax是什么，以及softmax图解和举例。
二 什么是softmax
现实生活中需要对某一问题进行多种分类，例如对图片进行分类的例子，这时就需要使用softmax算法。
softmax，就是如果判断输入属于某一个类的概率大于属于其他类的概率，那么这个类对应的值就逼近于1，其他类的值就逼近于0.该算法主要应用就是多分类，而且是互斥的，即只能属于其中的一个类。与sigmoid类的激活函数不同的是，一般的激活函数值只能分两类，所以可以理解Softmax是Sigmoid类的激活函数的扩展，其定义如下：
假设我们有一个数组V，Vi表示V中的第i个元素，那么这个元素的Softmax值就是
也就是说，是该元素的指数，与所有元素指数和的比值，所有比值之和能保证总和为1
三 图解公式
四 举例
某个样本经过生成的值为y1为5，y2为3，y3为2，那么对于的概率y1=5/10=0.5.y2=3/10,y3=2/10,于是取最大值的值y1为最终分类。
softmax在机器学习中有非常广泛的应用，MNIST的每一张图都表示一个数字，从0到9.我们希望得到给定图片代表某个数字的概念。例如，训练的模型可能推测一张包含9的图片代表9的概念未80%，但是判断8的概念为5%（因为8和9都是上半部分相似的小圆），判断它代表其他数字的概率更小。于是取最大概率的对应数值，就是这个图片的分类。这个是一个实用softmax回归模型的经典案例。
五 小技巧
在实际实用中，softmax伴随的分类标签都是one_hot编码，而且这里还有个小技巧，在softmax时候需要将目标分成几类，就在最后这层放几个节点。
六 参考
你可能感兴趣的文章
NLP 项目：维基百科文章爬虫和分类【01】 - 语料库阅读器
查看>>
NLP_什么是统计语言模型_条件概率的链式法则_n元统计语言模型_马尔科夫链_数据稀疏(出现了词库中没有的词)_统计语言模型的平滑策略---人工智能工作笔记0035
查看>>
NLP、CV 很难入门？IBM 数据科学家带你梳理
查看>>
NLP三大特征抽取器：CNN、RNN与Transformer全面解析
查看>>
NLP入门（六）pyltp的介绍与使用
查看>>
NLP学习笔记：使用 Python 进行NLTK
查看>>
NLP度量指标BELU真的完美么？
查看>>
NLP的不同研究领域和最新发展的概述
查看>>
NLP的神经网络训练的新模式
查看>>
NLP采用Bert进行简单文本情感分类
查看>>
NLP问答系统：使用 Deepset SQUAD 和 SQuAD v2 度量评估
查看>>
NLP项目：维基百科文章爬虫和分类【02】 - 语料库转换管道
查看>>
NLP：从头开始的文本矢量化方法
查看>>
NLP：使用 SciKit Learn 的文本矢量化方法
查看>>
NLTK - 停用词下载
查看>>
nmap 使用总结
查看>>
nmap 使用方法详细介绍
查看>>
nmap使用
查看>>
nmap使用实战（附nmap安装包）
查看>>
Nmap哪些想不到的姿势
查看>>