暴风中文 通过搜索各大小说站为您自动抓取各类小说的最快更新供您阅读!

用故事解释Softmax函数

故事背景:选举村的村长选举

在一个叫“选举村”的地方,每四年一次,村民们都要选出一位新村长。这次,有四位候选人:

? 阿强(擅长务农,村民对他比较熟悉)

? 小美(善于管理,做过村委会秘书)

? 老李(年纪较大,经验丰富,但村民对他评价不一)

? 张三(刚来村子不久,大家对他了解不多)

选举日,村民们需要根据他们的支持度,选择一个人投票。但村民的支持度并不是“非黑即白”的,每个人对每位候选人的好感度都不同。为了更公平地衡量大家的意愿,村子里的智者发明了一种方法,叫 Softmax 规则。

Softmax 的运作方式

智者让每个村民给四位候选人打分,比如某个村民的打分是:

? 阿强:8分

? 小美:6分

? 老李:5分

? 张三:3分

但是,这些分数只是相对的,我们需要转换成“概率”来反映这个村民的最终选择倾向。Softmax 规则的做法是:

1. 先用指数函数(e的指数)放大分数,避免负分影响决策:

2. 计算这些指数值的总和:

3. 再计算每个候选人的支持度占比:

这样,每个人最终的选择概率就会落在 到 之间,并且所有候选人的概率加起来是 (保证了最终一定会选出一位村长)。

比喻解释:冰淇淋店的选择

假设你走进了一家冰淇淋店,店里有四种口味:

? 巧克力(你最爱)

? 香草(你觉得还行)

? 草莓(一般般)

? 抹茶(你不太喜欢)

如果你只是随意选,你可能会纠结,但Softmax 规则就像是在你的大脑里装了一个“选择助理”,它根据你对每个口味的喜爱程度(打分),帮你转换成最终的选择概率。例如:

? 你对巧克力的喜爱度是9分,香草7分,草莓5分,抹茶2分。

? Softmax 把这些分数转化成指数值,然后归一化成概率:

结果就是,你有最高的概率选择巧克力,较低的概率选择香草,几乎不会选抹茶。

总结

Softmax 函数的本质是:

1. 将原始分数(打分)转换成概率,使得总和为 1。

2. 指数放大优势,让分数高的选项更有可能被选中。

3. 让所有选项都有可能被选中(即使得分最低的选项概率也不会完全是0)。

无论是在选举、推荐系统还是AI分类任务中,Softmax 都像一个“理性的选择助手”,帮我们做出合理的决策。

多层分类的中间层会有偏置和中间结果

用故事解释“偏置”和“中间结果”

故事背景:魔法师的学徒

在一个魔法学院里,有一位年轻的学徒——小艾。他正在学习如何用魔法配制“完美药水”。

学院的导师告诉他:“要配出理想的药水,你需要三个关键步骤:”

1. 收集原料(输入数据)

2. 研磨并混合(计算中间结果)

3. 调整口味(加上偏置)

小艾开始尝试:

? 他拿了 龙眼果(原料1),月光花(原料2),银露水(原料3),这些原料各自有不同的药效分数。

? 他按照导师给的魔法公式进行计算,把这些原料的效果 加权(类似于机器学习中的“权重”)得到一个中间结果。

? 但是,每次配出来的药水,总觉得有点偏酸或者偏苦,于是导师告诉他:“要加上一点魔法糖!”

这 魔法糖 就是 偏置(bias)!

导师解释道:“有时候,光靠原料混合出来的效果可能会偏离目标,比如太苦了,我们就需要手动加点甜味,这样最终的药水才是完美的。”

小艾恍然大悟,他在最后的配方中加入了一点 魔法糖(偏置),最终成功调配出一款 恰到好处的药水(输出结果)。

用比喻解释“偏置”和“中间结果”

比喻1:做菜

想象你正在做一锅汤,你的过程是这样的:

1. 你放了鸡肉、蔬菜和调料(输入数据)。

2. 你用锅把这些食材煮成高汤(计算中间结果)。

3. 但你尝了一口,觉得味道有点淡,于是加了一点盐(偏置)。

这最后加的盐就是“偏置”,它的作用是让最终的味道更符合你的期待,而不是完全取决于原料本身的味道。

比喻2:考试成绩调整

假设一群学生参加了数学考试,老师发现:

? 有些学生因为压力太大,考试成绩偏低。

? 有些题目出得特别难,导致整体分数偏低。

为了更公平地评估学生的能力,老师在所有人的成绩上额外加了5分。

这个“额外加的5分”就是 偏置(bias)!它的作用是:

? 让整个评分系统更加合理。

? 弥补一些系统性误差,比如有的考试本身比别的考试更难。

而学生的原始分数就是 中间结果,它是由他们答题的情况决定的,但最终的成绩还要经过调整(加偏置)才能成为最终分数。

总结

? 中间结果 就是计算过程中的“半成品”,就像汤还没加盐,药水还没加糖,考试还没加调分。

? 偏置(bias) 就是最后人为加上的“调整项”,它的作用是让最终结果更合理、更符合目标。

就像魔法师加糖、厨师加盐、老师调分一样,神经网络在计算时也会用“偏置”来微调输出结果,使它更加精准。

暴风中文推荐阅读:反腐风云之收官之战重生之权臣的掌中娇和亲公主之冷霸汗王的心尖宠大梦我仙诀食香离谱!谁家召唤师开局召唤龙王总裁大人,V587!我的老爹是重生花神不花小王公锦鲤少女逃荒种田二十五岁才激活神豪系统?开局被富婆包围,校花:那我走?让你扮演胡桃,你把全网当客户?七公子1腹黑老公,严肃点!女主请自重,我真的只想刷奖励啊火葬场奇谈小时候救的校花,长大后她倒追我蛇蝎毒妃:本宫不下嫁换嫁八零:新婚夜队长起来洗床单暴君爹爹的团宠小娇包灾难艺术家溺宠俏妻:傲娇总裁狠狠爱全民女神:重生腹黑千金穿成恶毒后娘后她带崽野翻了!渣男系统:在恋爱游戏里大放异彩替嫁神医:腹黑世子,甩不掉带一帮靓妞去修仙我官场崛起,退婚的女友开始倒追黄金庭院:从灵开始的现世生活大戏骨不凡法师都市魔神:渡劫失败,夺舍重修娱乐圈最强替补工厂里的夫妻都市之神帝驾到重生了,此时不浪何时浪邻居是热芭?我有个大胆的想法!欺骗世界,我打造了现代超凡文明妻子背叛:摇身一变成太子至高使命分身强度拉满,我杀穿高武世界我在娱乐圈修仙修真三千年,校花竟是我老婆嫡女虐渣手册国庆回家多了个姐姐大小姐失忆后,前任纷纷回头了阿姨,你也不想这事被孩子知道吧御兽:SSS级的我被兽娘抢疯了重生之我只想做个贪财好色的俗人重生后,商业帝国信手拈来
暴风中文搜藏榜:我成了五个大佬的白月光舞动娱乐圈夺梦九帝斩天诀直上青云:从高考落榜开始蜜宠娇妻:BOSS夫人拽又甜每天一个战神技能华枝春满隋末扬旌都市修真:无敌杀伐开局操作蝙蝠侠重生60年代开始奋斗盛宠娇妻理论上可行东京大律师:开局律所破产苟不住的空间主豪门盛宠:司少,轻宠混世龙医这趟穿越有点险美女校花的全能保镖勒少的心尖萌妻婚后交锋之辣妻难驯重生87退婚后,前妻一家急疯了嫡女凶猛都市极品小仙医风水:姐,我不想努力了入狱成为天机神算,国家请我出山冥公子濒死病人,一首大不为震惊全网穿成男神电脑怎么破现代都市的鉴宝王者农门旺女:皇后,快来给朕抱抱!不敢在群里喊老婆,怕她们全回话重活之逍遥大明星重生空间之媳妇逆袭挂机修炼的我不敢躺平风雨兼程度十年从四合院开始的操蛋人生恶魔99次蜜吻:老公,宠太猛透视神医女婿天才萌宝,妈咪一个亿龙影战神:王者归来爱上女处长:一念翻身原神之古雨魔神我重生断绝关系,你们还没完了都市之绝世高手穿书后病娇暴君只在我怀里撒娇娇拍卖缅北噶腰团伙,警察关注我重生后我成了地产大亨群众官念
暴风中文最新小说:从不空军的钓场!钓鱼圈彻底失控了假死三年,我竟成了冰山女神的协议老公潜艇厨子:透视深海,我即是天眼至尊少年王踏出SSS女子监狱,我医武双绝穿进侯府当后妈后每天都想和离战神归来:与我为敌,统统灭族!重生1985:从收猴票开始首富之路田园乱人心重回1991都重生了谁还白手起家,我选择当富二代重生御兽,立志躺平却被女神契约重生换娘亲,炮灰成了名门贵女火红年代,这个小公安有情报系统快穿归来,网黑真千金杀穿娱乐圈乡下来的真千金,竟是玄学大佬替弟从军五载,归来全家夺我军功?全球高武:我背后一口棺,专业的捡尸随母改嫁旺新家,重生嫡女嘎嘎乱杀出道十年查无此人,圈内全是我前任?重回1960:渔猎白山松水我和富二代灵魂互换城市求生之牛小二的奇葩人生四合院:易中海的养老心思,被我扒个底婢女扶瑶我带小萝莉找上门,校花无痛当妈尚书千金投井后通灵?全京城慌了神医农女:我靠种田富甲天下七零随军:穿书作精她撩又甜重生后另择良婿,王爷红眼求名分踏出女子监狱后,三千囚徒誓死追随都市:女儿重生后,我成互联网教父了重生08:从拿下极品校花开始重生70,从给妻女煮碗白粥开始仕途风云:升迁消失三年回归,九个女总裁为我杀疯了大国军工:重生1985,为国铸剑香烬欢SSS警报!真龙踏出女子监狱!沪上名媛随军当晚,长官他破戒了大国房枭重生归来,我是战神也是首富女子监狱归来,我无敌于世知青下乡:从当赤脚医生治疗中风开始召唤之王:我手搓九星大魔神,你哭什么分开四年,容总他又带崽来求婚了捡漏我是认真的,空间里全是帝王绿复读一年,你攒了7个前女友?每日情报,从洗浴中心拯救校花开始!重生七八:从上山采药开始致富