- 博客(4)
- 收藏
- 关注
转载 详细说说Transformer (超详细图解,一图胜千言)
而Transformer的多头注意力看上去是借鉴了CNN中同一卷积层内使用多个卷积核的思想,原文中使用了 8 个 scaled dot-product attention ,在同一 multi-head attention 层中,输入均为 KQV ,同时进行注意力的计算,彼此之前参数不共享,最终将结果拼接起来,这样可以允许模型在不同的表示子空间里学习到相关的信息,在此之前的 A Structured Self-attentive Sentence Embedding 也有着类似的思想。
2025-07-18 18:02:43
1
原创 Lex Laboris - 工时壁垒(一个开源的、旨在帮助劳动者合法合规记录加班证据的、禁止商用的个人工具)
《Lex Laboris - 工时壁垒》是一款开源个人工具,专为劳动者合法记录加班证据而设计。该工具采用Python+Electron架构,核心功能包括:高精度记录键盘/鼠标/窗口活动、智能判断工作状态、定时截屏、本地防篡改存储(SQLite+哈希链)、系统环境快照及PDF报告生成。项目提供一键安装脚本,支持Windows/macOS/Linux平台运行,通过Electron界面实时展示追踪状态。所有代码开源但禁止商用,当前版本为v0.5 Beta。项目结构分为Python核心模块(含数据库/监控/报告生成
2025-06-22 18:03:16
304
1
转载 傅里叶变换是什么?到底啥意思?一看就懂,转载作者写的超级棒
另外值得注意的是,由于cos(t+2Pi)=cos(t),所以相位差是周期的,pi和3pi,5pi,7pi都是相同的相位。(个人理解:不去纠结傅里叶变化到底是干嘛的,傅里叶分析就是用来处理时域难以解决的问题,从而寻找另一种解决方法的工具,意义和作用:使复杂的时域问题转换成多个不同振幅、不同相位的多个正弦波组成的小问题,即把大问题拆成多个简单的小问题去解决的一种工具)当它乘以3的时候,它的长度发生了变化,变成了蓝色的线段,而当它乘以-1的时候,就变成了绿色的线段,或者说线段在数轴上围绕原点旋转了180度。
2024-05-26 17:19:07
176
原创 Openmv+STM32F103C8T6视觉巡线小车(加入还有识别数字等)[部分转载:“起个名字好难-”博文]
提示:本博文没有图片,原博文有图片提示:如有侵权,请原作者留言原文链接:https://blog.csdn.net/weixin_51583957/article/details/123958565提示:原博客代码包:文件链接:Bai度网盘链接:https://pan.baidu.com/s/1zNNBOC183Lvu9ocPBAdu9w提取码:5642。
2024-03-08 16:53:50
4935
12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人