V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  liangzhh25  ›  全部回复第 1 页 / 共 2 页
回复总数  21
1  2  
18 小时 48 分钟前
回复了 Donahue 创建的主题 生活 真的好无聊
健身,周中一下班就去撸一个多小时的铁,穿插跑步骑行,只有周日休息的时间。
3 天前
回复了 zzzzzl 创建的主题 生活 发个鸭汤 下班!
最近一年给自己买的大件,就是 3k+的公路车。
7 天前
回复了 shtzlwdmkf 创建的主题 生活 大家晚上闭眼睡觉时都在想什么
我入睡和睡眠比较好(当然也可能是熬夜导致的),关灯之后就会感受手放在被子上冰凉的感觉,手塞进被子里的温度,感受一下呼吸的空气的温度,呼吸的频率,翻转一下让自己枕到最舒服的状态,再感受一下眼皮酸酸涩涩的状态,再然后就睡着了 = =
7 天前
回复了 xhldtc 创建的主题 生活 你好陌生人,可以祝我生日快乐吗
生日快乐
新疆西藏
有时候我觉得能有小红薯和抖音还挺好的,至少筛选了一波心智和三观不稳定的人,没有独立自我以及独立思考能力的人,才会被这些文章影响到自己的生活或者是成为生活的指引。简单的结论就是,你愿意接受以后的人生里,和一个没有独立精神的个体共度余生吗?除非大的变故,一般人是很少会变的。
校园霸凌大部分情况下,是发生在性格比较怯懦的小孩子身上,有一个强健的体魄能避免,但让孩子养成开朗自信的性格更能解决问题。
29 天前
回复了 henji 创建的主题 生活 求助兄弟们一个情侣现实问题
其实可以把问题抛给你女朋友,因为她是知道你家庭情况和收入情况的。你表达你想和她结婚的意愿,但经济情况也摆明给她,你就问她这个问题能怎么解决,是要借钱负债结婚吗?如果还是让你借钱解决的话,,那就很有趣了 hhh
建议做个随访,把你们所有学员(注意是所有)目前的工作情况统计一下,然后再统计一下他们对于上培训班这件事情的反馈。只要不作假,应该是能看出点什么的 hhh 即便不是我想的那样,也可以拿出来做宣传以及打 v 站程序员们的脸 hhh
31 天前
回复了 xujdan 创建的主题 生活 有个朋友变得不爱和人交流这真的不好吗?
好不好取决于他是不是享受这么个状态,或者是一个周末自己过之后是不是恢复精神了。如果这个状态只是他没精力社交或者是内向引起的,而且自己会因为这个状态而感到难受,,那确实需要做出改变。改变的方式需要引导吧,像我就经常会找他出来溜达走走或者快走聊聊天啥的,找到自己的兴趣爱好(玩游戏,拼图之类的),或者是运动(跑步,健身,骑行,射箭之类的),就会好很多。
41 天前
回复了 bloks 创建的主题 生活 在 Suol 遇到饭托的经历。
手工哥明明都没来,所有评论都有他的身影,甚至在 v 站都形成了品牌效应。
46 天前
回复了 shiji 创建的主题 生活 老婆过生日看到婆婆给的红包气地发抖
@shiji 我说的不是你为啥要问,而是你老婆对你的一句提问,第一感觉是"你第一反应又是来挑我问题"。这种情况我能想象的,一是你们在相处的时候,经常一个问题出来(你们之间的问题,或者是她找你吐槽的工作同事问题),你分析的时候会先从对方身上开始排错(职业习惯的问题,毕竟程序员来说,绝大部分错的永远是码农而不会是电脑);二是你老婆过于敏感且极度容易内耗,身边的一切感知都是从恶意开始解读,这个应该是从小到大的性格养成问题。如果是前者的话,可以尝试改变你们之间的沟通方式,至少让她感受到问题是你们一起在面对和解决,而不是她在对抗所有;如果是后者的话,只能是让对方意识到自己有这个性格上的缺陷,然后一起慢慢改变吧 = =
当然,上面可能是自己的过度解读,可以批判地看待 hhh
46 天前
回复了 shiji 创建的主题 生活 老婆过生日看到婆婆给的红包气地发抖
图片里你老婆的回复 "你第一反应又是来挑我问题",这句话感觉可以解读出好多情绪、相处方式在里面 hhh
62 天前
回复了 revival83 创建的主题 咖啡 如何最低成本每天一大杯冰美式
冷萃,没有酸味而且苦味够重。只需要手磨机,过滤袋(煲汤的那种就行了),称重秤,然后买一大包豆子,成本基本在 3-4 元一杯,前期投入也不高。前一天中午或者晚上磨完豆子,放过滤袋,找个玻璃杯装常温水扔冰箱,第二天直接拿出来就可以喝了 = =
72 天前
回复了 davelm 创建的主题 生活 医生看病和程序员找 BUG 一样
主要现在有些情况是,看到页面上点击有个报错,就把所有相关的前端后端算法产品全都叫到会议室开会一起 debug = =
248 天前
回复了 aw2350 创建的主题 问与答 一到冬天什么也不想做
北方人是环境暖气的增益嗜睡 buff ,南方人是环境寒冷的床铺封印 debuff ,离开了床会一直受到寒冷攻击,想嗜睡都做不到。
2024-01-26 14:55:31 +08:00
回复了 LeeReamond 创建的主题 Python Transformer 是不是缺乏跨维度关系捕捉能力?
再补充一点,一般注意力结构后面都会再接个 mlp 或者 ffn ,这里会有通道维度上的全连接,通过多个 attn-mlp 结构,应该是能实现 op 说的跨维度信息捕捉的能力。
2024-01-26 14:36:05 +08:00
回复了 LeeReamond 创建的主题 Python Transformer 是不是缺乏跨维度关系捕捉能力?
发现说的有点不对,transformer 的注意力确实是两个词的 q 和 k 在各自的维度相乘,求和计算得到的,这个注意力本身就有点类似 cv 的空间注意力。也能理解,要是维度之间还要计算相关的话,attention 计算量就要爆炸了。以上是个人理解。
2024-01-26 14:17:05 +08:00
回复了 LeeReamond 创建的主题 Python Transformer 是不是缺乏跨维度关系捕捉能力?
@neopenx 我理解 op 的问题也是你说的那样 hhh
苏神博客里面 Transformer 升级之路系列里面有好些关于位置编码的文章,推荐看看,我也是刚学的小白。
按我的理解,绝对位置编码是给序列位置相关项,而相对位置编码是在绝对位置编码的推导下使 位置相关项 转化为 相对位置相关项。具体可以看 https://www.kexue.fm/archives/8130 的(3)式和(4)式
1  2  
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   950 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 33ms · UTC 20:35 · PVG 04:35 · LAX 13:35 · JFK 16:35
Developed with CodeLauncher
♥ Do have faith in what you're doing.