【城】让AI拥有记忆,它们用了30年|RNN→LSTM→GRU

合集 · 【城】AI 大模型技术演进史 (1)

  1. 22:29
    【城】让AI拥有记忆,它们用了30年|RNN→LSTM→GRU
Description
前天第一版发布出来的时候,因为我开头露脸导致视频的前三秒跳出率超过了70%...视频流量直接褒姒
于是紧急撤回并修复了这个问题,并且直接把系列前面两期合并成为一期发了出来作为补偿,希望大家能够喜欢
-------------------------------------------------------------------------------------------------------------------------------------------------
封面选择换成芙莉莲而不是原来的初音未来,精灵寿命千年,会逐渐遗忘相处过的人的细节,但也会保留核心情感和关键记忆。应该说芙莉莲全剧的核心冲突就是活着却记不住重要的人,以及怎么费尽方法把关键记忆留住。就像LSTM和GRU一样,告诉我们怎么记住事情
-------------------------------------------------------------------------------------------------------------------------------------------------
本视频依然采用原创的Skills进行视频动效制作,项目已开源,欢迎体验
相关提示词与模板:github.com/Unclecheng-li/AI_Animation
Skill:github.com/Unclecheng-li/AI-Animation-Skill

Comments

M-Lia 2026-05-04

别人五一假期:出门旅游,看望亲友,逛漫展; 我五一假期:看我最喜欢的暗扣城的视频。 就很[笑哭]…你们懂吧

♥ 226 ↩ 11

大河李斯特视频工作室 2026-05-04

居然有人不喜欢看暗扣城的帅脸?

♥ 66 ↩ 7

爱吃南瓜月饼的阿朴 2026-05-05

不错的科普。严格一点说,此记忆非彼记忆,现在还没有解决根本的问题。离开训练环境,模型的记忆也可以说知识就是固定了的,目前大模型依然还是一次性的猜词游戏。超出上下文长度或者换个会话就归零了,当然你首先会注意到的是应该是剩余上下文长度不多时模型的降智和胡言乱语等等情况。虽然可以通过压缩上下文来延缓,但还是没有根本性解决。离类人的记忆还有很远。目前transformer差不多也已经到头了,不知道下一个结构是什么样的。目前AI用来当助手还不错,但离真正的人工智能还是很远。

♥ 62 ↩ 14

AbortController 2026-05-08

视频做的很精致[笑哭]不过看一个女生发男音还是要适应一下的

♥ 41 ↩ 13

N1mY4 2026-05-04

[五彩斑斓的世界_老婆]我的昂扣城铸币大头呢?

♥ 35 ↩ 1

RibomBalt 2026-05-04

忽然感觉夏目安安出镜讲解网安内容非常合适,因为安安全全[魔法少女的魔女审判表情包_何意味]

♥ 28 ↩ 2

星塵織夢 2026-05-04

露脸流量影响这么大吗[笑哭]

♥ 18 ↩ 3

机器人sir 2026-05-05

网络小白已经进化成AI小白了[笑]

♥ 12 ↩ 1

zh__CN 2026-05-05

🤓有没有可能,开变声器让声音正确匹配,来看的人翻个倍🤨,声音也比较雷人

♥ 14 ↩ 5

艺术就是大伊万 2026-05-04

回学校了想补个图,点进评论结果发现视频没了吓我一雷[笑哭] 基础的手写三个算子还是蛮简单的应该,4060炼了一个小时大概,至少没啥错句子了。 还有up怎么成Uncle Chengry了[doge_金箍]

♥ 11

2026-05-04

我中月读了?

♥ 13 ↩ 3

judge1ight 2026-05-12

llm在长期记忆方面有两个大问题 1.没有时序信息,这点造成了记忆的局限性,这也在蒸馏在蒸馏对话,历史文档时就出现了很大问题。搞笑的是llm的时序记忆完全是全是上下文的顺序,甚至记忆的权重都和人类的时序一样,这都是人类的功劳。 2.llm没有主动抽象(创造参数)的能力,现在的llm临时记忆完全是模拟的,对于真正的智慧生物(我们)不需要那么长的上下文,人类的context只有2位数,因为我们可以把现有的信息抽象压缩。

♥ 10

星缘丶寂岭 2026-05-05

我们这课都上完了才刷到[魔法学院_瘫]

♥ 8 ↩ 1

是三七捏offil 2026-05-06

以前这类我都当科普看的,现在我当网课看[热]

♥ 7 ↩ 2

楼台影入池 2026-05-04

重投了吗

♥ 7 ↩ 1

X村民233号X 2026-05-04

诶,居然重新投稿了而不是换流😮😮😮

♥ 6

錢一直存 2026-05-09

最喜歡這種感覺學到了卻什麼都沒學到的感覺,學習大滿足

♥ 6

松40 2026-05-04

这期讲的我能懂哎,蟹蟹老师[魔法少女的魔女审判表情包_探头]

♥ 6 ↩ 1

放火烧山真珺 2026-05-04

我喜欢你

♥ 6 ↩ 1

B1urp1e 2026-05-04

那我想看的up的大头谁补给我呢[Mygo表情包_让我看看]

♥ 5 ↩ 1