网易首页 > 网易号 > 正文 申请入驻

56个视频只值51分钟,他把它们全变成了笔记

0
分享至

我每天在 X 上存东西,然后几乎从不回头去看。几个月前我写了个小工具 bookmark-cli,每天把书签同步到本地数据库,方便搜写作灵感。库里现在躺着 12,309 条书签。


问题出在它只读文字。几年前这没什么,但这些年我存的东西里大约 9% 是视频。这个月更夸张:60 条里 45 条是视频,四分之三。也就是说,我存下的大部分内容,根本进不了我为自己造的那个工具,而我也从来不会重看它们。

我存它们,是因为它们让我着迷,也因为将来可能要从里面抄点思路——我在学分发。于是我把这活儿交给了夜班。

每天夜里,它翻出我存的、帖子内容与科技相关的视频,只留下 3 分钟及以内的,把每条变成一段可搜索的短笔记:视频讲什么、提到了哪些工具、给了哪些数字,再加一句逐字引用作为凭证。

干活的是两个开放模型:Whisper(small)负责把说的话转成文字;Gemma 4 E2B负责写笔记。视频完全没人说话时——我 72 条短科技视频里有 30 条属于这种——Gemma 改读屏幕上的四帧画面。Whisper 听错产品名时,Gemma 会去帖子里找正确拼写。

最好的点子都诞生于懒惰。我不想看那 97 个视频,现在不用看了。

慢而稳的那部分

我住在尼日利亚的哈科特港。电网(当地叫“light”)经常一停就是几个小时,而一台用 CPU 跑 AI 的笔记本掉电很快。所以夜班只在笔记本插着电时工作:一旦切到电池,它立刻停下、保存进度、等着;来电了再接着干。

这周它真刀真枪地这么干了三次,从没把电耗在视频上。有个限制:它只能分辨“插着电”和“用电池”,分不清电网来电和我的发电机。

它是怎么搭起来的

全部跑在我的笔记本上(Intel i5,没有模型能用的显卡,16 GB 内存),不往任何 AI 服务发数据。

  • 代码挑视频:帖子带视频、文字里有科技词。yt-dlp 不下载就能读出时长,超过 3 分钟的直接跳过。
  • yt-dlp 下载音频,Whisper small 在 CPU 上转写(中位数 23 秒一条),音频用完即删。
  • 有语音时,Gemma 4 E2B(通过 Ollama)根据转写和帖子写笔记(中位数 16 秒)。
  • 没语音时,代码从视频里取四帧,Gemma 读屏幕:画面内容、能认出的字、屏幕上的工具(中位数 38 秒)。
  • 每条答案保存前都由代码检查,只重试一次,之后笔记标记为“未读取”。模型永远不会陷入循环。

检查环节花掉了大部分功夫。模型只能抄,不能编:引用必须逐字出现在转写里——Gemma 曾把“But there are...”写成“And there are some uniquely human things...”,差一个词就足以拒掉它,因为允许“差不多一样”也会放过一个被吞掉的“not”。工具名必须出现在帖子、转写或屏幕上;每个数字必须被说过或写过;名字修正只有在听到的词在转写里、正确的名字在帖子里、且两种拼写长得像时才生效。

最后这条规则来自一次翻车。我拿前 10 条笔记对照真实视频,10 条全标了正确。然后我逐条检查 Gemma 的名字修正,发现 8 条里有 4 条是错的。其中一条,说话人说的是“ChatGPT”,Whisper 写成“Chan GPT”,Gemma 因为帖子讲的是 Claude 就改成了“Claude”。那条就在我的 10 条里,所以真实成绩是 9/10。现在一次修正要求两种拼写至少 60% 的字母相同(“Olamar”和“Ollama”是 83%,“Chan GPT”和“Claude”是 31%)。

结果

把 Gemma 拿掉,56 条笔记里有 22 条根本不存在:那些视频没有语音,Whisper 无话可给,只有 Gemma 能读屏幕。

名字修正的作用比我期望的小,但确实存在。在笔记里搜“ollama”能搜到两个视频,而这两条的转写里 Whisper 写的是“Olamar”或“Olama”,直接搜转写什么也找不到。Gemma 也不是每条都抓得住:帖子写的是 DeepSeek,笔记里仍然是“DeepSeat”。

在这之前,我试过给 Gemma 派另一个活,结果也留在帖子里,因为它塑造了我后来的做法。我让它挑出哪些文字书签值得读,手工标了 100 条来测。在留出的 50 条上,用我近期帖子标题做简单关键词匹配,表现比 Gemma 还好(我挑的 8 条里,关键词前 5 命中 5 条,Gemma 命中 4 条);按点赞数排序一条都没找到。所以现在挑选用关键词,Gemma 干关键词干不了的事:读视频。

开放创新为什么重要

  • 它跑在我有的东西上:一台 CPU 笔记本,没有显卡,没有付费 API。Whisper 和 Gemma 4 E2B 小到能整夜干活,而你睡着的时候,慢一点没关系。
  • 它能离线工作。模型下载完之后,夜班只有取视频时才需要联网,它写的东西一个字节都不离开我的笔记本。
  • 我能好好测它。开放权重跑在自己机器上,我可以把同一个模型跑上几百次,拿它和纯关键词对比,在它输掉的地方把它换掉。换成按次计费的付费 API,我不会这么干。

懒惰的回报

说个诚实的数字:56 条有笔记的视频加起来是 51 分钟。但我本来就不会去看它们,所以在此之前,这 51 分钟就是白白丢掉的。现在它们是 56 条可搜索的笔记。

代价是一次检查:我把 10 条样本视频看了一遍,大约 8 分钟,换来的是剩下的再也不用看。

这周我就在用自己的收藏跑它。周四和周五它跑了两天,扛过了上面那三次断电;从周六起,它每天 23:00 自己启动,趁我睡觉处理我当天存的东西。

我在笔记里搜“distribution”,什么也没搜到。我存的视频都是讲工具的,不是讲人怎么把它们卖出去的。这个发现也挺有用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
基建周刊|原中央政治局常委吴官正:人情薄如纸!

基建周刊|原中央政治局常委吴官正:人情薄如纸!

观星赏月
2026-10-25 12:45:22
吉林三连胜悄悄蜕变!内线补强后,辽宁新援即插即用,防守也进步

吉林三连胜悄悄蜕变!内线补强后,辽宁新援即插即用,防守也进步

余憁搞笑段子
2026-10-27 00:56:19
结婚第二年丈夫去世,第三年自己遭遇车祸,经历两次开颅,瞳孔一度都散掉了一只……歌手毕夏再度露面,吴克群泪湿眼眶:请抱抱你自己

结婚第二年丈夫去世,第三年自己遭遇车祸,经历两次开颅,瞳孔一度都散掉了一只……歌手毕夏再度露面,吴克群泪湿眼眶:请抱抱你自己

都市快报橙柿互动
2026-10-26 09:53:47
小叔子一家又要来过暑假,妻子直接出差一个月,最后丈夫崩溃了

小叔子一家又要来过暑假,妻子直接出差一个月,最后丈夫崩溃了

泽泽先生
2025-05-22 05:00:05
广东GDP垫底的六座城:阳江、梅州、汕尾、河源、潮州、云浮

广东GDP垫底的六座城:阳江、梅州、汕尾、河源、潮州、云浮

坠入二次元的海洋
2026-10-26 15:16:13
医生发现,凡是‌头发白得早‌的人,大多都有 4个 共性,留意观察

医生发现,凡是‌头发白得早‌的人,大多都有 4个 共性,留意观察

健康之光
2026-10-17 09:10:24
潜藏25年,“2001.12”命案犯罪嫌疑人雷某落网

潜藏25年,“2001.12”命案犯罪嫌疑人雷某落网

环球网资讯
2026-10-26 18:28:11
释永信塌房后,被曝为女明星开光,除了李湘外,多名女星被拉下水

释永信塌房后,被曝为女明星开光,除了李湘外,多名女星被拉下水

阿器谈史
2026-01-08 13:16:09
真不赖,网传某大厂大专外包男把985硕士正式女员工搞到手了!

真不赖,网传某大厂大专外包男把985硕士正式女员工搞到手了!

黯泉
2026-10-24 10:56:48
3-0!陈熠夺冠不可怕,可怕的是赛后张本美和这番话,彻底破防了

3-0!陈熠夺冠不可怕,可怕的是赛后张本美和这番话,彻底破防了

宝哥精彩赛事
2026-10-26 08:45:24
安徽一医院原院长被查!

安徽一医院原院长被查!

阜阳发布
2026-10-26 15:10:39
拍出这张照片的人就是天才!网友:不得不佩服

拍出这张照片的人就是天才!网友:不得不佩服

摄影技巧入门教程
2026-09-18 16:18:32
双11公认“最香”的5款手机,512GB也不贵,最低才1461元

双11公认“最香”的5款手机,512GB也不贵,最低才1461元

小柱解说游戏
2026-10-26 13:09:53
不愧是“化痰冠军”!只喝两次,痰根拔掉,喉咙润爽顺畅

不愧是“化痰冠军”!只喝两次,痰根拔掉,喉咙润爽顺畅

健身狂人
2026-10-20 12:17:01
大咖云集,国家德比时拉波尔塔与多位巴萨传奇在诺坎普合影

大咖云集,国家德比时拉波尔塔与多位巴萨传奇在诺坎普合影

懂球帝
2026-10-27 05:33:12
林依晨自曝产后痛经基本消失,周冬雨反问引热议!医生:能不能缓解要看类型

林依晨自曝产后痛经基本消失,周冬雨反问引热议!医生:能不能缓解要看类型

上观新闻
2026-10-25 21:54:41
令人崩溃!星巴克调整入座规则后,大批老人转场Manner坐满整店网传无一笔消费,座位之争再次引发热议

令人崩溃!星巴克调整入座规则后,大批老人转场Manner坐满整店网传无一笔消费,座位之争再次引发热议

火山詩话
2026-10-26 15:32:12
成名后出轨保姆气死原配,如今78岁的他晚景凄凉,子女与其割席不再管他

成名后出轨保姆气死原配,如今78岁的他晚景凄凉,子女与其割席不再管他

磊子讲史
2026-10-26 14:36:18
“都绝户了,还拼命挣钱干嘛?”看见父亲50岁就躺平,我崩溃了

“都绝户了,还拼命挣钱干嘛?”看见父亲50岁就躺平,我崩溃了

素十三儿
2026-04-13 07:12:36
底裤扒了!浙工大大二学生上电视称自研AI平台两月收入60万,原来平台是汇总多家现成AI接口,网友怒斥其薅羊毛

底裤扒了!浙工大大二学生上电视称自研AI平台两月收入60万,原来平台是汇总多家现成AI接口,网友怒斥其薅羊毛

火山詩话
2026-10-25 07:25:13
2026-10-27 06:04:49
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
166文章数 88关注度
往期回顾 全部

科技要闻

苹果发iPad mini 8:5499元起售 配A20 Pro

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

体育要闻

13年后重回诺坎普,穆里尼奥又滑跪了

娱乐要闻

胡歌杨幂刘诗诗袁弘陈龙结伴去埃及

财经要闻

卢锋:全球失衡背后 大国博弈与多边治理

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

时尚
房产
本地
手机
公开课

围巾,女人气质的延伸

房产要闻

海甸岛26万人,还缺一个年轻人“待得住”的地方

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

手机要闻

苹果回应iPhone Duo内屏裂纹问题 称仅极少数设备受影响 建议联系AppleCare更换

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版