返回资讯中心
外部精选
软件工程
#开发者实时流

作者用AI工具dettato从YouTube视频提取贝斯谱

来源标题:I used dettato to obtain bass tabs from YouTube video

作者利用音频转MIDI模型dettato,从乐队Angine de Poitrine歌曲Fabienk的YouTube视频中提取出贝斯谱并公开下载。dettato并非LLM,而是专门将音乐音频转换为MIDI音符序列的神经网络,且能分离出合奏、吉他、人声、贝斯、鼓等多条音轨。作者称该模型基于公有领域音乐训练,效果良好,此次还测试了这首7/8拍、含微分音的歌曲。

Hacker News 最新ioma82026/11/22 · 今天8 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

在这里,我提供 Angine de Poitrine – Fabienk | Part II 的贝斯谱供下载和练习。下面我介绍自己是如何利用 AI(dettato)得到这份谱子的。

PDFbass_motif_treble_and_bass_tabs2.pdf52 KBDownload MIDbass_motif_7-4_original_variation-best-Kontrabas,_Bass_motifbass_motif_7-4_original_variation-best-Kontrabas,_Bass_motif.mid·343 BDownload

也可以直接在浏览器里实时练习。你可以按需调整速度,或者只播放鼓声。

我是如何用 AI(而不是 LLM)得到这份谱子的

几天前,一个新的音频转 MIDI 模型发布了,叫 dettato。它不是 LLM,而是另一种神经网络,只针对一个任务训练——把听到的音乐转成 MIDI 记谱,也就是转成一个个音符的序列。

这个模型特别酷的地方在于:它是用公有领域音乐训练的,效果很好,而且能把原始音频拆成多个音轨(合奏、吉他、人声、贝斯、鼓,几乎什么都有)。我决定在新晋乐队 Angine de Poitrine 的歌曲 Fabienk 上试一试。这支乐队非常独特,它使用非传统节奏(这首歌是 7/8 拍)和微分音(也就是半音之间的音——他们为此特制了一把吉他,品丝比通常的多得多)。

我尤其喜欢这首歌第二段的贝斯线。那里微分音不多(或者说很容易避开),但我没法从乐手快速的演奏中把一个个音符记下来。

我心想:这正是试用新 dettato 模型的大好机会!首先我做了自己的 fork,加上 uv 工具链、MPS(Mac Silicon)支持和一个简单易用的 GUI。

ioma8/dettato-guiFork of dettato with uv project tooling and a simple desktop GUI for audio-to-MIDI conversion.Open repo ↗Opens in a new tab.

然后我把自己从他们 YouTube 视频里提取的 MP3 转成了 MIDI。我在 bandcamp 里打开它、用 MIDI 回放时,转录的效果之好让我吃惊。吉他、贝斯、鼓都有。

但我只想要贝斯。于是我让 AI(codex)读取这个 MIDI,查看歌曲后半部分的贝斯声部,找出重复的动机,并单独给我一个 MIDI 文件。哈!codex(我记得用的是 Terra 模型)一次就搞定了,完美。

接着我直接让它把它转成贝斯谱和乐谱,同样一次成功,然后我就可以开始用贝斯吉他练了。

结果发现这段旋律其实并不难,难的是速度。我还没能达到 Angine de Poitrine 本人的演奏水平,未来几天大概也达不到。

不过我还是决定把它发到 YouTube 和公开渠道。这支乐队的音乐最近几个月变得极其流行,我想人们会很乐意找到谱子自己学着弹。

AI 在生活的许多领域确实非常有用。不管是写代码,还是从 MIDI 乐谱的特定音轨中提取重复模式。它们越先进,一切就越能一次搞定。这真的很棒。

但也值得指出,非 LLM 模型同样仍在发展,并且有它们的重要用途。dettato 就是一个绝佳的例子。

所以,拿起你的贝斯,学学这段 riff 吧。至少要用 Angine de Poitrine 的速度!

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →