用您的双手弹奏歌曲和弦
每首歌曲页面均有新功能
Gesture Synth将您的网络摄像头变为一件乐器。左手负责选择和弦,右手控制音量、发声布局与音色,所有设置均自动对齐到您所打开歌曲的调式。无需吉他,无需键盘,无需线缆。
在您的浏览器中运行。摄像头图像直接在设备上处理,绝不会被上传。
三步弹奏您的第一个和弦
- 打开歌曲并点击Gesture Synth: 该按钮位于每首歌曲页面的工具栏中。歌曲将暂停,乐器界面全屏打开,且已自动识别歌曲调式。
- 允许摄像头并开启声音: 在光线充足的环境下,距离摄像头约一个手臂的长度。当双手出现在屏幕上并显示追踪点时,即可开始。
- 展示手指并弹奏: 左手: 一根手指对应 I 级和弦,两根手指对应 II 级和弦,以此类推。右手: 抬起手掌以增大音量,增加手指数量以获得更丰富的发声布局。
动动手指前先听听和弦
这些按键是 C大调 的七个和弦,与您左手的弹奏方式完全一致。点击按键即可通过Gesture Synth所使用的合成器试听,切换大调与小调,并尝试四种右手的发声布局。
提示: 依次弹奏 I, V, vi, IV。这就是数百首流行歌曲背后的和弦进行。
手势图谱
乐器支持的所有手势都在此屏幕上。请先学习左手,右手只用于增加色彩。
左手: 选择和弦
清点伸出的手指数量,包含大拇指。有两种特殊手势对应六级和七级和弦。
- I: 1根手指
- II: 2根手指
- III: 3根手指
- IV: 4根手指
- V: 5根手指
- VI: 食指 + 小指
- VII: 食指 + 小指 + 大拇指
右手: 音色控制
高度代表音量,握拳则为静音。抬起的手指(不含大拇指)选择发声布局。
- 1 根手指: 大三和弦 / 小三和弦
- 2 根手指: 大三和弦,第一转位 / 小三和弦,第一转位
- 3 根手指: 大七和弦 / 小七和弦
- 4 根手指: 属七和弦 / 减七和弦
手腕倾斜与拇指
- 左手垂直或向内倾斜: 大调和弦。
- 左手向外倾斜: 小调和弦。
- 右拇指伸出: 整个和弦降低一个八度。右腕倾斜可将音色从温暖调节至明亮。
始终保持在歌曲调式中
当您从歌曲中打开Gesture Synth时,乐器会自动采用该歌曲的调式,包括您在播放器中设置的任何转调。您的手指对应的是音阶级数,因此同样的手势适用于每一首歌。小调歌曲按其关系大调进行弹奏: 例如在 A小调 歌曲中,A小调 和弦作为 C大调 的第六级。屏幕底部的长条始终显示真实的和弦名称。
示例: A小调 歌曲: Am (vi), F (IV), C (I), G (V).
四种演奏方式
- 和弦: 在歌曲调式中自由弹奏。包含七个和弦,可切换大调或小调,拥有四种发声布局,通过手腕控制滤波器,并可用拇指切换八度。
- 弹奏歌曲: 歌曲真实的和弦进行将转化为一系列目标,每个目标对应精确的手势。只有当您匹配到对应和弦时才会发声,支持“等待模式”或“节拍模式”。
- 特雷门琴: 右手弹奏从低音到高音的连续音高,左手控制音量,如同 20 世纪 20 年代的首款电子乐器。
- 循环录音机: 在倒数与节拍器的伴奏下录制最多四条音轨,在节拍网格中编辑单个步骤,使用鼠标绘制和弦,并下载完成的循环乐段。
您的摄像头依然属于您
手势追踪直接在您的浏览器中运行。追踪模型仅下载一次,每个视频帧均在您的设备上进行分析,以定位每只手上的 21 个点。Akordify 不会上传、记录或存储您的摄像头图像。当您关闭Gesture Synth时,摄像头会自动关闭。
Gesture Synth完整指南
Gesture Synth是什么及其存在的原因
Gesture Synth是一种你在空中演奏的乐器。它通过普通网络摄像头观察你的双手,并将手型转化为和弦。你的左手决定发出哪个和弦,右手决定它的音量、和弦配置的饱满程度以及音色的明亮度。无需插入任何设备,也无需购买任何东西:一台带有摄像头的笔记本电脑和一副扬声器或耳机就足够了。
其设计目的并非取代吉他或钢琴。而是为了让你暂时抛开一切阻碍你与歌曲和声沟通的因素。在吉他上,一个新的和弦意味着学习指法,建立力量,并协调双手,然后才能听到悦耳的声音。而在Gesture Synth中,当你伸出正确数量的手指时,和弦就会立刻出现。这使得它非常适合理解歌曲是如何构建的,听出和弦进行为何有效,并在手边没有乐器时单纯地享受音乐乐趣。
由于Gesture Synth存在于 Akordify 的每一个歌曲页面上,它总是以你正在查看的歌曲调性开始。你可以听一首歌,打开乐器,并立即使用你在任何其他调性中都会使用的相同手型来配合它的和弦进行演奏。
摄像头如何读取你的双手
当你允许访问摄像头时,Gesture Synth会在你的浏览器中加载一个手部追踪模型。视频的每一帧都会在你的设备上进行分析,模型会找到每只手上的 21 个关键点:手腕,每根手指的关节以及指尖。通过这些点,乐器会计算出哪些手指是伸出的,拇指指向哪里,手在画面中的高度,以及手腕倾斜的程度。
摄像头图像永远不会被上传或存储。唯一下载的是追踪模型本身,它会由你的浏览器缓存。当你关闭Gesture Synth时,摄像头会关闭。
为了防止手指半伸时和弦闪烁,乐器使用了一个短促的 稳定器。一个新的手型必须保持大约十分之一秒,和弦才会改变,且短暂的追踪丢失会使上一个和弦保持发声。实际上,这感觉是即时的,但它过滤掉了当你从一个手势切换到下一个手势时发生的意外中间形状。
屏幕上的视图是镜像的,就像浴室里的镜子。你在屏幕左侧看到的手就是你的左手。那只手总是选择和弦,而屏幕右侧的手总是塑造声音。
左手:一个调性的七个和弦
每个大调包含七个基本和弦,每一个都建立在其音阶的音符上。音乐家们用罗马数字 I 到 VII 来标记它们。在 C 大调中,它们是 C,Dm,Em,F,G,Am 和 B 减七和弦。Gesture Synth将这七个 音级 映射到你的左手上:
一到五根手指 演奏 I 到 V 级。数出每一根伸出的手指,包括拇指。一根手指是主音 (I),两根手指是上主音 (II),三根是中音 (III),四根是下属音 (IV),张开手掌且五根手指全伸是属音 (V)。
食指和小指 同时伸出,就像经典的摇滚手势,演奏 VI 级。食指、小指和拇指 一起演奏 VII 级。
左手的 手腕倾斜 决定大调或小调。保持手竖直,或者让它向屏幕中心倾斜,和弦就是大调。向外倾斜,和弦就变成小调。这意味着你可以用两种形式演奏任何音级。歌曲决定哪种形式是正确的:在典型的大调中,I,IV 和 V 是大调,而 II,III 和 VI 是小调。如果你不想考虑倾斜,设置允许你将左手锁定为始终大调或始终小调。
在屏幕底部,一个包含八个方块的条带显示了当前调性的音阶,标有真实的音名,每个音级的罗马数字,以及演奏它的手势。你正在演奏的方块会以其自身的颜色发光。每个音级都有一个在波形、节奏网格和伴奏目标中保持不变的颜色,所以过了一段时间,你不仅能通过声音,还能通过颜色来识别和弦。
右手:音量、和弦配置与音色
右手是你的表现力来源。它的 高度 控制音量:抬高以增加音量,降低以获得安静的音色,攥成拳头以完全停止声音。
右手伸出的手指(不计算拇指)选择 和弦配置,即和弦音符的堆叠方式:
一根手指 演奏简单的三和弦,以根音、五音、八度音和顶部的三音展开。两根手指 演奏第一转位,低音为三音,听起来更轻盈,并能平稳地过渡到相邻的和弦。三根手指 增加七音:在大和弦上形成梦幻的大七和弦,或在小和弦上形成柔和的小七和弦。四根手指 演奏紧张的七和弦:在大和弦上产生属七和弦,这是一种强烈导向下一个和弦的声音,在小和弦上产生减七和弦。
倾斜右手手腕会扫过一个 滤波器。向一边倾斜,声音变得更暗、更圆润,向另一边倾斜,它会打开成明亮、略带共鸣的音色。伸出右侧 拇指 会使整个和弦降低一个八度,这会带来更沉重、饱含低音的声音。
如果四种和弦配置起初太复杂,可以在设置中将右手设为固定配置。此时右手只控制音量和音色,而左手负责所有的和声工作。
为什么一切都以歌曲的调性为准
Gesture Synth会读取你打开它时所处的歌曲调性,包括你在播放器中设置的任何转调。你手指上的音级数字总是相对于该调性的。这正是职业音乐家的思维方式:他们说“进行是一、五、六、四”,而不是命名每个和弦,因为在任何调性中,这些数字保持不变。
小调 歌曲从它们的关系大调演奏,它们共享相同的音符。A 小调歌曲使用 C 大调的和弦,其主音和弦 A 小调位于 VI 级。因此,一首包含 Am,F,C 和 G 的典型小调歌曲被演奏为 VI 小调,IV,I 和 V。乐器会在标题中告诉你这一点,音阶条会显示真实和弦名称,所以你永远不必在脑海中进行换算。
有些歌曲借用调性之外的和弦。一首 C 大调歌曲可能会使用降 B 或 E 大调和弦来增加色彩。Gesture Synth在跟弹模式下会清楚地标记这些和弦,并允许你跳过它们,因为它们无法由该调性的七个音级构成。如果你想探索不同的调性,你可以随时在设置中覆盖调性。
跟随歌曲演奏
跟弹模式将歌曲真实的和弦进行转化为一系列目标。对于每个和弦,你会看到它的名称、罗马数字和精确的手势:左手要伸出哪些手指,是否需要倾斜,以及右手需要多少根手指来达到该和弦配置。接下来的几个和弦会显示在侧面,以便你可以提前准备。
当跟弹模式打开时,只有当你的手势与目标匹配时,乐器才会发声。这是刻意的:它为你提供即时、诚实的反馈,而不会有任何计分屏幕妨碍你。
等待我 模式在你保持当前和弦片刻后会进入下一个。这是学习新和弦进行最好的方式,因为你可以设定节奏。随节奏 模式跟随歌曲的节拍:每个和弦持续的拍数与录音中相同,图表会持续移动,无论你是否准备好。你可以将速度降低到 75 或 50 拍,并开启音量可调的节拍器。时钟从你的第一个正确和弦开始,所以你永远不会从第一秒就开始追赶它。
最后你会看到你准确击中了多少个和弦。过一天再试一次同一首歌,你会注意到这些手型变得自动化的速度有多快。
特雷门琴模式
特雷门琴是最早的电子乐器之一,由 Leon Theremin 在 1920 年左右发明。演奏者从不触碰它:一只手在天线附近移动以改变音高,另一只手在环形线圈附近移动以改变音量。Gesture Synth的特雷门琴模式借用了这个想法。你的 右手 高度连续设定音高,从约 65 赫兹的低沉低音到 1,000 赫兹以上的高频哨音,而你的 左手 高度设定音量。
因为音高是连续的,特雷门琴是一个极好的听觉训练工具。尝试找到你熟悉旋律的第一个音,然后是下一个。小幅、缓慢的移动比大幅度的效果更好,将手肘放在桌子上对控制非常有帮助。
循环录音机:构建你自己的伴奏音轨
循环录音机捕捉你演奏的内容并重复它,这样你可以将各个部分堆叠在一起。设定速度,可以通过输入数字,或者在 Tap 按钮或空格键上敲击几次节拍,选择一到八小节的长度和拍号,然后按录制。经过一小节带有节拍器的 预备拍 后,你演奏的所有内容都会被记录在所选的音轨上。
共有 四个音轨。当一个音轨录制完成时,下一个空音轨会自动选中,因此你可以录制一个和弦音轨,然后是使用拇指八度的低音线,最后在上面加上特雷门琴旋律。每个音轨都有自己的音量、静音和独奏控制。
在控制面板下方,一个 节奏网格 显示循环的每一个十六分音符。已录制的步进会以其和弦的颜色点亮。点击一个步进以关闭或重新开启它,这是一种将长和弦变为节奏型式的快捷方法。利用和弦调色板,你甚至可以用鼠标将调性和弦画进空的步进中。
节拍器提供四种声音(点击音、木质音、蜂鸣音和 Hi-hat)及其各自的音量。当循环听起来如你所愿时,将其下载为音频文件并分享,或者将其用作吉他或唱歌练习的伴奏音轨。
设置可靠的追踪环境
手部追踪的大多数问题来自房间,而不是乐器。一些简单的习惯会带来巨大的不同:
光线。 面向窗户或灯光。身后的明亮窗户会将你的双手变成剪影,使手指难以被看清。
距离。 坐在距离摄像头一臂远的地方。当你抬起双手到胸部高度时,双手都应在画面内,并留有一些空间。
背景。 平静、纯色的背景很有帮助。繁忙的图案或画面中的另一个人会迷惑追踪器。
手掌朝向摄像头。 手掌朝向屏幕,手指向上。手指计数在这种方式下效果最好。
声音。 耳机或像样的扬声器使声音比笔记本电脑的小扬声器丰富得多,尤其是在使用拇指八度时的低音。
Gesture Synth在当前带有网络摄像头的桌面浏览器(如 Chrome 或 Edge)中运行效果最好。它也能在许多带有前置摄像头的平板电脑和手机上运行,但笔记本电脑较大的屏幕使手势指南和循环录音机使用起来方便得多。
通过双手演奏你学到了什么
Gesture Synth起初看起来像个玩具,但它教授了一些音乐中最有用的概念。第一个是 音级思维。一旦你知道一首歌曲是 I,V,VI 小调,IV,你就已经在每一个调性中掌握了它,并且你可以直接将其转移到吉他、钢琴或尤克里里上。第二个是 听觉功能。经过几次练习后,你开始感受到属音向主音的吸引力,第六级的柔和忧郁感,以及第四级的开阔感。
你也学会了最常见的和弦进行。I,V,VI 小调,IV 支撑着大量的流行歌曲。II 小调,V,I 是爵士乐的基石。I,IV,V 是十二小节蓝调。VI 小调,IV,I,V 是相同的流行进行从它的小调和弦开始,这使它听起来更具情感。用你的双手尝试每一种进行,听听它们的感觉有何不同。
最后,Gesture Synth有助于 和弦色彩 的理解。用一根手指在三和弦、七和弦和转位之间切换,可以很容易地听到每个扩展音增加了什么,这在真实乐器上需要更长的时间来探索。
你的前十五分钟
这是一个让你感到舒适的简短练习:
第 1 到 3 分钟。 打开和弦模式,保持右手在胸部高度,伸出一根手指,然后在左手上从一根手指数到五根手指。听听和弦是如何在音阶上攀升的。
第 4 到 6 分钟。 加上 VI 级的摇滚手势,并将左手向外倾斜以使其成为小调。缓慢地演奏 I,V,VI 小调,IV,连续四次。
第 7 到 9 分钟。 保持相同的进行,只改变右手:一根手指,然后三根手指,最后在最后一拍握拳以干净地停止。
第 10 到 12 分钟。 在“等待我”模式下打开“跟随歌曲演奏”,练习你打开的那首歌。不要担心速度。
第 13 到 15 分钟。 在循环录音机的第一音轨上录制进行,切换到特雷门琴模式,并尝试在第二音轨上即兴演奏旋律。
故障排除
乐器看不见我的双手。 首先检查光线和距离。确保双手完全在画面内,手掌朝向摄像头。
和弦在两个音级之间闪烁。 手指可能只伸出了一半。让手型更清晰:手指完全伸展或完全闭合。拇指最容易导致问题,所以要清楚地决定它是伸出还是收回。
当我想要大调时得到了小调。 保持左手竖直,或稍微向内倾斜。如果倾斜总是造成干扰,在设置中将左手锁定为始终大调。
没有声音。 点击开始按钮以开启声音,检查右手是否可见且未握拳,并将其抬高。在跟弹模式下,声音仅在你的和弦与目标匹配时播放。
摄像头被拦截。 在你的浏览器站点设置中允许 Akordify 访问摄像头并重新加载页面。如果其他应用程序正在使用网络摄像头,请先将其关闭。
关于Gesture Synth的常见问题
我需要任何特殊硬件吗?
不需要。一台带有摄像头和扬声器或耳机的电脑足矣。Gesture Synth在浏览器中运行,无需任何额外设备、控制器或软件安装。
我的摄像头视频会被上传吗?
不会。手势追踪在您设备的浏览器内运行。仅下载追踪模型。Akordify 不会上传、记录或存储您的摄像头图像,且关闭Gesture Synth时摄像头即会关闭。
哪些浏览器效果最好?
在台式机或笔记本电脑上使用最新版本的 Chrome 或 Edge 可获得最流畅的体验。其他支持摄像头的现代浏览器通常也可以使用。
我可以在手机或平板电脑上使用吗?
通常可以,前提是设备拥有前置摄像头且浏览器允许摄像头访问。笔记本电脑屏幕更舒适,因为双手、音阶指南和循环录音机可以同时显示在屏幕上。
我需要懂乐理吗?
不需要。您只需要数手指。音阶长条会显示真实和弦名称,且在弹奏模式下会显示每首歌曲每个和弦对应的准确手势。乐理知识会在您弹奏时自然习得。
为什么 A小调 歌曲显示的是 C大调?
小调调式是基于其关系大调进行弹奏的,它们使用相同的音符。在 A小调 中,A小调 和弦是 C大调 的第六级,因此 Am, F, C, G 的进行会变为 VI小, IV, I, V。
我可以录制我的演奏吗?
可以。循环录音机可以配合节拍器录制最多四条音轨,允许您在节拍网格中编辑单个步骤,并以音频文件格式下载完成的循环乐段。
这会取代学习吉他或钢琴吗?
不会,也不以此为目的。这是一种快速理解和聆听歌曲和声的方法。您学习到的级数概念可以直接迁移到吉他、钢琴和尤克里里上,您可以在同一个歌曲页面上进行练习。
您的双手已经懂得如何计数。让它们弹奏起来吧。
打开 Akordify 上的任意歌曲,点击Gesture Synth,几秒钟内即可在空中以歌曲本身的调式弹奏其和弦。