沉浸式 app 并不只是看上去或者感觉很不错：还需要听上去也很优秀。我们邀请了几位获得 Apple 设计奖提名的开发者来分享其音乐创作、音频设计和声音的相关理念。(还会有青蛙出场。)

Poolsuite FM：在炎炎夏日享受音乐的乐趣

让我们开门见山吧：Poolsuite FM 真的非常适合夏季的氛围。这款海滩派对主题的点唱机 app 采用了位图格式图片，融合了各种音乐流派，让您沉浸在 90 年代怀旧设计风格中，同时在幕后保持了非常高的技术水准。这款 app 的创作者既非雷盖音乐艺术家，也不是伊比沙岛音乐唱片骑师，而是一个名叫 Marty Bell 的友善的苏格兰人，在开发 Poolside 播放器之前，他从未接受任何音乐培训，没有技术背景，没有资金雇用帮手，肯定也没有泳池。

他所拥有的是敏锐的创意，融合夏季感觉与精心组织的音乐，听上去像阳光一样明媚。Bell 说道：“我脑海中构想了一个泳池。我想象有 10 个人在泳池里游玩。他们都比我更酷。我想‘在那种场景下，我会播放这首歌曲吗？’”他笑着说：“这个赌注真的很高。”

Poolsuite FM (前不久还叫做 Poolside FM) 是在 2014 年构思的，苏格兰那年的冬季异常阴郁。Bell 在位于苏格兰高地的家里讲述道：“那是一段非常压抑灰暗的时光 (他最近刚结束了七个月的 Covid 避疫，回到了多米尼加共和国)。天气很冷，雨下个不停。但听到这些音乐，我大脑中的 5-羟色胺立即提高了。”

Bell 希望将明媚的阳光洒落到其他人身上，但作为一位长期的派对策划人，他也知道一个简单的音乐播放列表 app 是很难销售的。他笑道：“每个人都认为自己拥有最好的播放列表。我想’为什么不把让我感觉快乐的夏季音乐组合起来，再融入让我感觉快乐的其他元素 — 80 年代的 VHS 海滩电影？’”

由于采用技术手段渲染了怀旧氛围，而且节奏明快，Poolsuite FM 马上引起了不小的反响。它看起来就像我们在 1994 年使用的 Mac；它的音乐播放列表是由 Bell 精心选择的，通常来自于 Soundcloud 和 YouTube 上不为人知的艺人，涵盖了各个地区的各种音乐流派。他说：“其中包括迪斯科、独立摇滚和电子音乐，但我感觉它们都是属于同一个大家庭的。”

今天，Poolsuite FM 深入地细分为多个频道，包括 Indie Summer、Hangover Club、Tokyo Disco 和 Friday Nite Heat。它的主频道有 600 首歌曲；Bell 通过他自己的策划，以及他在社交媒体上获得的提交内容，每周增加十多首歌曲。他说：“我希望在 Poolsuite 上涌现出很多人们从未听说过的艺人。”

另外还有一个惊喜：Poolsuite FM 从未被商业化。Bell 依赖于志愿者帮助，开始引入资金，他推出了防晒霜产品线。他说：“我不希望让 Poolsuite 商业化。我不希望跟踪各种指标和 KPI。那会破坏氛围。“如果氛围没有了，那夏季还有什么呢。”

If Found：星系旅行

f Found 与其他任何游戏或 app 都有所不同。(坦率地说，我们仍未确定它的名称。) 这是一个沉浸式的科幻成长故事，主人公是名叫 Kasio 的年轻变性女性，故事围绕她的日记展开。为了显著简化体验，在故事进行中，您可以用手指擦除每一个场景，逐渐统一似乎非常松散的故事主线。音频设计师/作曲者 Eli Rainsberry 和 Matt Hopkins 将从头至尾指引您了解整个情节。

Rainsberry 说：“我希望了解您开始这次旅程的感受，知道您脑子里在想什么，就如同您在做白日梦时那样。

作为游戏行业的资深从业人员，Rainsberry 的作品也可以在 Bird Alone、A Monster’s Expedition 和 Wilmot’s Warehouse 上听到，他参与创作了 If Found 的更细腻、更有感染力的“笔记本”系列。他们说：“有了擦除系统，我们的游戏将会更加得心应手。悬崖边场景从轻柔的微风开始，随着 Kasio 展开故事情节，整个格调变得更冷更淡。”Rainsberry 感觉笔记本场景的 Arc 格式音乐需要采用模拟方法，伴随着吉他、曼陀林和口琴的演奏。他们说：“我们希望把记忆逐渐逝去的效果呈现出来。”

Hopkins 的绰号叫做“2 Mello”，他创作了更生动鲜活的场景，包括电影效果的天体开篇，带您进入深邃的太空，逐渐吸引您擦除整个行星 (甚至还有更大的星球)。

为此，他使用了 90 年代的电子音乐，他倾向于使用 The Prodigy 乐队的疯狂吼声，以及 Aphex Twin 的模拟音乐。他说：“很少有人要求您在视频游戏里使用流行音乐。游戏更关乎情感和心情。但当时我确实灵感乍现。我甚至成功地使用了一点碎拍舞曲。”

这样听起来有一点神秘感，正如我的本意：If Found 的故事情节就像缎带那样相互交织，但到最后又拧在一起。Hopkins 说：“在笔记本不断变换的位置，我使用了 Eli 的一些音乐。”Rainsberry 自己对此做出了说明：“我提供了一些安静的时刻，给人们留出空间梳理思路，然后随着 Matt 进入，音乐达到令人难以置信的高潮。这是一种很好的平衡。”

Pok Pok Playroom：孩子们都很好

在打造这款富有创意的儿童沙盒游戏 Pok Pok Playroom 时，Esther Huybreghts 和 Mathijs Demaeght 做出了郑重的承诺。Huybreghts 笑着说：“我们希望开发一款父母们不需要在餐馆里静音的游戏。我们不希望您满脑子都是刺耳的杂音。我们需要更安静的体验。”

这款游戏深得全球各地成年人的喜爱：Pok Pok Playground 很好地迎合了小家伙们的感官。其中包括要开闸的手拉开关、要磨合的齿轮、要滴落的水珠、要振响的门铃。但它们都保持了一种合理的听觉平衡，能够激发儿童的思路，同时留出一些空间，让他们利用自己的想象力，填补一些细节。所有这些都要归功于声音设计师 Matt Miller，他全身心 — 好吧，其实主要是靠嘴 — 地投入到项目中。

居住在多伦多的 Miller 说：“我首先发出很小的声音‘噗噗，嘎嘎’，这非常令人尴尬。”

但也提供了很好的音效。Miller 在 Playground 中录制了所有的声音：晃荡作响的拖把、发出滋滋声的烤架、无言的对话，所有这些音效完全由他和妻子 Cathy 提供。“我们的想法是产生令人平静的声音，”Miller：“这些声音可能多次重复听到，而不让人感到厌烦。”(家长和看护人员此时肯定点头称是。)

最初，Miller 和 Demaeght 希望只使用少量真实物品，但他们很快意识到，这款 app 的 500 个动画需要大量不同的声音，因此 Miller 继续寻找更多物品作为声源。“我拿来了木块和厨房的容器，还从本地二手店买来了一些东西，”Miller 指着家庭录音室背景中的一箱“Foley 物品”说，“我走进一家音乐商店，开始敲击各种乐器。”

他最大的挑战来自 app 的“音乐 Blob”部分，它是可移动形状的抽象空间。“音乐 Blob 是一种全新的创意，”Miller 说，“需要很多因素的共同作用。”例如：蓝色始终是 C，而圆圈 (最简单的形状) 则以单个正弦波表示 (最简单的声音)。Miller说：“它们必须保持一致性。”

但和他的目标受众一样，Miller 也发现了一些发挥空间：他最喜爱的效果包括一个粪金龟，它抬起后腿，滚动粪球。他笑着说：“这种滚动声只是我拿着一个汤盆沿着边缘滚动发出的声音。当然，当我们能做出真实声音的时候，我们会不遗余力的。但有时用些出乎意料的方式来造出声音，也是很有意思的。”

Loona：夜晚，就是最好的时间

去年一个工作日早上，Loona 创始人 Andrew Yanchurevich 发送文字消息给团队音效总监 Ivan Senkevich，问他为什么还没到办公室。幸运的是，Senkevich 的回答非常合理：他出去找青
蛙了。

更具体地说，Senkevich 是在寻找青蛙的声音，将录音放到团队开发的睡眠 app 中。Senkevich 的家乡在白俄罗斯明斯克，他说：“我所在的这个地区有非常好的自然音源。我经常来村子里进行录音。”

他有足够的理由这样做。Loona 这款 app 的一部分是睡前故事，一部分是互动活动，在这两方面都做得非常出色，它为您提供“睡眠场景”，包括声音和讲故事，在睡前平复您的心情，帮助您安然进入甜美梦乡。(您可以将它们视为冥想互动故事书。)

为了创造足以令人产生睡意的声音环境，Senkevich 经常外出，在城镇里四处寻找，搜索对象不仅包括两栖动物，还有微风轻拂的树林、潺潺流淌的小河，以及昆虫的声音。“有些睡眠场景更像动画片，有些则更加真实。但我们始终尝试呈现最自然的声音。”(他指出，有些声音确实只能从声源库中找。毕竟，“我们不可能在明斯克录制大海的声音吧。”Senkevich 笑着说。)

Loona 提供的助睡手段包括艺术、讲故事、图片、音乐和睡眠科学，其中声音是至关重要的部分。Yanchurevich 表示，Senkevich 在图片和音频设计方面都具有丰富的经验，并且很好地将两者结合起来。Yanchurevich 说：“Senkevich 在这两个领域都具有丰富的经验。他能感受这两个世界的结合。这就是他的超能力。”

正如 Yanchurevich 所说，这样开发的 app“从您的童年时代就能产生安全感”。在睡眠场景“龙神殿”中，您将探索漂亮的大理石宝塔，悦耳的声音可以帮助您平静心情，包括在建筑中点亮灯笼和呈现颜色等重复过程。在这些睡眠场景中，您可能在神话王国中迷路，前往黑森林探险 (听起来很像 Minsk)，或者听到火光中发出的噼啪声。其中的音乐来自一个业余音乐人团队，成员来自巴西、亚洲和美国，分别展现了各自的文化。但最终产品的设计却十分统一且自洽。Senkevich 说：“我们大家会极力尝试通过同一个思路来呈现图片和音频。”

NaadSadhana：强大的机器

NaadSadhana 是一款令人惊叹的未来世界 app，只有非常专业、掌握超高技能的人员
才能开发出来。

Sandeep Ranade 就是这样一位开发者。

在人工智能的帮助下，该 app 可以聆听歌手即兴创作的人声，并实时生成匹配的背景音轨，所有这些工作都实时进行。NaadSadhana (梵语词汇“声音的本质”和“系统实践”的混合) 既没有老式的 Riff，也没有重复循环，它的 10 种乐器，包括虚拟的坦布拉琴、塔不拉鼓和印度手风琴，都与您的人声同时发出。它还提供视觉生物反馈等功能，因而成为适用于盲人或听力障碍者的强大
工具。

Ranade 具备非常有利的条件，能够创建这样一个项目。这位来自印度浦那市的开发者从 4 岁开始唱歌，到 11 年级时，成为了一名出色的歌手，同时也展现出在软件工程方面的技能。Ranade 说：“我当时需要决定是向软件还是音乐领域发展，但最终决定同时从事这两个专业。”

多年来，他一直追求这两个领域双轨并进 (他还有其他一些专长：Ranade 从约翰斯·霍普金斯大学获得了硕士学位，拥有二十年的技术经验，作为印度古典音乐歌手的事业也很辉煌)。与此同时，他一直从事教学，但教学过程的低效令他非常苦恼。印度古典歌曲的训练强度非常大，而且条件苛刻，Ranade 说，在“古代的体系”中，学生要和老师共同生活，每天训练 10 小时。现在不可能达到这么长的时间，但作品仍然一样。

他说：“如果您不经常对课程进行纠正，就不可能达到需要达到的训练目的。我需要有一个工具，帮助我告诉学生‘您这里的音调有点低，那里的音调有点高’。”由于找不到解决方案，Ranade 开始自已开发解决方案，虽然他并没有 Swift、Xcode、人工智能、图形设计、移动应用设计方面的背景。

在这个基础上，Ranade 开始进行调整。他添加了人工智能，检测哪些声音是唱歌，哪些声音不是，但他感觉还有更多空间。他说：“我希望有所成就。像印度竖琴这样的乐器有 40 根弦，很难进行调节和外出携带。我想‘如果我能够在手机上演奏出相似的效果，保持相同的音调，那会怎么样呢？’”

他通过录制一首有关预防新冠肺炎的歌曲“Na Corona Karo”，对 app 进行测试运行，结果这首歌很快成为热门歌曲，被 A.R. Rahman 等人分享。来自业界大腕的反应让 Ranade 十分感动。他说：“这些音乐天才认为它是真正由人演奏的。当他们知道这是软件时，感到非常震惊。”

现在，NadSaadhana 提供小提琴、钢琴和小风琴以及沙筒和踝铃等打击乐器上的自动和声。
它的人工智能经过训练，不仅可以调节每种乐器的复杂性，还能混合管弦乐，并融入歌手情绪。Ranade 说：“这并不像‘这是他唱的音符，这里是和弦’那么简单。必须有前提条件：他唱得慢还是快？听起来更压抑还是更欢快？这会改变您听到的和弦，存在数千种可能性。”有些乐队对机器仍非常抵触；Ranade 未来将会与他们进行更密切的合作。