
预测:模拟时间旅行即将到来,用iPhone照片重建可漫游的过去场景
来源标题:Prediction: Simulated Time Travel Is Coming
有观点预测,未来几年内人们可戴上头显,走进由已有数据重建的特定一天的可漫游场景,即“模拟时间旅行”。其数据基础是iPhone自2015年起拍摄的Live Photo,每张附带约3秒带声音的视频,再结合2023年前后成熟起来的3D Gaussian splatting技术重建可走动空间。
以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。
几年后,你对着一台设备说出这句话,我觉得会发生一些不可思议的事情。不是那种配着钢琴音乐的幻灯片。你戴上头显,发现自己站在当年住的那栋房子的厨房里,那盏你一直说要换却始终没换的破灯还挂在那儿。外面在下雨,因为那天确实在下雨。你的孩子们就是当年那个身高。有什么音乐在放,是那年春天所有人都在听的那首。你可以转过身,看看身后的房间。
这件事我想了好几年,各个环节已经接近到我觉得可以把这个想法写下来了——趁它还听起来足够奇怪的时候。就叫它模拟时间旅行吧:把你人生中某一天重建成一个可以走进去的版本,素材来自已经存在的数据。
起点就在你的相册里。从2015年起,iPhone拍的每一张实况照片(Live Photo)都围绕快门按下的瞬间录了大约三秒钟的视频和音频。你随身携带着成千上万部带声音的微型电影,拍的是你真实的家里,角度是你随手选的、根本没多想。与此同时,3D Gaussian splatting在2023年前后变得又好又快,它恰好能用这种普通的照片集重建出一个可以走进去的3D空间。
你女儿的冬季音乐会,你全程透过手机屏幕看的,因为你在录像。现在回去,空着双手站在第三排。看看其他家长。看看隔两个座位睡着的那个孩子。你拿回了当初为了录像而交换出去的那四分钟。
你儿子终于上场的比赛。你当时在远处的边线,因为跟某个人的爸爸聊天错过了那个回合。这一次,站到替补席后面去看。
你二十多岁时候的一场演唱会。你清楚地知道是哪一场。
还有一个会让所有人不舒服的,包括我自己:和你失去的人的一场对话。坐在你祖母的对面,就在她真正住过的那个房间里,听她用她真正的方式念你的名字。是的,我知道我在描述《黑镜》。准确说是两集:2011年的《你的全部历史》里人们在回放自己的记忆,2013年的《马上回来》用旧消息重建了一个死去的男友。我希望我们能跳过第三幕。但我也相当确定,这事最终会走到那一步,因为那是人们最想要的东西,而技术不在乎我们有没有准备好。
这些没有一项需要新传感器、新设备,或者多收集哪怕一件关于你的东西。它们需要的是有人把已经在那儿的东西组装起来。
照片承载的不只是图像。每一张都带有GPS坐标和精确到秒的时间戳,所以一个几万张的照片库同时就是一份没人打算留下的行动日志。你2019年的客厅之所以能被重建,是因为你在里面从六个不同角度拍了一场生日派对。
再叠加免费就能拿到的公开信息。NOAA有那天的天气。Billboard有那些歌。Wayback Machine有当时的网页样子。新闻到处都有存档。这些都不是私人数据,但正是它们让一次重建感觉像一个时代,而不只是一个房间。
五年前,拥有数据和渲染出那一天之间的差距还大得惊人。这个差距正在迅速缩小。
视频生成大约两年内就从派对把戏变得可用了。语音走得比大多数人以为的更远。Apple已经在出货Personal Voice——用一小段朗读短语的录音,在你的设备上完全本地地合成出你的声音,作为无障碍功能。它免费,就在你口袋里的手机上。
显示问题也被那些不是为此目的购买硬件的设备解决了。Vision Pro和Quest 3已经存在。它们很贵,有点笨重,装机量也小。这是整件事里唯一只需要等待一条正常硬件曲线和一点时间的那块拼图。
模型负责填补空白。照片不够的地方,由推理接手。
任何人都能租到好模型。语料才是难的部分,而大约只有三家机构握有足够多的语料。
Google的覆盖面最广:Photos、Maps Timeline、Gmail、Search、Android,加上那个让一个时代像一个时代的兴趣图谱。Apple的组合最紧密:照片库、端侧算力、头显,以及一种让人们愿意说“好”的隐私姿态。Meta有人们已经戴在头上的头显,还有那个知道你当时站在谁旁边的社交图谱。
一家创业公司做不了这件事,无论它融到多少钱。它得要求你把整个生活上传给一家你从未听说过的公司,没有人会这么做。
我赌不会有一个盛大的发布。第一版会以你已经在用的某个应用里的一个标签页的形式出现。
路径大概是这样:你在Google Photos和Apple Photos里看到的自动生成的回忆视频会明显变好,开始引入天气和音乐。然后你会得到一个可以走进去环顾的单个房间,由某个被认真拍过照的夜晚重建而成。然后是一整天,边缘粗糙,人物以近似形象呈现。再然后,它可以对话了。
最初的几次尝试会很笨拙、有点诡异,人们会嘲笑它们。事情一向如此,而这从来没有告诉我们这件事最终会走向哪里。
怀旧疗法在痴呆症照护中已经是成熟做法。用一个人过去的熟悉音乐、物品和照片,在普通对话无法触达他们的时候去触达他们。目前它靠的是鞋盒和旧唱片。给这个领域一份某人养育了四个孩子的厨房的重建,他们会毫不犹豫地接受。
还有一个更朴素的版本,我自己会用。我的女儿永远不会知道她很小的时候、我们住在湾区时,我们的房子是什么样子、什么声音。能够向一个人展示一天,而不是描述它,是一件真正能做到的事。
(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)
正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。