总结

优势

缺点

插槽

从《黑镜》第一季结局《The of You》，到《降临》编剧 获得雨果奖提名的小说《The of Fact》，很多文学作品都出现过类似的“可重复播放记忆芯片”的设定：你可以将自己的视觉、听觉全部记录下来，并在未来的任何时间点调出。

在目前的技术条件下，这样的设定还是有些超现实。但如果把问题简化为记录整个电脑运行的历史，是不是听起来就实际多了？如果你曾经绞尽脑汁去回忆那些一闪而过的网页和对话框的内容，或者沮丧地叹息“时间都去哪儿了”，你当时也许会想象：如果能重播过去的屏幕画面就好了。

但问题似乎并非单靠“实力创造奇迹”就能解决的：如果屏幕内容被连续录制，硬盘是否有足够的空间存储？处理器和电池能否承担性能开销？更重要的是，记录了这么多数据，如何才能快速定位有用的碎片，而不是大海捞针？隐私是否得到保障？

或许正因为存在这些阻碍，此前只有考试监考、企业内控等行业应用才会持续录制并分析屏幕内容，而这和文学艺术作品一样，引发了许多隐私和伦理方面的担忧。

这是最近为了普及这种“无限记忆”而做出的尝试。

正如“”这个名字所暗示的，它希望将电脑操作历史做成一个可追溯、可搜索的数据库，并避免为此消耗过多的系统资源。据创始人 Dan 介绍，他二十多岁时就失去了听力，30 岁时助听器改变了他的人生，因此他想制作其他可以帮助提升人类能力的工具。

经过几个月的内测，去年11月初正式对外公布，12月中旬开放注册下载，同时宣布获得a16z千万美元投资。在2022年底硅谷寒冬，这款产品凭借充满想象力的创意和相对成熟的实现效果火了一阵子，引发了不少讨论，但也引发了争议。

下面本文将根据使用经验和实现原理对其进行介绍和点评。

▍安装与使用

安装前请注意，目前仅支持系统版本12（）以上，并且要求电脑是Mac。

初始安装过程比较简单流畅，启动后会有一个欢迎向导，解释其工作原理并要求用户启用屏幕录制、辅助功能和录音权限，然后登录账户处理订阅付款（请注意，您可以取消自动续订；有关付款模式的讨论见下文）。

完成后它就会静静地停留在菜单栏图标中并开始工作。

人们经常用“像苹果做的”来称赞在设计和交互上符合规范和习惯的软件，它当之无愧。按下默认的快捷键-，或者按住和键，同时在触控板上用两根手指滑动，就可以进入具有“水果味”手感的主界面——类似经典的“Time ”界面。

这个界面主体部分是录屏，底部是时间轴，按顺序排列着之前使用过的应用图标。（更贴心的设计是，内置了近千个常用网站的图标，可以按需显示，比只显示浏览器图标更直观。）

使用触控板或鼠标滚轮滚动时间线，可以查看不同时间段的屏幕图像。如果需要快速跳转，可以按住以加快滚动速度；或者点击时间线上方的日期文字，在弹出的日历对话框中选择想要跳转到的日期。

不过的签名功能依然隐藏在界面中间的搜索框中。

在这里输入任何你认为曾经在屏幕上出现过的文字，它就会帮你从“记忆”的每个角落搜寻它的每一条踪迹，然后以时间倒序的方式显示一个带有高亮提示的缩略图矩阵——常常会有那么一两个意想不到的发现，让你大吃一惊。

如果搜索结果太多，您可以进一步按应用程序进行筛选。例如，如果您记得搜索过某个主题的特别有用的网页，但在浩瀚的标签中找不到它一个网页下拉功能怎么实现的，那么您可以通过将搜索范围限制在少数浏览器上来更快地找到结果。

遗憾的是，目前的搜索过滤功能还远远不够，不支持精确的日期范围，也不支持多个搜索条件的逻辑组合。可以想象，随着录屏数据的积累，未来的搜索效率必然会受到影响。

说到浏览器，有些浏览器还支持所谓的“深度链接”功能，可以直接从搜索历史页面跳转回原始网页。（目前支持老牌主流的和，以及后来但“惹麻烦”的和Arc。）

即使浏览器不受支持，或使用其他类型的应用程序录制视频，只要链接完整显示在屏幕上，就可以在转换为文本后识别并点击访问。

大家可能注意到了，搜索框的提示是“搜索你看过、说过、听过的任何内容”。的确，除了录制并搜索屏幕上的文本内容，还支持语音搜索。其实语音内容的录制和索引正是原团队上一个创业项目的功能，也算是在此基础上进一步拓展录制范围的产品。

由于该应用不支持中文，我只能用英文进行测试，背诵了整篇葛底斯堡演说。可以看到，虽然我并没有完全领会林肯演讲的深层含义，但至少我大致完整地转写了林肯演讲的字面意思。考虑到这是纯粹的离线转写，这个效果还算可以接受。

需要注意的是，与屏幕显示的内容不同，声音并不是连续录制的，而是在线上会议期间自动录制，或者由用户通过菜单栏中的录制命令手动开启和关闭。考虑到录制对他人隐私的潜在影响，这样的设定是合理的，但目前仅支持 Zoom 会议的自动检测和录制显然过于有限。

另外，录音源非常有限，你只能“听到”来自系统当前输入设备的声音，一般是内置麦克风。也就是说一个网页下拉功能怎么实现的，如果你想在会议中录下其他参与者的声音，你只能……一直开着扬声器，因为只有这样麦克风才能“听到”。虽然可以用，但太野了。

（如果您愿意动手，您可以使用此类工具将麦克风输入和会议软件输出拼接成一个虚拟输入设备，让您“听到”更多的东西；但这超出了本文的范围。）

最后，考虑到记录信息的广度，有几个与隐私相关的问题值得注意：

技术分析及潜在问题

正如开头所说，这个设计思路本身并不复杂，甚至有些“简单粗暴”：只要你先录屏，然后做文字识别，以后你就可以开开心心的搜索了；然后只要你一直录屏，在后台做文字识别，就可以一直开开心心的搜索了。

但过去没有人这么做的原因绝对不是因为没想到或者做不到，而是因为很难获得良好的体验，无法将处理器、硬盘空间和电池的消耗控制在可接受的程度。

这是怎么做到的？

底层技术：从他人那里学到的经验教训汇总

的核心思想是“站在巨人的肩膀上”。不难注意到，的运行条件相对苛刻——这一般意味着软件依赖于相对较新的功能和界面。这也是事实：它大量利用了苹果提供的软件和硬件条件。

软件方面，屏幕录制功能主要通过新版本实现。

与以往的接口相比，除了提供更优的性能和更丰富的编码格式之外，更重要的是可以向截图工具提供显示器、应用、窗口的具体信息，让开发者可以更精细地控制截图中应该包含什么、隐藏什么，这也使得在屏幕录制中排除特定应用的隐私保护功能得以实现。

（过去曾有一些截图工具实现了每个窗口对应一个图层的格式的截图；不过由于相关 API 比较晦涩，所以很少使用，而且苹果已经宣布以后会将其弃用。）

至于文本识别功能，同样依赖于原生框架提供的能力。其中，从界面识别链接的功能也采用了与系统功能“Live Text”相同的接口。

唯一的例外是语音转文本。这里出于某种原因，没有使用原生框架（），而是使用了的 C++ 移植。查看内部文件，我们可以看到内置了一个“基本”英语模型（ggml-base.en），它以稍高的错误率换取了更快的处理速度。

顺便说一句，对于国内用户来说，最大的障碍可能是缺乏对中文的支持。而且由于它的一些功能依赖于识别屏幕文本，因此只有当系统语言设置为英语时它才能正常工作。

好消息是，上面提到的框架其实都支持中文。因此，如果官方有意增加支持，并不需要花费太多精力，但若想达到更好的搜索结果，还是要解决分词等中文特有的问题。

不过，目前我还没有看到任何宣布支持其他语言的计划。从团队在推特上的回应来看，除了在游戏上线时询问用户希望增加哪些语言外，此后他们没有回应相关问题。因此，短期内支持中文的可能性不大。

硬件方面，从其仅支持新款Mac机型可以看出，它依赖了M系列处理器的一些新特性，尤其是大小核设计以及神经网络引擎。前者可以将一些后台任务分配给能效更高的小核，节省性能和电量；后者可以提供更好的图像分析和编解码性能。

储物空间：成绩可圈可点，却又无耻吹嘘

存储问题可能是很多人听到“连续录屏”这个方法时最先担心的问题。毕竟主流 Mac 机型的分辨率至少都在 2K 以上，很多人使用的也是 4K 分辨率的显示器。一直用 4K 分辨率录制视频？想想就觉得酸爽。

对此，官方的回答是“完全不用担心”。官方宣称其压缩率最高可达 3750 倍，并解释称他们使用一个包含 1302 帧、10.5GB 的未压缩屏幕录像进行测试，发现可以压缩到 2.8MB。除以这个数字，他们就得到了这个“不可思议”的压缩率。据此他们估算，普通用户每月使用的空间约为 14-39GB。

在实际使用中，我发现压缩效率确实不错，官方的估算也准确，但那是基于单台显示器。例如我的 16 英寸 Pro 大部分时间都是搭配 4K 显示器使用，在约一个月的测试期间产生了约 60GB 的数据。因此，如果你的空间有限，记得在设置中调整视频的保留期限。

还需注意的是，关于压缩技术的炒作有些夸张。屏幕以每两秒一帧的“幻灯片”帧率录制，即0.5fps，这对于其功能来说已经足够了，但将其与人们通常理解的上述视频进行比较显然是不公平的。

还称通过所谓的“商业秘密”算法实现了动态压缩比：画面内容变化越小，压缩率越高。但这其实只是现代编码格式的基本能力，即通过相邻帧之间的相互预测来减少数据量。例如，一张未压缩的4K分辨率10色深图片，有（3840×2160×10）/8=10.37MB，在双向预测（B-）算法下可以压缩到几KB——这本身就达到了宣称的比例。

另一个令人好奇的问题是，如何存储这么多数据？其实，虽然效果看起来很科幻，但实际方法比较简单，甚至有点粗糙。

综上所述，所有的录屏和文字识别结果都存放在~// /com..路径下，其结构如下：

在：

当然，最关键的文件还是db.格式的数据库，里面保存着录屏历史、前台窗口的标题、应用程序类型及切换时间、从视频和音频中提取出来的文字信息以及这些文字在原始录屏文件中出现的帧号和坐标。

您如何评价这个存储结构？我不是这方面的专家，但还是有一些明显的需要改进的地方。比如，如果你已经有了完整的视频，存储额外的全尺寸截图似乎有点多余，占用了很大的空间。另外，目前的存储层次非常扁平，随着时间的推移，数据目录下会出现大量的子目录，这可能会影响遍历的效率。

事实上，在我使用 M1 Max 机型进行测试时，经过一个月的使用，滚动搜索结果需要明显的等待时间，早期的结果以十个左右为一批出现，向下滚动的时间越长，等待的时间就越长。考虑到用户甚至被允许“永久保存”记录，多年来的性能下降可能更加明显。

性能和功耗：像忍者一样奔跑，像强盗一样消耗电量

另一个普遍关注的问题是能耗影响。如上文所述，它只能在 M1 系列处理器上运行，目的是充分利用 M 系列处理器的大小核设计和神经网络单元。官方数据显示，对于 M1 系列处理器，单个核心通常会占用 20-40% 的处理时间。

实际测量显示，这个数字是准确的，小核心被积极调用来完成任务。但在处理视频索引时会出现一些峰值，可以短暂地占用最多两个小核心的全部处理时间。

总体来说，的性能优化不错，并且是在后台运行，对日常操作没有影响。

但对电池寿命的影响就没那么乐观了，一个常见的指标是“活动监视器”中“能量”选项卡下的“能量影响”（ ）。

（能耗影响是根据处理器使用情况、唤醒处理器的频率，以及磁盘写入、GPU 使用情况和网络活动等因素计算得出的，这些因素在不同的 Mac 机型上具有不同的计算权重，但可以与同一设备上的其他程序进行比较，作为功耗的参考。）

这个指标确实排在首位，我的电脑上12小时的平均值经常在700左右。虽然能耗影响的数值不能线性映射到功耗，但这种程度的读数无疑意味着对电池寿命有可感知的影响；一些用户报告电池寿命减少了20%到40%。

（作为参考，以省电著称的浏览器，其读数通常在个位数或低两位数；耗电较多的浏览器，其读数往往在几十位，有时甚至几百位，甚至几百位。此外，如果能耗影响持续达到 20 或 30，则会在电池图标下拉菜单中的高能耗列表中“排名”。）

因此不使用电源时最好考虑暂时关机。不过官方表示会加入电量低时自动停止转码和索引的功能，值得期待。

隐私：技术障碍容易克服，心理障碍却难以逃脱

自内测开始以来，不少人都表示，听到工作原理后的第一反应是“不安心”。这可以理解：让一个第三方软件从早到晚录屏、识别文字，有点像在家里装一个全天开着的摄像头，需要对品牌有很强的信任度才能克服潜在的顾虑。

这里还有一个小插曲：早期版本其实并不是纯离线运行，而是利用云服务来处理语音转文字。这在当时引起了部分用户的反感，也与首页上所谓的“数据不离开本机”的宣传相矛盾。好在团队还是善于接纳外界意见，在上线两天后就做出了修改，通过内置模型实现了离线转录。

但即便实现纯线下运营，作为初创公司，它们尚未积累足够的资质和公信力来打消用户的顾虑；其宣传沟通方式甚至在一定程度上起到了相反的效果。

比如下拉词平台★人人都能霸屏下拉64xl.com，哔站手机下拉，虽然帮助文档中有一个专门的“隐私”部分，花在这上面的时间比花在功能上的还多，但大部分都是一些“安抚性”的营销说辞，比如保证不会上传屏幕录像（“所以即使我们被发了传票，我们也只能保持沉默”）、不会转卖用户数据等。而真正披露的信息只有网络活动的目标域名，这才是隐私政策的标配内容。

此外，如上文所述，目前生成的视频文件与文本数据库均以明文形式存储，只要知道路径即可直接访问。考虑到连续录屏难以避免混入明文密码或其他敏感信息，利用加密存储等方式进一步提升安全性也是一个合理的改进方向。

不过，在网站和推特上回答相关问题时，官方采用了一种颇具误导性的说法，称只要启用内置功能，录屏数据就被加密了。但我们知道，这是一项全盘加密功能，无法在系统受到攻击时为特定软件提供额外保护。如果启用了加密，那么桌面上的任何 Word 文档也都可以算作“加密”了，这显然是非常荒谬的说法。

隐私担忧的提出，也算是一次提醒：随着软件能力的不断扩展，除了技术和性能，隐私和伦理也将成为不可忽视的制约因素（参见AI行业近期的一堆案例）；开发者需要在设计之初就考虑这些方面可能带来的后果，而不是考虑出现问题后如何补救。

支付模式和可持续性

与大多数源自硅谷、由风险投资支持的产品一样，其定价符合第一世界的思维：每月 20 美元。

在团队看来，他们做的事情就是救人于危难，用户很容易觉得物有所值。为了支持这一说法，官方甚至特意收集了一组感谢推文。但显然，即使是欧美市场的用户，也无法轻易将如此大件商品加入到他们本已臃肿的订阅列表中。

我认为，如果你觉得定价方式不合理，那么问题不在于订阅制度或者价格本身，而是采用固定价格的订阅制度。

因此，并不是说这种性质的产品不能采用定期收费，而是采用固定费率不太合适，对用户的说服力也不强。

如果站在“奸商”的角度，一个可能值得考虑的模式是：基础后台录屏免费，同时按照核心功能搜索和时间线的使用频率收费。具体衡量标准可以是搜索和截图的次数，也可以是时间线界面的使用时长。这样既能吸引更多用户安装使用，收费也能更公平地体现它给用户带来的实际帮助。

除了付费模式，可持续性也是需要考虑的问题。将自己的业务建立在别人提供的技术上始终是有风险的；如果未来所依赖的接口发生重大变化，对软件来说将是重大挑战甚至是生死攸关的问题。这种技术架构也决定了跨平台的成本很高，无异于重新开发。正如官方问答所说，在“可预见的未来”我们仍会继续关注它，今年可能只会“考虑”是否支持其他系统和移动端；我相信后半句话目前只是随口说说而已。

此外，扎根于苹果生态也未必安全：我们也不能忘记，苹果一直以来都有个“习惯”，就是暗中观察热门产品，并在时机成熟时将其作为内置功能。从取代通知中心到以“”取代，这个被俗称为“”的做法，一直是悬在 Mac 平台开发者头上的一把剑。考虑到与苹果软硬件的深度绑定，以及该功能对信息安全的潜在影响之高，可以说，没有人比苹果自己更适合开发该功能（哪怕是简化版），也更有可能说服因隐私担忧而犹豫不决的用户放心尝试。

结论

如果要用一个词来形容它给人的感觉，那大概就是“潘多拉魔盒”了。它一方面提出了诱人的用例——“时光倒流”，但另一方面，在性能、隐私、商业模式等方面却留下了诸多未完成的答案。这就造就了一个让人想去尝试，但真正用起来却忍不住担心的奇怪应用。

但APP的价值不仅在于功能，更在于理念，很少有软件能像这样“调动一切可以调动的资源，团结一切可以团结的力量”：

总之，可能还存在很多问题，也未必是“后悔药”的终极形态，但确实是一部处处充满巧思和小聪明的有趣作品。不管你的选择是什么，相信都能在尝试中得到启发和思考。‍

▍附录：不安装如何使用

正如文章中所说，它还存在价格高昂、对软硬件要求严格、不支持中文、存在隐私隐患等诸多问题。因此在试用期间，我也萌生了一个想法：能不能自己“复制”一个？

录制的是视频，我觉得有点没必要，也不方便处理；不如简化成“如何以较高的频率定期截屏”，这样还是能满足备忘录的需求，而且做成的格式也比较通用。

经过尝试，我取得了一些成果，并在上周通过少数派成员专栏介绍了解决方案，这里分享一下基本步骤，供大家批评指正。

简单来说，这个解决方案：

使用（1）获取PDF格式的截图；

可实现自动启动和循环运行；

使用压缩截图并识别文本；

使用（8）强制任务在小核上运行。

上面贴出了脚本和安装步骤，有兴趣的可以尝试一下，如果对这个方案的原理和延伸讨论感兴趣，可以考虑订阅原文，谢谢支持：）

相关链接

：

脚本下载：

原文链接：