

我每天都在使用手机,多年来,它已成为我开展业务的主要设备。 我的大部分工作是回复电子邮件,审阅文档,准备新演示文稿以及通过不同的应用程序与人们共享想法。 我约有5%的工作是设计和编码,这是我目前无法通过手机完成的工作。
我仅出于以下三个原因恢复使用计算机:
- 为了能够使用键盘输入更长的时间
- 拥有更大的屏幕以查看电子表格等内容
- 做计算机特定的事情,例如设计和编码
只需使用蓝牙键盘即可解决第一个问题,这是我在这里写的,它大大提高了我的工作效率。
出于第二个原因,像iPad这样的声音听起来是个不错的解决方案。
考虑到移动操作系统的当前发展阶段,第三个需求很难回答。
我发现听写是一种非常快速的输入方法。 它比键盘更快,并且在移动操作系统的每次迭代中都提高了准确性。 令我感到困惑的是:在具有良好听写界面的iPad上运行会是什么样?
对于本文的其余部分,我们假定听写是一种高级输入模式。
问题
当前,要在iOS上使用听写功能,您必须在有限的用例中调用Siri,例如使用集成了Siri支持的应用程序发送消息。 或者,您需要打开键盘,点击听写按钮并讲话。
没有简单的系统范围内的解决方案可以让您指定想要的任何内容并将其放入屏幕上看到的任何输入字段中。
那么,以听写为中心的iPad界面应该是什么样?
解
想象一下一个始终位于系统顶部的叠加层,但是只有在执行某些操作时才可见。 该动作可以是语音命令或以某种方式与屏幕交互。
这种交互必须不干扰现有系统手势,例如在屏幕上握住三个手指。 或说类似“开始听写”。
执行此操作时,屏幕将变黑并在您讲话时显示听写结果。 完成听写操作后,您可以将听写的文本拖放到屏幕上看到的任何输入字段中。
这样,听写将独立于当前正在使用的任何键盘或任何应用程序。
正如您在下面的视频中看到的那样,用三个手指触摸屏幕可以激活听写功能,然后您可以讲话并看到单词出现在屏幕上。
真实世界的演示
我们将一个简单的应用程序组合在一起,该应用程序能够接收命令的文本并将其显示在屏幕上的列表中。 然后,您可以将列出的项目拖放到iPad上以多窗口模式运行的任何其他应用程序中。 这是通过iOS 11的跨应用程序拖放功能启用的。 该应用程序始终位于右侧或左侧或作为覆盖图。
隐私问题
iPad上的听写功能有一个警告:将所有音频的录音传输到Apple服务器进行处理。 数据已匿名和加密,但Apple仍然可以获取。
对办公空间的影响
我发现有趣的是,将需要改变办公场所以实现这种输入。 有一些您不想大声说出的私人消息,或者包含特权信息的消息。 每人一个封闭的环境是一个简单的解决方案。 但是,这与当前的开放空间办公室计划相距甚远,并且绝不会促进团队合作。
您可以争辩说,呼叫中心之类的环境已经有多个人互相交谈。 但是这些是高度结构化的对话,并带有决策树,并且大多数私人信息不会被大声说出来,而只会在通话的另一端与该人进行验证。
我们可以在电影Her中看到这种界面的作用,人们在办公室里彼此坐在很远的地方。
使用听写界面解决这些问题的一种方法可能是唇读技术,该技术可以让您听写文字而不实际发出声音。
更为实际的选择是为主动降噪区域创建个人私人空间的噪声屏蔽。
局限性
目前,我们创建的应用程序受iOS 11启用的功能的限制。 苹果还限制每个人和每个应用程序对听写API的使用。 因此,它不可能模仿应用程序商店中的功能,因为它模仿了本机功能。 真正的解决方案必须是在系统范围内重新考虑操作系统的输入。