CN101816195A - 经由移动设备的活动使用查找 - Google Patents

Abstract

提供了一种使得移动设备用户能够在参与活动通信会话时私下检索信息的系统和方法。本发明使得用户能够在不中断活动通信会话的情况下提示查找和检索信息(例如，日历约会、联系人信息、任务信息)。信息的内容可通过只可被请求方检测到的私人听觉反馈来配置和传达。

Description

经由移动设备的活动使用查找

背景

随着例如蜂窝电话、智能电话、个人数字助理(PDA)、个人音乐播放器、膝上型计算机等个人移动设备的不断普及，“移动性”已成为许多消费产品以及无线供应商的服务的焦点。例如，在电信行业中，“移动性”最重要，因为对于通信和计算需求而言消费者不再受位置的限制。然而，现今随着技术的进步，越来越多的消费者在日常活动中、在计划和娱乐时使用便携式设备。

随着移动设备普及度的增加，使电话呼叫、访问日历约会、管理任务、存储联系人信息、检索电子邮件、经由即时消息(IM)通信以及从几乎任何位置访问在线服务的能力也继续发展。尽管这些设备已经在相当长的时间内可用，但常规设备无法提供可用功能的无缝集成。

当今，经常使用个人信息管理(PIM)应用程序来组织电子邮件、管理日历条目、跟踪任务、管理联系人、提供笔记、以及启用日志记录。这些PIM应用程序可用作独立应用程序或者结合例如为组织中的多个用户提供增强功能的服务器来实现。例如，服务器可为多个用户提供共享邮箱、日历、文件夹以及会议时间分配的能力。

实质上，PIM应用程序可以指用作个人管理器的信息管理工具或应用程序。PIM的一个主要目的是提供对诸如日历条目、联系人信息、日志、任务、电子邮件等信息的管理(例如，记录、跟踪)。当结合服务器使用时，PIM能够经由网络(例如，因特网、内联网)来同步数据以及向其他用户呈现或传达信息。例如，经由网络，并且只要适当的许可就位，用户就能够查看日历条目、电子邮件或者关于另一用户的帐户的其他PIM数据。

概述

以下提供了本发明的简化概述以提供对本发明的某些方面的基本理解。本概述不是本发明的广泛概观。它不不旨在标识本发明的关键/重要的元素或描绘本发明的范围。其唯一目的是以简化的形式呈现本发明的一些概念，作为后面呈现的更加详细的描述的序言。

此处所公开且要求保护的本发明在其一方面包括一种使得移动设备用户能够在参与活动呼叫时私下访问个人信息管理器(PIM)的系统。换言之，本发明使得用户能够在不中断活动呼叫的情况下提示查找和检索信息。可以理解，该信息可包括几乎任何信息，包括PIM(个人信息管理器)数据，诸如联系人、日历条目、任务等。根据本发明，在参与活动呼叫时，用户能够在该呼叫的另一方不知道或不向该另一方公开这一信息的情况下私下访问PIM信息。

在其他方面，用户能够在参与与另一方的对话时私下(和/或自动)生成PIM数据(例如，日历条目、联系条目)。另外，可更新PIM数据，例如以便作为日历查询的结果来安排约会。各方面向用户提供信息的私人可听回放。例如，可使用听觉声调或其他有区别的声音来传达日历中的“忙碌”和“空闲”时隙。同样，在需要时，可使用语音来传达关于日历条目的可用性。

在其又一方面中，提供一机器学习和推理组件，该组件使用基于概率和/或基于统计的分析以预测或推断用户希望自动执行的动作。

为了实现前述及相关目的，在这里结合以下描述及附图来描述本发明的某些说明性方面。然而，这些方面仅指示了可采用本发明的原理的各种方法中的少数几种，且本发明旨在包括所有这样的方面及其等效方式。当结合附图考虑以下本发明的详细描述时，本发明的其它优点和新颖特征将变得显而易见。

附图简述

图1示出了根据本发明的一方面的方便经由移动设备来对信息进行不中断访问的示例系统。

图2示出了根据本发明的一方面的方便在处于活动呼叫时检索并私下呈现(例如，可听见地)所查询的数据的过程的示例流程图。

图3示出了采用在参与活动通信会话时私下管理信息的请求和数据管理组件的系统的示例框图。

图4示出了根据本发明的一方面的示例界面菜单。

图5示出了根据本发明的一方面的示例界面映射。

图6示出了根据本发明的一方面的采用请求检索和分析组件来建立用户所需信息的系统的示例框图。

图7示出了根据本发明的一方面的采用定位、访问、传递和/或修改数据的数据检索、呈现和更新组件的系统的示例框图。

图8示出了采用代表用户推断和/或自动化动作的机器学习和推理组件的系统的示例框图。

图9示出了可用于执行所公开的体系结构的计算机的框图。

图10示出了根据本发明的示例计算环境的示意性框图。

详细描述

现在参照附图描述本发明，其中相同的附图标记用于指代全文中相同的元素。在以下描述中，为解释起见，阐明了众多具体细节以提供对本发明的全面理解。然而，显然，本发明可以在没有这些具体细节的情况下实现。在其它情况下，以框图形式示出了公知的结构和设备以便于描述本发明。

如在本申请中所使用的，术语“组件”和“系统”旨在表示计算机相关的实体，其可以是硬件、硬件和软件的组合、软件、或者执行中的软件。例如，组件可以是但不限于：在处理器上运行的进程、处理器、对象、可执行代码、执行的线程、程序和/或计算机。作为说明，运行在服务器上的应用程序和服务器都可以是组件。一个或多个组件可以驻留在进程和/或执行的线程中，并且组件可以位于一台计算机内和/或分布在两台或更多的计算机之间。

如此处所使用地，术语“推断”或“推论”一般指的是从经由事件和/或数据捕捉到的一组观察值推理或推断系统、环境和/或用户的状态的过程。例如，推论可用于标识特定的上下文或动作，或可生成状态的概率分布。推断可以是概率性的，即，基于对数据和事件的考虑计算所关注状态的概率分布。推论也可以指用于从一组事件和/或数据组成更高级事件的技术。这类推论导致从一组观察到的事件和/或存储的事件数据中构造新的事件或动作，而无论事件是否在相邻时间上相关，也无论事件和数据是来自一个还是若干个事件和数据源。

最初参考附图，图1示出了便于移动设备用户在参与活动呼叫时私下访问、查找和检索信息(例如，个人信息管理器(PIM)数据、经由web浏览器访问的数据、本地或远程存储中的数据……)的系统100。在各方面，本发明的特征、功能和好处可帮助视觉受损用户、其中用户的注意力聚焦在别处的情形中的用户(例如，在走路、驾驶汽车……)。另外，可对诸如屏幕较小的移动通信设备等具有显示器的设备采用本发明。

可以理解和明白，移动设备指几乎任何移动或便携式通信设备，包括但不限于蜂窝电话、智能电话、个人数字助理(PDA)、个人媒体播放器、掌上计算机、膝上型计算机等。实际上，本发明使得用户能够在处于活动通信会话(例如，语音呼叫)中时查找信息。该信息能够在不中断活动通信会话的情况下查询和检索。

当今，许多移动设备集成诸如个人日历等服务(或以其他方式对服务进行远程/网络访问)。然而，给定所存储的数据的社交特性，用户通常需要访问这一信息作为正在进行的或“实况”电话对话的一部分。在典型的不用耳机的使用中，这通常需要用户中断他们的对话以查看键盘和/或屏幕。

本发明在其一方面使得能够对存储在电话上(或从其访问)的信息(例如，PIM数据)进行“不用眼(eyes-free)”访问。在一个示例中，系统100经由私人听觉反馈来启用该访问。该听觉反馈可以是声音、单词或其组合。换言之，该反馈只被用户或请求者听见，例如，不被线路另一端的人听见。

一般而言，系统100包括信息管理组件102，该组件响应于经由接口组件106接收到的请求和指令来访问来自存储104的数据。在操作中，用户能够在靠着用户的耳朵拿起电话时使用接口组件106(例如，电话键区)来控制或触发访问。如将在下文中讨论和描述地，可采用接口组件106的替换设计和配置来增强用户与系统100的交互。

存储104能够维护PIM数据或信息，诸如日历约会、联系人信息、任务、日志条目等。本发明的各方面采用本地(例如，移动设备机载)存储104而其他方面能够采用位于远程的(以及分布式)存储。例如，在一方面，存储104可位于云中并经由因特网来访问。在其他方面，信息的各部分可位于云中而其他部分可从机载存储设备104定位和检索。此外，可本地地索引数据并且在需要时远程地检索数据。这些方面将被认为是本发明和所附权利要求书的一部分。

在操作中，在参与活动通信会话时，用户可以在不中断该活动通信会话的情况下搜索信息。例如，如图所示，在安排会议时，呼叫者可以问：“星期一早上怎么样？”根据本发明，用户可通过接口组件106以及机载信息管理组件102无缝(且私下)搜索信息存储(例如，104)。由此，可检索信息并且可向用户私下通知约会可用性。

将会理解，可使用几乎任何通知协议来通知用户，例如，静默、私人可听声音、口头消息、振动提示、视觉提示等。例如，在其中向用户发送私人可听消息的情形中，此处，信息管理组件102可自动使电话“静音”以使得该信息对呼叫的另一方保密。一旦将信息传达给用户，信息管理组件102就可自动关闭“静音”特征以使得用户能够响应呼叫者的询问，例如，“看上去我在十点钟后有空”。

该示例以及其他示例将在查阅之后的附图后变得更加明显。可以理解，此处所描述的示例仅仅是为了洞察本发明而提供的并且决不旨在限制本发明。因此，存在应被包括在本发明和所附权利要求书的范围内的其他方面和情形。

如图1的示例所示，用户可触发对信息(例如，PIM数据)的搜索查询。该个人数据可私下传达给用户。如果需要，则用户能够提示数据更新(或其他修改/创建)。例如，一旦确定用户在十点钟后有空，该用户就可触发用于框出日历中的时间以预留约会时间。在各替换实施例中，可以在生成条目后添加细节(例如，主题、位置……)。或者，时隙可以是具有稍后要由用户例如经由台式计算机补充的最少信息的块。

图2示出了根据本发明的一方面的经由移动设备来无缝(且私下)检索信息的方法。尽管出于简明解释的目的，此处例如以流程图形式示出的方法被示出并描述为一系列动作，但是可以理解和明白，本发明不受动作的次序的限制，因为根据本发明，某些动作可以按不同次序和/或与此处所示并描述的其它动作同时发生。例如，本领域技术人员将会明白并理解，方法可被替换地表示为一系列相互关联的状态或事件，诸如以状态图的形式。而且，并非所有示出的动作都是实施根据本发明的方法所必需的。

在202，用户参与活动或“实况”呼叫或通信会话。可以理解，通信会话可包括但不限于蜂窝电话呼叫、网际协议语音(VoIP)呼叫等。例如，用户经由蜂窝电话或智能电话来参与活动呼叫。当处在呼叫上时，用户可能有理由去访问PIM数据，例如，响应于来自通信的另一方的询问。在另一示例中，用户可能想要检查日历条目以便不错过后续约会的开始。将会理解，存在关于用户为何想要在参与活动通信会话时访问信息的许多原因。

在204，可提示数据检索。例如，在一个示例中，可使用键盘(例如，热键)来触发信息查找。如上所述，可使用根据本发明的各替换实施例的几乎任何触发机制。可采用特别设计的控件、按钮、导航设备等来触发检索。

在206，可分析数据请求。例如，在搜索查询(或请求)具有口述短语形式的情况下，本发明可采用语音识别特征来确定所需信息。此外，将会理解，可针对例如“查找下一个约会”的特定功能来对键进行预编程。在一个示例中，为了适应拿起移动电话到一个人的耳朵的常见人体工程学位置，可将按钮置于电话的背面以使得用户的手指能够容易地使用。在其他示例中，键或按钮可具备导航指示器(例如，诸如凸起的环氧树脂点等触觉特征)以帮助用户在不中断“实况”会话的情况下定位所需导航键。

在各方面，可采用其他输入机制和/或设备而不背离礼本发明及所附权利要求书的精神和/或范围。例如，其他方面可采用对例如具有锁止机构的拇指轮的“触觉”反馈。在还有一些其他方面，可采用诸如“肥皂(soap)”等其他光学导航设备。可以理解，“肥皂”指的是主要基于在鼠标中有的硬件，但在空中工作的定点设备。肥皂采用在用织物制成的外壳中自由移动的光学传感器设备。当用户从外部施加压力时，该光学传感器独立于外壳移动。该光学传感器感知该相对运动并将其作为位置输入来报告。

再有一些其他方面采用手势输入，诸如标记菜单以及“earPod”，这基于具有将导航访问限于特殊形状(例如，圆形)区域的覆盖图的触摸板。earPod将该圆形区域划分成各自对应于一个菜单项的各个区域，例如，4或8个区域。该划分使得有经验的用户能够在不重复的情况下操作菜单。另外，earPod在用户在各区域之间拖动其手指时向用户提供听觉反馈。将会理解，这使得缺乏经验的用户能够在不看的情况下获悉菜单选择。

在208可检索数据并在210将该数据呈现或传达给用户。将会理解，可采用几乎任何呈现方法而不背离本发明的精神和/或范围。例如，静默可传达根据日历约会请求不存在冲突。在本发明的各替换方面，可采用其他通知协议，诸如听觉(口述短语、声调)、振动提示、视觉(例如，光)提示等。此外，在各替换方面，可以理解，可采用人工智能和机器学习和推理(MLR)机制来代表用户自动化特征和动作。

现在转向图3，示出了系统100的替换框图。一般而言，信息管理组件102可包括请求管理组件302和数据管理组件304。这些子组件(302、304)一起允许解释用户请求以及检索信息并将其呈现给用户。如将在查阅之后的讨论后看出的，数据管理组件304还可方便按需修改数据。

如上所述，当今，许多移动设备集成诸如个人日历、联系人等(例如，PIM数据)等服务(或对服务的访问)。然而，给定所存储的数据的社交特性，用户通常需要访问这一信息作为电话对话或其他通信会话的一部分。在典型的不用耳机的使用中，这通常需要用户中断他们的对话以查看屏幕。

根据该情形，本发明允许对存储在电话上的信息进行“不用眼”的访问。在一个示例方面，系统100经由听觉反馈来启用“不用眼”的访问。可以理解，“听觉反馈”可包括任何声音，包括但不限于口述单词、声调、哔哔声、白噪声等。为了使信息保密并且不中断实况通信会话流，该反馈可被屏蔽并且只被用户、而不被线路另一端的人听见。如果需要，则其他方面可使该信息对会话的双方(或多方)可用。

在一方面，接口组件106可以是标准或专用键区，其可用于在靠着用户的耳朵拿起电话时触发信息访问。实质上，系统100可被设计成通过使信息的呈现专用于请求信息的一方来最小化听觉反馈和电话对话之间的干扰。换言之，当用户经由接口组件106来请求信息时，信息管理组件102可以在不中断实况通信会话流的情况下私下呈现该信息。

本发明呈现了两个示例用户研究。第一个研究验证对于在耳朵位置的电话可获得有用的按键准确度。第二个研究将本发明与视觉基线条件进行比较。实质上，第二个研究请求参与者在用电话谈话时交互式地且“不用眼睛地”访问他们的联系人列表并协商日历约会。主观结果表明相对于视觉基线条件强烈偏好本发明的“不用眼”方面。

如上所述，当今，许多移动设备集成传统上分布在多个设备上的功能。因此，这些设备通常被称为“智能”设备或电话。除了联系人列表和电话功能之外，这些“智能”设备还提供例如本地存储的个人日历(或对远程存储的个人日历的访问)。因为个人信息在社交场景中特别重要，所以用户通常需要在活动地用电话谈话时访问该信息。以下是关于在使用传统视觉基线设备时对该信息的访问如何能够影响“实况”电话会话的示例情形：

约翰：嗨，艾米，我们下周某个时间见个面好吗？

艾米：让我检查下我的日历。稍等。

艾米将她的电话移开她的耳朵以使她能够查看显示器。她打开日历应用程序并导航到下周。

你想什么时候见面？

约翰：周二早上某个时间怎么样？

艾米：让我检查一下。稍等。

艾米再次看她的电话，导航到周二，检查周二，然后她将她的电话放回到她的耳朵。

你说什么？哦，好，不……我只在3-4点钟有空。

约翰：对不起，我整个下午都要开会。周三下午怎么样？

艾米：稍等，让我看看……

可以理解，传统的交互模型需要用户查看屏幕，这实际上在靠着用户耳朵拿起电话时是不可能的。往耳朵来回移动电话会干扰对话。不幸的是，该中断对于常规设备和系统而言是常见的。

虽然耳机可能能够缓解涉及常规设备和系统的问题中的某一些，但耳机在特定用户组和某些文化环境中被摈弃(entrench)的。许多用户不使用耳机，因为耳机干扰对真实世界情形的知晓并且通常被认为为是不舒服、不吸引人的、或在社交方面令人尴尬的。即使有了耳机，访问视觉信息也需要查看屏幕，这可干扰诸如走路或驾驶等需要视觉关注的其他任务。将会理解，扬声器电话受到相同限制；另外，扬声器电话可引起隐私问题。

与常规系统相反，本发明可向用户提供在活动地参与对话的同时的对存储在他们的移动设备上(或可从他们的移动设备访问)的个人信息的“盲”访问。如图3所示，用户使用接口组件106(例如，内置电话键区)来控制对信息的访问。请求管理组件302可分析从用户接收到的请求(例如，指令、查询等)。随后，数据管理组件304可定位、访问和传递信息和确认，例如，经由只被用户，而不被线路的另一端的人听见的听觉反馈。

在开发本发明时，对一组用户的形成调查揭示人们经常需要/想要在电话对话期间访问信息。对于常规视觉驱动的电话接口，该情形通常是有问题的。日历访问和添加联系人特征是调查参与者所请求的最常见的对话中动作中的两个。虽然此处描述了“盲”信息管理的具体示例，但可以理解，这些示例是为了洞察本发明而提供的并且绝不旨在限制本发明。

本发明呈现了对消费者电话启用“不用眼”、单手数据管理操作的一系列可能的修改。研究表明用户可达到低于5％的不用眼出错率。实验还揭示相比于有视使用，不用眼使用的开销大致是每一键击200毫秒。在定性用户研究中，8个参与者中的7个表明相对于需要视觉导航的传统智能移动电话偏好或强烈偏好本发明的“不用眼”系统。

本发明的各方面可以分两个示例类别来描述：听觉反馈和移动输入。听觉反馈可用于传达个人数据(例如，PIM数据)的内容。在操作中，信息管理组件102可经由请求和数据管理子组件(302、304)来允许分析、访问、配置和呈现数据。输入(例如，查询、修改)数据可由用户经由接口组件106来传达，该接口组件可包括特别设计的按钮、导航设备、传感器、识别系统等。这两个示例中的每一个都都将在以下更详细地描述。

首先转向对由请求和数据管理子组件(302、304)提供的听觉反馈的讨论，已经在交互式语音响应系统领域中详尽地研究听觉反馈的优点和缺点。主要挑战之一是音频提示强迫用户等待(导致“按钮音地狱(touch tone hell)”)。因此，通常期望使得用户能够“拨动通过”以中断提示，或者“提前拨动”以跳过熟悉的提示。因此，本发明在各方面使得用户能够使用键区输入来提前拨动以及使用向前和向后键来迭代通过电话上的菜单项，而不必收听提示。在其他方面，用户可例如经由接口组件106使用快捷键来直接跳到一位置。

虽然几乎任何人类-人类对话都包含一定量的冗余，但将听觉信息编入电话对话可能会冒干扰的风险。因此，本发明可通过在时间上压缩话语并且然后串行化这些话语来减轻干扰。其他方面省去单词且提高回放速度。将会理解，非语音音频可能比语音音频较不令人分心并且可用于传达诸如分层菜单中的导航提示等信息。由此，本发明的各方面采用非语音或非口头提示来传达信息，例如，菜单中的位置、“忙碌”和“空闲”时隙。

现在参考对经由接口组件106的输入的讨论，本发明允许例如使用键区来进行单手“不用眼”输入。可通过迭代或调和(chord)来支持用少数按钮的基于键盘的输入。在某些方面，手势可使得用户能够执行不用眼操作。为了便于“不用眼”操作，探查到的形状因子中的一个在设备的背面接收输入，例如，经由按钮、键、操纵杆、传感器垫等。

如上所述，接口组件106还可配备语音识别功能。因为语音输入可能干扰对话，所以各方面可任选地采用“静音”按钮来对对话的另一方保护用户命令的隐私。

在一个示例中，听觉不用眼交互经由接口组件106来触发。用户可通过按下他们的电话上的按钮(例如，经由接口组件106)来控制交互并且通过听觉反馈(例如，经由信息管理组件102)来接收确认。之后是对示例听觉菜单、菜单组织和本发明的走查的设计基本原理的讨论。

在电话对话期间使用听觉反馈背后的一个基本原理是几乎任何人类-人类对话包含一定量的冗余。如果对话的一部分丢失，例如，由于掉线或因为重型卡车驶过，则用户通常可继续对话，只要干扰较短并且不在关键时刻发生。

本发明例如经由接口组件106来按需提供反馈。换言之，信息管理组件102响应于通过接口组件106触发的用户请求来播放听觉反馈。将会理解，在用户控制下进行时机选择允许用户等待适当的片刻并且避免传递诸如电话号码等重要信息的片刻。

为了最小化活动通信中断，本发明在其听觉反馈中考虑简短。因此，本发明只要有可能就按例如单音节的简短块来管理音频反馈。可以理解，减少听觉反馈的持续时间可最小化干扰对话的风险。

为了避免长时间的听觉反馈块，本发明可自动分解(或分拆)复合物，诸如菜单项或约会的列表。用户可选择性地分别迭代通过这些项目或约会以按需发起对每一个项目的回放，而不是一次呈现所有项目或约会。当在例如30分钟步骤内迭代通过日历时，每一个步骤都产生传达时间和当前时隙的可用性的1-2个音节。类似地，用户可通过重复按键来框出一日历项(例如，框并前进)，而不是输入开始和结束时间。

本发明能够允许对复合物进行非语音预览。例如，为了给出对3小时或全天日历视图的预览，本发明可整体呈现复合物。这些预览可作为其间有20毫秒的间隔的40毫秒耳标(例如，白噪声对应于“有空”或“空闲”而蜂鸣声对应于“已框出”或“忙碌”)的拼接来创建。可以理解，这只是听觉反馈的一个示例。这种对非语音的使用最小化了反馈长度。

本发明的一个目标是最小化对活动或“实况”通信会话的中断。通过针对简短和分解，可以在一个或两个音节段中传达最多的听觉元素。可以理解，存在例外。例如，例外是形成主页的任务名(诸如“收听文本消息”)。将会理解，可采用全名来允许已被示为在不用眼系统中有用的改进的可发现性和可学习性。为了最小化对对话的干扰，本发明允许用户按需中断音频回放。

在各方面，接口组件106的主页组合以上所列出的各原理中的若干原理。因此，当进入时，主页可以是安静的，这也被称为“按需反馈”。按压按钮触发系统仅说出该按钮的功能，诸如“添加联系人”(分解、可发现性)。后续键或按钮按压进入对应于相应功能的菜单。将会理解，有经验的用户可通过快速连续地双击来抢在菜单名称的发音之前(可中断性)，这可被证实比使用单独的确认按钮更快。其他方面可采用单独的“确认”按钮。可以理解，此处所描述的配置和功能例示本发明的各方面并且绝不旨在限制本发明。

图4示出了根据本发明的一方面的示例接口菜单结构。如图所示，这些示例菜单基于传统电话键区的3×4数字键部分，例如，不具有诸如方向垫或软键等其他按钮。然而，存在在适当或需要时采用其他按钮和/或配置的其他方面。

在各方面，每一个菜单都从图5所示的两个模式中的一个导出。“菜单”模式提供对包含少量选择的菜单的快速访问，并且也对数字和T9文本输入起作用。菜单映射提供对诸如数字、字符或菜单功能等少量选择的输入。相反，“迭代器”模式允许用户使用不同的步骤大小或组织在分层结构中的内容(或以其他方式)来遍历较长的列表。迭代器映射提供从较长或非定形的选择列表中的选择。

图4A-4C的“主页”、“查找联系人”和“添加联系人”菜单遵循“菜单”模式；所有其他菜单遵循“迭代器”模式。在该示例中，可以考虑使用“迭代器”模式来实现“查找联系人”，但该方面通过使用T9来键入所需名称或电话号码的一部分来预先过滤而采用更快且相当常见的方法。为了保持响应简短，本发明可以用匹配数目而不是通过拼出匹配来响应。当用户决定匹配数目足够小时，他们因此可迭代通过其余选择。

如图4所示，每一个示例子菜单实现特定任务，例如，作为单独任务的添加联系人、查找联系人以及作为一个任务的日历。在该方面，添加联系人和日历被分配到显眼的角落位置，如图4A所示。

将会理解，模式切换通常可被认为是成问题的，并且对于不用眼应用程序甚至可能问题更大。因此，所示方面通过避免多步骤菜单或向导来最小化模式切换。例如，本发明从“迭代器”模式导出日历。在图4所示的示例设计中，每一个子菜单都持有完成任务所需的整个接口。主页功能静音、扬声器电话和记录语音仅仅切换相应的功能，再次避免了模式切换。

在一方面，本发明将用户可输入的信息限于用于任务的信息并将所有其他信息的输入推迟至电话呼叫之后。例如，添加联系人可允许用户添加电话号码，但不允许(或需要)输入对应于该号码的姓名。相反，可以用特定命名约定来自动归档电话号码，例如，按“.<日期><时间>归档的盲视”。对于新约会亦如此。将会理解，将较不相关的数据的输入推迟至呼叫后可最小化呼叫中的交互时间并由此最小化对于对话的影响。

以下是向本发明提供上下文的示例走查。更具体而言，上述情形现在根据本发明的一方面来描述。在该示例走查中，交互被标识为：按下的按钮，之后是所产生的“音频响应”。虽然该呈现样式暗示人类-人类和人类-电话交互之间的轮流，但如前所述这些交互通常与口述对话“并行地”发生。可以理解，该并行交互通常一起缓解等待时间。以下是示例走查：

约翰：嗨，艾米，我是约翰，我们下周某个时间见个面好吗？

艾米：哦，嗨，约翰。好啊，听起来很棒。你想什么时候见面？

约翰：周二早上某个时间怎么样？

艾米：天+“下周二”

艾米意识到中午被占用并寻找替换时间

我早上很忙，但我在下午早些时候有空。

约翰：对不起，我整个下午都要开会。周三下午怎么样？

艾米：天+“周三”

好啊，周三听上去不错。我1点之后有空。

约翰：好，让我们就定1点吧。如果有任何事，打我的移动电话。

艾米：1/2小时+“30”

可以，你能再次给我你的号码么？

约翰：当然，你有用来写的东西吗？

艾米：有！

约翰：是(206)…555…7324。记下了么？

艾米：2“2”0“0”6“6”5“5”5“5”5“5”7“7”3“3”2“2”4“4”5“5”

当然。哦，如果有任何事，打AI实验室电话，他们的号码是…

约翰：稍等，让我拿个用来写的东西…

现在转向图6，示出了根据本发明的一方面的系统100的替换框图。更具体而言，图6示出了整合到请求管理组件302的子组件。这些子组件包括请求检索组件602和请求分析组件604。这些子组件一起便于用户在参与活动通信会话时无缝(且私下)检索信息。更具体而言，这些子组件(602、604)允许检索和分析通过接口组件106生成的用户请求。

如上所述，许多移动设备能够集成诸如个人日历等服务(或对服务的网络访问)(和其他PIM数据)。然而，给定所存储的数据的社交特性，用户通常需要(或期望)访问这一信息作为活动电话对话的一部分(或在活动电话对话期间访问这一信息)。在典型的不用耳机的使用中，在活动通信会话期间访问该信息需要用户中断他们的对话以查看屏幕以检索PIM数据。例如，当在使用常规设备的实况呼叫期间安排约会时，用户将必须经由设备显示器来可视地访问该信息。

本发明公开了对存储在电话上(或远程存储中)的信息的“不用眼”访问。在各方面，本发明允许经由私人听觉反馈来传达该信息。同样，在其他方面，可经由包括但不限于视觉和振动反馈的其他通知协议来传达信息。

在操作中，请求检索组件602接收请求而请求分析组件604评估该请求。实质上，该评估标识该请求的范围和其他细节。例如，该请求可标识用户是否对日历条目、联系人信息等感兴趣。另外，请求的细节(例如，日期、时间、名称……)可通过解释从接口组件106接收到的请求信息和信号来确立。

图7示出了根据本发明的一方面的系统100的又一替换框图。一般而言，图7示出数据管理组件304可包括数据检索组件702、数据呈现组件704以及可任选的数据更新组件706。这些子组件(702、704、706)允许对数据进行定位、访问、传递以及可任选的更新(或生成)。

数据检索组件702可基于从请求管理组件302接收到的分析来定位数据。在一方面，该数据被例如本地地存储在本地存储器中。在其他方面，该数据可例如远程地存储在网络可访问服务器上。此外，数据可在适当或需要时被存储在多个位置。不管位置如何，可采用数据检索组件702来定位和检索所请求的信息。

数据呈现组件704可配置信息并将其呈现(例如，传递)给用户。例如，可将数据压缩或转换成适当的听觉通知以传达信息内容。在一个示例中，假设用户询问其可用性以便在给定日子和时间安排会议。此处，该信息可由数据检索组件702来检索并被转换成适当的听觉通知以便将该可用性传达给用户。在一方面，可使用一系列声调和白噪声来将所请求的时隙期间的可用性通知给用户。如上所述，用户可导航至之前和之后的时隙以搜索日历。因此，所示出并讨论的子组件可用于标识、定位、访问、配置通知和/或信号并将其呈现给用户。

此外，如上所述，这些通知和/或信号可以在不中断活动对话流的情况下私下传达。换言之，该信息可对呼叫的非请求方屏蔽。

此外，如上所述，可采用数据更新组件706来修改、创建和/或更新数据。在各示例中，可创建或修改日历和联系人条目。此处，可以用稀疏信息框出时隙且在稍后时间补充。类似地，如上所述，可生成稀疏联系人条目并稍后时间补充。

实际上，本发明启用活动通信会话期间的私人PIM数据反馈。在听觉反馈的情形中，该反馈只被用户听见，例如，不被线路的另一端的人听见。用户可以在靠着用户的耳朵拿起电话时使用电话键区来控制该功能。换言之，可以采用其他按钮或触发机制(例如，关键字)而不背离本发明的精神和/或范围。实质上，本发明使得用户能够在不需要为了阅读文本而查看设备显示器的情况下检索信息。此处，本发明可用于最小化(或可能消除)听觉反馈所引起的对正在进行的电话对话的干扰。

图8示出了根据本发明的采用方便自动化一个或多个特征的MLR组件802的系统800。可以理解，MLR对于本发明是可任选的并且可以在各替换方面中采用，而不限制上述核心功能的范围。本发明(例如，结合数据查找、配置、呈现……)可采用各种基于MLR的方案来实现其各个方面。例如，可经由自动分类器系统和过程来促进用于确定何时访问PIM数据、如何传达该数据等的过程。

分类器是将输入属性矢量x＝(x1，x2，x3，x4，xn)映射到该输入属于一个类的置信度的函数，即f(x)＝置信度(类)。这种分类可采用基于概率和/或基于统计的分析(例如，分解成分析效用和成本)来预测或推断用户期望自动执行的动作。

支持向量机(SVM)是可采用的分类器的一个示例。SVM通过找出可能输入空间中的超曲面来操作，其中超曲面试图将触发准则从非触发事件中分离出来。直观上，这使得分类对于接近但不等同于训练数据的测试数据正确。可采用其它定向和非定向模型分类方法，包括，例如，朴素贝叶斯、贝叶斯网络、决策树、神经网络、模糊逻辑模型以及提供不同独立性模式的概率分类模型。此处所使用的分类也包括用于开发优先级模型的统计回归。

如从本说明书中可以容易地理解的，本发明可以使用显式训练(例如，经由一般训练数据)以及隐式训练(例如，经由观察用户行为、接收外来信息)的分类器。例如，SVM经由分类器构造器和特征选择模块中的学习或训练阶段来配置。因此，分类器可用于自动学习和执行多个功能，包括但不限于根据预定准则来确定何时访问PIM数据、检索什么数据、如何配置对该数据的解释、如何呈现该数据等。

现在参见图9，示出了可用于执行所公开的体系结构的计算机的框图。为了向本发明的各个方面提供附加上下文，图9及以下讨论旨在提供其中可实现本发明各个方面的合适的计算环境900的简要、概括描述。可以理解，这只是用于本发明的一个示例环境并且是为了洞察本发明而提供的。因此，其他示例环境包括但不限于，智能电话、蜂窝电话、袖珍计算机、个人数字助理、装备通信的移动设备等。尽管本发明以上是在可在一个或多个计算机上运行的计算机可执行指令的一般上下文中进行描述的，但是本领域的技术人员将认识到，本发明也可结合其它程序模块和/或作为硬件和软件的组合来实现。

一般而言，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、组件、数据结构等等。此外，本领域的技术人员可以理解，本发明的方法可用其它计算机系统配置来实施，包括单处理器或多处理器计算机系统、小型计算机、大型计算机、以及个人计算机、手持式计算设备、基于微处理器的或可编程消费电子产品等，其每一个都可操作上耦合到一个或多个相关联的设备。

所示的本发明的各方面也可在其中某些任务由通过通信网络链接的远程处理设备来执行的分布式计算环境中实施。在分布式计算环境中，程序模块可以位于本地和远程存储器存储设备中。

计算机通常包括各种计算机可读介质。计算机可读介质可以是可由计算机访问的任何可用介质，并包括易失性和非易失性介质、可移动和不可移动介质。作为示例而非限制，计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据的信息的任何方法和技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括但不限于，RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光盘存储、磁盒、磁带、磁盘存储或其它磁存储设备、或可以用来存储所需信息并可由计算机访问的任何其它介质。

通信介质通常以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据，且包含任何信息传递介质。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被设定或更改的信号。作为示例而非限制，通信介质包括有线介质，诸如有线网络或直接线连接，以及无线介质，诸如声学、RF、红外线和其它无线介质。上述中的任意组合也应包括在计算机可读介质的范围之内。

再次参考图9，用于实现本发明的各方面的示例性环境900包括计算机902，计算机902包括处理单元904、系统存储器906和系统总线908。系统总线908将包括但不限于系统存储器906的系统组件耦合到处理单元904。处理单元904可以是市场上可购买到的各种处理器中的任意一种。双微处理器和其它多处理器体系结构也可用作处理单元904。

系统总线908可以是若干种总线结构中的任一种，这些总线结构还可互连到存储器总线(带有或没有存储器控制器)、外围总线、以及使用各类市场上可购买到的总线体系结构中的任一种的局部总线。系统存储器906包括只读存储器(ROM)910和随机存取存储器(RAM)912。基本输入/输出系统(BIOS)储存在诸如ROM、EPROM、EEPROM等非易失性存储器910中，其中BIOS包含帮助诸如在启动期间在计算机902内的元件之间传输信息的基本例程。RAM 912还可包括诸如静态RAM等高速RAM来用于高速缓存数据。

计算机902还包括内部硬盘驱动器(HDD)914(例如，EIDE、SATA)，该内部硬盘驱动器914还可被配置成在合适的机壳(未示出)中外部使用；磁软盘驱动器(FDD)916(例如，从可移动磁盘918中读取或向其写入)；以及光盘驱动器920(例如，从CD-ROM盘922中读取，或从诸如DVD等高容量光学介质中读取或向其写入)。硬盘驱动器914、磁盘驱动器916和光盘驱动器920可分别通过硬盘驱动器接口924、磁盘驱动器接口926和光盘驱动器接口928来连接到系统总线908。用于外置驱动器实现的接口924包括通用串行总线(USB)和IEEE 1394接口技术中的至少一种或两者。其它外部驱动器连接技术在本发明所考虑的范围之内。

驱动器及其相关联的计算机可读介质提供了对数据、数据结构、计算机可执行指令等的非易失性存储。对于计算机902，驱动器和介质容纳适当的数字格式的任何数据的存储。尽管以上对计算机可读介质的描述涉及HDD、可移动磁盘以及诸如CD或DVD等可移动光学介质，但是本领域的技术人员应当理解，示例性操作环境中也可使用可由计算机读取的任何其它类型的介质，诸如zip驱动器、磁带盒、闪存卡、盒式磁带等等，并且任何这样的介质可包含用于执行本发明的方法的计算机可执行指令。

多个程序模块可存储在驱动器和RAM 912中，包括操作系统930、一个或多个应用程序932、其它程序模块934和程序数据936。所有或部分操作系统、应用程序、模块和/或数据也可被高速缓存在RAM 912中。可以理解，本发明可用各种市场上可购得的操作系统或操作系统的组合来实现。

用户可以通过一个或多个有线/无线输入设备，例如键盘938和诸如鼠标940等定点设备将命令和信息输入到计算机902中。其它输入设备(未示出)可包括话筒、IR遥控器、操纵杆、游戏手柄、指示笔、触摸屏等等。这些和其它输入设备通常通过耦合到系统总线908的输入设备接口942连接到处理单元904，但也可通过其它接口连接，如并行端口、IEEE 1394串行端口、游戏端口、USB端口、IR接口等等。

监视器944或其它类型的显示设备也经由诸如视频适配器946等接口来连接到系统总线908。除了监视器944之外，计算机通常包括诸如扬声器、打印机等其它外围输出设备(未示出)。

计算机902可使用经由有线和/或无线通信至一个或多个远程计算机，诸如远程计算机948的逻辑连接在网络化环境中操作。远程计算机948可以是工作站、服务器计算机、路由器、个人计算机、便携式计算机、基于微处理器的娱乐设备、对等设备或其它常见的网络节点，并且通常包括相对于计算机902描述的许多或所有元件，尽管为简明起见仅示出了存储器/存储设备950。所描绘的逻辑连接包括到局域网(LAN)952和/或例如广域网(WAN)954等更大的网络的有线/无线连接。这一LAN和WAN联网环境常见于办公室和公司，并且便于诸如内联网等企业范围计算机网络，所有这些都可连接到例如因特网等全球通信网络。

当在LAN网络环境中使用时，计算机902通过有线和/或无线通信网络接口或适配器956连接到局域网952。适配器956可以便于到LAN 952的有线或无线通信，并且还可包括其上设置的用于与无线适配器956通信的无线接入点。

当在WAN连网环境中使用时，计算机902可包括调制解调器958，或连接到WAN 954上的通信服务器，或具有用于通过WAN 954，诸如通过因特网建立通信的其它装置。或为内置或为外置的调制解调器958以及有线或无线设备经由串行端口接口942连接到系统总线908。在联网环境中，相对于计算机902所描述的程序模块或其部分可以存储在远程存储器/存储设备950中。应该理解，所示网络连接是示例性的，并且可以使用在计算机之间建立通信链路的其它手段。

计算机902可用于与操作上设置在无线通信中的任何无线设备或实体通信，这些设备或实体例如有打印机、扫描仪、台式和/或便携式计算机、便携式数据助理、通信卫星、与无线可检测标签相关联的任何一个设备或位置(例如，公用电话亭、报亭、休息室)以及电话。这至少包括Wi-Fi和蓝牙TM无线技术。由此，通信可以如对于常规网络那样是预定义结构，或者仅仅是至少两个设备之间的自组织(ad hoc)通信。

Wi-Fi，即无线保真，允许从家里沙发、酒店房间的床上或工作的会议室连接到因特网而不需要线缆。Wi-Fi是一种类似蜂窝电话中使用的无线技术，它使得诸如计算机等设备能够在室内和室外，在基站范围内的任何地方发送和接收数据。Wi-Fi网络使用称为IEEE 802.11(a、b、g等等)的无线电技术来提供安全、可靠、快速的无线连接。Wi-Fi网络可用于将计算机彼此连接、连接到因特网以及连接到有线网络(使用IEEE 802.3或以太网)。Wi-Fi网络在未许可的2.4和5GHz无线电波段内工作，例如以11Mbps(802.11a)或54Mbps(802.11b)数据速率工作，或者具有包含两个波段(双波段)的产品，因此该网络可提供类似于许多办公室中使用的基本10BaseT有线以太网的真实性能。

现在参见图10，示出了根据本发明的示例性的计算环境1000的示意性框图。系统1000包括一个或多个客户机1002。客户机1002可以是硬件和/或软件(例如，线程、进程、计算设备)。客户机1002可例如通过本发明而容纳cookie和/或相关联的上下文信息。

系统1000还包括一个或多个服务器1004。服务器1004也可以是硬件和/或软件(例如，线程、进程、计算设备)。服务器1004可以例如通过使用本发明来容纳线程以执行变换。在客户机1002和服务器1004之间的一种可能的通信能够以适合在两个或多个计算机进程之间传输的数据分组的形式进行。数据分组可包括例如cookie和/或相关联的上下文信息。系统1000包括可以用来使客户机1002和服务器1004之间通信更容易的通信框架1006(例如，诸如因特网等全球通信网络)。

通信可经由有线(包括光纤)和/或无线技术来促进。客户机1002操作上被连接到可以用来存储对客户机1002本地的信息(例如，cookie和/或相关联的上下文信息)的一个或多个客户机数据存储1008。同样地，服务器1004可在操作上连接到一个或多个服务器数据存储1010，这可以用来存储对服务器1004本地的信息。

上面所描述的包括本发明的各个示例。当然，出于描述本发明的目的而描述每一个可以想到的组件或方法的组合是不可能的，但本领域内的普通技术人员应该认识到，本发明的许多进一步的组合和排列都是可能的。因此，本发明旨在涵盖所有这些落入所附权利要求书的精神和范围内的更改、修改和变化。此外，就在说明书或权利要求书中使用术语“包括”而言，这一术语旨在以与术语“包含”在被用作权利要求书中的过渡此时所解释的相似的方式为包含性的。

Claims (15)

1.一种经由移动设备来方便专用数据访问的系统，包括：

生成来自用户的对数据的请求的接口组件(106)；

信息管理组件(102)，其检索所述对数据的请求并且在活动通信会话期间向所述用户私下传达所述数据的子集的听觉表示。

2.如权利要求1所述的系统，其特征在于，所述数据(104)是日历数据、联系人数据、任务数据、经由web浏览器访问的数据、或者经由本地或远程存储中的一个访问的数据中的至少一个。

3.如权利要求1所述的系统，其特征在于，所述接口组件(102)被配置成由所述用户来进行盲操作，其中所述移动设备是屏幕较小的移动设备。

4.如权利要求1所述的系统，其特征在于，还包括评估所述请求并标识所述数据的请求管理组件(302)。

5.如权利要求1所述的系统，其特征在于，还包括：

从所述接口接收所述请求的请求检索组件(602)；以及

至少部分地基于所述请求的内容来标识所述数据的请求分析组件(604)。

6.如权利要求1所述的系统，其特征在于，还包括检索所述数据的子集并将其呈现给所述接口组件的数据管理组件(304)。

7.如权利要求6所述的系统，其特征在于，还包括标识存储并基于所述请求来访问来自所述存储的数据的数据检索组件(702)。

8.如权利要求6所述的系统，其特征在于，还包括基于偏好、策略或推论中的至少一个来向所述用户可听地呈现所述数据的数据呈现组件(704)。

9.如权利要求6所述的系统，其特征在于，还包括基于经由所述接口组件接收到的触发事件来进行生成和/或修改数据中的至少一项的数据更新组件(706)。

10.如权利要求1所述的系统，其特征在于，所述接口组件(106)采用装备触觉的按钮、装备触觉的拇指轮、“肥皂”设备、手势输入设备、或者“earPod”设备中的至少一个以便于不用眼输入。

11.一种在参与活动通信会话时盲检索数据的计算机实现的方法，包括：

在所述活动通信会话期间接收数据请求；

分析所述数据请求；以及

基于所述分析来检索数据，其中所述数据是个人信息管理器(PIM)数据。

12.如权利要求11所述的计算机实现的方法，其特征在于，还包括经由“不用眼”接口触发所述数据请求。

13.如权利要求11所述的计算机实现的方法，其特征在于，还包括在不中断所述活动通信会话的情况下私下向用户呈现所述数据的内容的听觉表示。

14.一种在活动通信会话期间管理PIM数据的系统，包括：

用于触发对所述PIM数据的子集的检索请求的装置；以及

用于在不中断所述活动通信会话的情况下私下向用户传达所述PIM数据的子集的装置。

15.如权利要求14所述的系统，其特征在于，还包括：

用于触发修改指令的装置(106)；以及

用于根据所述修改指令来进行更新和/或修改所述PIM数据中的至少一项的装置(102)。

Images