專利名稱:控制電子設(shè)備的方法和應(yīng)用該方法的電子設(shè)備的制作方法
技術(shù)領(lǐng)域:
與示范性實(shí)施例一致的方法和設(shè)備涉及控制電子設(shè)備的方法以及應(yīng)用該方法的電子設(shè)備,更具體地,涉及對(duì)使用動(dòng)作識(shí)別模塊來識(shí)別用戶動(dòng)作的電子設(shè)備進(jìn)行控制的方法,以及應(yīng)用該方法的電子設(shè)備。
背景技術(shù):
隨著電子技術(shù)的發(fā)展,已經(jīng)開發(fā)并銷售了各種電子設(shè)備。具體地,包括電視在內(nèi)的各種電子設(shè)備正被廣泛用于一般家庭。這些電子設(shè)備配備有各種功能,以滿足用戶的期望。因此,需要各種輸入方法以便有效地使用電子設(shè)備的這些功能。例如,使用遙控器、鼠標(biāo)和觸摸板的輸入方法已經(jīng)應(yīng)用于電子設(shè)備。然而,這些簡(jiǎn)單的輸入方法對(duì)有效地使用電子設(shè)備的各種功能造成了限制。例如,如果電子設(shè)備的所有功能只通過遙控器控制,則必然要增加遙控器上的按鈕的數(shù)量。此外,如果所有菜單都顯示在屏幕上,則用戶應(yīng)該逐一搜查復(fù)雜的菜單樹以選擇期望的菜單,這可能給用戶造成不便。因此,需要更方便且更有效地控制電子設(shè)備的方法。
發(fā)明內(nèi)容
一個(gè)或多個(gè)示范性實(shí)施例可以克服上述缺點(diǎn)和上面未描述的其他缺點(diǎn)。然而,應(yīng)理解,一個(gè)或多個(gè)示范性實(shí)施例不需要克服上述缺點(diǎn),而且可以不克服上述任何問題。一個(gè)或多個(gè)示范性實(shí)施例提供了用于控制電子設(shè)備的方法,該方法識(shí)別用戶動(dòng)作并有效執(zhí)行電子設(shè)備的任務(wù),以及提供了應(yīng)用該方法的電子設(shè)備。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了一種用于控制電子設(shè)備的方法,該方法包括響應(yīng)于識(shí)別到的用戶動(dòng)作而選擇多個(gè)廣播信號(hào)之一;提供已選擇的廣播信號(hào);停止提供已選擇的廣播信號(hào)并提供已存儲(chǔ)的內(nèi)容;重新識(shí)別具有與識(shí)別到的用戶動(dòng)作相同形式的用戶動(dòng)作;以及響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了一種用于控制電子設(shè)備的方法,該方法包括提供多個(gè)廣播信號(hào)當(dāng)中的一個(gè)廣播信號(hào)和已存儲(chǔ)的內(nèi)容之一;通過動(dòng)作識(shí)別模塊識(shí)別用戶動(dòng)作;以及如果提供了廣播信號(hào),則響應(yīng)于識(shí)別到的用戶動(dòng)作而控制已提供的廣播信號(hào)的音量等級(jí)或提供多個(gè)廣播信號(hào)當(dāng)中的另一個(gè)廣播信號(hào),以及如果提供了內(nèi)容,則響應(yīng)于識(shí)別到的用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。廣播信號(hào)可以是從廣播接收單元接收到的廣播信號(hào),而且內(nèi)容可以是存儲(chǔ)在存儲(chǔ)單元中的內(nèi)容、或者從外部終端輸入單元或網(wǎng)絡(luò)接口接收的內(nèi)容。內(nèi)容可以包括多個(gè)頁面,而且改變顯示已提供的內(nèi)容的屏幕的至少一部分可以包括將顯示多個(gè)頁面當(dāng)中的一個(gè)頁面的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的另一個(gè)頁面的屏幕。改變顯示已提供的內(nèi)容的屏幕的至少一部分可以包括響應(yīng)于識(shí)別到的用戶動(dòng)作的方向,將顯示多個(gè)頁面當(dāng)中的一個(gè)頁面的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的、位于該頁面的上部、下部、左部或右部區(qū)域的另一個(gè)頁面的屏幕。內(nèi)容可以包括單一頁面,而且改變顯示已提供的內(nèi)容的屏幕的至少一部分可以包括將顯示單一頁面的一部分的屏幕改變?yōu)轱@示單一頁面的另一部分的屏幕。改變顯示已提供的內(nèi)容的屏幕的至少一部分可以包括將顯示已提供的內(nèi)容的屏 幕改變?yōu)轱@示不同于該內(nèi)容的內(nèi)容的屏幕。該方法還可以包括通過語音識(shí)別模塊識(shí)別用戶語音,并且根據(jù)識(shí)別到的用戶語音,提供多個(gè)廣播信號(hào)當(dāng)中的再一個(gè)廣播信號(hào)。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了控制電子設(shè)備的方法,該方法包括提供第一視頻數(shù)據(jù)和第一視頻數(shù)據(jù)的音頻數(shù)據(jù);響應(yīng)于識(shí)別到的用戶動(dòng)作而控制音頻數(shù)據(jù)的音量等級(jí);停止提供第一視頻數(shù)據(jù)和音頻數(shù)據(jù)并提供第二視頻數(shù)據(jù);重新識(shí)別具有與識(shí)別到的用戶動(dòng)作基本相同形式的用戶動(dòng)作;并且響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示第二視頻數(shù)據(jù)的屏幕的至少一部分。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了控制電子設(shè)備的方法,該方法包括提供分別由多個(gè)源提供的視頻數(shù)據(jù)當(dāng)中的第一視頻數(shù)據(jù)以及從單一源提供的多個(gè)視頻數(shù)據(jù)當(dāng)中的第二視頻數(shù)據(jù)之一;通過動(dòng)作識(shí)別模塊識(shí)別用戶動(dòng)作;而且如果提供了第一視頻數(shù)據(jù),則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供與由提供第一視頻數(shù)據(jù)的源不同的源提供的視頻數(shù)據(jù),如果提供了第二視頻數(shù)據(jù),則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供由單一源提供的多個(gè)視頻數(shù)據(jù)當(dāng)中的與該第二視頻數(shù)據(jù)不同的視頻數(shù)據(jù)。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了控制電子設(shè)備的方法,該方法包括提供第一視頻數(shù)據(jù)和第二視頻數(shù)據(jù)之一,第一視頻圖像在向電子設(shè)備供電之后重現(xiàn),第二視頻數(shù)據(jù)在向電子設(shè)備供電之后、在電子設(shè)備通過用戶進(jìn)入一個(gè)模式之后重現(xiàn);通過動(dòng)作識(shí)別模塊識(shí)別用戶動(dòng)作;如果提供第一視頻數(shù)據(jù),則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供與在向電子設(shè)備供電之后重現(xiàn)的第一視頻數(shù)據(jù)不同的視頻數(shù)據(jù),而且如果提供第二視頻數(shù)據(jù),則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供與在通過用戶進(jìn)入模式之后重現(xiàn)的第二視頻數(shù)據(jù)不同的視頻數(shù)據(jù)。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了控制電子設(shè)備的方法,該方法包括提供多個(gè)運(yùn)動(dòng)圖像中的一個(gè)運(yùn)動(dòng)圖像或多個(gè)圖像中的一個(gè)圖像之一;通過動(dòng)作識(shí)別模塊識(shí)別用戶動(dòng)作;如果提供運(yùn)動(dòng)圖像,則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供多個(gè)運(yùn)動(dòng)圖像中與已提供的運(yùn)動(dòng)圖像不同的運(yùn)動(dòng)圖像,而且如果提供圖像,則響應(yīng)于識(shí)別到的用戶動(dòng)作而提供多個(gè)圖像中與已提供的圖像不同的圖像。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了電子設(shè)備,該電子識(shí)別包括顯示單元,其顯示多個(gè)廣播信號(hào)當(dāng)中的一個(gè)廣播信號(hào)和已存儲(chǔ)的內(nèi)容之一;動(dòng)作輸入單元,其接收用戶動(dòng)作的輸入;以及控制器,如果提供廣播信號(hào),則控制器響應(yīng)于用戶動(dòng)作而控制已提供的廣播信號(hào)的音量等級(jí)或者提供多個(gè)廣播信號(hào)中的另一個(gè)廣播信號(hào),而且如果提供內(nèi)容,則控制器響應(yīng)于用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。內(nèi)容可以包括多個(gè)頁面,而且如果改變顯示已提供的內(nèi)容的屏幕的至少一部分,則控制器可以將顯示多個(gè)頁面當(dāng)中的一個(gè)頁面的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的另一個(gè)頁面的屏幕。如果改變顯示已提供的內(nèi)容的屏幕的至少一部分,則控制器可以將顯示多個(gè)頁面當(dāng)中的一個(gè)頁面的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的、位于該頁面的上部、下部、左部或右部區(qū)域的另一個(gè)頁面的屏幕。內(nèi)容可以包括單一頁面,而且如果改變顯示已提供的內(nèi)容的屏幕的至少一部分,則控制器可以將顯示單一頁面的一部分的屏幕改變?yōu)轱@示單一頁面的另一部分的屏幕。電子設(shè)備還可以包括語音輸入單元,其接收用戶語音的輸入,而且控制器可以根據(jù)用戶語音提供多個(gè)廣播信號(hào)當(dāng)中的另一個(gè)廣播信號(hào)。·根據(jù)示范性實(shí)施例的一個(gè)方面,提供了電子設(shè)備,該電子設(shè)備包括顯示單元,其顯示第一視頻數(shù)據(jù)或第二視頻數(shù)據(jù);音頻輸出單元,其提供第一視頻數(shù)據(jù)的音頻數(shù)據(jù);動(dòng)作輸入單元,其接收用戶動(dòng)作的輸入;以及控制器,如果提供第一視頻數(shù)據(jù),則控制器響應(yīng)于用戶動(dòng)作而控制第一視頻數(shù)據(jù)的音頻數(shù)據(jù)的音量等級(jí),而且如果提供第二視頻數(shù)據(jù),則控制器響應(yīng)于用戶動(dòng)作而改變?cè)陲@示第二視頻數(shù)據(jù)的屏幕的至少一部分。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了電子設(shè)備,該電子設(shè)備包括顯示單元,其顯示多個(gè)運(yùn)動(dòng)圖像中的一個(gè)運(yùn)動(dòng)圖像或多個(gè)圖像中的一個(gè)圖像之一;動(dòng)作輸入單元,其接收用戶動(dòng)作的輸入;以及控制器,如果提供運(yùn)動(dòng)圖像,則控制器響應(yīng)于用戶動(dòng)作而提供多個(gè)運(yùn)動(dòng)圖像中與已提供的運(yùn)動(dòng)圖像不同的運(yùn)動(dòng)圖像,而且如果提供圖像,則控制器響應(yīng)于用戶動(dòng)作而提供多個(gè)圖像中與已提供的圖像不同的圖像。根據(jù)示范性實(shí)施例的一個(gè)方面,提供了電子設(shè)備,該電子設(shè)備包括顯示單元,其顯示分別由多個(gè)源提供的視頻數(shù)據(jù)當(dāng)中的第一視頻數(shù)據(jù)以及從單一源提供的多個(gè)視頻數(shù)據(jù)當(dāng)中的第二視頻數(shù)據(jù)之一;動(dòng)作輸入單元,其接收用戶動(dòng)作的輸入;以及控制器,如果提供第一視頻數(shù)據(jù),則控制器響應(yīng)于用戶動(dòng)作而提供與由提供第一視頻數(shù)據(jù)的源不同的源提供的視頻數(shù)據(jù),如果提供第二視頻數(shù)據(jù),則控制器響應(yīng)于用戶動(dòng)作而提供由單一源提供的多個(gè)視頻數(shù)據(jù)當(dāng)中與第二視頻數(shù)據(jù)不同的視頻數(shù)據(jù)。
通過參照附圖詳細(xì)描述示范性實(shí)施例,上述和/或其他方面將更加清楚,附圖中圖I至圖3是根據(jù)各種示范性實(shí)施例的、解釋根據(jù)電子設(shè)備的配置的框圖;圖4和圖5是示出對(duì)應(yīng)于語音任務(wù)和動(dòng)作任務(wù)的遙控器的按鈕的視圖;圖6至圖32是解釋用于執(zhí)行語音任務(wù)的方法的各種示例的視圖;圖33至圖58是解釋用于執(zhí)行動(dòng)作任務(wù)的方法的各種示例的視圖;圖59和圖60是根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備通過將任務(wù)劃分為動(dòng)作任務(wù)和語音任務(wù)來控制任務(wù);圖61和圖62是示出根據(jù)示范性實(shí)施例的、關(guān)于電子設(shè)備的語音任務(wù)的語音Π的視圖;圖63是示出根據(jù)示范性實(shí)施例的、關(guān)于電子設(shè)備的動(dòng)作任務(wù)的動(dòng)作UI的視圖;圖64至圖66是示出根據(jù)示范性實(shí)施例的、語音識(shí)別或動(dòng)作識(shí)別的視覺反饋的視圖;圖67至圖69是根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備提供語音UI和動(dòng)作UI ;
圖70至圖78是根據(jù)各種示范性實(shí)施例的、解釋顯示用于解釋語音應(yīng)用的可運(yùn)行圖標(biāo)的、電子設(shè)備的Π的方法的視圖;圖79是示出根據(jù)示范性實(shí)施例的、解釋顯示電子設(shè)備的UI的方法的流程圖;圖80至圖91是示出根據(jù)各種示范性實(shí)施例的、按照沿著向上、向下、向左和向右方向的用戶動(dòng)作而改變的屏幕的視圖;圖92和圖93是示出根據(jù)各種示范性實(shí)施例的、解釋其屏幕按照用戶動(dòng)作改變的電子設(shè)備的控制方法的流程圖;圖94至圖97是根據(jù)各種示范性實(shí)施例的、解釋用于執(zhí)行遙控模式、動(dòng)作任務(wù)模式和語音任務(wù)模式的方法的視圖和流程圖;圖98是根據(jù)示范性實(shí)施例的、解釋使用移動(dòng)設(shè)備進(jìn)行語音識(shí)別的流程圖;圖99至圖104是根據(jù)示范性實(shí)施例的、解釋指向模式的視圖和流程圖;圖105至圖108是根據(jù)示范性實(shí)施例的、解釋在指向模式中輸入動(dòng)作的情況下的顯示方法的視圖和流程圖;圖109至圖111是根據(jù)示范性實(shí)施例的、解釋用于在語音任務(wù)模式中顯示項(xiàng)目的方法的視圖和流程圖;圖112至圖115是根據(jù)示范性實(shí)施例的、解釋具有彼此不同的色度的Π的視圖和流程圖;圖116至圖118是根據(jù)示范性實(shí)施例的、解釋執(zhí)行與除了顯示語音項(xiàng)目以外的命令相對(duì)應(yīng)的任務(wù)的視圖和流程圖;圖119至圖121是根據(jù)示范性實(shí)施例的、解釋使用雙手將當(dāng)前模式改變?yōu)閯?dòng)作任務(wù)模式的動(dòng)作啟動(dòng)命令的視圖和流程圖;圖122是根據(jù)示范性實(shí)施例的、解釋在多個(gè)用戶輸入動(dòng)作啟動(dòng)命令的情況下執(zhí)行動(dòng)作任務(wù)模式的方法的流程圖;圖123至圖126是根據(jù)示范性實(shí)施例的、解釋使用語音識(shí)別分階段執(zhí)行任務(wù)的方法的視圖和流程圖;圖127至圖129是根據(jù)示范性實(shí)施例的、解釋其名稱被部分顯示的可運(yùn)行圖標(biāo)的運(yùn)行的視圖和流程圖;圖130至圖134是根據(jù)示范性實(shí)施例的、解釋按照特殊姿勢(shì)執(zhí)行任務(wù)的視圖和流程圖;圖135至圖137是根據(jù)示范性實(shí)施例的、解釋根據(jù)語音輸入方法而不同地顯示的圖標(biāo)的視圖和流程圖;圖138至圖142是根據(jù)示范性實(shí)施例的、解釋顯示文本輸入菜單的方法的視圖和流程圖143是根據(jù)示范性實(shí)施例的、解釋使用外部設(shè)備來執(zhí)行語音任務(wù)的方法的流程圖;圖144至圖146是根據(jù)示范性實(shí)施例的、解釋在顯示屏幕上顯示可說出的命令的情況下執(zhí)行語音任務(wù)的方法的視圖和流程圖;圖147是根據(jù)示范性實(shí)施例的、解釋自動(dòng)識(shí)別語音的方法的流程圖;圖148是根據(jù)示范性實(shí)施例的、 解釋顯示候選列表的方法的流程圖;以及圖149是根據(jù)示范性實(shí)施例的、解釋指導(dǎo)語音識(shí)別錯(cuò)誤的UI的流程圖。
具體實(shí)施例方式下文中,將參照附圖更加詳細(xì)地描述示范性實(shí)施例。在以下描述中,當(dāng)相同的參考標(biāo)記和相同的元素在不同的附圖中繪出時(shí),相同的參考標(biāo)記用于相同的元素。說明書中定義的內(nèi)容,諸如詳細(xì)的結(jié)構(gòu)和元素,被提供以幫助理解示范性實(shí)施例。因此,明顯的是,示范性實(shí)施例能夠在沒有這些具體定義的內(nèi)容的情況下執(zhí)行。另外,由于相關(guān)技術(shù)中已知的功能或元件將由于不必要的細(xì)節(jié)而模糊示范性實(shí)施例,因此將不對(duì)其進(jìn)行詳細(xì)描述。圖I是示出根據(jù)示范性實(shí)施例的電子設(shè)備100的示意性框圖。參照?qǐng)D1,電子設(shè)備100包括語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140。電子設(shè)備100可以由智能電視(TV)、機(jī)頂盒、個(gè)人計(jì)算機(jī)(PC)或數(shù)字電視實(shí)現(xiàn),但不限于智能電視(TV)、機(jī)頂盒、個(gè)人計(jì)算機(jī)(PC)或數(shù)字電視,其能夠連接到外部網(wǎng)絡(luò)。語音輸入單元110接收由用戶說出(utter)的語音輸入。語音輸入單元110將輸入的語音信號(hào)轉(zhuǎn)換成電信號(hào),并且將電信號(hào)輸出到控制單元140。例如,語音輸入單元110可以由麥克風(fēng)實(shí)現(xiàn)。此外,語音輸入單元110可以由電子設(shè)備100中的內(nèi)部組件或外部設(shè)備實(shí)現(xiàn)。外部設(shè)備語音輸入單元110可以通過有線或無線連接或通過網(wǎng)絡(luò)連接到電子設(shè)備100。動(dòng)作(motion)輸入單元120接收通過拍攝用戶動(dòng)作獲得的圖像信號(hào)(例如,連續(xù)幀),并將圖像信號(hào)提供給控制單元140。例如,動(dòng)作輸入單元120可以由包括鏡頭和圖像傳感器的單元實(shí)現(xiàn)。動(dòng)作輸入單元120可以由電子設(shè)備100中的內(nèi)部組件或外部設(shè)備實(shí)現(xiàn)。外部設(shè)備動(dòng)作輸入單元120可以通過有線或無線連接,或通過網(wǎng)絡(luò)連接到電子設(shè)備100。存儲(chǔ)單元130存儲(chǔ)用于驅(qū)動(dòng)和控制電子設(shè)備100的各種數(shù)據(jù)和程序。存儲(chǔ)單元130存儲(chǔ)語音識(shí)別模塊和動(dòng)作識(shí)別模塊,語音識(shí)別模塊識(shí)別通過語音輸入單元110輸入的語音,動(dòng)作識(shí)別模塊識(shí)別通過動(dòng)作輸入單元120輸入的動(dòng)作。存儲(chǔ)單元130可以包括語音數(shù)據(jù)庫和動(dòng)作數(shù)據(jù)庫。語音數(shù)據(jù)庫是指預(yù)定的語音以及與預(yù)定的語音匹配的語音任務(wù)(voice task)記錄在其上的數(shù)據(jù)庫。動(dòng)作數(shù)據(jù)庫是指預(yù)定的動(dòng)作以及與預(yù)定的動(dòng)作匹配的動(dòng)作任務(wù)(motion task)記錄在其上的數(shù)據(jù)庫。控制單元140控制語音輸入單元110、動(dòng)作輸入單元120和存儲(chǔ)單元130??刂茊卧?40可以包括諸如中央處理單元(CPU)的硬件處理器、以及存儲(chǔ)用于控制電子設(shè)備100的模塊和數(shù)據(jù)的只讀存儲(chǔ)器(ROM)和隨機(jī)存取存儲(chǔ)器(RAM)。如果語音通過語音輸入單元110輸入,則控制單元140使用語音識(shí)別模塊和語音數(shù)據(jù)庫來識(shí)別語音。語音識(shí)別可以被劃分為孤立詞識(shí)別(isolated word recognition)、連續(xù)語音識(shí)別(continuous speech recognition)和關(guān)鍵詞檢出(keyword spotting),孤立詞識(shí)別通過根據(jù)輸入的語音的形式而區(qū)分詞來識(shí)別發(fā)出的語音,連續(xù)語音識(shí)別識(shí)別連續(xù)的詞、連續(xù)的句子,以及對(duì)話語音(dialogic voice),關(guān)鍵詞檢出是介于孤立詞識(shí)別和連續(xù)語音識(shí)別之間的中間類型并且通過檢測(cè)預(yù)定義的關(guān)鍵詞來識(shí)別語音。如果輸入了用戶語音,則控制單元140通過從輸入的語音信號(hào)中檢測(cè)出用戶發(fā)出的語音的開始和結(jié)束來確定語音段(voice section)??刂茊卧?40計(jì)算輸入的語音信號(hào)的能量、按照計(jì)算出的能量對(duì)語音信號(hào)的能量水平進(jìn)行分類、并通過動(dòng)態(tài)編程來檢測(cè)語音段??刂茊卧?40通過檢測(cè)來自檢測(cè)到的語音段內(nèi)的語音信號(hào)的音素(Phoneme)(這是最小的語音單位)、基于聲學(xué)模型來生成音素?cái)?shù)據(jù)??刂茊卧?40通過將隱馬爾可夫模型(HMM)應(yīng)用到已生成的音素?cái)?shù)據(jù)來生成文本信息。然而,上述語音識(shí)別方法僅僅是示例,而且可以使用其他語音識(shí)別方法。在上述方法中,控制單元140識(shí)別包括在語音信號(hào)中的用戶語音。如果通過動(dòng)作輸入單元120輸入了動(dòng)作,則控制單元140使用動(dòng)作識(shí)別模塊和動(dòng)作數(shù)據(jù)庫來識(shí)別動(dòng)作。動(dòng)作識(shí)別將與通過動(dòng)作輸入單元120輸入的用戶動(dòng)作相對(duì)應(yīng)的圖 像(例如,連續(xù)幀)劃分為背景和手區(qū)域(例如,張開手指或曲手握拳),并識(shí)別連續(xù)的手部動(dòng)作。如果輸入了用戶動(dòng)作,則控制單元140以幀為基礎(chǔ)存儲(chǔ)接收到的圖像,并且使用已存儲(chǔ)的幀來感測(cè)用戶動(dòng)作的對(duì)象(例如,用戶的手)??刂茊卧?40通過感測(cè)幀中所包括的對(duì)象的形狀、顏色和動(dòng)作中的至少一個(gè)來檢測(cè)對(duì)象??刂茊卧?40可以使用多個(gè)幀中所包括的對(duì)象的位置來追蹤對(duì)象的動(dòng)作??刂茊卧?40按照所追蹤的對(duì)象的形狀和動(dòng)作來確定該動(dòng)作。例如,控制單元140使用對(duì)象的形狀、速度、位置和方向的變化中的至少一個(gè)來確定用戶動(dòng)作。用戶動(dòng)作包括握一只手的抓動(dòng)作(grab motion)、利用一只手移動(dòng)顯示的光標(biāo)的指向移動(dòng)動(dòng)作(pointing move motion)、在一個(gè)方向上以預(yù)定的速度或更快的速度移動(dòng)一只手的拍動(dòng)作(slap motion)、水平或垂直搖動(dòng)一只手的搖動(dòng)動(dòng)作(shake motion)、以及旋轉(zhuǎn)一只手的旋轉(zhuǎn)動(dòng)作。本公開的技術(shù)想法可以應(yīng)用于其他動(dòng)作。例如,用戶動(dòng)作還可以包括張開一只手的張開動(dòng)作(spread motion)??刂茊卧?40確定對(duì)象是否在預(yù)定時(shí)間(例如,800毫秒)內(nèi)離開預(yù)定區(qū)域(例如,40厘米X40厘米的正方形),以便確定用戶動(dòng)作是指向(pointing)移動(dòng)動(dòng)作還是拍動(dòng)作。如果對(duì)象在預(yù)定時(shí)間內(nèi)沒有離開預(yù)定區(qū)域,則控制單元140可以確定該用戶動(dòng)作是指向移動(dòng)動(dòng)作。如果對(duì)象在預(yù)定時(shí)間內(nèi)離開預(yù)定區(qū)域,則控制單元140可以確定該用戶動(dòng)作是拍動(dòng)作。另一個(gè)示例是,如果對(duì)象的速度低于預(yù)定速度(例如,30厘米/秒),則控制單元140可以確定該用戶動(dòng)作是指向移動(dòng)動(dòng)作。如果對(duì)象的速度超過預(yù)定速度,則控制單元140確定該用戶動(dòng)作是拍動(dòng)作。如上所述,控制單元140使用識(shí)別出的語音和動(dòng)作來執(zhí)行電子設(shè)備100的任務(wù)。電子設(shè)備的任務(wù)包括由電子設(shè)備100執(zhí)行的至少一個(gè)功能,諸如頻道切換、音量控制、內(nèi)容回放(例如,運(yùn)動(dòng)圖像、音樂或照片)、或互聯(lián)網(wǎng)瀏覽。下面將解釋通過控制單元140控制電子設(shè)備100的具體方法。圖2是不出根據(jù)不范性實(shí)施例的電子設(shè)備100的框圖。參照?qǐng)D2,電子設(shè)備100包括語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收單元150、外部端子輸入單元160、遙控信號(hào)接收單元170、網(wǎng)絡(luò)接口單元180和圖像輸出單元190。如圖2所示,電子設(shè)備100可以由機(jī)頂盒、個(gè)人計(jì)算機(jī)等實(shí)現(xiàn)。圖2的語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140與圖I的語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140相同,因此省略其詳細(xì)描述。廣播接收單元150以有線或無線方式從外部源接收廣播信號(hào)。廣播信號(hào)包括視頻、音頻和附加數(shù)據(jù)(例如,電子節(jié)目指南(EPG))。廣播接收單元150可以從諸如地面波廣播、有線廣播、衛(wèi)星廣播、互聯(lián)網(wǎng)廣播等的各種源接收廣播信號(hào)。外部端子輸入單元160從外部源接收視頻數(shù)據(jù)(例如,運(yùn)動(dòng)圖像或照片)和音頻數(shù)據(jù)(例如,音樂)。外部端子輸入單元160可以包括高清晰度多媒體接口(HDMI)輸入端子、分量輸入端子、PC輸入端子、USB輸入端子等中的至少一個(gè)。遙控信號(hào)接收單元170從外部遙控器接收控制信號(hào)。遙控信號(hào)接收單元170可以以電子設(shè)備100的語音任務(wù)模式或動(dòng)作任務(wù)模式接收遙控信號(hào)。網(wǎng)絡(luò)接口單元180可以在控制單元140的控制下將電子設(shè)備100連接到外部設(shè)備(例如,服務(wù)器)。控制單元140可以從通過網(wǎng)絡(luò)接口單元180連接的外部設(shè)備下載應(yīng)用,或者可以執(zhí)行網(wǎng)頁(web)瀏覽。網(wǎng)絡(luò)接口單元180可以提供以太網(wǎng)、無線局域網(wǎng)182、藍(lán)牙等中的至少一個(gè)。圖像輸出單元190向外部顯示設(shè)備(例如,監(jiān)視器或TV)輸出通過廣播接收單元150接收到的外部廣播信號(hào)、從外部端子輸入單元160輸入的視頻數(shù)據(jù)、或存儲(chǔ)在存儲(chǔ)單元130中的視頻數(shù)據(jù)。圖像輸出單元190可以包括輸出端子,諸如HDMI、分量、復(fù)合、視頻圖形陣列(VGA)、數(shù)字視頻接口(DVI)、S-視頻等。圖3是不出根據(jù)又一不范性實(shí)施例的電子設(shè)備100的框圖。如圖3所不,電子設(shè)備100包括語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收·單元150、外部端子輸入單元160、遙控信號(hào)接收單元170、網(wǎng)絡(luò)接口單元180、顯示單元193和音頻輸出單元196。電子設(shè)備100可以是,但不限于,數(shù)字TV。圖3的語音輸入單元110、動(dòng)作輸入單元120、存儲(chǔ)單元130和控制單元140、廣播接收單元150、外部端子輸入單元160、遙控信號(hào)接收單元170和網(wǎng)絡(luò)接口單元180與圖I和圖2中具有相同參考標(biāo)記的那些單元相同,因此省略其詳細(xì)描述。顯示單元193顯示與通過廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的圖像。顯示單元193可以顯示通過外部端子輸入單元160輸入的圖像數(shù)據(jù)(例如,運(yùn)動(dòng)圖像)或存儲(chǔ)在存儲(chǔ)單元中的視頻。顯示單元193可以在控制單元140的控制下顯示用于執(zhí)行語音任務(wù)的語音輔助(assistance)信息和用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。音頻輸出單元196在控制單元140的控制下輸出與廣播信號(hào)相對(duì)應(yīng)的音頻。音頻輸出單元196可以包括揚(yáng)聲器196a、耳機(jī)輸出端子196b和S/TOIF輸出端子163c中的至少一個(gè)。存儲(chǔ)單元130包括電源控制模塊130a、頻道控制模塊130b、音量控制模塊130c、外部輸入控制模塊130d、屏幕控制模塊130e、音頻控制模塊130f、互聯(lián)網(wǎng)控制模塊130g、應(yīng)用模塊130h、搜索控制模塊130i、用戶接口(UI)處理模塊130j、語音識(shí)別模塊130k、動(dòng)作識(shí)別模塊1301、語音數(shù)據(jù)庫130m和動(dòng)作數(shù)據(jù)庫130η。這些模塊130a至130η可以通過軟件實(shí)現(xiàn),以便執(zhí)行電源控制功能、頻道控制功能、音量控制功能、外部輸入控制功能、屏幕控制功能、音頻控制功能、互聯(lián)網(wǎng)控制功能、應(yīng)用運(yùn)行功能、搜索控制功能和UI處理功能。控制單元140通過運(yùn)行存儲(chǔ)在存儲(chǔ)單元130中的軟件執(zhí)行相應(yīng)功能。以下將參照附圖解釋各種示范性實(shí)施例。如果通過語音識(shí)別模塊130k識(shí)別到用戶語音,則控制單元140執(zhí)行可由遙控器控制的任務(wù)當(dāng)中與識(shí)別到的用戶語音相對(duì)應(yīng)的語音任務(wù)。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制單元140執(zhí)行可由遙控器控制的任務(wù)當(dāng)中與識(shí)別到的用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。語音任務(wù)和動(dòng)作任務(wù)可以通過利用遙控器上的按鈕進(jìn)行分類來被映射。語音任務(wù)是指可按照通過語音識(shí)別模塊識(shí)別到的語音進(jìn)行控制的任務(wù)。例如,語音任務(wù)可以包括關(guān)閉電子設(shè)備100、頻道快捷切換(channel shortcut)、靜音、改變外部端子、設(shè)置音量等級(jí)、輸入文本以及重現(xiàn)/停止圖像的功能中的至少一個(gè)。也就是說,具有能夠由用戶語音發(fā)出的名稱或標(biāo)識(shí)符的各種任務(wù)或者需要輸入文本的任務(wù)可以被設(shè)置為語音任務(wù)。動(dòng)作任務(wù)是指可按照通過動(dòng)作識(shí)別模塊識(shí)別到的動(dòng)作進(jìn)行控制的任務(wù)。例如, 動(dòng)作任務(wù)可以包括頻道改變、音量等級(jí)控制、屏幕導(dǎo)航、滑動(dòng)條控制和光標(biāo)指向(cursorpointing)。也就是說,能夠在各階段按照用戶動(dòng)作的類型和方向進(jìn)行控制的各種任務(wù)以及使用光標(biāo)的任務(wù)可以被設(shè)置為動(dòng)作任務(wù)。如果通過語音識(shí)別模塊識(shí)別到用戶語音,則控制單元140執(zhí)行直接對(duì)應(yīng)于用戶語音中所包括的言語(utterance)的語音任務(wù)。例如,控制單元140從用戶發(fā)出的語音中識(shí)別頻道標(biāo)識(shí)符。頻道標(biāo)識(shí)符用于識(shí)別頻道,并且可以包括頻道名稱、頻道號(hào)碼和節(jié)目名稱中的至少一個(gè)。如果頻道標(biāo)識(shí)符如上所述被存儲(chǔ)在存儲(chǔ)單元130中的語音數(shù)據(jù)庫中,則控制單元140使用語音數(shù)據(jù)庫執(zhí)行到與識(shí)別到的頻道標(biāo)識(shí)符相對(duì)應(yīng)的頻道的快捷切換。也就是說,如果用戶說“ 11 ”,則控制單元140確認(rèn)與“11”相對(duì)應(yīng)的語音任務(wù)是否記錄在語音數(shù)據(jù)庫中。如果與“11”相對(duì)應(yīng)的語音任務(wù)是選擇頻道11的頻道快捷切換功能,則控制單元140執(zhí)行到頻道11的快捷切換。如果通過動(dòng)作識(shí)別模塊識(shí)別到用戶動(dòng)作,則控制單元140按照用戶動(dòng)作的方向執(zhí)行與用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。例如,如果通過動(dòng)作識(shí)別模塊識(shí)別到向上方向的拍動(dòng)作,則控制單元140可以從動(dòng)作數(shù)據(jù)庫中確認(rèn)與向上方向的拍動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù),并且可以執(zhí)行頻道改變以便將當(dāng)前頻道改變?yōu)轭l道號(hào)碼增加預(yù)定數(shù)量(例如,I)的頻道。如果通過動(dòng)作識(shí)別模塊識(shí)別到向下方向的拍動(dòng)作,則控制單元140可以從動(dòng)作數(shù)據(jù)庫中確認(rèn)與向下方向的拍動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù),并且可以執(zhí)行頻道改變以便將當(dāng)前頻道改變?yōu)轭l道號(hào)碼減少預(yù)定數(shù)量(例如,I)的頻道。語音任務(wù)和動(dòng)作任務(wù)可以通過利用圖4和圖5中所示的遙控器上的按鈕進(jìn)行分類來被映射。圖4示出了與執(zhí)行至少一個(gè)語音任務(wù)的命令相對(duì)應(yīng)的遙控器上的按鈕。也就是說,在語音輸入被識(shí)別出的情況下執(zhí)行的任務(wù)可以對(duì)應(yīng)于通過遙控器上的按鈕之一執(zhí)行的任務(wù)。例如,由遙控器上的電源按鈕401執(zhí)行的任務(wù)對(duì)應(yīng)于在語音“呼叫詞(call word)”(例如,“Ginny”)或“電源”被識(shí)別出的情況下執(zhí)行的任務(wù)。因此,外部輸入按鈕402對(duì)應(yīng)于語音“外部輸入”。此外,數(shù)字按鈕403對(duì)應(yīng)于所說出的號(hào)碼。此外,上一個(gè)頻道(previouschannel)按鈕404對(duì)應(yīng)于語音“上一個(gè)頻道”。靜音按鈕405對(duì)應(yīng)于語音“靜音”或“取消靜音”。另外,頻道列表按鈕406對(duì)應(yīng)于語音“頻道列表”。智能中心(smart hub)/菜單/搜索/快速菜單/信息顯示按鈕407、返回按鈕408、退出按鈕409、社交網(wǎng)絡(luò)/3D圖像提供按鈕410、幫助按鈕411以及回放/暫停/停止/錄制按鈕412對(duì)應(yīng)于與它們各自名稱相對(duì)應(yīng)的語音。圖5示出了與執(zhí)行至少一個(gè)動(dòng)作任務(wù)的動(dòng)作相對(duì)應(yīng)的遙控器上的按鈕。也就是說,在動(dòng)作輸入被識(shí)別到的情況下執(zhí)行的任務(wù)可以對(duì)應(yīng)于按照遙控器上的按鈕之一執(zhí)行的任務(wù)。例如,如圖5所示,按照音量向上/向下按鈕和頻道向上/向下按鈕421執(zhí)行的任務(wù)對(duì)應(yīng)于向上、向下、向右和向左方向上的拍動(dòng)作被識(shí)別到的情況下執(zhí)行的任務(wù)。因此,向上、向下、向左和向右方向按鈕422對(duì)應(yīng)于向上、向下、向左和向右方向的拍動(dòng)作。選擇按鈕423可以對(duì)應(yīng)于抓動(dòng)作。如果屏上顯示(on screen display, OSD)包括鍵指導(dǎo)(key guide),貝丨J功能按鈕425可以對(duì)應(yīng)于相應(yīng)鍵的指向動(dòng)作(pointing motion)。
語音任務(wù)和動(dòng)作任務(wù)可以在不相互結(jié)合的情況下獨(dú)立改變電子設(shè)備100的設(shè)置。也就是說,語音任務(wù)可以使用由語音識(shí)別模塊130k識(shí)別到的用戶語音來改變電子設(shè)備100的設(shè)置,而且動(dòng)作任務(wù)可以使用由動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來改變電子設(shè)備100的設(shè)置??刂茊卧?40通過語音識(shí)別模塊130k和動(dòng)作識(shí)別模塊1301之一來識(shí)別用戶語音和用戶動(dòng)作之一。如果通過語音識(shí)別模塊130k識(shí)別到用戶語音,則控制單元140分別運(yùn)行具有內(nèi)容標(biāo)識(shí)符的多個(gè)內(nèi)容當(dāng)中的、具有與識(shí)別到的用戶語音相對(duì)應(yīng)的內(nèi)容標(biāo)識(shí)符的內(nèi)容。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制單元140按照用戶動(dòng)作的方向改變多個(gè)內(nèi)容。這里所記載的內(nèi)容可以是廣播內(nèi)容。具體地,如果通過語音識(shí)別模塊130k識(shí)別到用戶語音,則控制單元140分別將當(dāng)前廣播頻道改變?yōu)榫哂袕V播頻道標(biāo)識(shí)符的多個(gè)廣播頻道當(dāng)中的、具有與識(shí)別到的用戶語音相對(duì)應(yīng)的廣播頻道標(biāo)識(shí)符的廣播頻道。頻道標(biāo)識(shí)符可以包括頻道號(hào)碼、頻道名稱和節(jié)目名稱中的至少一個(gè)。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到用戶動(dòng)作,則控制單元140按照用戶動(dòng)作的方向分階段地(in phase)改變多個(gè)廣播頻道。用戶動(dòng)作可以包括拍動(dòng)作。例如,如果識(shí)別到的用戶動(dòng)作是向上方向上的拍動(dòng)作,則控制單元140執(zhí)行頻道改變,從而將當(dāng)前廣播頻道改變?yōu)轭l道號(hào)碼增加預(yù)定數(shù)量的廣播頻道。如果識(shí)別到的用戶動(dòng)作是向下方向上的拍動(dòng)作,則控制單元140執(zhí)行頻道改變,從而將當(dāng)前廣播頻道改變?yōu)轭l道號(hào)碼減少預(yù)定數(shù)量的廣播頻道。內(nèi)容可以是圖像內(nèi)容、音樂內(nèi)容和照片內(nèi)容之一。如果內(nèi)容是圖像內(nèi)容、音樂內(nèi)容和照片內(nèi)容之一,則內(nèi)容標(biāo)識(shí)符可以是內(nèi)容的名稱。如果內(nèi)容是圖像內(nèi)容、音樂內(nèi)容和照片內(nèi)容之一,則用戶動(dòng)作可以包括拍動(dòng)作。例如,如果識(shí)別到的用戶動(dòng)作是向右方向上的拍動(dòng)作,則控制單元140可以將當(dāng)前內(nèi)容改變?yōu)榘ǘ鄠€(gè)將被重現(xiàn)的內(nèi)容的內(nèi)容列表上的下一個(gè)內(nèi)容,而且如果識(shí)別到的用戶動(dòng)作是向左方向上的拍動(dòng)作,則控制單元140可以將當(dāng)前內(nèi)容改變?yōu)閮?nèi)容列表上的前一個(gè)內(nèi)容。如果通過語音識(shí)別模塊130k識(shí)別到語音啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在該語音任務(wù)模式中,按照通過語音識(shí)別模塊130k識(shí)別到的用戶語音來控制電子設(shè)備100。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在該動(dòng)作任務(wù)模式中,按照通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來控制電子設(shè)備100。具體來說,控制單元140可以以遙控模式、語音任務(wù)模式和動(dòng)作任務(wù)模式之一操作,在遙控模式中電子設(shè)備100由遙控設(shè)備(例如,遙控器)控制,在語音任務(wù)模式中電子設(shè)備100根據(jù)語音來控制,在動(dòng)作任務(wù)模式中電子設(shè)備100根據(jù)動(dòng)作來控制。如果輸入啟動(dòng)另一種模式的命令,則控制單元140可以將當(dāng)前模式改變?yōu)橄鄳?yīng)模式。如果在電子設(shè)備100處于遙控模式或動(dòng)作任務(wù)模式時(shí)通過語音識(shí)別模塊130k識(shí)別到語音啟動(dòng)命令(觸發(fā)語音),則控制單元140將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式。語音啟動(dòng)命令是包括與進(jìn)入語音任務(wù)模式的操作相匹配的詞的命令。例如,如果詞“Ginny”被設(shè)置為語音啟動(dòng)命令,則當(dāng)識(shí)別到詞“Ginny”時(shí),控制單元140將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式。關(guān)于語音啟動(dòng)命令的詞可以在電子設(shè)備100的配置模式中由用戶直接改變,或者可以是在制造電子設(shè)備100時(shí)默認(rèn)定義的固定命令。 在語音任務(wù)模式中,控制單元140使用語音數(shù)據(jù)庫來執(zhí)行與用戶發(fā)出的語音中所包括的詞相對(duì)應(yīng)的語音任務(wù)??刂茊卧?40可以保持語音任務(wù)模式直至識(shí)別到返回遙控模式的啟動(dòng)命令、模式取消命令、或者改變?yōu)閯?dòng)作任務(wù)模式的動(dòng)作啟動(dòng)命令。如果在模式已經(jīng)改變?yōu)檎Z音任務(wù)模式之后的預(yù)定時(shí)間(例如5分鐘)內(nèi)沒有識(shí)別到語音,則控制單元140可以自動(dòng)返回到遙控模式。如果在處于遙控模式或語音任務(wù)模式時(shí)通過動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令(觸發(fā)動(dòng)作),則控制單元140將當(dāng)前模式改變?yōu)閯?dòng)作任務(wù)模式。動(dòng)作啟動(dòng)命令是進(jìn)入動(dòng)作任務(wù)模式的預(yù)先設(shè)定的動(dòng)作。例如,如果水平地?fù)u動(dòng)(shake) —只手3至4次的動(dòng)作被設(shè)置為動(dòng)作啟動(dòng)命令,則當(dāng)識(shí)別到這種動(dòng)作時(shí)控制單元140將模式改變?yōu)閯?dòng)作任務(wù)模式。關(guān)于動(dòng)作啟動(dòng)命令的動(dòng)作可以在電子設(shè)備100的配置模式中由用戶直接改變,或者可以是在制造電子設(shè)備100時(shí)默認(rèn)定義的固定動(dòng)作。在動(dòng)作任務(wù)模式中,控制單元140使用動(dòng)作數(shù)據(jù)庫來執(zhí)行與用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)??刂茊卧?40可以保持動(dòng)作任務(wù)模式直至識(shí)別到返回遙控模式的啟動(dòng)命令、模式取消命令、或者改變?yōu)檎Z音任務(wù)模式的語音啟動(dòng)命令。如果在模式已經(jīng)改變?yōu)閯?dòng)作任務(wù)模式之后的預(yù)定時(shí)間(例如5分鐘)內(nèi)沒有識(shí)別到動(dòng)作,則控制單元140可以自動(dòng)返回遙控模式。控制單元140顯示包括指導(dǎo)語音識(shí)別的語音項(xiàng)目(item)的語音輔助信息以及包括指導(dǎo)動(dòng)作識(shí)別的動(dòng)作項(xiàng)目的動(dòng)作輔助信息之一。如果識(shí)別到與語音輔助信息中所包括的語音項(xiàng)目相對(duì)應(yīng)的命令之一,則控制單元140執(zhí)行與識(shí)別到的命令相對(duì)應(yīng)的語音任務(wù)。如果識(shí)別到與動(dòng)作輔助信息中所包括的動(dòng)作項(xiàng)目相對(duì)應(yīng)的動(dòng)作之一,則控制單元140執(zhí)行與識(shí)別到的動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。具體來說,如果通過語音識(shí)別模塊130k識(shí)別到語音啟動(dòng)命令,則控制單元140可以控制以顯示關(guān)于可由用戶語音控制的語音任務(wù)的語音項(xiàng)目。語音項(xiàng)目可以顯示與各種語音任務(wù)相對(duì)應(yīng)的命令。因此,如果用戶說出某一命令,則用戶可以很容易地識(shí)別出哪個(gè)語音任務(wù)將被執(zhí)行,從而可以更容易地執(zhí)行該語音任務(wù)。
如果通過動(dòng)作識(shí)別模塊1301識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140可以控制以顯示關(guān)于可由用戶動(dòng)作控制的動(dòng)作任務(wù)的動(dòng)作項(xiàng)目。語音項(xiàng)目可以顯示與各種動(dòng)作任務(wù)相對(duì)應(yīng)的動(dòng)作。因此,如果用戶執(zhí)行某一動(dòng)作,則用戶可以很容易地識(shí)別哪個(gè)動(dòng)作任務(wù)將被執(zhí)行,從而可以更容易地執(zhí)行該動(dòng)作任務(wù)。語音項(xiàng)目或動(dòng)作項(xiàng)目可以顯示在顯示屏幕的同一區(qū)域(例如,屏幕的下部)上。顯示語音項(xiàng)目或動(dòng)作項(xiàng)目的區(qū)域可以與所顯示的圖像重疊。然而,這僅僅是示例,而且語音項(xiàng)目和動(dòng)作項(xiàng)目可以在其他位置顯示或者以其他方法顯示。例如,語音項(xiàng)目或動(dòng)作項(xiàng)目可以顯示在顯示屏幕的右部或左部。電子設(shè)備100的任務(wù)可以被劃分為如下的由用戶語音控制的語音任務(wù)和由用戶動(dòng)作控制的動(dòng)作任務(wù)[表I]
語音任務(wù)電源控制、頻道快捷切換、音量等級(jí)設(shè)置、靜音、外部輸 入改變、搜索、功能運(yùn)行(如果對(duì)象名稱是明確的)、功
__能取消、文本輸入_
動(dòng)作任務(wù)頻道改變、音量等級(jí)控制、功能運(yùn)行(如果對(duì)象名稱是不 __明確的)、重現(xiàn)控制、滑動(dòng)條控制、光標(biāo)指向_表I中所示的語音任務(wù)可以在語音啟動(dòng)命令運(yùn)行的語音任務(wù)模式中執(zhí)行,而且表I中所示的動(dòng)作任務(wù)可以在由動(dòng)作啟動(dòng)命令運(yùn)行的動(dòng)作任務(wù)模式中執(zhí)行。下文中,將參照?qǐng)D6至圖32解釋按照用戶語音進(jìn)行控制的語音任務(wù),并且將參照?qǐng)D33至圖58解釋按照用戶動(dòng)作進(jìn)行控制的動(dòng)作任務(wù)。圖6和圖7是根據(jù)示范性實(shí)施例的、解釋使用語音識(shí)別接通電源的視圖。如圖6所示,在圖像不被輸出但電源被提供給語音輸入單元110和控制單元140的待機(jī)模式中,如果通過語音識(shí)別模塊130k識(shí)別到“接通電源”,則電子設(shè)備100如圖7所示被開啟。圖8至圖10是根據(jù)示范性實(shí)施例的、解釋使用語音識(shí)別關(guān)閉電源的視圖。如圖8所示,如果電子設(shè)備100進(jìn)入語音任務(wù)模式并在顯示屏幕的下部顯示語音輔助信息,而且通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目811相對(duì)應(yīng)的“關(guān)閉電源”,則電子設(shè)備100顯示指導(dǎo)區(qū)域920以通過語音指導(dǎo)信息再次確認(rèn)是否關(guān)閉電子設(shè)備100,如圖9所示。如果通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目922相對(duì)應(yīng)的“是”,則電子設(shè)備100如圖10所示被關(guān)閉。圖11和圖12是根據(jù)示范性實(shí)施例的、解釋使用語音識(shí)別智能接通電源(smartpower on)的視圖。智能接通電源是開啟電子設(shè)備100并且同時(shí)將當(dāng)前頻道改變?yōu)橛脩羝谕念l道的功能。如圖11所示,在圖像不被輸出但電源被提供給語音輸入單元110和控制單元140的待機(jī)模式中,如果通過語音識(shí)別模塊130k連續(xù)識(shí)別到“Ginny”和“頻道6”,則電子設(shè)備100被開啟并顯示頻道6,如圖12所示。圖13至圖16是根據(jù)示范性實(shí)施例的、解釋使用包括頻道號(hào)碼的語音識(shí)別進(jìn)行頻道快捷切換的視圖。如圖13所示,如果電子設(shè)備100進(jìn)入語音任務(wù)模式并在顯示屏幕的下部顯示語音輔助信息,而且通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目812相對(duì)應(yīng)的“頻道”,則如圖14所示,電子設(shè)備100顯示指導(dǎo)區(qū)域830以通過在顯示屏幕下端的語音輔助信息來指導(dǎo)頻道號(hào)碼和頻道名稱。如果顯示指導(dǎo)區(qū)域830而且通過語音識(shí)別模塊130k識(shí)別到語音“七”,則電子設(shè)備100改變頻道以調(diào)諧到頻道7。如果存在包括通過語音識(shí)別模塊130k識(shí)別到的“七”的頻道或者存在類似“七”的候選組,則電子設(shè)備100顯示語音候選組1100的列表和候選組選擇指導(dǎo)1510,以便指導(dǎo)輸入語音候選組的方法,如圖15所示。如果顯示了語音候選組1100的列表并且通過語音識(shí)別模塊130k識(shí)別到與語音候選組列表上的一個(gè)項(xiàng)目1101的號(hào)碼相對(duì)應(yīng)的“號(hào)碼1”,則電子設(shè)備100調(diào)諧到頻道7,如圖16所示。圖17至圖20是根據(jù)示范性實(shí)施例的、解釋使用包括頻道名稱的語音識(shí)別進(jìn)行頻道快捷切換的視圖。如圖17所示,如果電子設(shè)備100進(jìn)入語音任務(wù)模式并在顯示屏幕的·下部顯示語音輔助信息,而且通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目812相對(duì)應(yīng)的“頻道”,則如圖18所示,電子設(shè)備100顯示指導(dǎo)區(qū)域830以便通過語音輔助信息來指導(dǎo)頻道號(hào)碼和頻道名稱。如果顯示指導(dǎo)區(qū)域830而且通過語音識(shí)別模塊130k識(shí)別到語音“MBC”,則電子設(shè)備100調(diào)諧到具有頻道名稱“MBC”的頻道11,如圖20所示。如果存在包括通過語音識(shí)別模塊130k識(shí)別的語音“MBC”的頻道或者存在類似“MBC”的候選組,則電子設(shè)備100顯示語音候選組1900的列表和候選組選擇指導(dǎo)1910,以便指導(dǎo)輸入語音候選組的方法,如圖19所示。如果顯示了語音候選組1900的列表并且通過語音識(shí)別模塊130k識(shí)別到與語音候選組1900的列表上的一個(gè)項(xiàng)目1901的號(hào)碼相對(duì)應(yīng)的語音“號(hào)碼11”,則電子設(shè)備100調(diào)諧到具有頻道名稱“MBC”的頻道11,如圖20所示。圖21至圖23是根據(jù)示范性實(shí)施例的解釋使用語音識(shí)別來靜音的視圖。如圖21所示,如果在顯示屏幕的下部顯示語音輔助信息而且通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目813相對(duì)應(yīng)的“靜音”,則電子設(shè)備100控制音頻輸出單元196不輸出音頻。此外,如圖22所示,電子設(shè)備100在顯示屏幕上顯示靜音圖標(biāo)2200。在這個(gè)時(shí)候,指導(dǎo)區(qū)域2210顯示取消靜音2213命令,而不是靜音813命令。如果通過語音識(shí)別模塊130k識(shí)別到“取消靜音”,則電子設(shè)備100控制音頻輸出單元196按照在靜音之前有效的先前等級(jí)輸出音頻。此外,如圖23所示,電子設(shè)備100刪除顯示屏幕上的靜音圖標(biāo)2200。圖24至圖26是根據(jù)示范性實(shí)施例的解釋使用語音識(shí)別進(jìn)行外部輸入變化的視圖。如圖24所示,如果電子設(shè)備100進(jìn)入語音任務(wù)模式并在顯示屏幕的下部顯示語音輔助信息,而且通過語音識(shí)別模塊130k識(shí)別到與語音項(xiàng)目814相對(duì)應(yīng)的“外部輸入”,則如圖25所不,電子設(shè)備100顯不外部輸入列表2500和指導(dǎo)2510以便指導(dǎo)如何選擇外部輸入。外部輸入列表2500清晰地顯示連接到外部端子輸入單元160的USB外部端子、AVl外部端子、PC機(jī)外部端子,而且模糊地顯示沒有連接到外部端子輸入單元160的HDMI I和HDMI 2。如果顯示了外部輸入列表2500并且通過語音識(shí)別模塊130k識(shí)別到語音“PC”,則電子設(shè)備100在顯示屏幕上顯示與外部輸入“PC”的連接狀態(tài)。圖27和圖29是示出根據(jù)示范性實(shí)施例的具有將被說出的明確名稱的功能運(yùn)行任務(wù)的視圖。如圖27所示,如果輸入了顯示執(zhí)行智能功能(例如,訪問互聯(lián)網(wǎng)的功能、運(yùn)行應(yīng)用的功能、重現(xiàn)運(yùn)動(dòng)圖像的功能和聽音樂的功能)的內(nèi)容列表的用戶命令,則顯示智能中心2700。智能中心2700是用作由電子設(shè)備100支持的功能的中心的UI,而且是顯示與由電子設(shè)備100支持的多個(gè)功能(例如,觀看視頻的功能、聽音樂的功能、和訪問互聯(lián)網(wǎng)的功能)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的Π。此外,智能中心2700是顯示與電子設(shè)備100的存儲(chǔ)單元130中所存儲(chǔ)的內(nèi)容(例如,照片、音樂和視頻)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、與從外部源接收到的內(nèi)容(例如,照片、音樂和視頻)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、以及與可連接到外部的應(yīng)用(例如,互聯(lián)網(wǎng)瀏覽器)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的UI。如果通過語音識(shí)別模塊130k識(shí)別到“Ginny”以進(jìn)入語音任務(wù)模式,則電子設(shè)備100在顯示屏幕的下部顯示語音⑶I而且進(jìn)入語音任務(wù)模式,如圖28所示。當(dāng)進(jìn)入語音任務(wù)模式時(shí),電子設(shè)備100將智能中心2700的可運(yùn)行圖標(biāo)的名稱加下劃線(underline),從而智能中心2700顯示可通過用戶語音選擇的可運(yùn)行圖標(biāo)。如圖28所示,如果顯示語音輔助信息而且通過語音識(shí)別模塊130k識(shí)別到語音“您的視頻”,則電子設(shè)備100運(yùn)行智能中心2700的“您的視頻”中所包括的運(yùn)動(dòng)圖像,如圖29 所示。如果在“您的視頻”中包括一個(gè)運(yùn)動(dòng)圖像,則該運(yùn)動(dòng)圖像被立即運(yùn)行,如果在“您的視頻”中包括多個(gè)運(yùn)動(dòng)圖像,則顯示“您的視頻”中所包括的運(yùn)動(dòng)圖像的列表。圖30至圖32是根據(jù)示范性實(shí)施例的、解釋使用語音識(shí)別進(jìn)行圖像重現(xiàn)功能和圖像停止功能的視圖。如圖30所示,如果重現(xiàn)圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像)而且通過語音識(shí)別模塊130k識(shí)別到“Ginny”以進(jìn)入語音任務(wù)模式,則電子設(shè)備100進(jìn)入語音任務(wù)模式并且在顯示屏幕的下部顯示語音輔助信息,如圖31所示。在這種狀態(tài)下,如果通過語音識(shí)別模塊130k識(shí)別到“暫停”,則電子設(shè)備100暫時(shí)停止重現(xiàn)當(dāng)前圖像,并在顯示屏幕上顯示暫停圖標(biāo),如圖32所示。通過語音識(shí)別模塊130k識(shí)別到“回放”,則電子設(shè)備100重現(xiàn)已暫停的圖像,如圖31所示。當(dāng)圖像被重現(xiàn)時(shí)暫停/停止命令可以被顯示在語音輔助信息上,當(dāng)圖像被暫停時(shí)重現(xiàn)命令可以被顯示。如上所述,因?yàn)榘凑胀ㄟ^語音識(shí)別模塊130k識(shí)別到的用戶語音進(jìn)行控制的語音任務(wù)是具有可說出的標(biāo)識(shí)符的任務(wù)或者需要文本輸入的任務(wù),所以用戶可以通過他/她的語音來更容易和更方便地控制語音任務(wù)。圖33和圖34是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行頻道改變的視圖。如圖33所示,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式并在顯示屏幕的下部顯示動(dòng)作輔助信息,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的向右移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100調(diào)諧到當(dāng)前頻道的下一個(gè)頻道,S卩,從當(dāng)前頻道6增加I的頻道7,如圖34所示。另一方面,如果如圖34所示顯示頻道7而且識(shí)別到與動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的向左移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100調(diào)諧到前一個(gè)頻道,即,該頻道從當(dāng)前頻道7減少I的頻道6,如圖33所示。圖35至圖37是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行音量等級(jí)控制的視圖。如圖35所示,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式并在顯示屏幕的下部顯示動(dòng)作輔助信息,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3312相對(duì)應(yīng)的向上移動(dòng)用戶的手的拍動(dòng)作,則電子設(shè)備100顯示音量等級(jí)控制條3600 (其顯示音量等級(jí))并且輸出具有從當(dāng)前音量等級(jí)9增加一個(gè)等級(jí)的下一個(gè)等級(jí)10的音量,如圖36所示。如果在音量等級(jí)控制條3600已經(jīng)顯示之后的預(yù)定時(shí)間(例如5秒)內(nèi)沒有識(shí)別到用戶動(dòng)作,則控制單元140可以從顯示屏幕上移除音量等級(jí)控制條3600,并且按照控制后的音量等級(jí)輸出音頻。圖38至圖41是根據(jù)示范性實(shí)施例的、解釋使用用戶的指向動(dòng)作進(jìn)行頻道改變的視圖。如果用戶輸入生成頻道列表3800的命令(例如,遙控器上的頻道列表按鈕)以選擇頻道而且頻道列表3800如圖38所示顯示在顯示屏幕上,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的動(dòng)作(例如,搖動(dòng)用戶的手3到4次),則電子設(shè)備100生成光標(biāo)3910并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖39所示。如果顯示了動(dòng)作輔助信息而且通過動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向左下方向移動(dòng)手的動(dòng)作以移動(dòng)光標(biāo)3910的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)2010移動(dòng)到“11-1MBC”,如圖40所示。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目3314相對(duì)應(yīng)的抓動(dòng)作,則電子設(shè)備100調(diào)諧到“11-1MBC”并顯示頻道“11-1MBC”,如圖41所示。 圖42至圖45是根據(jù)示范性實(shí)施例的、解釋使用用戶的指向動(dòng)作進(jìn)行應(yīng)用運(yùn)行的視圖。如果如圖42所示在顯示屏幕上顯示智能中心,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的動(dòng)作(例如,搖動(dòng)用戶的手3到4次),則電子設(shè)備100生成并顯示光標(biāo)4305并且在顯示屏幕的下部顯示動(dòng)作輔助信息4310,如圖43所示。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向左下方向移動(dòng)手的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)4305移動(dòng)到“APP 2”,如圖44所示。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到與動(dòng)作項(xiàng)目4311相對(duì)應(yīng)的抓動(dòng)作,則電子設(shè)備100運(yùn)行“應(yīng)用2 (APP 2) ”,如圖45所示。在這個(gè)時(shí)候,電子設(shè)備100可以顯示指示運(yùn)行所選擇的應(yīng)用的屏幕,而顯示智能中心的屏幕,如圖45所示。然而,這僅僅是示例,電子設(shè)備100可以在智能中心上的、比智能中心小的屏幕上顯示該應(yīng)用的運(yùn)行。圖46至圖48是根據(jù)示范性實(shí)施例的、解釋使用用戶動(dòng)作進(jìn)行在智能中心的應(yīng)用顯示區(qū)域上進(jìn)行導(dǎo)航的視圖。如果如圖46所示在顯示屏幕上顯示智能中心,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成光標(biāo)4710并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖47所示。如果光標(biāo)4710位于可導(dǎo)航的區(qū)域(例如,顯示向左和向右移動(dòng)方向鍵4713和4716的區(qū)域),而且通過動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置向右移動(dòng)手的拍動(dòng)作,則電子設(shè)備100移動(dòng)應(yīng)用顯示區(qū)域4720,在該區(qū)域中,光標(biāo)4710位于向左的方向,如圖48所示。圖49至圖52是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別運(yùn)行具有不明確的(indefinite)名稱的圖標(biāo)的視圖。如果如圖49所示在顯示屏幕上顯示網(wǎng)頁屏幕,而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成光標(biāo)5005并且在顯示屏幕的下部顯示動(dòng)作輔助信息5010,如圖50所示。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到從當(dāng)前位置在左上方向移動(dòng)手以移動(dòng)光標(biāo)5005的動(dòng)作,則電子設(shè)備100按照該動(dòng)作將光標(biāo)5005移動(dòng)到圖標(biāo)“書簽”,如圖51所示。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到抓動(dòng)作,則電子設(shè)備100顯示書簽的運(yùn)行5220,其指示當(dāng)前顯示在顯示屏幕上的網(wǎng)頁的書簽,如圖52所示。圖53至圖55是根據(jù)示范性實(shí)施例的、解釋使用動(dòng)作識(shí)別進(jìn)行重現(xiàn)控制任務(wù)的視圖。如果如圖53所示在顯示屏幕上顯示內(nèi)容圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像或從外部源接收到的運(yùn)動(dòng)圖像),而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成重現(xiàn)控制條5410并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖54所示。在這個(gè)時(shí)候,如果識(shí)別到動(dòng)作啟動(dòng)命令,則重現(xiàn)控制條5410顯示在顯示屏幕上。如果接收到額外的用戶輸入(例如,遙控器按鈕),則重現(xiàn)控制條5410可以顯示在顯示屏幕上。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到向左方向的拍動(dòng)作,則電子設(shè)備100從當(dāng)前圖像100向后跳過預(yù)定時(shí)間(例如,10分鐘)并重現(xiàn)圖像。預(yù)定時(shí)間可以通過配置來改變。圖56至圖58是根據(jù)示范性實(shí)施例的、解釋使用另一個(gè)動(dòng)作識(shí)別進(jìn)行重現(xiàn)控制任務(wù)的視圖。如果如圖56所示在顯示屏幕上顯示圖像(例如,存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像或從外部源接收到的運(yùn)動(dòng)圖像),而且通過動(dòng)作識(shí)別模塊1301識(shí)別到進(jìn)入動(dòng)作任務(wù)模式的搖動(dòng)手3到4次的動(dòng)作,則電子設(shè)備100生成重現(xiàn)控制條5710并且在顯示屏幕的下部顯示動(dòng)作輔助信息,如圖57所示。在這個(gè)時(shí)候,如果識(shí)別到動(dòng)作啟動(dòng)命令,則重現(xiàn)控制條5710顯示在顯示屏幕上。如果接收到額外的用戶輸入(例如,遙控器按鈕),則重現(xiàn)控制條5710可以顯示在顯示屏幕上。 如果通過動(dòng)作識(shí)別模塊1301識(shí)別到抓動(dòng)作,則電子設(shè)備100選擇指示當(dāng)前重現(xiàn)位置的圖標(biāo)5715,而且如果后來通過動(dòng)作識(shí)別模塊1301識(shí)別到向左方向的移動(dòng)動(dòng)作,則電子設(shè)備100返回到與該向左方向的移動(dòng)動(dòng)作所對(duì)應(yīng)的預(yù)定時(shí)間一樣多的位置。圖標(biāo)5715也向后移動(dòng)與該向左方向的移動(dòng)動(dòng)作一樣多的距離。如果通過動(dòng)作識(shí)別模塊1301識(shí)別到釋放抓的動(dòng)作(例如,張開手的動(dòng)作),則電子設(shè)備100從圖標(biāo)5715移動(dòng)回到的位置重現(xiàn)圖像,如圖58所示。然而,這僅僅是示例。如果在抓之后識(shí)別到向右方向的移動(dòng)動(dòng)作,則電子設(shè)備100前進(jìn)與該向右方向的移動(dòng)動(dòng)作所對(duì)應(yīng)的預(yù)定時(shí)間。圖標(biāo)5715也向前移動(dòng)與該向右方向的移動(dòng)動(dòng)作一樣多的距離。如上所述,因?yàn)榘凑胀ㄟ^動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作進(jìn)行控制的動(dòng)作任務(wù)是其設(shè)置值被分階段改變的任務(wù)或使用光標(biāo)的任務(wù),所以用戶可以更容易和更方便地控制動(dòng)作任務(wù)。圖59和圖60是示出根據(jù)各種示范性實(shí)施例的、用于控制電子設(shè)備的方法的流程圖,該電子設(shè)備通過將整個(gè)任務(wù)劃分為動(dòng)作任何和語音任務(wù)來控制整個(gè)任務(wù)。圖59是根據(jù)示范性實(shí)施例的、解釋用于控制電子設(shè)備100的方法的流程圖。電子設(shè)備100識(shí)別用戶語音或用戶動(dòng)作(S5910)。用戶語音通過麥克風(fēng)輸入并且由語音識(shí)別模塊識(shí)別,用戶動(dòng)作由照相機(jī)拍攝并由動(dòng)作識(shí)別模塊識(shí)別。如果通過語音識(shí)別模塊或動(dòng)作識(shí)別模塊之一識(shí)別到用戶輸入,則電子設(shè)備100按照用戶輸入執(zhí)行語音任務(wù)或動(dòng)作任務(wù)之一(S5920)。語音任務(wù)是控制電子設(shè)備100的任務(wù)當(dāng)中的、包括對(duì)應(yīng)于用戶語音的標(biāo)識(shí)符的任務(wù),而且動(dòng)作任務(wù)是控制電子設(shè)備100的任務(wù)當(dāng)中的、按照用戶動(dòng)作分階段執(zhí)行的任務(wù)。如上所述,用戶可以使用語音和動(dòng)作來更高效地控制電子設(shè)備100。圖60是根據(jù)示范性實(shí)施例的、解釋用于控制電子設(shè)備的方法的流程圖。電子設(shè)備100通過語音識(shí)別模塊和動(dòng)作識(shí)別模塊之一識(shí)別啟動(dòng)命令(S6005)。啟動(dòng)命令可以是通過語音識(shí)別模塊識(shí)別到的語音啟動(dòng)命令,或者是通過動(dòng)作識(shí)別模塊識(shí)別到的動(dòng)作啟動(dòng)命令。
如果識(shí)別到的啟動(dòng)命令是語首啟動(dòng)命令(S6010-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S6015)。語音任務(wù)模式是按照通過語音識(shí)別模塊識(shí)別到的用戶語音執(zhí)行任務(wù)的模式。如果將模式改變?yōu)檎Z音任務(wù)模式,則電子設(shè)備100生成包括語音項(xiàng)目的語音輔助信息(S6020)。例如,如圖61所示,顯示了包括用于執(zhí)行語音任務(wù)的語音項(xiàng)目的語音輔助信
肩、O在語音任務(wù)模式中,電子設(shè)備100確定是否識(shí)別到用戶語音(S6030)。如果確定識(shí)別到用戶語音(S6030-是),則電子設(shè)備執(zhí)行與識(shí)別到的用戶語音相對(duì)應(yīng)的語音任務(wù)(S6035)。例如,按照以上參照?qǐng)D6至圖32所解釋的方式來執(zhí)行語音任務(wù)。語音任務(wù)可以包括電子設(shè)備的電源控制、頻道快捷切換、音量等級(jí)設(shè)置、靜音、夕卜部端子改變、文本輸入以及回放/停止功能中的至少一個(gè)。 在語音任務(wù)模式中確定是否識(shí)別到動(dòng)作啟動(dòng)命令(S6040)。如果識(shí)別到動(dòng)作啟動(dòng)命令(S6040-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S6045)。例如,如果在語音任務(wù)模式中識(shí)別到動(dòng)作啟動(dòng)命令,則電子設(shè)備100將模式改變?yōu)閯?dòng)作任務(wù)模式,并顯示包括動(dòng)作項(xiàng)目的動(dòng)作輔助信息,如圖62所示。如果沒有識(shí)別到動(dòng)作啟動(dòng)命令(S6040-否),則電子設(shè)備100保持當(dāng)前任務(wù)模式,即,語音任務(wù)模式(S6070 )。如果最初識(shí)別到的啟動(dòng)命令是動(dòng)作啟動(dòng)命令而不是語音啟動(dòng)命令(S6010-否),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S6045)。動(dòng)作任務(wù)模式是僅由通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作來控制任務(wù)的模式。如果電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,則電子設(shè)備100生成包括動(dòng)作項(xiàng)目的動(dòng)作輔助信息(S6050)。例如,如圖62所示,顯示了包括用于控制動(dòng)作任務(wù)的動(dòng)作項(xiàng)目的動(dòng)作輔助信息。電子設(shè)備100確定是否識(shí)別到用戶動(dòng)作(S6055 )。如果確定識(shí)別到用戶動(dòng)作(S6055-是),則電子設(shè)備100執(zhí)行與識(shí)別到的用戶動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)(S6060)。例如,按照以上參照?qǐng)D33至圖58所解釋的方式來執(zhí)行動(dòng)作任務(wù)。動(dòng)作任務(wù)可以包括頻道改變、音量等級(jí)控制、屏幕導(dǎo)航、滑動(dòng)條控制和光標(biāo)指向中的至少一個(gè)。在動(dòng)作任務(wù)模式中確定是否識(shí)別到語音啟動(dòng)命令(S6065),而且如果識(shí)別到語音啟動(dòng)命令(S6065-是),則電子設(shè)備100將模式改變?yōu)檎Z音任務(wù)模式(S6010)。例如,如果在動(dòng)作任務(wù)模式中確定識(shí)別到語音啟動(dòng)命令,則電子設(shè)備100將模式改變?yōu)檎Z音任務(wù)模式,并顯示包括語音項(xiàng)目的語音輔助信息,如圖60所示。如果沒有識(shí)別到語音啟動(dòng)命令(S6040-否),則電子設(shè)備100保持當(dāng)前任務(wù)模式,即,動(dòng)作任務(wù)模式(S6070)。如上所述,電子設(shè)備100能夠按照用戶動(dòng)作或用戶語音來執(zhí)行各種任務(wù),因此能夠提高用戶便利性。在按照識(shí)別到的語音執(zhí)行語音任務(wù)中的至少一個(gè)的語音任務(wù)模式中,控制單元140可以進(jìn)行控制以顯示用于執(zhí)行語音任務(wù)的語音輔助信息。例如,如果通過語音識(shí)別模塊識(shí)別到語音啟動(dòng)命令,則控制單元140可以控制以顯示用于執(zhí)行可按照用戶語音控制的語音任務(wù)語音輔助信息。與各種語音任務(wù)相對(duì)應(yīng)的至少一個(gè)語音項(xiàng)目可以顯示為語音輔助信息。至少一個(gè)語音項(xiàng)目可以是可說出得命令。因此,用戶可以在語音任務(wù)模式中容易地辨認(rèn)出(identify)可識(shí)別的命令。另外,如果說出了相應(yīng)命令,則用戶可以容易地識(shí)別哪個(gè)語首任務(wù)將被執(zhí)行。在語音任務(wù)模式中,控制單元140可以識(shí)別出與顯示為語音輔助信息的至少一個(gè)語音項(xiàng)目當(dāng)中的第一語音項(xiàng)目相對(duì)應(yīng)的第一語音??刂茊卧?40確定關(guān)于與識(shí)別到的第一語音相對(duì)應(yīng)的第一語音項(xiàng)目的附加項(xiàng)目信息是否存在。如果附加項(xiàng)目信息不存在,則控制單元140可以執(zhí)行與第一語音項(xiàng)目相對(duì)應(yīng)的任務(wù)。如果需要改變語音輔助信息,則控制單元140可以控制顯示單元(未示出)顯示改變的語音輔助信息。如果附加項(xiàng)目信息存在,則控制單元140可以進(jìn)行控制以顯示關(guān)于與識(shí)別到的第一語音相對(duì)應(yīng)的第一語音項(xiàng)目的附加項(xiàng)目信息??刂茊卧?40可以識(shí)別出與附加項(xiàng)目信息相對(duì)應(yīng)的第二語音??刂茊卧?40可以執(zhí)行語音任務(wù)當(dāng)中與第一語音項(xiàng)目和第二語音相對(duì)應(yīng)的任務(wù)。在按照識(shí)別到的動(dòng)作執(zhí)行動(dòng)作任務(wù)中的至少一個(gè)的動(dòng)作任務(wù)模式中,控制單元140可以進(jìn)行控制以顯示用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。例如,如果通過動(dòng)作識(shí)別模塊識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140可以進(jìn)行控制以顯示用于執(zhí)行可按照用戶動(dòng)作控制的動(dòng)作任務(wù)的動(dòng)作輔助信息。與各種動(dòng)作任務(wù)相對(duì)應(yīng)的至少一個(gè)動(dòng)作項(xiàng)目可以顯示為動(dòng)作輔助信息。至少一個(gè)動(dòng)作項(xiàng)目可以包括指示在動(dòng)作任務(wù)模式中可識(shí)別的動(dòng)作以及與該可識(shí)別的動(dòng)作相對(duì)應(yīng)的任務(wù)的動(dòng)作圖像。因此,用戶能夠在動(dòng)作任務(wù)模式中容易地辨認(rèn)出可識(shí)別的動(dòng)作,并且能夠容易地識(shí)別出根據(jù)用戶執(zhí)行的動(dòng)作將執(zhí)行哪個(gè)動(dòng)作任務(wù)。因此,用戶能夠容易地執(zhí)行動(dòng)作任務(wù)。在動(dòng)作任務(wù)模式中,控制單元140可以識(shí)別與顯示為動(dòng)作輔助信息的至少一個(gè)動(dòng)作項(xiàng)目當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作??刂茊卧?40可以確定關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息是否存在。如果附加項(xiàng)目信息不存在,則控制單元140可以執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)。另外,如果需要改變動(dòng)作輔助信息,則控制單元140可以控制顯示單元(未示出)顯示改變的動(dòng)作輔助信息。如果附加項(xiàng)目信息存在,則控制單元140可以進(jìn)行控制以顯示關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息??刂茊卧?40可以識(shí)別出與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作??刂茊卧?40可以執(zhí)行動(dòng)作任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別出的第二動(dòng)作相對(duì)應(yīng)的任務(wù)。語音輔助信息、動(dòng)作輔助信息、關(guān)于語音項(xiàng)目的附加項(xiàng)目信息或關(guān)于動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以顯示在顯示屏幕的相同區(qū)域(下部)上。上述信息可以顯示在預(yù)先設(shè)定的區(qū)域或可動(dòng)態(tài)變化的區(qū)域上。例如,語音輔助信息或動(dòng)作輔助信息可以顯示在顯示屏幕的上部、下部、右部或左部,并且可以根據(jù)屏幕上顯示的圖像動(dòng)態(tài)地變化。語音輔助信息、動(dòng)作輔助信息、關(guān)于語音項(xiàng)目的附加項(xiàng)目信息或關(guān)于動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以與所顯示或重現(xiàn)的圖像、應(yīng)用、0SD、或識(shí)別候選(recognitioncandidate) 一起顯示,或者可以單獨(dú)地顯示。顯示上述信息的區(qū)域可以與顯示圖像、應(yīng)用、0SD、或識(shí)別候選的區(qū)域重疊。語音輔助信息或動(dòng)作輔助信息的至少一部分可以透明或半透明地顯示。透明度可以根據(jù)用戶選擇進(jìn)行調(diào)整。上述語音輔助信息和動(dòng)作輔助信息可以以各種形式提供給用戶。下文中,將參照?qǐng)D61至63詳細(xì)解釋語音輔助信息、關(guān)于語音項(xiàng)目的附加項(xiàng)目信息和動(dòng)作輔助信息。圖61是示出根據(jù)示范性實(shí)施例的、在語音任務(wù)模式中在顯示單元193上顯示的語
20音輔助信息的視圖。如圖61所示,顯示單元193可以在語音任務(wù)模式中顯示至少一個(gè)語音項(xiàng)目811、
812、813、814、815、816、817和818作為語音輔助信息。每個(gè)語音項(xiàng)目都可以是可說出的命令。此外,指導(dǎo)輔助信息可以包括指示語音任務(wù)模式的模式圖像或文本。語音輔助信息可以包括指導(dǎo)區(qū)域810或模式顯示區(qū)域820,指導(dǎo)區(qū)域810包括至少一個(gè)語音項(xiàng)目,模式顯示區(qū)域820顯示電子設(shè)備100的所指定的模式(例如,語音任務(wù)模式或動(dòng)作任務(wù)模式)。模式顯示區(qū)域820可以包括指示語音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式的模式圖像或文本中的至少一個(gè)。另外,指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以如圖61所示區(qū)別地顯示,或者可以不繪制在兩個(gè)區(qū)域之間的邊界的情況下顯示。模式顯示區(qū)域820可以省略。指導(dǎo)區(qū)域810和模式顯示區(qū)域820中每一個(gè)的位置可以在制造電子設(shè)備100時(shí)設(shè)置或者可以由用戶任意設(shè)置,或者指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以根據(jù)與UI 一起顯示的圖像動(dòng)態(tài)地放置。例如,如果顯示0SD,則指導(dǎo)區(qū)域810和模式顯示區(qū)域820中每一個(gè)的位置可以改變?yōu)轱@示OSD的區(qū)域以外的某一位置,從而突出顯示0SD。指導(dǎo)區(qū)域810可以在顯示屏幕的下部顯示,而且模式顯示區(qū)域820可以在顯示屏幕的下部中心處顯示。此外,模式顯示區(qū)域820的位置可以根據(jù)配置改變到獨(dú)立于指導(dǎo)區(qū)域810的另一個(gè)位置,諸如右下部。在語音任務(wù)模式中,指導(dǎo)區(qū)域810可以包括至少一個(gè)語音項(xiàng)目811、812、813、814、815、816、817和818。例如,至少一個(gè)語音項(xiàng)目中的每一個(gè)可以是執(zhí)行語音任務(wù)的命令。指導(dǎo)區(qū)域810中包括的至少一個(gè)命令可以包括關(guān)閉電源811、頻道812、靜音813、外部輸入814、智能中心815、應(yīng)用816、搜索817或全部818。關(guān)閉電源811是關(guān)閉電子設(shè)備100的命令。頻道812是執(zhí)行頻道快捷切換的命令。靜音813是執(zhí)行靜音的命令。外部輸入814是改變外部輸入的命令。智能中心815是執(zhí)行進(jìn)入智能功能的任務(wù)的命令,智能功能例如是電子設(shè)備100的互聯(lián)網(wǎng)功能、應(yīng)用提供功能和多媒體(例如,運(yùn)動(dòng)圖像、音樂和照片)提供功能。應(yīng)用816是執(zhí)行搜索電子設(shè)備100的應(yīng)用的任務(wù)的命令。搜索817是執(zhí)行由電子設(shè)備100提供的搜索內(nèi)容、應(yīng)用和網(wǎng)絡(luò)的命令。全部818是顯示所有命令的命令。指導(dǎo)區(qū)域810可以包括“更多”命令來代替全部818。也就是說,全部818和“更多”可以是用于顯示與語音任務(wù)相對(duì)應(yīng)的語音項(xiàng)目當(dāng)中的、除了至少一個(gè)語音項(xiàng)目811、812、813、814、815、816、817和818以外的其他項(xiàng)目的語音項(xiàng)目。此外,如果電子設(shè)備100顯示其他項(xiàng)目,則電子設(shè)備100可以配置為不使用預(yù)先設(shè)定的計(jì)時(shí)器。預(yù)先設(shè)定的計(jì)時(shí)器是在預(yù)先設(shè)定的時(shí)間內(nèi)沒有識(shí)別到所顯示的語音項(xiàng)目811、812、813、814、815、816、817和818中的至少一個(gè)的情況下停止語音任務(wù)模式的計(jì)時(shí)器。如果停止語音任務(wù)模式,則語音輔助信息可以消失,而且模式可以改變?yōu)殡娮釉O(shè)備100由通用遙控器控制的模式。另外,如果停止語音任務(wù)模式,則語音任務(wù)的執(zhí)行可能受到限制,直至電子設(shè)備100根據(jù)語音啟動(dòng)命令重新進(jìn)入語音任務(wù)模式為止。此外,如果在屏幕上與語音輔助信息、動(dòng)作輔助信息和附加項(xiàng)目信息一起顯示OSD或識(shí)別候選,則與所指定的模式無關(guān),用于停止所指定的模式的預(yù)先設(shè)定的計(jì)時(shí)器可能無法被驅(qū)動(dòng)。此外,指導(dǎo)區(qū)域810可以包括除了上述命令以外的其他命令。顯示為語音輔助信息的至少一個(gè)語音項(xiàng)目811、812、813、814、815、816、817和818可以根據(jù)當(dāng)前執(zhí)行的功能來不同地配置。也就是說,指導(dǎo)區(qū)域810上顯示的至少一個(gè)命令可以根據(jù)當(dāng)前執(zhí)行的功能來不同地配置。具體來說,與語音任務(wù)相對(duì)應(yīng)的語音項(xiàng)目中的至少一個(gè)可以根據(jù)與語音輔助信息一起顯示的應(yīng)用、OSD和候選中的至少一個(gè)來選擇性地配置。例如,如果電子設(shè)備100當(dāng)前執(zhí)行智能功能,則可以顯示包括用于返回廣播接收功能的命令“返回”的語音輔助信息。識(shí)別候選可以包括具有與識(shí)別到的語音相似的號(hào)碼或文本中的至少一個(gè)的名稱、與識(shí)別到的語音相似的命令、與相似命令相對(duì)應(yīng)的任務(wù)、與識(shí)別到的動(dòng)作相似的動(dòng)作、以及與相似動(dòng)作相對(duì)應(yīng)的任務(wù)中的至少一個(gè)。例如,與識(shí)別到的語音相似的候選可以在彈出窗口中顯示與識(shí)別到的語音相似的頻道標(biāo)識(shí)符的列表。OSD可以包括電子設(shè)備100的當(dāng)前設(shè)置信息、以及除了識(shí)別候選以外的電子設(shè)備100的設(shè)置菜單。例如,可 以顯示當(dāng)前頻道的標(biāo)識(shí)符(頻道號(hào)碼或頻道名稱)作為0SD,或者可以顯示外部輸入列表或頻道列表作為0SD??刂茊卧?40可以識(shí)別出與顯示為語音輔助信息的至少一個(gè)語音項(xiàng)目811、812、
813、814、815、816、817和818當(dāng)中的第一語音項(xiàng)目相對(duì)應(yīng)的第一語音??刂茊卧?40可以進(jìn)行控制以顯示關(guān)于與識(shí)別到的第一語音相對(duì)應(yīng)的第一語音項(xiàng)目的附加項(xiàng)目信息。關(guān)于第一語音項(xiàng)目的附加項(xiàng)目信息可以包括關(guān)于第一語音項(xiàng)目的附加命令、指導(dǎo)消息或話語示例(utterance example)。例如,如果通過語音識(shí)別模塊130k識(shí)別到作為與指導(dǎo)區(qū)域810上顯示的語音項(xiàng)目812相對(duì)應(yīng)的語音“頻道”,而且與語音項(xiàng)目812相對(duì)應(yīng)的任務(wù)是頻道快捷切換,則顯示單元193可以顯示包括指導(dǎo)消息、話語示例或附加命令(例如,“上一個(gè)”)的附加項(xiàng)目信息,以用于頻道名稱、節(jié)目名稱和頻道號(hào)碼中的至少一個(gè)標(biāo)識(shí)符的說出(utterance),如圖62所示。這里,“上一個(gè)”可以是再次顯示包括圖61的指導(dǎo)區(qū)域810的UI的命令。附加項(xiàng)目信息可以包括指導(dǎo)區(qū)域830和模式顯示區(qū)域820,指導(dǎo)區(qū)域830包括附加命令、指導(dǎo)消息或話語示例。例如,指導(dǎo)消息可以顯示在指導(dǎo)區(qū)域830的左部,指導(dǎo)消息或話語示例可以顯示在指導(dǎo)區(qū)域830的右部??刂茊卧?40可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二語音??刂茊卧?40可以執(zhí)行語音任務(wù)當(dāng)中與第一語音項(xiàng)目和第二語音相對(duì)應(yīng)的任務(wù)。例如,如果第一語音項(xiàng)目是語音項(xiàng)目812,而且識(shí)別到作為與圖60的附加項(xiàng)目信息相對(duì)應(yīng)的第二語音的“MBC”,則控制單元140可以執(zhí)行頻道快捷切換,以便將當(dāng)前頻道改變?yōu)榕c包括“MBC”的頻道標(biāo)識(shí)符相對(duì)應(yīng)的頻道。也就是說,關(guān)于第一語音項(xiàng)目的附加項(xiàng)目信息可以是用于指導(dǎo)第二語音的發(fā)出以詢問是否執(zhí)行與第一語音項(xiàng)目相對(duì)應(yīng)的任務(wù)或者額外獲取執(zhí)行該任務(wù)所需的信息的信息。圖63是示出根據(jù)示范性實(shí)施例的、在動(dòng)作任務(wù)模式中在電子設(shè)備100的顯示單元193上顯示的動(dòng)作輔助信息的視圖。如圖63所示,顯示單元193可以顯示至少一個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314作為動(dòng)作任務(wù)模式中的動(dòng)作輔助信息。至少一個(gè)動(dòng)作項(xiàng)目中的每一個(gè)都可以包括指示在動(dòng)作任務(wù)模式中可識(shí)別的動(dòng)作的動(dòng)作圖像,或指示與可識(shí)別的動(dòng)作(或動(dòng)作圖像)相對(duì)應(yīng)的任務(wù)的文本。動(dòng)作輔助信息可以包括指示動(dòng)作任務(wù)模式的模式圖像或文本。動(dòng)作輔助信息可以包括指導(dǎo)區(qū)域3310或模式顯示區(qū)域3320,指導(dǎo)區(qū)域3310包括至少一個(gè)動(dòng)作項(xiàng)目,模式顯示區(qū)域3320顯示電子設(shè)備100的模式。模式顯示區(qū)域3320可以包括指示語音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式的模式圖像或文本中的至少一個(gè)。指導(dǎo)區(qū)域3310和模式顯示區(qū)域3320可以如圖63所示區(qū)別地顯示,或者可以在兩個(gè)區(qū)域之間不繪制邊界地顯示。另外,模式顯示區(qū)域3320可以省略。例如,指導(dǎo)區(qū)域3310可以在顯示屏幕的下部顯示,而且模式顯示區(qū)域3320可以在顯示屏幕的下部的中心顯示。模式顯示區(qū)域3320的位置可以根據(jù)配置進(jìn)行改變(例如,右下部)。
22
在動(dòng)作任務(wù)模式中,指導(dǎo)區(qū)域3310包括至少一個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314。例如,至少一個(gè)動(dòng)作項(xiàng)目中的每一個(gè)可以包括動(dòng)作圖像以及指示與該動(dòng)作圖像相對(duì)應(yīng)的任務(wù)的文本。指導(dǎo)區(qū)域3310中包括的至少一個(gè)動(dòng)作項(xiàng)目可以包括動(dòng)作項(xiàng)目3311、動(dòng)作項(xiàng)目3312、動(dòng)作項(xiàng)目3313和動(dòng)作項(xiàng)目3314,動(dòng)作項(xiàng)目3311指示沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作對(duì)應(yīng)于返回到先前設(shè)置的“后退”,動(dòng)作項(xiàng)目3312指示沿向上/向下方向的拍動(dòng)作對(duì)應(yīng)于 控制音量等級(jí)的“音量向上/向下”,動(dòng)作項(xiàng)目3313指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于執(zhí)行頻道改變的“頻道向上/向下”,而且動(dòng)作項(xiàng)目3314指示抓動(dòng)作對(duì)應(yīng)于重現(xiàn)圖像的“回放”。指導(dǎo)區(qū)域3310可以顯示除了上述動(dòng)作項(xiàng)目以外的其他動(dòng)作項(xiàng)目。上述至少一個(gè)動(dòng)作項(xiàng)目的每一個(gè)中所包括的動(dòng)作圖像以及與該動(dòng)作圖像相對(duì)應(yīng)的文本可以根據(jù)可識(shí)別的動(dòng)作與對(duì)應(yīng)于該可識(shí)別動(dòng)作的任務(wù)之間的映射設(shè)置來改變。例如,指導(dǎo)區(qū)域3310可以包括指示沿向上/向下方向的拍動(dòng)作對(duì)應(yīng)于執(zhí)行頻道改變的頻道向上/向下的動(dòng)作項(xiàng)目、以及指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于控制音量等級(jí)的音量向上/向下的動(dòng)作項(xiàng)目。顯示為動(dòng)作輔助信息的至少一個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314可以根據(jù)當(dāng)前執(zhí)行的功能來不同地配置。也就是說,指導(dǎo)區(qū)域3310上顯示的至少一個(gè)動(dòng)作項(xiàng)目3311、3312,3313和3314可以根據(jù)電子設(shè)備100的當(dāng)前功能來不同地配置。例如,與動(dòng)作任務(wù)相對(duì)應(yīng)的動(dòng)作項(xiàng)目中的至少一個(gè)可以根據(jù)與動(dòng)作輔助信息一起顯示的應(yīng)用、OSD和識(shí)別候選中的至少一個(gè)來選擇性地配置。控制單元140可以識(shí)別與顯示為動(dòng)作輔助信息的至少一個(gè)動(dòng)作項(xiàng)目3311、3312、3313和3314當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作。如果附加項(xiàng)目信息存在,則控制單元140可以進(jìn)行控制以顯示關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息。例如,如果識(shí)別到與動(dòng)作項(xiàng)目3314相對(duì)應(yīng)的抓動(dòng)作,則可以顯示附加項(xiàng)目信息,該附加項(xiàng)目信息包括詢問是否重現(xiàn)選定的項(xiàng)目或圖像文件的指導(dǎo)消息、或指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目??刂茊卧?40可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作??刂茊卧?40可以執(zhí)行動(dòng)作任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別到的第二動(dòng)作相對(duì)應(yīng)的任務(wù)。例如,如果第一動(dòng)作項(xiàng)目是動(dòng)作項(xiàng)目3314,而且沿向左方向的拍動(dòng)作被識(shí)別為與附加項(xiàng)目信息(該附加項(xiàng)目信息包括詢問是否重現(xiàn)指定的圖像文件的指導(dǎo)消息和指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目)相對(duì)應(yīng)的第二動(dòng)作,則重現(xiàn)指定的圖像文件。如上所述,關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息可以是用于指導(dǎo)第二動(dòng)作以詢問是否執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)或者額外獲取執(zhí)行任務(wù)所需的信息的信息。如果在動(dòng)作識(shí)別時(shí)出現(xiàn)錯(cuò)誤,則可以顯示指示錯(cuò)誤的動(dòng)作輔助信息。例如,動(dòng)作輔助信息可以包括指導(dǎo)信息“姿勢(shì)未被識(shí)別。請(qǐng)重新輸入。”、或者與指示重新輸入的文本相映射的手掌圖像。此外,動(dòng)作輔助信息可以包括指導(dǎo)消息“現(xiàn)在無法識(shí)別雙手。”、或者指導(dǎo)消息“只在‘Wb瀏覽器’、‘查看照片(View Photo)’、‘谷歌地圖應(yīng)用’中可用”??梢詧?zhí)行識(shí)別雙手,以響應(yīng)于使雙手彼此遠(yuǎn)離或?qū)㈦p手彼此拉近的動(dòng)作,來執(zhí)行放大屏幕或縮小屏幕的任務(wù)。此外,指示錯(cuò)誤的圖像或文本可以作為動(dòng)作輔助信息的一部分顯示在模式顯示區(qū)域上。下文中,將參照?qǐng)D64至圖66解釋用于按照電子設(shè)備100的語音識(shí)別或動(dòng)作識(shí)別提供反饋的用戶接口(UI)。CN 102917271 A
書
明
說
21/57 頁如圖64所示,在語音任務(wù)模式中,可以顯示包括指導(dǎo)區(qū)域810和模式顯示區(qū)域820的語音輔助信息。指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以以使指導(dǎo)區(qū)域810和模式顯示區(qū)域820看起來像它們從屏幕下端升起一樣的視覺效果顯示。例如,指導(dǎo)區(qū)域810和模式顯示區(qū)域820可以以動(dòng)畫形式顯示預(yù)定時(shí)間(例如,3秒)。例如,指導(dǎo)區(qū)域810和模式顯示區(qū)域820的一部分從下端迅速上升,然后緩慢上升。當(dāng)指導(dǎo)區(qū)域810和模式顯示區(qū)域820如 圖64所示完全顯示時(shí),上升的動(dòng)畫結(jié)束。當(dāng)電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式時(shí),動(dòng)作輔助信息可以以上述動(dòng)畫形式顯示。如果所顯示的特定模式的Π消失或者如果模式改變?yōu)樘囟J?,則可以輸出除了上述視覺效果以外的各種視覺或聽覺效果。如果電子設(shè)備100識(shí)別到與第一語音項(xiàng)目相對(duì)應(yīng)的第一語音,則電子設(shè)備100可以按照第一語音的識(shí)別精度提供與識(shí)別精度的等級(jí)相對(duì)應(yīng)的視覺反饋和聽覺反饋中的至少一個(gè)。如果電子設(shè)備100識(shí)別到與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作,則電子設(shè)備100可以按照第一動(dòng)作的識(shí)別精度提供與識(shí)別精度的等級(jí)相對(duì)應(yīng)的視覺反饋和聽覺反饋中的至少一個(gè)。在這里,識(shí)別精度可以指示這樣的等級(jí),基于該等級(jí)確定第一語音(或第一動(dòng)作)是否是電子設(shè)備100可識(shí)別的語音(或動(dòng)作),或者可以指示這樣的等級(jí),基于該等級(jí)辨別識(shí)別到的語音(或動(dòng)作)是否對(duì)應(yīng)于預(yù)先設(shè)置的命令(或者預(yù)先設(shè)置的動(dòng)作)之一。識(shí)別精度可以是根據(jù)辨別出與識(shí)別到的語音或動(dòng)作相對(duì)應(yīng)的任務(wù)所花費(fèi)的時(shí)間而變化的指標(biāo)(index)。例如,如果識(shí)別到作為對(duì)應(yīng)于語音項(xiàng)目815的語音的“智能中心”,則電子設(shè)備100可以通過推測(cè)地(stochastically)計(jì)算將該語音辨別為指導(dǎo)區(qū)域810中所包括的至少一個(gè)語音命令811、812、813、814、815、816、817和818之一的能力來確定識(shí)別精度。電子設(shè)備100可以將識(shí)別精度與預(yù)先設(shè)置的閾值相比較,并且可以根據(jù)識(shí)別精度是高于還是低于預(yù)先設(shè)置的閾值來不同地顯示視覺效果。例如,如圖65所示,根據(jù)語音識(shí)別的精度,可以在指示語音識(shí)別模式的模式顯示區(qū)域6520中的圖像的背景部分上顯示沿順時(shí)針方向旋轉(zhuǎn)的動(dòng)畫。如果識(shí)別精度低于閾值,則動(dòng)畫的圖像的旋轉(zhuǎn)速度慢,如果識(shí)別精度高于閾值,則圖像的旋轉(zhuǎn)速度快。當(dāng)根據(jù)識(shí)別精度提供上述視覺反饋時(shí),也可以提供聽覺反饋。在模式顯示區(qū)域820上作為視覺反饋顯示的動(dòng)畫將顯示一段時(shí)間,直到識(shí)別到與語音項(xiàng)目相對(duì)應(yīng)的語音之后驅(qū)動(dòng)并顯示圖66的智能中心6600為止,而且動(dòng)畫可以與識(shí)別精度無關(guān)。如果電子設(shè)備100識(shí)別到與第一語音項(xiàng)目相對(duì)應(yīng)的第一語音,則電子設(shè)備100可以提供指示第一語音項(xiàng)目以及與第一語音項(xiàng)目相對(duì)應(yīng)的任務(wù)中的至少一個(gè)的視覺反饋或聽覺反饋。如果電子設(shè)備100識(shí)別到與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作,則電子設(shè)備100可以提供指示第一動(dòng)作項(xiàng)目以及與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)中的至少一個(gè)的視覺反饋或聽覺反饋。例如,如果識(shí)別到作為與語音項(xiàng)目815對(duì)應(yīng)的語音的“智能中心”,則“智能中心”可以顯示在指示語音項(xiàng)目815或者對(duì)應(yīng)于語音項(xiàng)目815的任務(wù)的反饋區(qū)域6530中,如圖65所示。視覺反饋可以在屏幕的預(yù)定位置上顯示,而不限制為反饋區(qū)域6530。另外,聽覺反饋“您說的是智能中心。”可以與顯示在反饋區(qū)域6530中的視覺反饋一起被輸出。如果識(shí)別到作為與項(xiàng)目813對(duì)應(yīng)的動(dòng)作的向右方向的拍動(dòng)作,則電子設(shè)備100可以在反饋區(qū)域6530上顯示視覺反饋(例如,“您的操作為頻道向上”),其指示與動(dòng)作項(xiàng)目之一相對(duì)應(yīng)的任務(wù),或者可以進(jìn)行控制以使用電子設(shè)備100的文本到語音(text to
24speech, TTS)模塊(未示出)來輸出聽覺反饋。 圖67至圖69是示出根據(jù)各種示范性實(shí)施例的、解釋電子設(shè)備的控制方法的流程圖,該電子設(shè)備提供語音輔助信息和動(dòng)作輔助信息。圖67是根據(jù)示范性實(shí)施例的、解釋電子設(shè)備100的控制方法的流程圖。電子設(shè)備100可以使用語音識(shí)別模塊或動(dòng)作識(shí)別模塊之一識(shí)別用戶輸入(語音或動(dòng)作)(S6710)。用戶語音可以通過麥克風(fēng)輸入并且可以由語音識(shí)別模塊識(shí)別輸入的語音,而且用戶動(dòng)作可以由照相機(jī)拍攝,而且拍攝的動(dòng)作可以由動(dòng)作識(shí)別模塊識(shí)別。電子設(shè)備100按照接收到的用戶輸入來執(zhí)行語音任務(wù)或動(dòng)作任務(wù)之一(S6720)。也就是說,電子設(shè)備100可以按照語音任務(wù)模式和動(dòng)作任務(wù)模式中的所指定的模式進(jìn)行操作。例如,如果識(shí)別到語音啟動(dòng)命令或動(dòng)作啟動(dòng)命令,則與識(shí)別到的啟動(dòng)命令相對(duì)應(yīng)的模式被指定。語音任務(wù)模式是按照識(shí)別到的語音執(zhí)行第一任務(wù)(S卩,語音任務(wù))中的至少一個(gè)的模式,而且動(dòng)作任務(wù)模式是按照識(shí)別到的動(dòng)作執(zhí)行第二任務(wù)(即,動(dòng)作任務(wù))中的至少一個(gè)的模式。語音任務(wù)指示按照識(shí)別到的語音執(zhí)行的任務(wù),而且動(dòng)作任務(wù)指示按照識(shí)別到的動(dòng)作執(zhí)行的任務(wù)。語音任務(wù)和動(dòng)作任務(wù)可以彼此不同。圖68和圖69是示出根據(jù)示范性實(shí)施例的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100可以辨別出語音任務(wù)模式和動(dòng)作任務(wù)模式中的哪一個(gè)被指定(S6805)。雖然在本示范性實(shí)施例中只顯示語音任務(wù)模式或動(dòng)作任務(wù)模式,但是可辨別的模式還可以包括電子設(shè)備100由遙控器控制的模式。如果動(dòng)作任務(wù)模式被指定,則電子設(shè)備100進(jìn)入圖69的操作S6910,并根據(jù)本示范性實(shí)施例繼續(xù)電子設(shè)備100的控制操作。如果語音任務(wù)模式被指定,則電子設(shè)備100可以在語音任務(wù)模式中顯示用于執(zhí)行第一任務(wù)的語音輔助信息(S6810),在語音任務(wù)模式中,按照識(shí)別到的語音執(zhí)行第一任務(wù)中的至少一個(gè)。電子設(shè)備100可以識(shí)別與顯示為語音輔助信息的至少一個(gè)語音項(xiàng)目當(dāng)中的第一語音項(xiàng)目相對(duì)應(yīng)的第一語音(S6815)。電子設(shè)備100可以確定關(guān)于與識(shí)別到的第一語音相對(duì)應(yīng)的第一語音項(xiàng)目的附加項(xiàng)目信息是否存在(S6820)。如果關(guān)于第一語音項(xiàng)目的附加項(xiàng)目信息不存在,則電子設(shè)備100可以執(zhí)行與第一語音項(xiàng)目相對(duì)應(yīng)的任務(wù)(S6825)。此外,如果需要改變語音輔助信息,則電子設(shè)備100可以顯示改變的語音輔助信息。例如,如果識(shí)別到作為與語音項(xiàng)目813的語音相對(duì)應(yīng)的“靜音”,則電子設(shè)備100可以執(zhí)行靜音,將語音項(xiàng)目813改變?yōu)檎Z音項(xiàng)目2213并顯示改變的語音輔助信息,如圖22所示。如果關(guān)于第一語音項(xiàng)目的附加項(xiàng)目信息存在,則電子設(shè)備100可以顯示關(guān)于與識(shí)別到的第一語音相對(duì)應(yīng)的第一語音項(xiàng)目的附加項(xiàng)目信息(S6830)。例如,如果識(shí)別到作為與該語音項(xiàng)目相對(duì)應(yīng)的語音的“頻道”,則可以顯示包括指導(dǎo)消息或話語示例的附加項(xiàng)目信
肩、O電子設(shè)備100可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二語音(S6835 )。電子設(shè)備100可以執(zhí)行第一任務(wù)當(dāng)中與第一語音項(xiàng)目和識(shí)別到的第二語音相對(duì)應(yīng)的任務(wù)(S6840)。例如,如果第一語音項(xiàng)目是語音項(xiàng)目812而且第二語音是“七”,則電子設(shè)備100可以執(zhí)行頻道快捷切換,以便將當(dāng)前頻道改變?yōu)榫哂蓄l道標(biāo)識(shí)符7的頻道。CN 102917271 A
書
明
說
23/57 頁如果動(dòng)作任務(wù)模式被指定,則電子設(shè)備100可以在動(dòng)作任務(wù)模式中顯示用于執(zhí)行第二任務(wù)的動(dòng)作輔助信息(圖69的S6910),在動(dòng)作任務(wù)模式中,按照識(shí)別到的動(dòng)作執(zhí)行第二任務(wù)中的至少一個(gè)。電子設(shè)備100可以識(shí)別與顯示為動(dòng)作輔助信息的至少一個(gè)動(dòng)作項(xiàng)目當(dāng)中的第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的第一動(dòng)作(S6915 )。 電子設(shè)備100可以確定關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息是否存在(S6920)。如果關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息不存在,則電子設(shè)備100可以執(zhí)行與第一動(dòng)作項(xiàng)目相對(duì)應(yīng)的任務(wù)(S6925)。例如,如果識(shí)別到作為與圖33中的動(dòng)作項(xiàng)目3313相對(duì)應(yīng)的動(dòng)作的向右方向的拍動(dòng)作,則電子設(shè)備100可以根據(jù)頻道向上(channel-up)將當(dāng)前頻道(頻道6)改變?yōu)橄乱粋€(gè)頻道(頻道7),根據(jù)預(yù)先設(shè)置的順序下一個(gè)頻道位于當(dāng)前頻道(頻道6)之后。此外,如果需要改變動(dòng)作輔助信息,則電子設(shè)備100可以顯示改變的動(dòng)作輔助信息。如果關(guān)于第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息存在,則電子設(shè)備100可以顯示關(guān)于與識(shí)別到的第一動(dòng)作相對(duì)應(yīng)的第一動(dòng)作項(xiàng)目的附加項(xiàng)目信息(S6930)。例如,如果識(shí)別到與動(dòng)作項(xiàng)目相對(duì)應(yīng)的抓動(dòng)作,則可以顯示附加項(xiàng)目信息,該附加項(xiàng)目信息包括詢問是否重現(xiàn)選定的項(xiàng)目或圖像文件的指導(dǎo)消息、或指示沿向左/向右方向的拍動(dòng)作對(duì)應(yīng)于回答是/否的動(dòng)作項(xiàng)目。電子設(shè)備100可以識(shí)別與附加項(xiàng)目信息相對(duì)應(yīng)的第二動(dòng)作(S6935)。電子設(shè)備100可以執(zhí)行第二任務(wù)當(dāng)中與第一動(dòng)作項(xiàng)目和識(shí)別到的第二動(dòng)作相對(duì)應(yīng)的任務(wù)(S6940)。例如,如果第一動(dòng)作項(xiàng)目是用于重現(xiàn)圖像的動(dòng)作項(xiàng)目,而且第二動(dòng)作是沿向左方向的拍動(dòng)作,則電子設(shè)備100可以重現(xiàn)指定的圖像文件。控制單元140可以使用UI處理模塊130j來區(qū)別地顯示可通過語音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)以及不可通過語音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)??刂茊卧?40可以使用存儲(chǔ)在電子設(shè)備100中的內(nèi)容的首標(biāo)(未示出)或者內(nèi)容中包括的單獨(dú)配置文件(未示出)來確定語音識(shí)別是否支持該內(nèi)容。如果確定內(nèi)容可通過語音識(shí)別控制,則控制單元140使用UI處理模塊130j來將存儲(chǔ)在存儲(chǔ)單元中的附加圖標(biāo)與內(nèi)容的原始可運(yùn)行圖標(biāo)相結(jié)合,并顯示結(jié)合的圖標(biāo)?;陲@示屏幕上顯示的附加圖標(biāo)的存在,用戶可以知道內(nèi)容可通過語音識(shí)別控制。多個(gè)附加圖標(biāo)可以存儲(chǔ)在存儲(chǔ)單元130中。用戶可以通過配置將附加圖標(biāo)改變?yōu)榕c原始可運(yùn)行圖標(biāo)相結(jié)合。此外,控制單元140可以使用UI處理模塊130j來區(qū)別地顯示可通過語音識(shí)別控制的內(nèi)容的名稱以及不可通過語音識(shí)別控制的內(nèi)容的名稱,例如,通過加下劃線并以粗體顯示名稱?;诩酉聞澗€并以粗體顯示的可運(yùn)行圖標(biāo)的名稱,用戶可以知道內(nèi)容可通過語音識(shí)別控制??刂茊卧?40可以使用UI處理模塊130 j、與不可通過語音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱不同地顯示可通過語音識(shí)別控制的內(nèi)容的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱。控制單元140或內(nèi)容可以區(qū)別地顯示在運(yùn)行的內(nèi)容的UI上顯示的工具條的菜單(例如,菜單“下一個(gè)” “前一個(gè)”或“打開”)當(dāng)中的、可通過語音識(shí)別控制的菜單和不可通過
26語音識(shí)別控制的菜單。下文中,將參照?qǐng)D70至圖79解釋根據(jù)各種示范性實(shí)施例的、與不可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱不同地顯示可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱的方法。參照?qǐng)D70,電子設(shè)備100的控制單元140向音頻輸出單元196和顯示單元193的顯示屏幕7000輸出與從廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的視頻、音頻和控制數(shù)據(jù)(例如,電子節(jié)目指南(EPG))??刂茊卧?40使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m來識(shí)別由用戶說出的語音啟動(dòng)命令(觸發(fā)語音)??刂茊卧?40按照識(shí)別到的語音啟動(dòng)命令(例如,“Ginny”)改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100可通過語音識(shí)別控制??刂茊卧?40將通過語音輸入單元110和語音識(shí)別模塊130k識(shí)別到的語音啟動(dòng)命令與預(yù)存在語音數(shù)據(jù)庫130m中的語音啟動(dòng)命令相比較。如果根據(jù)比較的結(jié)果該語音被識(shí)別為語音啟動(dòng)命令,則電子設(shè)備100在控制單元140的控制下改變?yōu)檎Z音任務(wù)模式。語音數(shù)據(jù)庫130m可以存儲(chǔ)與可通過語音輸入單元110和語音識(shí)別模塊130k識(shí)別的語音相對(duì)應(yīng)的第一命令(例如,與“改變?yōu)檎Z音任務(wù)模式”相對(duì)應(yīng)的命令或者與“頻道改變”相對(duì)應(yīng)的命令)??刂茊卧?40可以執(zhí)行與第一命令相對(duì)應(yīng)的電子設(shè)備100的語音任務(wù)。語音啟動(dòng)命令或預(yù)存在語音數(shù)據(jù)庫130m中的命令可以通過配置來改變(例如,可以添加、改變或刪除)。輸入語音啟動(dòng)命令的識(shí)別可以很容易地被本領(lǐng)域普通技術(shù)人員理解。參照?qǐng)D71,控制單元140在顯示圖像的顯示屏幕400上顯示用于執(zhí)行語音任務(wù)模式的語音輔助信息7110??刂茊卧?40可以與顯示的圖像重疊地顯示語音輔助信息7110??刂茊卧?40可以在顯示屏幕400的下部顯示語音輔助信息7110。語音輔助信息7110可以包括命令/指導(dǎo)顯示區(qū)域7111、模式顯示區(qū)域7120和7120a、以及第一反饋顯示區(qū)域7230(參見圖72)。參照?qǐng)D72,第一反饋顯示區(qū)域7230可以在模式顯示區(qū)域7120的一側(cè)顯示。第一反饋顯示區(qū)域7230可以包括第一視覺反饋7230a (參見圖72)??刂茊卧?40向電子設(shè)備100的揚(yáng)聲器161輸出識(shí)別到的第一命令,從而為用戶提供第一聽覺反饋(未示出)。電子設(shè)備100可以提供視覺反饋和聽覺反饋之一或者提供視覺反饋和聽覺反饋二者。參照?qǐng)D73,如果識(shí)別到第一命令,則控制單元140顯示與第一命令相對(duì)應(yīng)的內(nèi)容列表(下文中,稱為智能中心7300)。智能中心7300是用作由電子設(shè)備100支持的各種功能的中心的UI。智能中心7300是顯示與由電子設(shè)備100支持的各種功能(例如,觀看運(yùn)動(dòng)圖像的功能、聽音樂的功能、訪問互聯(lián)網(wǎng)的功能)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的Π。此外,智能中心7300是顯示電子設(shè)備100的存儲(chǔ)單元130中所存儲(chǔ)的內(nèi)容(例如,照片、音樂和運(yùn)動(dòng)圖像)的可運(yùn)行圖標(biāo)、與從外部源接收到的內(nèi)容(例如,照片、音樂和運(yùn)動(dòng)圖像)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)、以及與可運(yùn)行的應(yīng)用(例如,web瀏覽器)的可運(yùn)行圖標(biāo)的UI。智能中心7300可以包括搜索區(qū)域7310、廣播區(qū)域7320、您的視頻區(qū)域7330、信息顯示區(qū)域7340、應(yīng)用區(qū)域7350、推薦區(qū)域7360和應(yīng)用列表區(qū)域7370當(dāng)中的多個(gè)區(qū)域,搜索區(qū)域7310使用語音(例如,語音任務(wù)模式)或動(dòng)作(例如,動(dòng)作任務(wù)模式)搜索各種內(nèi)容、應(yīng)用或互聯(lián)網(wǎng)信息,廣播區(qū)域7320位于搜索區(qū)域7310的一側(cè)并顯示縮小的(down-sized)廣播圖像,您的視頻區(qū)域7330位于搜索區(qū)域7310的下方并顯示與存儲(chǔ)在存儲(chǔ)單元130中的運(yùn)動(dòng)圖像相對(duì)應(yīng)的可運(yùn)行圖標(biāo),信息顯示區(qū)域7340位于搜索區(qū)域7310的下方并顯示來自從電子設(shè)備100的制造商的通知或廣告,應(yīng)用區(qū)域7350位于搜索區(qū)域7310的下方并顯示與由電子設(shè)備100的制造商提供的各種免費(fèi)或付費(fèi)服務(wù)相對(duì)應(yīng)的應(yīng)用的可運(yùn)行圖標(biāo),推薦區(qū)域7360位于搜索區(qū)域7310的下方并顯示電子設(shè)備100的制造商所推薦的服務(wù),應(yīng)用列表區(qū)域7370位于搜索區(qū)域7310的下方并顯示與可在電子設(shè)備100中運(yùn)行的應(yīng)用相對(duì)應(yīng)的可運(yùn)行圖標(biāo)。本領(lǐng)域普通技術(shù)人員應(yīng)該理解的是,智能中心7300上顯示的多個(gè)區(qū)域7310至 7370可以根據(jù)電子設(shè)備的性能和功能進(jìn)行添加或刪除。智能中心7300可以顯示與語音任務(wù)模式相對(duì)應(yīng)的語音輔助信息7110。此外,智能中心7300可以顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720。語音輔助信息7110或動(dòng)作輔助信息7720 (見圖77)可以重疊在智能中心7300上。參照?qǐng)D73,智能中心7300顯示與語音任務(wù)模式相對(duì)應(yīng)的語音輔助信息7110。在語音任務(wù)模式中,智能中心7300與不可通過語音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)(例如,7372)不同地顯示與可通過語音識(shí)別控制的內(nèi)容(例如,應(yīng)用和運(yùn)動(dòng)圖像)相對(duì)應(yīng)的可運(yùn)行圖標(biāo)(例如,7371)。與可通過語音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)7371可以是與可通過語音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的原始可運(yùn)行圖標(biāo)7371a和位于原始可運(yùn)行圖標(biāo)7371a —側(cè)的附加圖標(biāo)7371b (靜止圖像、運(yùn)動(dòng)圖像和文本之一)的結(jié)合。附加圖標(biāo)7371b可以與原始可運(yùn)行圖標(biāo)7371a重疊地顯示,或者與原始可運(yùn)行圖標(biāo)7371a分開地顯示。根據(jù)語音是否是可識(shí)別的,將附加圖標(biāo)添加到與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的一側(cè)。然而,這僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語音是否是可識(shí)別的,與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)可以以各種方式區(qū)別地顯示,例如,通過改變附加圖標(biāo)7371b的位置或大小。與可通過語音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7371c和與不可通過語音識(shí)別控制的內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7372a可以被不同地顯示(例如,加下劃線以及粗體)。然而,根據(jù)語音是否可識(shí)別通過為名稱加下劃線并插入粗體字體來區(qū)分與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語音是否是可識(shí)別的,可以以各種方式區(qū)別地顯示與內(nèi)容相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱,例如,通過改變字體或顏色。如果可運(yùn)行圖標(biāo)的名稱的字母的數(shù)量大于智能中心7300中定義的字母的數(shù)量(例如,15個(gè)英文本母和8個(gè)韓文本母)(例如,名稱7373c),則只可以顯示可運(yùn)行圖標(biāo)的名稱的一部分。例如,無法顯示的可運(yùn)行圖標(biāo)的名稱的其余部分可以顯示為省略號(hào)。智能中心7300的語音輔助信息7110上顯示的命令可以改變。如果響應(yīng)于第一命令語音而顯示智能中心7300,則顯示返回到在顯示智能中心7300之前顯示的前一個(gè)圖像的命令(返回7111i)。返回命令可以添加到語音輔助信息7110 (例如,共顯示9個(gè)命令),或可以代替已顯示的命令之一(例如,“全部”命令)(例如,共顯示8個(gè)命令))。控制單元140使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到由用戶說出的第二命令語音(例如,應(yīng)用7371c的名稱,“令人興奮的電子書”)??刂茊卧?40將通過語音輸入單元110和語音識(shí)別模塊130k識(shí)別到的第二命令語音與預(yù)存在語音數(shù)據(jù)庫130m中的第二命令語音相比較。如果根據(jù)比較的結(jié)果將該語音識(shí)別為第二命令,則控制單元140在第一反饋顯示區(qū)域7230上顯示與識(shí)別到的第二命令相對(duì)應(yīng)的第三視覺反饋(例如,“您說的是令人興奮的電子書”(未示出))。第三視覺反饋(未示出)可以被提供預(yù)定時(shí)間(例如,500毫秒)。該預(yù)定時(shí)間可以通過配置來改變。控制單元140向電子設(shè)備100的揚(yáng)聲器161輸出識(shí)別到的第二命令,從而為用戶提供第三聽覺反饋(未示出)。
如果根據(jù)比較的結(jié)果未將語音識(shí)別為第二命令,則控制單元140在第一反饋顯示區(qū)域7230上顯示第四視覺反饋(例如,“請(qǐng)重說”(未示出))。控制單元140可以提供第四聽覺反饋(例如,“請(qǐng)重說”(未示出))以識(shí)別第二命令語音。如果多個(gè)應(yīng)用的名稱對(duì)應(yīng)于識(shí)別到的第二命令,則控制單元140可以在智能中心7300上顯示候選彈出窗口 7314,候選彈出窗口 7314顯示多個(gè)應(yīng)用的名稱。參照?qǐng)D74,如果通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到第二命令(例如,包括應(yīng)用的名稱的一部分,“令人興奮的”),則控制單元140可以在候選彈出窗口 7414上顯示與第二命令相對(duì)應(yīng)的多個(gè)應(yīng)用的列表。例如,候選彈出窗口 7414顯示①令人興奮的電子書7414a②令人興奮的鼓樂節(jié)7414b。如果在智能中心7300上顯示候選彈出窗口 7414,則在智能中心7300的下部顯示的命令/指導(dǎo)顯示區(qū)域7111的命令被改變。例如,命令/指導(dǎo)顯示區(qū)域7111在模式顯示區(qū)域7112的左部顯示“說出您希望選擇的項(xiàng)目的號(hào)碼”7111j,并且在右部顯示“示例>l,27111k和返回7111i”。如果通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到與號(hào)碼(例如,“I”)相對(duì)應(yīng)的語音,則控制單元140在候選彈出窗口 7414上選擇①令人興奮的電子書7414a??刂茊卧?40可以在候選彈出窗口 7414上區(qū)別地顯示選中的應(yīng)用的名稱與未選中的應(yīng)用的名稱。此外,如果識(shí)別到與候選彈出窗口 7414上顯示的應(yīng)用的完整名稱相對(duì)應(yīng)的語音,則控制單元140可以在候選彈出窗口 7414上區(qū)別地顯示①令人興奮的電子書。參照?qǐng)D75,控制單元140運(yùn)行與通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到的第二命令(例如,“令人興奮的電子書”)相對(duì)應(yīng)的應(yīng)用令人興奮的電子書??刂茊卧?40顯示正在運(yùn)行的令人興奮的電子書的Π 7500??刂茊卧?40與智能中心7300重疊地顯示令人興奮的電子書的Π 7500。控制單元140可以通過利用Π7500代替智能中心7300來以全屏大小顯示令人興奮的電子書的UI 7500。令人興奮的電子書的Π 7500顯示與存儲(chǔ)在電子設(shè)備100的存儲(chǔ)單元中的多個(gè)電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)7501至7504、以及可運(yùn)行圖標(biāo)的名稱7501a至7504a。根據(jù)語音是否是可識(shí)別的,控制單元140可以彼此不同地顯示與多個(gè)電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7501a至7504a。例如,控制單元140與不可通過語音識(shí)別控制的電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7502a不同地顯示可通過語音識(shí)別控制的電子書相對(duì)應(yīng)的熱點(diǎn)圖標(biāo)(hoticon)的名稱7501a。此外,控制單元140或應(yīng)用(令人興奮的電子書)可以區(qū)別地顯示令人興奮的電子書的工具區(qū)域(未示出)上的菜單(例如,菜單“下一個(gè)” “前一個(gè)”或“打開”(未示出))當(dāng)中的、可通過語音識(shí)別控制的菜單和不可通過語音識(shí)別控制的菜單。通過為名稱加下劃線并插入粗體字體來區(qū)分與可通過語音識(shí)別控制的電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7501a僅僅是示例。本領(lǐng)域普通技術(shù)人員應(yīng)該理解,根據(jù)語音是否是可識(shí)別的,與電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱可以以各種方式區(qū)別地顯示,例如,通過改變字體或顏色。控制單元140可以通過網(wǎng)絡(luò)接口單元180從外部服務(wù)器下載可通過語音識(shí)別的電子書。如果通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到與可通過語音識(shí)別控制的電子書相對(duì)應(yīng)的可運(yùn)行圖標(biāo)的名稱7501a,則控制單元140運(yùn)行并顯示
29CN 102917271 A
書
明
說
27/57 頁
電子書7501。用戶可以控制通過語音識(shí)別控制正在顯示的電子書(例如,改變頁)??刂茊卧?40使用動(dòng)作輸入單元120、動(dòng)作識(shí)別模塊1301和動(dòng)作數(shù)據(jù)庫130η識(shí)別到動(dòng)作啟動(dòng)命令7600。參照?qǐng)D76,動(dòng)作啟動(dòng)命令7600是在動(dòng)作輸入單元120的對(duì)面水平搖動(dòng)用戶張開的手指3到4次的動(dòng)作。控制單元140根據(jù)識(shí)別到的動(dòng)作啟動(dòng)命令將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100可通過動(dòng)作識(shí)別控制?!た刂茊卧?40將通過動(dòng)作輸入單元120和動(dòng)作識(shí)別模塊1301識(shí)別到的動(dòng)作啟動(dòng)命令與預(yù)存在動(dòng)作數(shù)據(jù)庫130η中的動(dòng)作啟動(dòng)命令相比較。如果根據(jù)比較的結(jié)果將該動(dòng)作識(shí)別為動(dòng)作啟動(dòng)命令,則電子設(shè)備100被控制單元140從語音任務(wù)模式改變?yōu)閯?dòng)作任務(wù)模式。動(dòng)作數(shù)據(jù)庫130η可以存儲(chǔ)與可通過動(dòng)作輸入單元120和動(dòng)作識(shí)別模塊1301識(shí)別的動(dòng)作相對(duì)應(yīng)的第二命令(例如,與“前一個(gè)”相對(duì)應(yīng)的命令或者與“回放”相對(duì)應(yīng)的命令)??刂茊卧?40可以執(zhí)行與第二命令相對(duì)應(yīng)的電子設(shè)備100的動(dòng)作任務(wù)。預(yù)存在動(dòng)作數(shù)據(jù)庫130η中的動(dòng)作啟動(dòng)命令可以通過配置來改變(例如,可以添加、修改或刪除)。智能中心顯示動(dòng)作輔助信息,而且相同地顯示可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)。參照?qǐng)D77,控制單元140在智能中心7300上顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720和光標(biāo)7725??刂茊卧?40使動(dòng)作輔助信息7720重疊在智能中心7300上??刂茊卧?40在智能中心7300的下部顯示動(dòng)作輔助信息7720。動(dòng)作輔助信息7720可以包括動(dòng)作/指導(dǎo)顯示區(qū)域7721、模式顯示區(qū)域7722和第二反饋顯示區(qū)域(未示出)??刂茊卧?40在智能中心7300上顯示動(dòng)作輔助信息7720,而且相同地顯示可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)。參照?qǐng)D74,控制單元140使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到由用戶說出的第三命令語音(例如,應(yīng)用的完整名稱“令人興奮的鼓節(jié)”、或該名稱的一部分)??刂茊卧?40將通過語音輸入單元110和語音識(shí)別模塊130k識(shí)別到的第三命令與預(yù)存在語音數(shù)據(jù)庫130m中的第三命令相比較。如果根據(jù)比較的結(jié)果將該語音識(shí)別為第三命令,則控制單元140在第一反饋顯示區(qū)域7413上顯示與識(shí)別到的第三命令相對(duì)應(yīng)的第六視覺反饋(例如,“您說的是‘令人興奮的鼓節(jié)’”(未示出))。第六視覺反饋(未示出)可以被提供預(yù)定時(shí)間(例如,500毫秒)。如果未識(shí)別到第三命令,則控制單元140在第一反饋顯示區(qū)域7413上顯示第七視覺反饋(例如,“請(qǐng)重說”(未示出))。控制單元140可以提供第六聽覺反饋(例如,“請(qǐng)重說”(未示出))以識(shí)別第三命令語音。參照?qǐng)D74,如果多個(gè)應(yīng)用的名稱對(duì)應(yīng)于第三命令(例如,包括將被選擇的應(yīng)用的名稱的一部分,“令人興奮的”),則控制單元140可以在智能中心7400上顯示候選彈出窗口7414,候選彈出窗口 7414顯示多個(gè)應(yīng)用的名稱。如果通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到與號(hào)碼(例如,“2”)相對(duì)應(yīng)的語音,則控制單元140在候選彈出窗口 7414上選擇②令人興奮的鼓節(jié)7414b。參照?qǐng)D78,控制單元140可以運(yùn)行與通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到的第三命令(例如,“令人興奮的鼓節(jié)”)相對(duì)應(yīng)的應(yīng)用令人興奮的鼓節(jié)??刂茊卧?40顯示正在運(yùn)行令人興奮的鼓節(jié)的Π 7800。控制單元140在智能中心7300上重疊地顯示令人興奮的鼓節(jié)的Π 7800。控制單元140可以通過利用Π 7800代
30替智能中心7300來以全屏大小顯示令人興奮的鼓節(jié)的Π 7800。通過用戶語音的識(shí)別或遙控器,可以播放令人興奮的鼓節(jié)的UI 7800上顯示的鼓7801至7809。令人興奮的鼓節(jié)上的鼓7801至7809可以通過動(dòng)作任務(wù)模式中的動(dòng)作識(shí)別(例如,抓動(dòng)作)來播放。圖79是示出根據(jù)示范性實(shí)施例的、顯示電子設(shè)備的UI的方法的流程圖。打開電子設(shè)備100 (S7901)。例如,如果按下位于電子設(shè)備100上的電源按鈕(未示出)、如果選擇位于遙控器上的電子設(shè)備100的電源鍵(未示出)(例如,按下該鍵)、或者如果通過電子設(shè)備100的語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到用戶語音(例如,“接通電源”),則可以打開電子設(shè)備100。輸出廣播(S7902)。例如,電子設(shè)備100輸出與從廣播接收單元150接收到的廣播信號(hào)相對(duì)應(yīng)的圖像,如圖70所示。識(shí)別語音啟動(dòng)命令(S7903)。也就是說,電子設(shè)備100使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別由用戶說出的語音啟動(dòng)命令。電子設(shè)備100根據(jù)識(shí)別到的語音啟動(dòng)命令將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100可通過語音識(shí)別控制。顯示一組命令(S7904)。例如,電子設(shè)備100在顯示圖像的顯示屏幕7000上顯示與語音任務(wù)模式相對(duì)應(yīng)的一組命令7110,如圖71所示。識(shí)別第一命令語音(S7905)。具體來說,電子設(shè)備100使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別由用戶說出的第一命令語音(例如,“智能中心)。如果將該語音識(shí)別為第一命令,則電子設(shè)備100在第一反饋顯示區(qū)域7230上顯示與識(shí)別到的第一命令相對(duì)應(yīng)的第一視覺反饋,如圖72所示。顯示H(S7906)。例如,如果識(shí)別到第一命令,則電子設(shè)備100顯示與第一命令相對(duì)應(yīng)的智能中心7300,如圖73所示。識(shí)別第二命令語音(S7907)。具體來說,電子設(shè)備100使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別由用戶說出的第二命令語音(例如,應(yīng)用7371c的名稱,“令人興奮的電子書”)。如果多個(gè)應(yīng)用的名稱對(duì)應(yīng)于識(shí)別到的第二命令,則電子設(shè)備100可以顯示候選彈出窗口 7414,候選彈出窗口 7414顯示多個(gè)應(yīng)用的名稱,如圖74所示。運(yùn)行第一應(yīng)用(S7908)。例如,電子設(shè)備100運(yùn)行與第二命令相對(duì)應(yīng)的應(yīng)用,令人興奮的電子書,如圖75所示。識(shí)別動(dòng)作啟動(dòng)命令(觸發(fā)動(dòng)作)(S7909)。具體來說,電子設(shè)備100使用動(dòng)作輸入單元120、動(dòng)作識(shí)別模塊1301和動(dòng)作數(shù)據(jù)庫130η識(shí)別用戶的動(dòng)作啟動(dòng)命令7600。例如,動(dòng)作啟動(dòng)命令7600是在動(dòng)作輸入單元120的對(duì)面水平搖動(dòng)用戶張開的手指3到4次的動(dòng)作,如圖76所示。在智能中心上顯示動(dòng)作項(xiàng)目,而且相同地顯示可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)和不可通過語音識(shí)別控制的應(yīng)用的可運(yùn)行圖標(biāo)(S7910)。例如,電子設(shè)備100在智能中心7300上顯示與動(dòng)作任務(wù)模式相對(duì)應(yīng)的動(dòng)作輔助信息7720和光標(biāo)7725,如圖77所示。如果在操作S7907中沒有識(shí)別到第二命令,則執(zhí)行操作S7911。識(shí)別第三命令(S7911)??刂茊卧?40使用語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別由用戶說出的第三命令語音。如果多個(gè)應(yīng)用的名稱對(duì)應(yīng)于第三命
31令,則控制單元140可以在智能中心7400上顯示候選彈出窗口 7414,候選彈出窗口 7414顯示多個(gè)應(yīng)用的名稱,如圖74所示。運(yùn)行第三應(yīng)用(S7912)。例如,電子設(shè)備100運(yùn)行與通過語音輸入單元110、語音識(shí)別模塊130k和語音數(shù)據(jù)庫130m識(shí)別到的第三命令相對(duì)應(yīng)的應(yīng)用令人興奮的鼓節(jié),如圖78所示。如果在操作S7911中沒有識(shí)別到第三命令,則操作結(jié)束??刂茊卧?40可以向圖像輸出單元190或顯示單元193提供通過廣播接收單元150接收到的多個(gè)廣播信號(hào)之一和存儲(chǔ)的內(nèi)容之一。顯示單元193可以顯示接收到一個(gè)廣播信號(hào)或存儲(chǔ)的內(nèi)容。存儲(chǔ)的內(nèi)容包括永久、暫時(shí)(momentarily)或臨時(shí)(temporarily)存儲(chǔ)在電子設(shè)備100中的所有內(nèi)容。例如,內(nèi)容可以永久存儲(chǔ)在電子設(shè)備100的存儲(chǔ)單元130中,直到接收到用戶的刪除請(qǐng)求為止。此外,如果電子設(shè)備100的存儲(chǔ)單元130的一部分用作緩沖區(qū),則內(nèi)容可以暫時(shí)或臨時(shí)存儲(chǔ)在存儲(chǔ)單元130。具體來說,如果在實(shí)時(shí)的基礎(chǔ)上將從外部端子輸入單元160或網(wǎng)絡(luò)接口單元180輸入的內(nèi)容提供給圖像輸出單元190或顯示單元193,則控制單元140可以將內(nèi)容暫時(shí)或臨時(shí)存儲(chǔ)在存儲(chǔ)單元130的一部分中,從而內(nèi)容的輸入速度與內(nèi)容的輸出速度基本相等??刂茊卧?40可以使用動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作,并且可以響應(yīng)于識(shí)別到的用戶動(dòng)作而改變所提供的廣播信號(hào)或內(nèi)容的狀態(tài)。如果控制單元140提供廣播信號(hào),則控制單元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作來控制廣播信號(hào)的音量等級(jí)或者可以提供多個(gè)廣播信號(hào)當(dāng)中的另一個(gè)廣播信號(hào)。如果控制單元140提供內(nèi)容,則控制單元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作而改變顯示內(nèi)容的屏幕的至少一部分。例如,如果內(nèi)容(例如,包括多個(gè)頁面的圖像或包括多個(gè)頁面的文檔)包括多個(gè)頁面而且多個(gè)頁面之一顯示在屏幕上,則控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示另一個(gè)頁面的屏幕。具體來說,響應(yīng)于識(shí)別到的用戶動(dòng)作,控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示所述多個(gè)頁面當(dāng)中的位于該頁面的上部、下部、左部或右部的頁面中一個(gè)頁面的屏幕。作為另一個(gè)示例,如果內(nèi)容(例如,網(wǎng)頁)包括一個(gè)頁面,則控制單元140可以將顯示頁面的一部分的屏幕改變?yōu)轱@示頁面的另一部分的屏幕。此外,控制單元140可以將顯示所提供的內(nèi)容(例如,圖像或運(yùn)動(dòng)圖像)的屏幕改變?yōu)轱@示不同于該內(nèi)容的內(nèi)容的屏幕??刂茊卧?40可以使用語音識(shí)別模塊130k識(shí)別用戶語音,并且可以按照識(shí)別到的用戶語音提供多個(gè)廣播信號(hào)之一。例如,如果通過語音識(shí)別模塊130k識(shí)別到頻道標(biāo)識(shí)符,則控制單元140可以使用頻道控制模塊130b提供多個(gè)廣播信號(hào)當(dāng)中具有識(shí)別到的頻道標(biāo)識(shí)符的廣播信號(hào)。在另一個(gè)示范性實(shí)施例中,控制單元140可以響應(yīng)于使用識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而從多個(gè)廣播信號(hào)當(dāng)中選擇一個(gè)廣播信號(hào)??刂茊卧?40可以向圖像輸出單元190或顯示單元193提供所選擇的廣播信號(hào)。顯示單元193可以顯示所提供的廣播信號(hào)。接下來,控制單元140可以停止向圖像輸出單元190或顯示單元193提供廣播信號(hào)。例如,控制單元140可以響應(yīng)于通過動(dòng)作識(shí)別模塊1301、語音識(shí)別模塊130k或遙控器接收到的用戶輸入而停止提供廣播信號(hào)??刂茊卧?40可以提供存儲(chǔ)在電子設(shè)備100中的內(nèi)容。
當(dāng)控制單元140向顯示單元193提供存儲(chǔ)的內(nèi)容時(shí),控制單元140可以重新識(shí)別與選擇多個(gè)廣播信號(hào)之一時(shí)的用戶動(dòng)作具有相同形式的用戶動(dòng)作。相同形式的用戶動(dòng)作包括具有基本相同形式的用戶動(dòng)作。例如,如果多個(gè)用戶動(dòng)作的對(duì)象的形式是相同的、該形式的對(duì)象沿相同方向移動(dòng)、而且該形式的對(duì)象的移動(dòng)速度高于預(yù)定速度,則控制單元140可以將該多個(gè)用戶動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。例如,如果選擇一個(gè)廣播信號(hào)的用戶動(dòng)作和重新識(shí)別的用戶動(dòng)作都是拍動(dòng)作而且拍動(dòng)作沿相同方向移動(dòng),則控制單元140可以將選擇一個(gè)廣播信號(hào)的用戶動(dòng)作和重新識(shí)別的用戶動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。此外,如果選擇一個(gè)廣播信號(hào)的用戶動(dòng)作是沿向上方向的拍動(dòng)作而且改變顯示已提供的內(nèi)容的屏幕的至少一部分的用戶動(dòng)作也是沿向上方向的拍動(dòng)作,則控制單元140可以將這兩個(gè)動(dòng)作識(shí)別為相同形式的用戶動(dòng)作。接下來,控制單元140可以響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。在另一個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供第一圖像數(shù)據(jù)??刂茊卧?40可以向音頻輸出單元196提供第一圖像數(shù)據(jù)的音頻數(shù)據(jù)。例如,第一圖像數(shù)據(jù)可以是廣播信號(hào)的圖像數(shù)據(jù),而且第一圖像數(shù)據(jù)的音頻數(shù)據(jù)可以是廣播信號(hào)的音頻數(shù)據(jù)??刂茊卧?40可以響應(yīng)于識(shí)別到的用戶動(dòng)作而控制音頻數(shù)據(jù)的音量等級(jí)。例如,控制單元140可以控制第一圖像數(shù)據(jù)的音頻數(shù)據(jù)的音量等級(jí)。接下來,控制單元140可以停止提供第一圖像數(shù)據(jù)和第一圖像數(shù)據(jù)的音頻數(shù)據(jù),而且可以提供第二圖像數(shù)據(jù)。例如,第二圖像數(shù)據(jù)可以是存儲(chǔ)在電子設(shè)備100中的內(nèi)容的圖像數(shù)據(jù)。接下來,控制單元140可以重新識(shí)別與已識(shí)別的用于控制音頻數(shù)據(jù)的音量等級(jí)的用戶動(dòng)作具有基本相同的形式的用戶動(dòng)作??刂茊卧?40可以響應(yīng)于重新識(shí)別的用戶動(dòng)作而改變顯示第二圖像數(shù)據(jù)的屏幕的至少一部分。在另一個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供分別從多個(gè)源提供的圖像數(shù)據(jù)當(dāng)中的第一圖像數(shù)據(jù)和從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)之一。顯示單元193顯示第一圖像數(shù)據(jù)或第二圖像數(shù)據(jù)。例如,分別從多個(gè)源提供的圖像數(shù)據(jù)當(dāng)中的第一圖像數(shù)據(jù)可以是通過多個(gè)頻道接收到的多個(gè)廣播信號(hào)的圖像數(shù)據(jù)當(dāng)中的、通過廣播接收單元210中包括的調(diào)諧器選定的頻道接收到的廣播信號(hào)的圖像數(shù)據(jù)。例如,從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)可以是從電子設(shè)備100的存儲(chǔ)單元130、連接到外部端子輸入單元200的外部設(shè)備、或連接到網(wǎng)絡(luò)接口單元180的服務(wù)器提供的多個(gè)內(nèi)容當(dāng)中的一個(gè)內(nèi)容的圖像數(shù)據(jù)。接下來,控制單元140可以通過動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作。如果控制單元140提供第一圖像數(shù)據(jù),則控制單元140可以響應(yīng)于識(shí)別到的用戶動(dòng)作而提供從與第一圖像數(shù)據(jù)的源不同的源提供的圖像數(shù)據(jù)。如果控制單元140提供第二圖像數(shù)據(jù),則控制單元140可以提供不同于從單一源提供的多個(gè)圖像數(shù)據(jù)當(dāng)中的第二圖像數(shù)據(jù)的圖像數(shù)據(jù)。在另一個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供第一圖像數(shù)據(jù)和第二圖像數(shù)據(jù)之一,該第一圖像數(shù)據(jù)是在向電子設(shè)備100供電時(shí)立即重現(xiàn)的圖像數(shù)據(jù),該第二圖像數(shù)據(jù)在向電子設(shè)備100供電之后電子設(shè)備100進(jìn)入一個(gè)模式之后重現(xiàn)的圖像數(shù)據(jù)。顯示單元193可以顯示第一圖像數(shù)據(jù)或第二圖像數(shù)據(jù)。例如,如果電子設(shè)備100是TV,則在向電子設(shè)備100供電時(shí)立即重現(xiàn)的第一數(shù)據(jù)圖像可以是在TV打開時(shí)立即重現(xiàn)的廣播信號(hào)。例如,如果電子設(shè)備100是TV,則在向電子設(shè)備100供電之后電子設(shè)備100進(jìn)入一個(gè)模式之后重現(xiàn)的第二圖像數(shù)據(jù)可以是在TV打開之后TV按照通過語音輸入單元110、動(dòng)作輸入單元120或遙控器的用戶輸入進(jìn)入一個(gè)模式之后重現(xiàn)的內(nèi)容。接下來,如果提供第一圖像數(shù)據(jù),則控制單元140可以響應(yīng)于通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供在供電時(shí)立即重現(xiàn)的不同的圖像數(shù)據(jù)(例如,不同頻道的廣播信號(hào)的圖像數(shù)據(jù))。如果提供第二圖像數(shù)據(jù),則控制單元140可以響應(yīng)于通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供在電子設(shè)備100進(jìn)入一個(gè)模式之后重現(xiàn)的不同的圖像數(shù)據(jù)(例如,存儲(chǔ)在存儲(chǔ)單元130中的內(nèi)容的圖像數(shù)據(jù)、或者從外部端子輸入單元160或網(wǎng)絡(luò)接口單元180接收到的內(nèi)容的圖像數(shù)據(jù))。在另一個(gè)示范性實(shí)施例中,控制單元140可以向圖像輸出單元190或顯示單元193提供多個(gè)運(yùn)動(dòng)圖像之一或多個(gè)圖像之一。顯示單元193可以顯示該運(yùn)動(dòng)圖像或該圖像。例如,所述多個(gè)運(yùn)動(dòng)圖像之一可以指示隨時(shí)間變化的圖像作為多個(gè)廣播信號(hào)之一。此外,所述多個(gè)圖像之一可以是多個(gè)存儲(chǔ)的圖像之一。接下來,如果提供運(yùn)動(dòng)圖像,則控制單元140可以響應(yīng)于通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供多個(gè)運(yùn)動(dòng)圖像當(dāng)中的、不同于已提供的運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像(例如,不同頻道的廣播信號(hào)的廣播信號(hào))。如果提供圖像,則控制單元140可以響應(yīng)于通過動(dòng)作識(shí)別模塊1301識(shí)別到的用戶動(dòng)作而提供多個(gè)圖像當(dāng)中的、不同于已提供的圖像的圖像。下文中,將參照?qǐng)D80至圖91解釋響應(yīng)于用戶動(dòng)作而改變的屏幕。圖80和圖81是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向上方向的用戶動(dòng)作而改變的屏幕的視圖。在圖80中,控制單元140可以識(shí)別作為用戶動(dòng)作的向上方向的拍動(dòng)作。參照?qǐng)D80的8010和8020,如果控制單元140提供廣播信號(hào),則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼增加。例如,頻道號(hào)碼為“7”的廣播信號(hào)改變?yōu)轭l道號(hào)碼為“8”的廣播信號(hào)。參照?qǐng)D80的8030和8040,如果控制單元140提供包括多個(gè)頁面的內(nèi)容,則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的、位于該顯示頁面下方的頁面的屏幕。例如,8030中顯示第二頁面的屏幕可以改變?yōu)?040中顯示第三頁面的屏幕。在圖81中,控制單元140可以識(shí)別作為用戶動(dòng)作的向上方向的拍動(dòng)作。參照?qǐng)D81的8110和8120,如果控制單元140提供廣播信號(hào),則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼增加。參照?qǐng)D81的8130和8140,如果控制單元140提供包括一個(gè)頁面的內(nèi)容,則響應(yīng)于向上方向的拍動(dòng)作,控制單元140可以將屏幕上的所述一個(gè)頁面的一部分改變?yōu)槲挥谒鲆粋€(gè)頁面的該部分下方的另一部分。圖82和圖83是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向下方向的用戶動(dòng)作而改變的屏幕的示圖。在圖82中,控制單元140可以識(shí)別作為用戶動(dòng)作的向下方向的拍動(dòng)作。參照?qǐng)D82的8210到8220,如果控制單元140提供廣播信號(hào),則響應(yīng)于向下方向的拍動(dòng)作,控制單元140停止向屏幕上提供廣播信號(hào)并可以提供這樣的廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從·
34停止的廣播信號(hào)的頻道號(hào)碼減小。例如,頻道號(hào)碼為“8”的廣播信號(hào)改變?yōu)轭l道號(hào)碼為“7”的廣播信號(hào)。參照?qǐng)D82的8230和8240,如果控制單元140提供包括多個(gè)頁面的內(nèi)容,則響應(yīng)于向下方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示所述多個(gè)頁面當(dāng)中的、位于該顯示頁面上方的頁面的屏幕。例如,8230中顯示第二頁面的屏幕可以改變?yōu)?240中顯示第一頁面的屏幕。在圖83中,控制單元140可以識(shí)別作為用戶動(dòng)作的向下方向的拍動(dòng)作。參照?qǐng)D83的8310和8320,如果控制單元140提供廣播信號(hào),則響應(yīng)于向下方向的拍動(dòng)作,控制單元140停止向屏幕上提供廣播信號(hào)并可以提供廣播信號(hào),該廣播信號(hào)的頻道號(hào)碼從停止的廣播信號(hào)的頻道號(hào)碼減小。參照?qǐng)D83的8330和8340,如果控制單元140提供包括一個(gè)頁面的內(nèi)容,則響應(yīng)于向下方向的拍動(dòng)作,控制單元140可以將屏幕上的所述一個(gè)頁面的一部分改變?yōu)槲挥谒鲆粋€(gè)頁面的該部分上方的另一部分。圖84至圖87是示出根據(jù)各種示范性實(shí)施例的、響應(yīng)于向左方向的用戶動(dòng)作而改變的屏幕的示圖。在圖84中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照8410和8420,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。例如,廣播信號(hào)的音量等級(jí)可以從“14”降低為“13”。參照8430和8440,如果控制單元140提供包括多個(gè)頁面的內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的、位于所述一個(gè)頁面右部的頁面的屏幕。例如,8430中顯示第二頁面的屏幕可以改變?yōu)?440中顯示第三頁面的屏幕。在圖85中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D85中的8510和8520,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D85的8530和8540,如果控制單元140提供包括一個(gè)頁面的內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示所述一個(gè)頁面的一部分的屏幕改變?yōu)轱@示位于該部分右部的另一部分的屏幕。在圖86中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D86中的8610和8620,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D86中的8630和8640,響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將顯示第二內(nèi)容的屏幕改變?yōu)轱@示位于第二內(nèi)容之后的第三內(nèi)容的屏幕。在圖87中,控制單元140可以識(shí)別作為用戶動(dòng)作的向左方向的拍動(dòng)作。參照?qǐng)D87中的8710和8720,如果控制單元140提供廣播信號(hào),則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以降低正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D87中的8730和8740,如果控制單元140分別在屏幕上的第一區(qū)域8731和第二區(qū)域8735上提供至少一個(gè)內(nèi)容,則響應(yīng)于向左方向的拍動(dòng)作,控制單元140可以將內(nèi)容8751從第二區(qū)域8735移除,而且代替地可以在第二區(qū)域8735上顯示不同的內(nèi)容8752。在圖88中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D88的8810和8820,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。例如,廣播信號(hào)的音量等級(jí)可以從“14”增加為“15”。參照?qǐng)D88的8830到8840,如果控制單元140提供包括多個(gè)頁面的內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示多個(gè)頁面之一的屏幕改變?yōu)轱@示多個(gè)頁面當(dāng)中的、位于該顯示頁面左部的頁面的屏幕。例如,8830中顯示第二頁面的屏幕可以改變?yōu)?840中顯示第一頁面的屏幕。在圖89中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D89的8910和8920,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D89的8930和8940,如果控制單元140提供包括一個(gè)頁面的內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示所述一個(gè)頁面的一部分的屏幕改變?yōu)轱@示位于該部分左部的另一部分的屏幕。在圖90中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D90中的9010和9020,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D90中的9030和9040,如果控制單元140提供第二內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將顯示第二內(nèi)容的屏幕改變?yōu)轱@示位于第二內(nèi)容之前的第一內(nèi)容的屏幕。在圖91中,控制單元140可以識(shí)別作為用戶動(dòng)作的向右方向的拍動(dòng)作。參照?qǐng)D91中的9110和9120,如果控制單元140提供廣播信號(hào),則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以增加正在提供的廣播信號(hào)的音量等級(jí)。參照?qǐng)D91中的9130和9140,如果控制單元140分別在屏幕上的第一區(qū)域9131和第二區(qū)域9135上提供至少一個(gè)內(nèi)容,則響應(yīng)于向右方向的拍動(dòng)作,控制單元140可以將內(nèi)容9151從第二區(qū)域9135移除,而且代替地可以在第二區(qū)域9135上顯示不同的內(nèi)容9152。圖92和圖93是示出根據(jù)示范性實(shí)施例的、響應(yīng)于用戶動(dòng)作而改變屏幕的電子設(shè)備的控制方法的流程圖。參照?qǐng)D92,電子設(shè)備100響應(yīng)于識(shí)別到的用戶動(dòng)作而從多個(gè)廣播信號(hào)當(dāng)中選擇一個(gè)廣播信號(hào)(S9212)。識(shí)別到的用戶動(dòng)作可以是通過動(dòng)作輸入單元120輸入的,而且可以由動(dòng)作識(shí)別模塊1301識(shí)別。電子設(shè)備100提供所選擇的廣播信號(hào)(S9214)。廣播信號(hào)可以提供給圖像輸出單元190或顯示單元193。然后,在電子設(shè)備100停止提供選定的廣播信號(hào)并提供存儲(chǔ)的內(nèi)容(S9216)的情況下,電子設(shè)備100可以重新識(shí)別與識(shí)別到的用戶動(dòng)作具有基本相同的形式的用戶動(dòng)作(S9218)。存儲(chǔ)的內(nèi)容可以是存儲(chǔ)在存儲(chǔ)單元130中的內(nèi)容、或者是從外部端子輸入單元160或網(wǎng)絡(luò)接口 180接收到的內(nèi)容。重新識(shí)別的用戶動(dòng)作可以通過動(dòng)作輸入單元120輸入,而且可以通過動(dòng)作識(shí)別模塊1301識(shí)別。響應(yīng)于重新識(shí)別的用戶動(dòng)作,電子設(shè)備100可以改變顯示已提供的內(nèi)容的屏幕的至少一部分(S9220)。參照?qǐng)D93,電子設(shè)備100提供多個(gè)廣播信號(hào)當(dāng)中的一個(gè)廣播信號(hào)以及存儲(chǔ)的內(nèi)容之一(S9312)。電子設(shè)備100通過動(dòng)作識(shí)別模塊1301識(shí)別用戶動(dòng)作(S9314)。電子設(shè)備100可以響應(yīng)于該用戶動(dòng)作確定所提供的信號(hào)是廣播信號(hào)還是內(nèi)容(S9316)。如果提供的是廣播信號(hào),則電子設(shè)備100可以控制廣播信號(hào)的音量等級(jí)或者提供多個(gè)廣播信號(hào)當(dāng)中的另一個(gè)廣播信號(hào)(S9318)。如果提供的是內(nèi)容,則電子設(shè)備100改變顯示已提供的內(nèi)容的屏幕的至少一部分(S9320)。如上所述,用戶可以使用用戶動(dòng)作來更有效且更直觀地控制電子設(shè)備100??刂茊卧?40按照從遙控信號(hào)接收單元170接收到的遙控信號(hào)、通過語音輸入單
36元110輸入的用戶語音、和通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制電子設(shè)備100。此處記載的遙控器可以是通用遙控器,但是這不應(yīng)該被視為限制。遙控器可以是包括觸摸板 的遙控器。具體來說,如果在遙控模式(在遙控模式中,按照在遙控信號(hào)接收單元170處接收到的遙控信號(hào)來控制電子設(shè)備100)中識(shí)別到通過語音輸入單元110輸入的語音啟動(dòng)命令,則控制單元140將模式改變?yōu)檎Z音任務(wù)模式,以便執(zhí)行由通過語音輸入單元110輸入的用戶語音控制的語音任務(wù)。如果模式改變?yōu)檎Z音任務(wù)模式,則控制單元140可以控制顯示單元193顯示指示電子設(shè)備100的模式是語音任務(wù)模式的圖標(biāo)、以及包括用于指導(dǎo)語音任務(wù)的語音項(xiàng)目的語音輔助信息。如果在語音任務(wù)模式中在遙控器上的按鈕當(dāng)中選擇第一按鈕以改變?yōu)檫b控模式,則遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)??刂茊卧?40響應(yīng)于第一遙控信號(hào)而將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100通過遙控器來控制。第一按鈕可以是將模式改變?yōu)檫b控模式的遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的按鈕中的特定按鈕(certain button)。如果第一按鈕是特定按鈕,則當(dāng)接收到與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)時(shí),控制單元140將模式改變?yōu)檫b控模式,然后執(zhí)行與第一按鈕相對(duì)應(yīng)的任務(wù)。例如,如果第一按鈕是靜音按鈕,則控制單元140將模式從語音任務(wù)模式改變?yōu)檫b控模式,然后執(zhí)行靜音。如果在語音任務(wù)模式中通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140使用動(dòng)作識(shí)別模塊1301識(shí)別動(dòng)作啟動(dòng)命令。如果識(shí)別到動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100由通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制。如果在遙控模式(在遙控模式中,電子設(shè)備100按照在遙控信號(hào)接收單元170處接收到的遙控信號(hào)來控制)中識(shí)別到通過動(dòng)作輸入單元120輸入的動(dòng)作啟動(dòng)命令,則控制單元140將模式改變?yōu)閯?dòng)作任務(wù)模式,以便執(zhí)行由通過動(dòng)作輸入單元120輸入的用戶動(dòng)作控制的動(dòng)作任務(wù)。如果模式改變?yōu)閯?dòng)作任務(wù)模式,則控制單元140可以控制顯示單元193顯示指示電子設(shè)備100的模式是動(dòng)作任務(wù)模式的圖標(biāo)、以及包括用于指導(dǎo)動(dòng)作任務(wù)的動(dòng)作項(xiàng)目的動(dòng)作輔助信息。如果在動(dòng)作任務(wù)模式中在遙控器上的按鈕當(dāng)中選擇第一按鈕以改變?yōu)檫b控模式,則遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)??刂茊卧?40響應(yīng)于第一遙控信號(hào)而將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100通過遙控器控制。第一按鈕可以是將模式改變?yōu)檫b控模式的遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的按鈕當(dāng)中的特定按鈕。如果第一按鈕是特定按鈕,則控制單元140當(dāng)接收到與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào)時(shí)將模式改變?yōu)檫b控模式,然后執(zhí)行與第一按鈕相對(duì)應(yīng)的任務(wù)。例如,如果第一按鈕是靜音按鈕,則控制單元140將電子設(shè)備100的模式從動(dòng)作任務(wù)模式改變?yōu)檫b控模式,然后執(zhí)行靜音。如果在動(dòng)作任務(wù)模式中通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140使用語音識(shí)別模塊130k識(shí)別語音啟動(dòng)命令。如果識(shí)別到語音啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100由通過語音輸入單元HO輸入的用戶語音來控制。下文中,將參照?qǐng)D94至圖97解釋根據(jù)示范性實(shí)施例的、改變?yōu)檫b控模式、動(dòng)作任務(wù)模式和語音任務(wù)模式的方法。具體來說,電子設(shè)備100打開之后,控制單元140 —般在遙控模式下操作,在遙控模式中,電子設(shè)備100由遙控信號(hào)控制。在遙控模式中,不顯示單獨(dú)的UI,如圖94所示。然而,這僅僅是示例,而且控制單元140可以在遙控模式中顯示指示遙控模式的UI。如果在遙控模式中通過語音輸入單元110輸入了語音啟動(dòng)命令,則控制單元140識(shí)別語音啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。當(dāng)改變?yōu)檎Z音任務(wù)模式時(shí),控制單元140可以顯示語音輔助信息,如圖95所示。如果在語音任務(wù)模式中選擇遙控器上的第一按鈕,則控制單元140通過遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào),然后將電子設(shè)備100的模式再次改變?yōu)檫b控模式,如圖94所示。遙控器上的第一按鈕可以是遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的特定按鈕。如果在語音任務(wù)模式中通過動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140識(shí)別該動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制。當(dāng)改變?yōu)閯?dòng)作任務(wù)模式時(shí),控制單元140可以顯示動(dòng)作輔助信息3310,如圖96所示。如果在遙控模式中通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140識(shí)別動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制。當(dāng)改變?yōu)閯?dòng)作任務(wù)模式時(shí),控制單元140可以顯示動(dòng)作幫助命令3310,如圖96所示。如果在動(dòng)作任務(wù)模式中選擇遙控器上的第一按鈕,則控制單元140通過遙控信號(hào)接收單元170接收與第一按鈕相對(duì)應(yīng)的第一遙控信號(hào),并且將電子設(shè)備100的模式再次改變?yōu)檫b控模式,如圖94所示。遙控器上的第一按鈕可以是遙控模式改變按鈕。然而,這僅僅是示例,而且第一按鈕可以是遙控器上的特定按鈕。如果在動(dòng)作任務(wù)模式中通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140識(shí)別語音啟動(dòng)命令并且將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。當(dāng)改變?yōu)檎Z音任務(wù)模式時(shí),控制單元140可以顯示語音輔助信息,如圖95所示。如上所述,電子設(shè)備100可以分別使用遙控信號(hào)、語音啟動(dòng)命令和動(dòng)作啟動(dòng)命令來改變?yōu)檫b控模式、語音任務(wù)模式和動(dòng)作任務(wù)模式。圖97是根據(jù)示范性實(shí)施例的、解釋改變?yōu)檫b控模式、動(dòng)作任務(wù)模式和語音任務(wù)模式的方法的流程圖。電子設(shè)備100打開然后進(jìn)入遙控模式,在遙控模式中電子設(shè)備100由遙控器來控制(S9710)。電子設(shè)備100保持在遙控模式中(S9710),除非輸入語音啟動(dòng)命令或動(dòng)作啟動(dòng)命令。
38
電子設(shè)備100確定是否輸入了語音啟動(dòng)命令(S9720)。如果輸入了語音啟動(dòng)命令(S9720-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制(S9730)。當(dāng)進(jìn)入語音任務(wù)模式時(shí),電子設(shè)備100可以顯示語音輔助信息,如圖95所示。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S9740)。如果輸入了動(dòng)作啟動(dòng)命令(S9740-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制(S9750)。如果電子設(shè)備100處于語音任務(wù)模式或動(dòng)作任務(wù)模式中,在控制單元140確定是否返回到遙控模式(S9760)。如上所述,如果識(shí)別到返回遙控模式的啟動(dòng)命令或模式取消命令,則控制單元140可以返回到遙控模式。此外,當(dāng)果電子設(shè)備100處于語音任務(wù)模式時(shí),如果在預(yù)定時(shí)間(例如5分鐘)內(nèi)沒有識(shí)別到語音,則控制單元140可以自動(dòng)返回到遙控模式。類似地,當(dāng)電子設(shè)備100處于動(dòng)作任務(wù)模式時(shí),如果在預(yù)定時(shí)間(例如5分鐘)內(nèi)沒有識(shí)別到動(dòng)作,則控制單元140可以自動(dòng)返回到遙控模式。如圖97所示,電子設(shè)備100以遙控模式(S9710)、語音任務(wù)模式(S9730)和動(dòng)作任務(wù)模式(S9750)進(jìn)行操作。在所有三種模式中,控制單元140確定是否切換到語音任務(wù)模式(S9720-是)、是否切換到動(dòng)作任務(wù)模式(S9740-是)、是否切換到遙控模式(S9760-是)、或者是否保持當(dāng)前模式(S9720-否、S9760-否、S9740-否)。雖然已經(jīng)描述了圖97中的方法,但是這僅僅是示例,而且本公開的技術(shù)想法可以應(yīng)用于用于從遙控模式、語音任務(wù)模式和動(dòng)作任務(wù)模式改變和/或改變到遙控模式、語音任務(wù)模式和動(dòng)作任務(wù)模式的任何方法。如上所述,將電子設(shè)備100的模式改變?yōu)檫b控模式、語音任務(wù)模式和動(dòng)作任務(wù)模式,從而用戶可以根據(jù)用戶期望的模式來控制電子設(shè)備100??刂茊卧?40可以使用外部移動(dòng)設(shè)備通過語音識(shí)別來控制電子設(shè)備100。具體來說,如果通過外部移動(dòng)設(shè)備中所包括的麥克風(fēng)輸入用戶語音,則控制單元140通過語音輸入單元110接收用戶語音的輸入、識(shí)別輸入的用戶語音、并按照識(shí)別到的用戶語音執(zhí)行電子設(shè)備100的語音任務(wù)。移動(dòng)設(shè)備可以是,但不限于,遙控器、移動(dòng)電話、個(gè)人數(shù)字助理(PDA)和筆記本計(jì)算機(jī)。語音輸入單元110可以是用于從外部移動(dòng)設(shè)備接收用戶語音信號(hào)的通信單元。在外部移動(dòng)設(shè)備中運(yùn)行用于語音識(shí)別的應(yīng)用,而且輸入用戶語音。如果移動(dòng)設(shè)備識(shí)別到用戶語音、生成與該用戶語音相對(duì)應(yīng)的控制信號(hào)、然后將該控制信號(hào)發(fā)送給電子設(shè)備100,則控制單元140可以按照從移動(dòng)設(shè)備輸入的控制信號(hào)來執(zhí)行電子設(shè)備100的語音任務(wù)。如果在移動(dòng)設(shè)備中運(yùn)行用于語音識(shí)別的應(yīng)用,而且輸入了已輸入到移動(dòng)設(shè)備中包括的麥克風(fēng)的用戶語音,則控制單元140識(shí)別到輸入的用戶語音,并按照該用戶語音執(zhí)行電子設(shè)備100的語首任務(wù)。如果在移動(dòng)設(shè)備中已經(jīng)運(yùn)行用于語音識(shí)別的應(yīng)用之后選擇移動(dòng)設(shè)備所包括的第一按鈕,則控制單元140通過通信單元(未示出)接收與第一按鈕相對(duì)應(yīng)的第一信號(hào),并響應(yīng)于第一信號(hào)而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式。通過選擇移動(dòng)設(shè)備所包括的第一按鈕而改變到的語音任務(wù)模式是這樣的模式,在該模式中,按照來自移動(dòng)設(shè)備中所包括的麥克風(fēng)的用戶語音輸入來執(zhí)行語音任務(wù)。如果選擇移動(dòng)設(shè)備上的第一按鈕和第二按鈕之
39一,則可以釋放通過選擇移動(dòng)設(shè)備所包括的第一按鈕而改變到的語音任務(wù)模式。第一按鈕和第二按鈕可以是移動(dòng)設(shè)備中所包括的物理按鈕。然而,這僅僅是示例,而且第一按鈕和第二按鈕可以是在已經(jīng)運(yùn)行了用于語音識(shí)別的應(yīng)用之后顯示在移動(dòng)設(shè)備上的Π。當(dāng)在語音任務(wù)模式中選擇移動(dòng)設(shè)備上的第二按鈕時(shí),控制單元140可以從移動(dòng)設(shè)備接收用戶語音的輸入。當(dāng)選擇移動(dòng)設(shè)備上的第二按鈕時(shí),控制單元140可以在移動(dòng)設(shè)備上顯示指示能夠輸入用戶語音的Π。因此,用戶可以知道,可以通過移動(dòng)設(shè)備上顯示的Π輸入語音。如果將用戶語音輸入到移動(dòng)設(shè)備,則控制單元140不通過電子設(shè)備100中包括的麥克風(fēng)接收用戶語音。當(dāng)移動(dòng)設(shè)備撥打電話時(shí),可以使用移動(dòng)設(shè)備中包括的麥克風(fēng)。也就是說,如果移動(dòng)設(shè)備執(zhí)行一般的電話功能,則麥克風(fēng)從用戶接收電話語音的輸入。如果移動(dòng)設(shè)備運(yùn)行用于語音識(shí)別的應(yīng)用,則移動(dòng)設(shè)備可以從用戶接收控制電子設(shè)備100的語音輸入。圖98是根據(jù)示范性實(shí)施例的、解釋用于使用外部移動(dòng)設(shè)備識(shí)別用戶語音的方法的流程圖。移動(dòng)設(shè)備運(yùn)行用于語音輸入的應(yīng)用(S9810 )。移動(dòng)設(shè)備可以是移動(dòng)電話。在移動(dòng)設(shè)備中已經(jīng)運(yùn)行用于語音輸入的應(yīng)用之后,移動(dòng)設(shè)備通過移動(dòng)設(shè)備中所包括的麥克風(fēng)接收用戶語音的輸入(S9820)。移動(dòng)設(shè)備中所包括的麥克風(fēng)可以是用于打電話的麥克風(fēng)。電子設(shè)備100從移動(dòng)設(shè)備接收輸入到外部移動(dòng)設(shè)備的用戶語首(9830)。如果從移動(dòng)設(shè)備接收到用戶語音,則電子設(shè)備100使用語音識(shí)別模塊130k識(shí)別用戶語音(S9840)。電子設(shè)備100使用語音數(shù)據(jù)庫按照識(shí)別到的用戶語音執(zhí)行語音任務(wù)(S9850)。在上面的示范性實(shí)施例中,移動(dòng)設(shè)備接收用戶語音的輸入并且將用戶語音發(fā)送給電子設(shè)備100。然而,這僅僅是示例,而且移動(dòng)設(shè)備可以直接識(shí)別用戶語音,可以生成與用戶語音相對(duì)應(yīng)的控制信號(hào),然后可以將該控制信號(hào)發(fā)送給電子設(shè)備100。如上所述,使用諸如移動(dòng)電話的移動(dòng)設(shè)備執(zhí)行電子設(shè)備100的語音任務(wù),從而用戶能夠使用語音識(shí)別來更容易地控制該電子設(shè)備。根據(jù)示范性實(shí)施例,根據(jù)是否需要指針(pointer)來執(zhí)行任務(wù),動(dòng)作任務(wù)模式可以是動(dòng)作模式和指向模式之一。具體來說,動(dòng)作模式是這樣的模式,在該模式中,改變電子設(shè)備100的設(shè)置的任務(wù)是按照預(yù)先設(shè)置的動(dòng)作(例如,沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作、或者沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作)來控制的。例如,如果在電子設(shè)備100執(zhí)行廣播接收功能時(shí)輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)閯?dòng)作模式。因此,電子設(shè)備100可以響應(yīng)于與預(yù)先設(shè)置的動(dòng)作相匹配的用戶動(dòng)作而執(zhí)行諸如音量控制或頻道改變的任務(wù)。指向模式是使用指針來執(zhí)行任務(wù)的模式。例如,如果在電子設(shè)備100顯示包括多個(gè)可選項(xiàng)目的列表(例如,內(nèi)容列表、頻道列表、電子節(jié)目指南或EPG、以及網(wǎng)頁)之一時(shí)輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。在指向模式中,控制單?40在顯示屏幕的中心顯示指針。由于動(dòng)作輔助信息的存在,指針可以顯示在顯示屏幕的中心的上部位置。
下文中將更詳細(xì)地解釋指向模式。如果在電子設(shè)備100顯示包括多個(gè)用于運(yùn)行應(yīng)用(例如,智能中心)的可運(yùn)行圖標(biāo)的內(nèi)容列表和網(wǎng)頁之一時(shí)輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶騃旲式并且在顯不屏.的中心顯不指針。在指向模式中,電子設(shè)備100可以在顯示屏幕的下部顯示用于執(zhí)行動(dòng)作任務(wù)的動(dòng)作輔助信息。顯示的動(dòng)作輔助信息可以不同于動(dòng)作模式的動(dòng)作輔助信息。如果在電子設(shè)備100顯示內(nèi)容列表時(shí)通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。在指向模式中,如果指針根?jù)輸入到動(dòng)作輸入單元120的用戶動(dòng)作而位于內(nèi)容列表的第一可運(yùn)行圖標(biāo)處,則控制單元140對(duì)第一可運(yùn)行圖標(biāo)與其他可運(yùn)行圖標(biāo)進(jìn)行區(qū)別顯示。如果在指向模式中輸入結(jié)束內(nèi)容列表的屏幕的命令,則控制單元可以不僅從顯示屏幕移除該內(nèi)容列表而且移除該指針。如果在電子設(shè)備100顯示網(wǎng)頁時(shí)通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,貝Ij控制單元140可以將電子設(shè)備100的模式改變?yōu)橹赶蚰J?。網(wǎng)頁可以包括多個(gè)超鏈接。在指向模式中,如果指針根據(jù)通過動(dòng)作輸入單元120輸入的用戶動(dòng)作而位于網(wǎng)頁的第一超鏈接處,則控制單元140對(duì)第一超鏈接與其他超鏈接進(jìn)行不同的顯示。如果指針位于第一超鏈接處而且通過動(dòng)作輸入單元120輸入第一用戶動(dòng)作(例如,抓動(dòng)作),則控制單元140運(yùn)行第一超鏈接。下文中,將參照?qǐng)D99至圖101更加詳細(xì)地解釋指向模式。如果如圖99所示顯示包括用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)的內(nèi)容列表而且通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140可以顯示動(dòng)作輔助信息和指針10010,如圖100所示。指針10010可以顯示在顯示屏幕的中心。如果通過動(dòng)作輸入單元120輸入沿左下方向的移動(dòng)動(dòng)作以將指針10010放置在可運(yùn)行圖標(biāo)“APP2”處,則控制單元140將指針10010放置在可運(yùn)行圖標(biāo)“APP2”處。如果指針10010位于可運(yùn)行圖標(biāo)“APP2”處,則控制單元140以比其他圖標(biāo)粗黑(thicker)的方式突出顯示可運(yùn)行圖標(biāo)“APP2”和可運(yùn)行圖標(biāo)的名稱,如圖101所示。如果指針10010位于可運(yùn)行圖標(biāo)“APP2”處而且通過動(dòng)作輸入單元120輸入第一用戶動(dòng)作(例如,抓動(dòng)作),則控制單元140運(yùn)行可運(yùn)行圖標(biāo)“APP2”,如圖102所示。如果如圖100所示顯示內(nèi)容列表而且用戶輸入內(nèi)容列表釋放命令(例如,沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作或遙控器的按鈕),則控制單元140從顯示屏幕移除內(nèi)容列表和指針并顯示廣播接收屏幕,如圖103所示。雖然在上面的示范性實(shí)施例中顯示了內(nèi)容列表,但是在顯示包括多個(gè)超鏈接的網(wǎng)頁時(shí)也可以應(yīng)用本公開的技術(shù)想法。圖104是根據(jù)示范性實(shí)施例的、解釋提供指向模式的方法的流程圖。電子設(shè)備100顯不內(nèi)容列表和網(wǎng)頁之一(S10410)。內(nèi)容列表可以包括多個(gè)用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo),而且網(wǎng)頁可以包括多個(gè)超鏈接。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S10420)。如果輸入了動(dòng)作啟動(dòng)命令(S10420-是),則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)橹赶蚰J?S10430)。指向模式是執(zhí)行需要指針的任務(wù)(例如,運(yùn)行應(yīng)用和瀏覽網(wǎng)頁)的模式。
如果模式改變?yōu)橹赶蚰J?,則電子設(shè)備100在顯示屏幕上顯示指針(S10440)。指針可以顯示在顯示屏幕的中心處。如上所述,將電子設(shè)備100改變?yōu)橹赶蚰J揭詧?zhí)行需要指針的任務(wù),從而用戶能夠更加容易地控制電子設(shè)備100。如果在指向模式中通過動(dòng)作輸入單元120輸入第一動(dòng)作,則控制單元140在與第一動(dòng)作相對(duì)應(yīng)的方向上移動(dòng)指針,而且如果通過動(dòng)作輸入單元120輸入第二動(dòng)作,則控制單元140執(zhí)行與第二動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)。如果當(dāng)指針位于內(nèi)容列表的第一可運(yùn)行圖標(biāo)處或位于網(wǎng)頁的第一超鏈接處的時(shí)候輸入第二動(dòng)作,則控制單元140可以解除對(duì)指針?biāo)谔幍牡谝豢蛇\(yùn)行圖標(biāo)和第一超鏈接的突出顯示。第二動(dòng)作可以是預(yù)先設(shè)置的、用于執(zhí)行電子設(shè)備100的動(dòng)作模式的動(dòng)作,而且可以是沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作以及沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作之一。例如,如果第二動(dòng)作是沿向上、向下、向左或向右方向的拍動(dòng)作,則控制單元140可以按照沿向上、向下、向左或向右方向的拍動(dòng)作來移動(dòng)顯示屏幕。在移動(dòng)屏幕之后,控制單元140可以在之前的位置再次顯示指針。此外,如果第二動(dòng)作可以是抓動(dòng)作,則控制單元140可以運(yùn)行指針?biāo)谔幍牡谝豢蛇\(yùn)行圖標(biāo)。在運(yùn)行第一可運(yùn)行圖標(biāo)之后,控制單元140可以在之前的位置處再次顯示指針。此外,如果第二動(dòng)作可以是沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作,則控制單元140可以在顯示屏幕上顯示當(dāng)前調(diào)諧的頻道的廣播節(jié)目。也就是說,控制單元140可以從顯示屏幕上移除內(nèi)容列表或網(wǎng)頁并提供廣播接收功能。在這個(gè)時(shí)候,由于廣播接收功能不需要指針,因此不顯示指針。雖然在上面的示例中沒有顯示指針,但是這僅僅是示例。指針可以保持在已經(jīng)顯示指針的位置處。下文中,將參照?qǐng)D105至圖107詳細(xì)解釋在指向模式中輸入預(yù)先設(shè)置的動(dòng)作的情況。如果電子設(shè)備100的模式改變?yōu)橹赶蚰J?,如圖100所示,則控制單元140在顯示屏幕的中心顯示指針10510,如圖105所示。如果在顯示屏幕上顯示指針的狀態(tài)下通過動(dòng)作輸入單元120輸入向右方向的拍動(dòng)作,則控制單元140從顯示屏幕上移除指針10510并將應(yīng)用顯示區(qū)域10520的屏幕改變?yōu)榱硪粋€(gè)應(yīng)用顯示區(qū)域10530的屏幕,如圖106所示。在移動(dòng)應(yīng)用顯示區(qū)域10520之后,控制單元140再次顯示指針10510,如圖107所
/Jn ο圖108是根據(jù)示范性實(shí)施例的、解釋在指向模式中輸入預(yù)先設(shè)置的動(dòng)作時(shí)電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯不內(nèi)容列表和網(wǎng)頁之一(S10810)。內(nèi)容列表可以包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo),而且網(wǎng)頁可以包括多個(gè)超鏈接。電子設(shè)備100確定是否輸入了動(dòng)作啟動(dòng)命令(S10820)。如果輸入了動(dòng)作啟動(dòng)命令(S10820-是),則電子設(shè)備100將電子設(shè)備100的模式
42改變?yōu)橹赶蚰J?S10830)。指向模式是執(zhí)行需要指針的任務(wù)(例如,運(yùn)行應(yīng)用和瀏覽網(wǎng)頁)的模式。如果模式改變?yōu)橹赶蚰J?,則電子設(shè)備100在顯示屏幕上顯示指針(S10840)。指針可以位于顯示屏幕的中心處。如果在顯示指針的狀態(tài)下通過動(dòng)作輸入單元120輸入預(yù)先設(shè)置的動(dòng)作(S10850-是),則電子設(shè)備100移除指針并執(zhí)行與預(yù)先設(shè)置的動(dòng)作相對(duì)應(yīng)的動(dòng)作(S10860)。預(yù)先設(shè)置的動(dòng)作是在動(dòng)作模式中預(yù)先設(shè)置的動(dòng)作,而且可以是沿向上、向下、向左或向右方向的拍動(dòng)作、抓動(dòng)作或者沿逆時(shí)針方向的旋轉(zhuǎn)動(dòng)作。如上所述對(duì)電子設(shè)備100進(jìn)行控制,使得即使在指向模式中用戶也可以按照預(yù)先設(shè)定的動(dòng)作執(zhí)行任務(wù)??刂茊卧?40可以按照電子設(shè)備100的模式將選定項(xiàng)目與其他項(xiàng)目不同地顯示。具體來說,控制單元140控制顯示單元193顯示多個(gè)可選項(xiàng)目??蛇x項(xiàng)目可以是內(nèi)容列表的可運(yùn)行圖標(biāo)或網(wǎng)頁的超鏈接。如果通過語音輸入單元110和動(dòng)作輸入單元120之一輸入用戶語音和用戶動(dòng)作之一,則控制單元140可以按照用戶輸入從多個(gè)項(xiàng)目當(dāng)中選擇第一項(xiàng)目??刂茊卧?40可以將選定的第一項(xiàng)目與其他項(xiàng)目不同地顯示。例如,控制單元140可以以比其他項(xiàng)目粗黑的方式突出顯不選定的第一項(xiàng)目。如果當(dāng)與其他項(xiàng)目不同地顯示第一項(xiàng)目的時(shí)候第一項(xiàng)目的名稱的字符數(shù)超過預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是動(dòng)作任務(wù)模式,則控制單元140可以顯示第一項(xiàng)目的完整名稱。例如,如圖109所示,顯示了選定的可運(yùn)行圖標(biāo)的完整名稱“令人興奮的鼓”??刂茊卧?40可以以滾動(dòng)的方法顯示第一項(xiàng)目的完整名稱。在上面的示例中,在動(dòng)作任務(wù)模式中顯示項(xiàng)目的完整名稱。然而,這僅僅是示例,而且即使在遙控模式中也可以顯示項(xiàng)目的完整名稱。另一方面,如果第一項(xiàng)目的名稱的字符數(shù)超過預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是語音任務(wù)模式,則控制單元140可以只顯示第一項(xiàng)目的名稱的一部分。第一項(xiàng)目的名稱的一部分是固定的。例如,如圖110所示,只顯示了選定的可運(yùn)行圖標(biāo)“令人興奮的鼓”的名稱的一部分“令人興奮的”。如果在語音任務(wù)模式中只顯示第一項(xiàng)目的名稱的一部分,而且通過語音輸入單元110輸入的用戶語音與顯示的名稱的部分一致,則控制單元140運(yùn)行第一項(xiàng)目。如果在所顯示的第一項(xiàng)目的名稱的一部分中沒有空格,而且通過語音輸入單元110輸入與所顯示的第一項(xiàng)目的名稱的多個(gè)拼寫(spelling)相對(duì)應(yīng)的用戶語音,則控制單元140可以運(yùn)行第一項(xiàng)目。例如,如果已顯示的第一項(xiàng)目的名稱是“man”,而且順序輸入語音和“n”,則控制單元140運(yùn)行第一項(xiàng)目。如果電子設(shè)備100的模式是語音任務(wù)模式,而且在所顯示的項(xiàng)目的名稱當(dāng)中包括具有與通過語音輸入單元Iio輸入的用戶語音一致的名稱的多個(gè)項(xiàng)目,則控制單元140可以顯示包括所述多個(gè)項(xiàng)目的候選組的列表。如果顯示候選組的列表,則控制單元140可以顯示項(xiàng)目的完整名稱,從而用戶可以清楚地分辨出項(xiàng)目。圖111是根據(jù)示范性實(shí)施例的、解釋按照模式不同地顯示項(xiàng)目的電子設(shè)備100的控制方法的流程圖。
43
電子設(shè)備100顯示多個(gè)可選項(xiàng)目(SI 1110)。該多個(gè)項(xiàng)目可以是用于運(yùn)行應(yīng)用的內(nèi)容列表中所包括的可運(yùn)行圖標(biāo)或網(wǎng)頁中所包括的超鏈接。電子設(shè)備100通過語音輸入單元110和動(dòng)作輸入單元120之一接收用戶語音和用戶動(dòng)作之一的輸入(S11120)。電子設(shè)備100按照用戶輸入選擇第一項(xiàng)目(S11130)。例如,在語音任務(wù)模式中,電子設(shè)備100可以按照通過語音輸入單元110輸入的用戶語音來選擇第一項(xiàng)目,而且在動(dòng)作任務(wù)模式中,電子設(shè)備100可以按照通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來選擇第一項(xiàng)目。在遙控任務(wù)模式中,電子設(shè)備100可以按照通過遙控信號(hào)接收單元170輸入的遙控信號(hào)來選擇第一項(xiàng)目。如果選擇了第一項(xiàng)目,則電子設(shè)備100可以將選定的第一項(xiàng)目與其他項(xiàng)目不同地顯示(S11140)。例如,電子設(shè)備100可以以比其他項(xiàng)目粗黑的方式突出顯示選定的第一項(xiàng)目。如果當(dāng)與其他項(xiàng)目不同地顯示第一項(xiàng)目的時(shí)候第一項(xiàng)目的名稱的字符數(shù)超過預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是動(dòng)作任務(wù)模式(或遙控模式),則電子設(shè)備100可以顯示第一項(xiàng)目的完整名稱。例如,如圖109所示,顯示了選定的可運(yùn)行圖標(biāo)的完整名稱“令人興奮的鼓”。此外,電子設(shè)備100可以以滾動(dòng)的方法顯示第一項(xiàng)目的完整名稱。另一方面,如果第一項(xiàng)目的名稱的字符數(shù)超過預(yù)先設(shè)定的數(shù)量而且電子設(shè)備100的模式是語音任務(wù)模式,則電子設(shè)備100可以只顯示第一項(xiàng)目的名稱的一部分。第一項(xiàng)目的名稱的一部分是固定的。例如,如圖110所示,只顯示了可運(yùn)行圖標(biāo)“令人興奮的鼓”的名稱的一部分(“令人興奮的”)。如上所述,在語音任務(wù)模式中只顯示項(xiàng)目名稱的一部分,從而用戶能夠通過只說出名稱的一部分來運(yùn)行第一項(xiàng)目。在語音任務(wù)模式中,控制單元140顯示包括多個(gè)語音項(xiàng)目的語音輔助信息。語音輔助信息包括指示電子設(shè)備100的模式是語音任務(wù)模式的圖標(biāo),而且指示語音任務(wù)模式的圖標(biāo)可以位于語音輔助信息的中心處。如果顯示語音輔助信息,而且通過語音輸入單元110輸入與多個(gè)語音項(xiàng)目之一相對(duì)應(yīng)的用戶語音,則控制單元140可以在語音輔助信息的第一區(qū)域上顯示執(zhí)行語音任務(wù)的指導(dǎo)消息,而且在語音輔助信息的第二區(qū)域上顯示語音項(xiàng)目。第一區(qū)域可以是圖標(biāo)左側(cè)的區(qū)域,第二區(qū)域可以是圖標(biāo)右側(cè)的區(qū)域。指導(dǎo)消息的輸出屬性可以不同于語音項(xiàng)目的輸出屬性。輸出屬性可以包括字符的大小、色度、亮度和顏色中的至少一個(gè)。如果用戶語音是改變頻道的命令,則控制單元140可以在第一區(qū)域上顯示指導(dǎo)頻道改變的指導(dǎo)消息,而且可以在第二區(qū)域上顯示與可說出的改變頻道的命令的示例相對(duì)應(yīng)的語音項(xiàng)目以及與取消頻道改變相對(duì)應(yīng)的語音項(xiàng)目。如果用戶語音是關(guān)閉電源的命令,則控制單元140可以在第一區(qū)域上顯示確認(rèn)關(guān)閉電源的指導(dǎo)消息,而且可以在第二區(qū)域上顯示與關(guān)于是否關(guān)閉電源的命令相對(duì)應(yīng)的語音項(xiàng)目。下文中,將參照?qǐng)D112至圖114解釋語音輔助信息的顯示。如果通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。控制單元140如圖112所示顯示語音輔助信息。語音輔助信息可以顯示指示電子設(shè)備100的當(dāng)前模式是語音任務(wù)模式的圖標(biāo)820。語音輔助信息可以在圖標(biāo)820的左側(cè)區(qū)域上顯示關(guān)閉電源語音項(xiàng)目811、頻道語音項(xiàng)目812、靜音語音項(xiàng)目813和外部輸入語音項(xiàng)目814,并且可以在圖標(biāo)820的右側(cè)區(qū)域上顯示智能中心語音項(xiàng)目815、應(yīng)用項(xiàng)目語音項(xiàng)目816、搜索語音項(xiàng)目817和全部語音項(xiàng)目818。如果顯示語音輔助信息,而且通過語音輸入單元110輸入了與頻道語音項(xiàng)目812相對(duì)應(yīng)的命令“頻道”,則控制單元140如圖113所示改變語音輔助信息??刂茊卧?40在用于執(zhí)行語音任務(wù)的語音輔助信息中的圖標(biāo)820的左側(cè)區(qū)域上顯示具有第一色度的指導(dǎo)消息。例如,如圖113所示,可以在左側(cè)區(qū)域上顯示“請(qǐng)說出頻道名稱或頻道號(hào)碼”13110。控制單元140在語音輔助信息中的圖標(biāo)820的右側(cè)區(qū)域上顯示具有第二色度的語音項(xiàng)目。語音項(xiàng)目可以是與可說出的改變頻道的命令的示例相對(duì)應(yīng)的語音項(xiàng)目以及與取消頻道改變相對(duì)應(yīng)的語音項(xiàng)目(例如,前一個(gè)語音項(xiàng)目)。例如,如圖113所示,可以在圖標(biāo)820的右側(cè)區(qū)域上顯示“(示例11、MBC、前一個(gè)頻道等)前一個(gè)” 11320??刂茊卧?40可以進(jìn)行控制以使得圖標(biāo)820的右側(cè)區(qū)域的色度比圖標(biāo)820的左側(cè)區(qū)域的色度深(thick)。如果如圖112所示顯示語音輔助信息,而且通過語音輸入單元110輸入與關(guān)閉電源語音項(xiàng)目811相對(duì)應(yīng)的命令“關(guān)閉電源”,則控制單元140如圖114所示改變語音輔助信息。控制單元140在用于執(zhí)行語音任務(wù)的語音輔助信息中的圖標(biāo)820的左側(cè)區(qū)域上顯示具有第一色度的指導(dǎo)消息。例如,如圖114所示,可以在圖標(biāo)820的左側(cè)區(qū)域上顯示“您要關(guān)閉電源? ”11410。控制單元140在語音輔助信息中的圖標(biāo)820的右側(cè)區(qū)域上顯示具有第二色度的語音項(xiàng)目。該語音項(xiàng)目可以是與關(guān)于是否關(guān)閉電源的命令相對(duì)應(yīng)的語音項(xiàng)目。例如,如圖114所示,可以在圖標(biāo)820的右側(cè)區(qū)域上顯示“是或否” 11420和11430??刂茊卧?40可以控制以使得圖標(biāo)820的右側(cè)區(qū)域的色度比圖標(biāo)820的左側(cè)區(qū)域的色度深。圖115是根據(jù)示范性實(shí)施例的、解釋顯示語音輔助信息的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示語音輔助信息(S11510)。語音輔助信息可以包括指示電子設(shè)備100的當(dāng)前模式是語音任務(wù)模式的圖標(biāo)、以及指導(dǎo)語音任務(wù)模式的多個(gè)語音項(xiàng)目。如果通過語音輸入單元110輸入與多個(gè)語音項(xiàng)目之一相對(duì)應(yīng)的用戶語音,則電子設(shè)備100在第一區(qū)域上顯示具有第一色度的指導(dǎo)消息,而且在第二區(qū)域上顯示具有第二色度的語音項(xiàng)目(S11520)。第一區(qū)域可以是語音輔助信息中的圖標(biāo)右側(cè)的區(qū)域,第二區(qū)域可以是語音輔助信息中的圖標(biāo)左側(cè)的區(qū)域。第二色度可以比第一色度深。如上所述,以指導(dǎo)消息的色度的色度不同的色度來顯示可說出的語音項(xiàng)目,從而用戶能夠更清楚地知道用戶應(yīng)該說出哪個(gè)命令??刂茊卧?40顯示包括多個(gè)指導(dǎo)語音任務(wù)的語音項(xiàng)目的語音輔助信息。如果通過語音輸入單元110輸入的用戶語音包括不屬于與多個(gè)語音項(xiàng)目相對(duì)應(yīng)的命令的、預(yù)先設(shè)定的詞,則控制單元140可以執(zhí)行與該預(yù)先設(shè)定的詞相對(duì)應(yīng)的語音任務(wù)。預(yù)先設(shè)定的詞可以是與遙控器中包括的可運(yùn)行鍵相對(duì)應(yīng)的詞,該遙控器與電子設(shè)備100互鎖(interlock) (B卩,通信)。例如,預(yù)先設(shè)定的詞可以包括生成頻道列表的命令、生成菜單的命令、運(yùn)行社交網(wǎng)絡(luò)的命令、指導(dǎo)節(jié)目時(shí)間表的命令、改變?yōu)?D圖像的命令、和指導(dǎo)廣播的命令中的至少一個(gè)。預(yù)先設(shè)定的詞可以是與提供任務(wù)的命令相對(duì)應(yīng)的詞,該任務(wù)與由電子設(shè)備100執(zhí)行的功能有關(guān)。例如,如果電子設(shè)備100當(dāng)前執(zhí)行重現(xiàn)運(yùn)動(dòng)圖像的功能,則預(yù)先設(shè)定的詞可以包括重現(xiàn)運(yùn)動(dòng)圖像的命令、暫停運(yùn)動(dòng)圖像的命令、停止運(yùn)動(dòng)圖像的命令、重現(xiàn)前一個(gè)文件的命令、重現(xiàn)下一個(gè)文件的命令、向前跳的命令、向后跳的命令中的至少一個(gè)。也就是說,與電子設(shè)備100的基本功能相對(duì)應(yīng)的命令預(yù)先存儲(chǔ)在語音數(shù)據(jù)庫130m中,從而即使在語音輔助信息中沒有顯示該功能,用戶也能夠通過語音識(shí)別來使用電子設(shè)備100的基本功能。下文中,將參照?qǐng)D116和圖117解釋說出不屬于語音輔助信息上所顯示的語音項(xiàng)目的命令的情況。如果通過語音輸入單元110輸入了語音啟動(dòng)命令(例如,“Ginny”),則控制單元140將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100根據(jù)通過語音輸入單元HO輸入的用戶語音來控制。如果將模式改變?yōu)檎Z音任務(wù)模式,則控制單元140在顯示屏幕的下部顯示語音輔助信息,如圖116所示。在這個(gè)時(shí)候,在語音輔助信息上顯示指示電子設(shè)備100的當(dāng)前模式是語音任務(wù)模式的圖標(biāo)820。語音輔助信息在圖標(biāo)820的左側(cè)區(qū)域上顯示關(guān)閉電源語音項(xiàng)目811、頻道語音項(xiàng)目812、靜音語音項(xiàng)目813和外部輸入語音項(xiàng)目814,并且在圖標(biāo)820的右側(cè)區(qū)域上顯示智能中心語音項(xiàng)目815、應(yīng)用語音項(xiàng)目816、搜索語音項(xiàng)目817和全部語音項(xiàng)目818。如果顯示語音輔助信息,而且通過語音輸入單元110輸入了不屬于語音輔助信息的命令“頻道列表”,則控制單元140可以在顯示屏幕的一側(cè)顯示頻道列表11700,如圖117所示。頻道列表11700包括相對(duì)于當(dāng)前調(diào)諧的廣播頻道、落入預(yù)先設(shè)定的號(hào)碼范圍內(nèi)的廣播頻道。例如,如果當(dāng)前調(diào)諧的廣播頻道是“9-1KBS2”,則控制單元140在頻道列表11700中顯示 “6-lSBS”、“7-lKBS 1,,、“9_1KBS 2”、“ 11_1MBC”、“ 13-1EBS”,如圖 117 所示。用戶可以通過選擇頻道列表11700中的頻道之一來改變頻道。因此,即使語音輔助信息沒有顯示與頻道列表相對(duì)應(yīng)的語音項(xiàng)目,用戶也能夠通過語音識(shí)別執(zhí)行顯示頻道列表的任務(wù)。圖118是根據(jù)示范性實(shí)施例的、解釋在說出不屬于語音輔助信息上所顯示的語音項(xiàng)目的命令的情況下的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示語音輔助信息(S11810)。語音輔助信息可以包括指示電子設(shè)備100的當(dāng)前模式是語音任務(wù)模式的圖標(biāo)、以及多個(gè)指導(dǎo)語音任務(wù)模式的語音項(xiàng)目。電子設(shè)備100接收除了與語音項(xiàng)目相對(duì)應(yīng)的命令以外的命令的輸入(S11820)。除了與語音項(xiàng)目相對(duì)應(yīng)的命令以外的命令可以是與遙控器中包括的可運(yùn)行鍵相對(duì)應(yīng)的詞,該遙控器與電子設(shè)備100通信。例如,該詞可以包括生成頻道列表的命令、生成菜單的命令、運(yùn)行社交網(wǎng)絡(luò)的命令、指導(dǎo)節(jié)目時(shí)間表的命令、改變?yōu)?D圖像的命令、和指導(dǎo)廣播的命令中的至少一個(gè)。除了與語音項(xiàng)目相對(duì)應(yīng)的命令以外的命令可以是與提供任務(wù)的命令相對(duì)應(yīng)的詞,該任務(wù)與由電子設(shè)備100當(dāng)前執(zhí)行的功能有關(guān)。例如,如果電子設(shè)備100當(dāng)前執(zhí)行重現(xiàn)運(yùn) 動(dòng)圖像的功能,則該詞可以包括重現(xiàn)運(yùn)動(dòng)圖像的命令、暫停運(yùn)動(dòng)圖像的命令、停止運(yùn)動(dòng)圖像的命令、重現(xiàn)前一個(gè)文件的命令、重現(xiàn)下一個(gè)文件的命令、向前跳的命令、向后跳的命令中的至少一個(gè)。電子設(shè)備100按照輸入的命令執(zhí)行語音任務(wù)(S11830)。例如,如果輸入生成頻道列表的命令,則電子設(shè)備100生成并顯示頻道列表。如上所述,用戶能夠執(zhí)行與語音輔助信息中沒有顯示的命令相對(duì)應(yīng)的任務(wù)。控制單元140不僅可以執(zhí)行使用一只手的動(dòng)作任務(wù)模式,而且還可以執(zhí)行使用雙手的動(dòng)作任務(wù)模式。具體來說,如果通過動(dòng)作輸入單元120輸入使用雙手的動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手來執(zhí)行動(dòng)作任務(wù)。在使用一只手的動(dòng)作任務(wù)模式中,如果輸入使用另一只手的動(dòng)作啟動(dòng)命令,則控制單元140可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。具體來說,如果如圖119所示通過動(dòng)作輸入單元120輸入的動(dòng)作啟動(dòng)命令(例如,搖動(dòng)一只手3到4次的動(dòng)作),則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,電子設(shè)備100按照通過動(dòng)作輸入單元120輸入的用戶動(dòng)作來控制。如果在該動(dòng)作任務(wù)模式中通過動(dòng)作輸入單元120輸入使用另一只手的動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手執(zhí)行動(dòng)作任務(wù)。在另一個(gè)示范性實(shí)施例中,如果輸入同時(shí)搖動(dòng)雙手多次(例如,3到4次)的搖動(dòng)動(dòng)作,則可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。具體來說,如果如圖120所示通過動(dòng)作輸入單元120輸入同時(shí)搖動(dòng)手多次的搖動(dòng)動(dòng)作,則控制單元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手來執(zhí)行動(dòng)作任務(wù)。使用雙手的動(dòng)作任務(wù)可以是放大或縮小顯示屏幕的任務(wù)。具體來說,如果運(yùn)行了不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的應(yīng)用,則控制單元140可以輸出不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的消息。例如,如果運(yùn)行了不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的應(yīng)用,則控制單元140可以顯示指示不可能執(zhí)行使用雙手的動(dòng)作任務(wù)的圖標(biāo)。圖121是根據(jù)示范性實(shí)施例的、解釋使用雙手的動(dòng)作任務(wù)模式的流程圖。電子設(shè)備100接收到使用雙手的動(dòng)作啟動(dòng)命令的輸入(S12110)。例如,在使用一只手的動(dòng)作任務(wù)模式中,如果輸入了使用另一只手的動(dòng)作啟動(dòng)命令,則識(shí)別到正在輸入使用雙手的動(dòng)作啟動(dòng)命令。在另一個(gè)示范性實(shí)施例中,如果輸入了同時(shí)搖動(dòng)雙手多次(例如,3到4次)的搖動(dòng)動(dòng)作,則可以識(shí)別到使用雙手的動(dòng)作啟動(dòng)命令。如果輸入了使用雙手的動(dòng)作啟動(dòng)命令,電子設(shè)備100將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式以執(zhí)行使用雙手的電子設(shè)備的任務(wù)(S12120 )。使用雙手的動(dòng)作任務(wù)可以是放大或縮小顯示屏幕的任務(wù)。如上所述,用戶不僅能夠使用一只手而且能夠使用雙手來執(zhí)行動(dòng)作任務(wù)。如果通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)。在動(dòng)作任務(wù)模式中,只按照輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù),直到輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了輸入該動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也將被保持。具體來說,如果通過動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140可以使用動(dòng)作識(shí)別模塊1301來追蹤輸入該動(dòng)作啟動(dòng)命令的用戶的手??刂茊卧?40可以使用用戶手的形狀、顏色和動(dòng)作中的至少一個(gè)來追蹤用戶的手。即使通過動(dòng)作輸入單元120輸入了另一個(gè)用戶的手的動(dòng)作啟動(dòng)命令,控制單元140也不執(zhí)行另一個(gè)用戶的手的動(dòng)作任務(wù),而且追蹤最初輸入動(dòng)作啟動(dòng)命令的用戶的手并執(zhí)行動(dòng)作任務(wù)。即使由另一個(gè)用戶輸入動(dòng)作啟動(dòng)命令,控制單元140也可以按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶輸入釋放動(dòng)作任務(wù)模式的命令。即使在動(dòng)作任務(wù)模式中輸入動(dòng)作啟動(dòng)命令的用戶的手與其他用戶的手重疊,也可以按照輸入該動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)。可替換地,如果輸入了使用一只手的動(dòng)作啟動(dòng)命令而且輸入了使用除了輸入該動(dòng)作啟動(dòng)命令的用戶以外的其他用戶的一只手的另一個(gè)動(dòng)作啟動(dòng)命令,則控制單元140可以將電子設(shè)備100的模式改變?yōu)槭褂秒p手的動(dòng)作任務(wù)模式,以使用雙手執(zhí)行動(dòng)作任務(wù)。使用雙手的動(dòng)作任務(wù)模式可以由最初輸入動(dòng)作啟動(dòng)命令的用戶的一只手和另一個(gè)用戶的一只手來執(zhí)行。如果通過動(dòng)作輸入單元120從多個(gè)用戶輸入多個(gè)動(dòng)作啟動(dòng)命令,則控制單元140從多個(gè)動(dòng)作啟動(dòng)命令當(dāng)中確定最初輸入的動(dòng)作啟動(dòng)命令。如果確定了最初輸入的動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)??梢灾话凑兆畛踺斎雱?dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了最初輸入動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也將被保持。圖122是根據(jù)示范性實(shí)施例的、解釋在多個(gè)用戶輸入多個(gè)動(dòng)作啟動(dòng)命令的情況下的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100通過動(dòng)作輸入單元120從多個(gè)用戶接收到多個(gè)動(dòng)作啟動(dòng)命令(S12210)。動(dòng)作啟動(dòng)命令可以是多次(例如,3到4次)搖動(dòng)用戶的手的搖動(dòng)動(dòng)作。電子設(shè)備100從多個(gè)動(dòng)作啟動(dòng)命令當(dāng)中確定最初輸入的動(dòng)作啟動(dòng)命令(S12220)。具體來說,電子設(shè)備100可以使用用于輸入動(dòng)作啟動(dòng)命令的用戶手的形狀、顏色和動(dòng)作來確定最初輸入的動(dòng)作啟動(dòng)命令。電子設(shè)備100使用最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)(S12230)。具體來說,如果電子設(shè)備100確定了最初輸入的動(dòng)作啟動(dòng)命令,則電子設(shè)備100可以將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式,在動(dòng)作任務(wù)模式中,按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)。電子設(shè)備100在動(dòng)作任務(wù)模式中使用最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù)。
可以只按照最初輸入動(dòng)作啟動(dòng)命令的用戶的動(dòng)作來執(zhí)行動(dòng)作任務(wù),直到最初輸入動(dòng)作啟動(dòng)命令的用戶釋放動(dòng)作任務(wù)模式為止。即使除了最初輸入動(dòng)作啟動(dòng)命令的用戶以外的其他用戶輸入了動(dòng)作啟動(dòng)命令,該動(dòng)作任務(wù)模式也可以被保持。如上所述,動(dòng)作任務(wù)按照最初輸入的動(dòng)作啟動(dòng)命令來執(zhí)行,從而能夠防止其他用戶的動(dòng)作引起的誤操作。控制單元140可以分階段地執(zhí)行語音任務(wù)。具體來說,如果通過語音輸入單元110輸入用戶的第一語音,則控制單元140可以響應(yīng)于第一語音而在圖像的一個(gè)區(qū)域上顯示指導(dǎo)至少一個(gè)語音任務(wù)的第一菜單。如果通過語音輸入單元110輸入用戶的第二語音,則控制單元140可以執(zhí)行至少一個(gè)語音任務(wù)當(dāng)中的、與用戶的第二語音相對(duì)應(yīng)的語音任務(wù)。例如,如果通過語音輸入單元110輸入改變頻道的命令,則控制單元140可以顯示包括用于指導(dǎo)頻道的改變的信息的第一菜單。如果通過語音輸入單元110輸入與頻道標(biāo)識(shí)符(例如,頻道名稱、頻道號(hào)碼和節(jié)目名稱之一)相對(duì)應(yīng)的用戶語音,則控制單元140可以將當(dāng)前頻道改變?yōu)榕c用戶語音相對(duì)應(yīng)的頻道。如果通過語音輸入單元110輸入與節(jié)目名稱對(duì)對(duì)應(yīng)的用戶語音,則控制單元140從預(yù)先存儲(chǔ)的節(jié)目指南(EPG)中搜索通過語音輸入單元110輸入的節(jié)目名稱,并且將當(dāng)前頻道改變?yōu)椴コ鲚斎氲墓?jié)目名稱的頻道或者安排觀看時(shí)間。下文中,將參照?qǐng)D123至圖125解釋分階段執(zhí)行語音識(shí)別的情況。如果通過語首輸入單兀110輸入語首啟動(dòng)命令,則控制單兀140將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。控制單元140可以顯示包括多個(gè)語音項(xiàng)目的語音輔助信息,如圖123所示。如果顯示語音輔助信息,而且通過語音輸入單元110輸入了與頻道語音項(xiàng)目812相對(duì)應(yīng)的用戶語音(例如,“頻道”),則控制單元140改變語音輔助信息,并且顯示指導(dǎo)語音任務(wù)的執(zhí)行的第一菜單。例如,控制單元140可以顯示“請(qǐng)說出頻道名稱或頻道號(hào)碼”12410以指導(dǎo)頻道的改變,如圖124所示。如果通過語音輸入單元110輸入與頻道號(hào)碼、頻道名稱以及廣播節(jié)目名稱之一相對(duì)應(yīng)的用戶語音,則控制單元140將當(dāng)前頻道改變?yōu)榕c用戶語音相對(duì)應(yīng)的頻道。例如,如果通過語音輸入單元110輸入“7”,則控制單元140通過調(diào)諧到頻道7來顯示頻道7,如圖125所示。如上所述,分階段地執(zhí)行語音任務(wù),從而能夠防止誤操作。具體來說,如果用戶想要改變頻道,則用戶在選擇一次頻道語音項(xiàng)目之后改變頻道,從而能夠避免改變?yōu)椴黄谕念l道。圖126是根據(jù)示范性實(shí)施例的、解釋分階段地執(zhí)行語音任務(wù)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100顯示圖像(S12610)。圖像可以包括語音輔助信息。電子設(shè)備100通過語音輸入單兀110接收第一語音的輸入(S12620)。第一語音可以是與所顯示的語音輔助信息中所包括的多個(gè)語音項(xiàng)目之一相對(duì)應(yīng)的用戶語音。電子設(shè)備100響應(yīng)于輸入的第一語音而顯示指導(dǎo)語音任務(wù)的執(zhí)行的第一菜單(S12630)。
49
電子設(shè)備100通過語音輸入單元110接收第二語音的輸入(S12640)。第二語音是執(zhí)行具體語首任務(wù)的命令。電子設(shè)備100響應(yīng)于輸入的第二語音而執(zhí)行與第二語音相對(duì)應(yīng)的語音任務(wù)(S12650)。例如,如果第二語音是頻道名稱,則電子設(shè)備100將廣播頻道改變?yōu)榕c第二語音相對(duì)應(yīng)的頻道。如上所述,語音任務(wù)是分階段執(zhí)行的,從而能夠防止誤操作。在按照通過語音輸入單元110輸入的用戶語音來執(zhí)行語音任務(wù)的語音任務(wù)模式中,控制單元140顯示至少一個(gè)可運(yùn)行圖標(biāo)和該可運(yùn)行圖標(biāo)的名稱。語音輸入單元110接收用戶語音的輸入。如果在至少一個(gè)可運(yùn)行圖標(biāo)當(dāng)中存在只顯示可運(yùn)行圖標(biāo)的名稱的一部分的第一可運(yùn)行圖標(biāo),而且輸入的用戶語音與第一可運(yùn)行圖標(biāo)的名稱的所顯示的部分一致,則控制單元140運(yùn)行第一可運(yùn)行圖標(biāo)。如果輸入的用戶語音與構(gòu)成第一可運(yùn)行圖標(biāo)的名稱的所顯示的部分的多個(gè)拼寫一致,則控制單元140運(yùn)行第一可運(yùn)行圖標(biāo)。如果在可運(yùn)行圖標(biāo)當(dāng)中存在名稱包括特殊字符的第二可運(yùn)行圖標(biāo),而且輸入的用戶語音與不包括第二可運(yùn)行圖標(biāo)的名稱中所包括的特殊字符的可說出名稱一致,則控制單元140可以運(yùn)行第二可運(yùn)行圖標(biāo)。特殊字符可以是不能由用戶說出的符號(hào)。例如,特殊字符可以是,但不限于,問號(hào)( )、逗號(hào)(,)和句號(hào)(。)。例如,如果存在具有可運(yùn)行圖標(biāo)的名稱“面部識(shí)別,語音識(shí)別”的應(yīng)用,則當(dāng)通過語音輸入單元110輸入用戶語音“面部識(shí)別,語音識(shí)別”時(shí),控制單元140運(yùn)行該應(yīng)用。在上面的示例中,控制單元140執(zhí)行可運(yùn)行圖標(biāo)。然而,這僅僅是示例,而且在控制單元140執(zhí)行超鏈接的情況下也可以應(yīng)用本公開的技術(shù)想法。下文中,將參照?qǐng)D127和圖128解釋根據(jù)示范性實(shí)施例的、顯示運(yùn)行可運(yùn)行圖標(biāo)的名稱的一部分的可運(yùn)行圖標(biāo)的方法??刂茊卧?40根據(jù)用戶的特定命令顯示包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表(例如,智能中心)。如果內(nèi)容列表中所包括的多個(gè)可運(yùn)行圖標(biāo)當(dāng)中包括名稱的字符數(shù)超過預(yù)定數(shù)量的可運(yùn)行圖標(biāo),則控制單元140可以只顯示該可運(yùn)行圖標(biāo)的完整名稱的一部分。例如,如果內(nèi)容列表中所包括的多個(gè)可運(yùn)行圖標(biāo)當(dāng)中包括名稱超過10個(gè)字符的可運(yùn)行圖標(biāo),則控制單元140可以不顯示該可運(yùn)行圖標(biāo)的完整名稱“令人興奮的鼓(ExcitingDrum) ”,而是只顯示“令人興奮的(Exciting) ”,如圖127所示。如果顯示了內(nèi)容列表,而且通過語音輸入單元110輸入了語音啟動(dòng)命令,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。如果模式改變?yōu)檎Z音任務(wù)模式,則電子設(shè)備100如圖127所示顯示語音輔助信息。如果顯示了語音輔助信息,而且通過語音輸入單元110說出與名稱的所顯示的部分一致的“令人興奮的(Exciting) ”,則控制單元140運(yùn)行“令人興奮的鼓(ExcitingDrum) ”,如圖128所示。此外,如果顯示了語音輔助信息,而且通過語音輸入單元110輸入了構(gòu)成名稱的所顯示的部分的多個(gè)拼寫“E”、“X”、“C”、“I”、“T”、“I”、“N”和“G”,則控制單元140運(yùn)行“令人興奮的鼓(Exciting Drum)”,如圖128所示。圖129是根據(jù)示范性實(shí)施例的、解釋運(yùn)行顯示可運(yùn)行圖標(biāo)的名稱的一部分的可運(yùn)行圖標(biāo)的方法的流程圖。電子設(shè)備100響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S12910)。電子設(shè)備100顯示包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表。具體地,電子設(shè)備100在內(nèi)容列表上顯示可運(yùn)行圖標(biāo),該可運(yùn)行圖標(biāo)顯示可運(yùn)行圖標(biāo)的名稱的一部分(S12920)。這是因?yàn)榭蛇\(yùn)行圖標(biāo)的名稱的字符數(shù)量超過預(yù)定數(shù)量,從而不能顯示可運(yùn)行圖標(biāo)的完整名稱。電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入(S12930)。電子設(shè)備100確定通過語音輸入單元110輸入的用戶語音是否與名稱的所顯示的部分一致(S12940)。如果存在其名稱的一部分與通過語音輸入單元110輸入的用戶語音一致的可運(yùn)行圖標(biāo)(S12940-是),則電子設(shè)備100運(yùn)行該可運(yùn)行圖標(biāo)(S12950)。在上面的示范性實(shí)施例中,電子設(shè)備100運(yùn)行可運(yùn)行圖標(biāo)。然而,這僅僅是示例,而且在電子設(shè)備100運(yùn)行超鏈接的情況下也可以應(yīng)用本公開的技術(shù)想法。如上所述,能夠通過只說出相應(yīng)的可運(yùn)行圖標(biāo)的名稱的一部分來運(yùn)行應(yīng)用或超鏈接。如果在動(dòng)作任務(wù)模式中通過動(dòng)作輸入單元120輸入第一用戶動(dòng)作和第二用戶動(dòng)作之一,而且如果應(yīng)用運(yùn)行屏幕是可放大或可縮小的,則控制單元140可以通過響應(yīng)于識(shí)別到的第一用戶動(dòng)作和第二用戶動(dòng)作之一而放大或縮小應(yīng)用運(yùn)行屏幕,來顯示應(yīng)用運(yùn)行屏眷。具體來說,如果在運(yùn)行應(yīng)用時(shí)通過動(dòng)作輸入單元120輸入動(dòng)作啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式。如果通過動(dòng)作輸入單元120輸入了第一用戶動(dòng)作和第二用戶動(dòng)作之一,則控制單元140識(shí)別第一用戶動(dòng)作和第二用戶動(dòng)作之一,而且響應(yīng)于識(shí)別到的動(dòng)作而放大或縮小應(yīng)用運(yùn)行屏幕。第一用戶用作可以是使雙手相互遠(yuǎn)離的動(dòng)作,而且如果識(shí)別到第一用戶動(dòng)作,則控制單元140可以通過放大應(yīng)用運(yùn)行屏幕來顯示應(yīng)用運(yùn)行屏幕。第二用戶用作可以是使雙手相互靠近的動(dòng)作,而且如果識(shí)別到第二用戶動(dòng)作,則控制單元140可以通過縮小應(yīng)用運(yùn)行屏幕來顯示應(yīng)用運(yùn)行屏幕。如果在動(dòng)作任務(wù)模式中通過動(dòng)作輸入單元120輸入了第三用戶動(dòng)作,則控制單元140可以識(shí)別第三用戶動(dòng)作,而且通過響應(yīng)于第三用戶動(dòng)作而移動(dòng)應(yīng)用運(yùn)行屏幕來顯示應(yīng)用運(yùn)行屏幕。第三用戶動(dòng)作可以是在保持抓動(dòng)作的同時(shí)移動(dòng)一只手的動(dòng)作。應(yīng)用運(yùn)行屏幕在電子設(shè)備100的顯示屏幕之內(nèi)是可移動(dòng)的。下文中,將參照?qǐng)D130至圖133解釋輸入到網(wǎng)頁的特殊姿勢(shì)。如果顯示了網(wǎng)頁,而且通過動(dòng)作輸入單元120輸入了動(dòng)作啟動(dòng)命令,則控制單元140可以在網(wǎng)頁的下部顯示動(dòng)作輔助信息,如圖130所示。此外,如果電子設(shè)備100進(jìn)入動(dòng)作任務(wù)模式,則控制單元140在顯示屏幕的中心處顯示指針13000。如果顯示了動(dòng)作輔助信息,而且通過動(dòng)作輸入單元120輸入了使用雙手的動(dòng)作啟動(dòng)命令,則控制單元140進(jìn)入使用雙手的動(dòng)作任務(wù)模式。如果在使用雙手的動(dòng)作任務(wù)模式中通過動(dòng)作輸入單元120輸入了使雙手相互遠(yuǎn)離的動(dòng)作,則控制單元140放大網(wǎng)頁屏幕,如圖131所示。當(dāng)放大網(wǎng)頁屏幕時(shí),可以移除指針。如果放大了網(wǎng)頁屏幕,則控制單元140再次顯示指針13000,如圖132所示。如果顯示了指針13000,而且通過動(dòng)作輸入單元120輸入了抓一只手并且移動(dòng)抓手的動(dòng)作,則控制單元140可以按照抓一只手并且移動(dòng)抓手的動(dòng)作來移動(dòng)顯示屏幕。例如,如果通過動(dòng)作輸入單元120輸入了抓一只手并且沿向右方向移動(dòng)抓手的動(dòng)作,則控制單元140可以沿向右方向來移動(dòng)顯示屏幕,如圖133所示。如上所述,用戶能夠使用用戶動(dòng)作來移動(dòng)、放大或縮小電子設(shè)備100的顯示屏幕。圖134是示出根據(jù)示范性實(shí)施例的、在輸入特殊姿勢(shì)的情況下的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100通過動(dòng)作輸入單元120接收動(dòng)作啟動(dòng)命令(S13410)。如果輸入了動(dòng)作啟動(dòng)命令,則電子設(shè)備100識(shí)別動(dòng)作啟動(dòng)命令并將電子設(shè)備100的模式改變?yōu)閯?dòng)作任務(wù)模式(S13420)。如果將模式改為動(dòng)作任務(wù)模式,則電子設(shè)備100顯示指針和執(zhí)行動(dòng)作任務(wù)模式的動(dòng)作輔助信息。電子設(shè)備100按照用戶操縱來運(yùn)行應(yīng)用(S13430)。電子設(shè)備100通過動(dòng)作輸入單元120接收特殊動(dòng)作的輸入(S13440)。特殊動(dòng)作可以是使用雙手來放大或縮小顯示屏幕的動(dòng)作或者移動(dòng)抓手來移動(dòng)顯示屏幕的動(dòng)作。如果輸入了特殊動(dòng)作,則電子設(shè)備100執(zhí)行與特殊動(dòng)作相對(duì)應(yīng)的動(dòng)作任務(wù)(S13450)。例如,如果輸入了將雙手彼此拉近的動(dòng)作,則電子設(shè)備100執(zhí)行縮小顯示屏幕的任務(wù),而且,如果輸入了使雙手相互遠(yuǎn)離的動(dòng)作,則電子設(shè)備100執(zhí)行放大顯示屏幕的任務(wù)。如果輸入了移動(dòng)抓手的動(dòng)作,則電子設(shè)備100沿該動(dòng)作的方向上移動(dòng)顯示屏幕。如上所述,用戶能夠使用用戶動(dòng)作來移動(dòng)、放大或縮小顯示屏幕??刂茊卧?40可以通過電子設(shè)備100中包括的語音輸入單元110來接收語音啟動(dòng)命令,而且也可以通過與電子設(shè)備100通信的設(shè)備接收語音啟動(dòng)命令。在通過電子設(shè)備100中包括的語音輸入單元110輸入語音啟動(dòng)命令的情況下獲得的語音識(shí)別被稱為長(zhǎng)距離(long-distance)語音識(shí)別。如果執(zhí)行長(zhǎng)距離語音識(shí)別,則可以顯示指示長(zhǎng)距離語音識(shí)別的圖標(biāo)13510,如圖135所示。具體來說,如果從電子設(shè)備100中包括的語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)榈谝徽Z音任務(wù)模式。第一語音任務(wù)模式是按照從電子設(shè)備100中包括的語音輸入單元110輸入的用戶語音來執(zhí)行語音任務(wù)的模式。如果將模式改變?yōu)榈谝徽Z音任務(wù)模式,則控制單元140可以顯示指示長(zhǎng)距離語音識(shí)別的圖標(biāo)13510。如果顯示了指示長(zhǎng)距離語音識(shí)別的圖標(biāo),而且在預(yù)定的時(shí)間內(nèi)沒有用戶語音輸入到電子設(shè)備100中包括的語音輸入單元110中,則控制單元140釋放第一語音任務(wù)模式并且將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100由遙控器控制。在通過與電子設(shè)備100通信的設(shè)備輸入語音啟動(dòng)命令的情況下獲得的語音識(shí)別被稱為短距離(short-distance)語音識(shí)別。如果執(zhí)行短距離語音識(shí)別,則可以顯示指示短
52距離語音識(shí)別的圖標(biāo)13610,如圖136所示。與電子設(shè)備100通信的設(shè)備可以是,但不限于,遙控器或移動(dòng)電話。該設(shè)備可以通過有線或無線連接、通過網(wǎng)絡(luò)等與電子設(shè)備100通信。該設(shè)備可以通過配對(duì)過程與電子設(shè)備100配對(duì)。從與電子設(shè)備100通信的設(shè)備輸入的語首啟動(dòng)命令可以是對(duì)應(yīng)于與電子設(shè)備100通信的該設(shè)備中包括的特定按鈕(語音任務(wù)模式改變按鈕)的信號(hào)以及通過與電子設(shè)備100通信的該設(shè)備中包括的麥克風(fēng)輸入的特定用戶語音之一。如果從與電子設(shè)備100通信的設(shè)備輸入了語音啟動(dòng)命令,則控制單元140將電子設(shè)備100的模式改變?yōu)榈诙Z音任務(wù)模式。第二語音任務(wù)模式是按照通過與電子設(shè)備100通信的設(shè)備中包括的麥克風(fēng)輸入的用戶語音來執(zhí)行語音任務(wù)的模式。如果將模式改變?yōu)榈诙Z音任務(wù)模式,則控制單元140可以顯示指示短距離語音識(shí)別的圖標(biāo)13610。如果顯示了指示短距離語音識(shí)別的圖標(biāo),而且在預(yù)定的時(shí)間內(nèi)沒有用戶語音輸入到與電子設(shè)備100通信的設(shè)備中包括的麥克風(fēng)中,則控制單元140釋放第二語音任務(wù)模式并且將電子設(shè)備100的模式改變?yōu)檫b控模式,在遙控模式中,電子設(shè)備100由遙控器控制。圖137是根據(jù)示范性實(shí)施例的、解釋根據(jù)語音輸入方法來提供不同圖標(biāo)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100從電子設(shè)備100中包括的麥克風(fēng)和遙控器中包括的麥克風(fēng)之一接收語首啟動(dòng)命令(S13710)。如果語首啟動(dòng)命令是從電子設(shè)備100中包括的麥克風(fēng)輸入的,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)殚L(zhǎng)距離語音任務(wù)模式。如果語音啟動(dòng)命令是從遙控器中包括的麥克風(fēng)輸入的,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)槎叹嚯x語音任務(wù)模式。電子設(shè)備100可以根據(jù)輸入語音啟動(dòng)命令的設(shè)備而不同地顯示圖標(biāo)(S13720)。具體來說,如果語音啟動(dòng)命令是從電子設(shè)備100中包括的麥克風(fēng)輸入的,則電子設(shè)備100顯示指示長(zhǎng)距離語音任務(wù)模式的圖標(biāo),而且如果語音啟動(dòng)命令是從遙控器中包括的麥克風(fēng)輸入的,則電子設(shè)備100顯示指示短距離語音任務(wù)模式的圖標(biāo)。如上所述,根據(jù)輸入語音啟動(dòng)命令的設(shè)備來劃分語音任務(wù)模式,而且根據(jù)語音任務(wù)模式顯示不同的圖標(biāo),從而用戶能夠知道哪個(gè)設(shè)備應(yīng)該用于執(zhí)行語音任務(wù)模式。在執(zhí)行語音識(shí)別之后,控制單元140顯示文本輸入校正菜單(例如,輸入法編輯器(IME))以校正與識(shí)別到的語音相對(duì)應(yīng)的文本,以便更準(zhǔn)確地識(shí)別語音。例如,如果通過語音輸入單元110輸入了語音啟動(dòng)命令,則控制單元140顯示語音輔助信息以執(zhí)行語音任務(wù),該語音任務(wù)是按照通過語音輸入單元110輸入的用戶語音來控制的。如果輸入了執(zhí)行需要文本輸入的任務(wù)的第一用戶語音,則控制單元140顯示用于文本輸入的文本輸入窗口。需要文本輸入的任務(wù)可以是,但不限于,網(wǎng)頁沖浪(surfing)。如果輸入了用于在文本輸入窗口上輸入文本的第二用戶語音,則控制單元140可以在文本輸入窗口上顯示與輸入的第二用戶語音相對(duì)應(yīng)的文本,并且可以顯示文本輸入菜單??刂茊卧?40在識(shí)別用戶語音的同時(shí)顯示前一個(gè)屏幕,而且在識(shí)別到用于在文本輸入窗口上輸入文本的第二用戶語音之后在文本輸入窗口上顯示文本??刂茊卧?40可以顯示文本輸入菜單。
如果存在包括輸入到文本輸入窗口的文本的多個(gè)候選搜索詞,則控制單元140通過將候選搜索詞列表與文本輸入菜單重疊來顯不候選搜索詞列表。如果完成文本輸入窗口上的文本輸入、或者取消文本輸入窗口上的文本輸入,則控制單元140可以從顯示屏幕移除文本輸入菜單。以下,將參照?qǐng)D138至圖141解釋根據(jù)示范性實(shí)施例的、顯示文本輸入菜單的方法。如果在顯示網(wǎng)頁時(shí)通過語音輸入單元110輸入了語音啟動(dòng)命令,則控制單元140顯示語音輔助信息,如圖138所示。如果通過語音輸入單元110輸入了與“搜索”語音項(xiàng)目相對(duì)應(yīng)的用戶語音(例如,“搜索”),則控制單元110顯示文本輸入窗口 13910。如果輸入了用于在文本輸入窗口 13910上輸入文本的用戶語音(例如,“三星電子”),則控制單元140識(shí)別用戶語音并在文本輸入窗口 13910上顯示識(shí)別到的用戶語音。也就是說,控制單元140輸入并在文本輸入窗口 13910上顯示“三星電子”,如圖139所示。如果在文本輸入窗口 13910上輸入“三星電子”,則控制單元140在文本輸入窗口的一側(cè)顯示文本輸入菜單13920,如圖140所示。文本輸入菜單是在文本輸入窗口上輸入的文本不正確的情況下對(duì)該文本進(jìn)行校正的菜單。如果存在包括輸入到文本輸入窗口 13910的“三星電子”的多個(gè)候選搜索詞,則控制單元140顯示候選搜索詞列表13930。例如,如果包括“三星電子”的多個(gè)候選搜索詞包括“三星電子”、“三星電子的股價(jià)”和“三星電子的新聞”,則控制單元140顯示候選搜索詞列表13930,如圖141所示。圖142是解釋根據(jù)示范性實(shí)施例的、顯示文本輸入菜單(ME)的電子設(shè)備100的控制方法的流程圖。電子設(shè)備100通過語音輸入單元110接收語音啟動(dòng)命令(S14210)。電子設(shè)備100可以顯示包括多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表以及包括多個(gè)超鏈接的網(wǎng)頁。如果輸入了語音啟動(dòng)命令,則電子設(shè)備100將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,并且顯示語音輔助信息以執(zhí)行語音任務(wù)模式(S14220)。電子設(shè)備100通過語音輸入單元110接收用于執(zhí)行搜索的用戶語音的輸入(S14230)。電子設(shè)備100顯不用于執(zhí)行搜索的文本輸入窗口(S14240)。如果顯示了文本輸入窗口,則電子設(shè)備100通過語音輸入單元110接收用于在文本輸入窗口上輸入文本的用戶語音的輸入(S14250)。如果輸入了用于輸入文本的用戶語音,則電子設(shè)備100在文本輸入窗口上輸入與輸入的用戶語音相對(duì)應(yīng)的文本(S14260)。如果在文本輸入窗口上輸入了文本,則電子設(shè)備100顯示文本輸入菜單(S14270)。文本輸入菜單是在語音識(shí)別不清晰的情況下對(duì)在文本輸入窗口上輸入的文本進(jìn)行校正的菜單。因此,如果沒有完全識(shí)別輸入到語音輸入單元110的用戶語音,則用戶能夠使用文本輸入菜單來補(bǔ)充語音識(shí)別??刂茊卧?40可以使用外部設(shè)備來識(shí)別語音。
具體來說,如果通過語音輸入單元110輸入了語音啟動(dòng)命令,則控制單元140顯示語音輔助信息以指導(dǎo)語音任務(wù),該語音任務(wù)是按照通過與電子設(shè)備100通信的設(shè)備(例如,遙控器)輸入的用戶語音來執(zhí)行的。如果選擇了與電子設(shè)備100通信的外部設(shè)備中包括的第一語音輸入按鈕,則控制單元140在語音輔助信息中顯示用于指導(dǎo)語音搜索的第一指導(dǎo)消息。例如,可以顯示指導(dǎo)消息“請(qǐng)按下語音搜索按鈕,然后輸入語音”。當(dāng)選擇了外部設(shè)備中包括的第二語音輸入按鈕的時(shí)候,控制單元140通過語音輸入單元110識(shí)別用戶語音。語音輸入單元110接收輸入到外部設(shè)備的麥克風(fēng)的用戶語音,并且將用戶語音發(fā)送到控制單元140。控制單元140在語音輔助信息中顯示第二指導(dǎo)消息,其包括指示用戶語音是通過語音輸入單元110輸入的信息。例如,可以顯示指導(dǎo)消息“正在識(shí)別用戶語音”。控制單元140可以將識(shí)別到的用戶語音作為文本輸入到文本輸入窗口上??刂茊卧?40可以執(zhí)行與識(shí)別到的用戶語音相對(duì)應(yīng)的語音任務(wù)。如果釋放了對(duì)第二語音輸入按鈕的選擇,則控制單元140可以在語音輔助信息中顯示第三指導(dǎo)消息,其確認(rèn)用戶語音的輸入是否完成。第三指導(dǎo)消息可以包括詢問是否繼續(xù)輸入用戶語音的消息、詢問輸入的用戶語音是否完整的消息和詢問是否取消輸入的用戶語音的消息。如果在顯示第三指導(dǎo)消息的時(shí)候通過再次選擇第二語音輸入按鈕而輸入用戶語音,則控制單元140可以連續(xù)地識(shí)別所輸入的用戶語音加上先前識(shí)別到的用戶語音。例如,如果先前識(shí)別到的用戶語音是“三星”而且通過再次選擇第二語音輸入按鈕而輸入用戶語音“電子”,則控制單元140可以在文本輸入窗口上輸入“三星電子”。第一語音輸入按鈕是語音輸入按鈕,而且第二語音輸入按鈕是語音搜索按鈕。第一語音輸入按鈕和第二語音輸入按鈕可以此不同,或者可以是相同的按鈕。圖143是根據(jù)示范性實(shí)施例的、解釋使用外部設(shè)備來執(zhí)行語音任務(wù)的方法的流程圖。電子設(shè)備100顯示語音輔助信息以執(zhí)行語音任務(wù)模式(S14310)。外部設(shè)備按照用戶操縱來選擇語音輸入按鈕(S14320)。如果選擇了語音輸入按鈕,則電子設(shè)備100顯不第一指導(dǎo)消息(S14330)。第一指導(dǎo)消息是語音輔助信息中指導(dǎo)語音搜索的UI。在選擇外部設(shè)備上的語音搜索按鈕的時(shí)候,電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入(S14340)。語音輸入單元110可以是從外部設(shè)備接收用戶語音輸入的通信單元。電子設(shè)備100使用語音識(shí)別模塊130k來識(shí)別通過語音輸入單元110輸入的用戶語音(S14350)。在上面的示范性實(shí)施例中,語音輸入按鈕和語音搜索按鈕可以是相同的按鈕。如上所述,在選擇外部設(shè)備上的語音搜索按鈕的時(shí)候輸入語音,從而能夠防止不期望的語音識(shí)別。如果在顯示屏幕上顯示可說出的名稱,則控制單元140可以提取該名稱并且特殊地顯示該名稱。如果名稱是通過語音輸入單元Iio輸入的,則控制單元140執(zhí)行與名稱相對(duì)應(yīng)的語音任務(wù)。
55
具體來說,如果通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140響應(yīng)于輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式以執(zhí)行語音任務(wù),并且顯示語音輔助信息以執(zhí)行語音任務(wù)模式??刂茊卧?40從顯示屏幕提取可選項(xiàng)目的文本。顯示屏幕可以顯示內(nèi)容列表,該內(nèi)容列表包括用于運(yùn)行應(yīng)用或網(wǎng)頁的多個(gè)可運(yùn)行圖標(biāo)??蛇x項(xiàng)目可以是內(nèi)容列表中包括的用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)和網(wǎng)頁中包括的超鏈接之如果項(xiàng)目名稱的文本的字符數(shù)超過預(yù)定數(shù)量,則控制單元140只從項(xiàng)目名稱的完整文本當(dāng)中提取字符數(shù)小于該預(yù)定數(shù)量的文本,并顯示該文本??刂茊卧?40可以將被提取了文本的項(xiàng)目與未被提取文本的其他項(xiàng)目不同地顯
/Jn ο如果通過語音輸入單元110輸入的用戶語音與提取的文本一致,則控制單元140運(yùn)行與該文本相對(duì)應(yīng)的項(xiàng)目。如果通過語音輸入單元110輸入的用戶語音與所提取的字符數(shù)小于預(yù)定數(shù)量的文本一致,則控制單元140運(yùn)行與該字符數(shù)小于預(yù)定數(shù)量的文本相對(duì)應(yīng)的項(xiàng)目。下文中,將參照?qǐng)D144和圖145解釋在顯示屏幕上顯示可說出的命令的情況??刂茊卧?40響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式??刂茊卧?40在顯示屏幕的下部顯示語音輔助信息。如果通過語音輸入單元110輸入了 “智能中心”,則控制單元140生成包括用于運(yùn)行應(yīng)用的多個(gè)可運(yùn)行圖標(biāo)的內(nèi)容列表,并顯示該內(nèi)容列表,如圖144所示??刂茊卧?40提取多個(gè)可運(yùn)行圖標(biāo)的名稱。如果提取了可運(yùn)行圖標(biāo)的名稱,則控制單元140為可運(yùn)行圖標(biāo)的名稱加下劃線,如圖144所示,如果可運(yùn)行圖標(biāo)(例如,APPlO和APPll)的名稱未被提取,則控制單元140不給該可運(yùn)行圖標(biāo)的名稱加下劃線。如果可運(yùn)行圖標(biāo)的名稱的字符數(shù)超過預(yù)定數(shù)量,則控制單元140提取可運(yùn)行圖標(biāo)的名稱的一部分,并顯示名稱的該部分。例如,如果可運(yùn)行圖標(biāo)的名稱是“令人興奮的鼓”,則控制單元140提取可運(yùn)行圖標(biāo)的名稱的一部分“令人興奮的”,并如圖144所示顯示名稱的該部分。為了指示“令人興奮的”是名稱的一部分,控制單元140可以在“令人興奮的”之
后顯示“…”。如果顯示了可運(yùn)行圖標(biāo)的已提取的名稱,并且通過語音輸入單元110輸入了可運(yùn)行圖標(biāo)的名稱,則控制單元140運(yùn)行該可運(yùn)行圖標(biāo)。例如,如果通過語音輸入單元110輸入了 “令人興奮的”,則控制單元140運(yùn)行應(yīng)用“令人興奮的鼓”,如圖145所示。圖146是根據(jù)示范性實(shí)施例的、解釋在顯示屏幕上顯示可說出的命令的情況下執(zhí)行語音任務(wù)的方法的流程圖。電子設(shè)備100通過語音輸入單元110接收語音啟動(dòng)命令(S14610)。電子設(shè)備100響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S14620)。電子設(shè)備100在顯示屏幕的下部顯示語音輔助信息以執(zhí)行語音任務(wù)模式(S14630)。電子設(shè)備100提取顯示屏幕中包括的項(xiàng)目的文本(S14640)。該項(xiàng)目可以是內(nèi)容列
56表中包括的可運(yùn)行圖標(biāo)的名稱或網(wǎng)頁中包括的超鏈接的文本。電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入(S14650)。如果存在其文本與通過語音輸入單元110輸入的用戶語音一致的項(xiàng)目,則電子設(shè) 備100運(yùn)行相應(yīng)的項(xiàng)目(S14660)。如果只顯示文本的一部分,而且輸入了與文本的該部分一致的用戶語音,則控制單元140可以運(yùn)行相應(yīng)的項(xiàng)目。如上所述,文本的名稱被提取并被特殊地顯示,從而用戶能夠更容易地使用語音識(shí)別。在通過語音輸入單元110輸入用戶語音的時(shí)候,如果只有一個(gè)超鏈接具有所輸入的用戶語音中所包括的文本,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。具體來說,如果通過語音輸入單元110輸入了語音啟動(dòng)命令,則控制單元140響應(yīng)于語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。在語音任務(wù)模式中,控制單元140從包括多個(gè)超鏈接的網(wǎng)頁當(dāng)中提取多個(gè)超鏈接的文本。在提取文本之后,控制單元140可以將所提取的文本與未提取的文本不同地顯示。例如,控制單元140可以為所提取的文本加下劃線、加粗加深地顯示所提取的文本、或聞売地顯不所提取的文本。在通過語音輸入單元110輸入用戶語音的時(shí)候,如果只有一個(gè)超鏈接具有包括輸入的用戶語音的文本,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。例如,如果通過語音輸入單元110輸入的用戶語音是“三星電子”而且從超鏈接提取的文本只是“三星電子”,則執(zhí)行控制單元140運(yùn)行具有文本“三星電子”的超鏈接。在通過語音輸入單元110輸入用戶語音的時(shí)候,如果只有一個(gè)超鏈接的文本與輸入的用戶語音部分一致而非全部一致,則控制單元140可以運(yùn)行與該文本相對(duì)應(yīng)的超鏈接。在上面的示范性實(shí)施例中,已經(jīng)描述了運(yùn)行網(wǎng)頁中包括的超鏈接的方法。然而,這僅僅是示例,而且本發(fā)明公開的技術(shù)想法可以應(yīng)用于運(yùn)行內(nèi)容列表中包括的用于運(yùn)行應(yīng)用的可運(yùn)行圖標(biāo)的方法。圖147是根據(jù)示范性實(shí)施例的、解釋自動(dòng)語音識(shí)別方法的流程圖。電子設(shè)備100通過語音輸入單元110接收語音啟動(dòng)命令(S14710)。電子設(shè)備100響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S14720)。如果電子設(shè)備100的顯示屏幕包括超鏈接,則電子設(shè)備100提取超鏈接的文本(S14730)。電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入。如果在輸入用戶語音的時(shí)候存在一個(gè)包括與輸入的用戶語音一致的文本的超鏈接,則電子設(shè)備100運(yùn)行相應(yīng)的超鏈接(S14740)。與用戶語音一致的文本可以是超鏈接的整個(gè)文本。然而,這僅僅是示例,與用戶語音一致的文本可以是超鏈接的文本的一部分。如上所述,如果只有一個(gè)超鏈接具有與用戶語音一致的文本,則自動(dòng)運(yùn)行相應(yīng)的超鏈接,從而用戶能夠更容易地使用語音識(shí)別來運(yùn)行超鏈接。
如果識(shí)別到輸入的用戶語音,而且存在具有與識(shí)別到的用戶語音一致的文本的多個(gè)超鏈接,則控制單元140顯示候選組列表,其包括具有與識(shí)別到的用戶語音一致的文本的超鏈接。具體來說,如果通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140響應(yīng)于語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。 顯示屏幕顯示包括多個(gè)超鏈接的網(wǎng)頁??刂茊卧?40提取該網(wǎng)頁中所包括的多個(gè)超鏈接中的包括的文本??刂茊卧?40可以將所提取的文本與未提取的文本不同地顯示。例如,控制單元140可以為所提取的文本加下劃線、加粗加深地顯示所提取的文本、或高亮顯示所提取的文本。如果通過語音輸入單元110輸入用戶語音,則控制單元140識(shí)別輸入的用戶語音,而且如果存在具有與識(shí)別到的用戶語音一致的文本的多個(gè)超鏈接,則控制單元140顯示候選組列表,其包括具有與識(shí)別到的用戶語音一致的文本的超鏈接。例如,如果輸入到語音輸入單元110的用戶語音是“三星電子”,則控制單元140可以生成候選組列表,其包括具有包含“三星電子”的文本的超鏈接。如果通過語音輸入單元110重新輸入用戶語音,則控制單元140可以識(shí)別重新輸入的用戶語音,并且可以基于重新輸入的用戶語音來改變候選組列表。例如,如果識(shí)別到“三星電子”而且重新輸入了“股票”,則控制單元140可以將候選組列表改變?yōu)橹话ň哂邪叭请娮庸善薄钡奈谋镜某溄?。如果釋放了語音任務(wù)模式,則控制單元140可以從顯示屏幕移除候選組列表。圖148是根據(jù)示范性實(shí)施例的、解釋用于顯示候選組列表的方法的流程圖。電子設(shè)備100通過語音輸入單元110接收語音啟動(dòng)命令(S14810)。電子設(shè)備100響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S14820)。電子設(shè)備100根據(jù)用戶操縱在顯示屏幕上顯示網(wǎng)頁(S14830)。該網(wǎng)頁包括多個(gè)超鏈接。電子設(shè)備100提取網(wǎng)頁中包括的超鏈接的文本(S14840)。電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入(S14850)。電子設(shè)備100確定是否只有一個(gè)超鏈接具有與該用戶語音一致的文本(S14860)。如果只有一個(gè)超鏈接具有與該用戶語音一致的文本(S14860-是),則控制單元140運(yùn)行相應(yīng)的超鏈接(S14870)。然而,如果存在具有與用戶語音一致的文本的多個(gè)超鏈接(S14860-否),則控制單元140生成包括多個(gè)超鏈接的候選組列表,并顯示該候選組列表(S14880)??刂茊卧?40根據(jù)用戶操縱(例如,將超鏈接的文本作為語音輸入)來選擇超鏈接(S14890),并運(yùn)行所選擇的超鏈接(S14870)。如上所述,生成候選組列表,從而即使有多個(gè)超鏈接與用戶語音一致,用戶也能夠使用候選組列表來運(yùn)行期望的超鏈接。如果通過語音輸入單元110輸入的用戶語音的等級(jí)低于預(yù)定等級(jí),則控制單元140可以在語音輔助信息的第一區(qū)域上顯示反饋Π,其指示用戶語音是不可識(shí)別的。
具體來說,如果通過語音輸入單元110輸入語音啟動(dòng)命令,則控制單元140響應(yīng)于語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式,在語音任務(wù)模式中,電子設(shè)備100按照通過語音輸入單元110輸入的用戶語音來控制。在語音任務(wù)模式中,控制單元140顯示指導(dǎo)語音任務(wù)的語音輔助信息,該語音任務(wù)是按照通過語音輸入單元110輸入的用戶語音來執(zhí)行的。語音輔助信息可以在顯示屏幕的下部顯示。語音輸入單元110接收用戶語音的輸入。如果通過語音輸入單元110輸入的用戶語音低于預(yù)定音量,則控制單元140在語音輔助信息的第一區(qū)域上顯示反饋UI,其指示用戶語音是不可識(shí)別的。反饋UI可以包括這樣的GUI,其以條(bar)的形式表示預(yù)定音量和通過語音輸入單元110輸入的用戶語音的音量。第一區(qū)域可以位于語音輔助信息的下部。此外,控制單元140可以在語音輔助信息中顯示用戶語音應(yīng)該高于預(yù)定音量的消息。例如,可以顯示消息“請(qǐng)?jiān)俅簏c(diǎn)兒聲說”。圖149是根據(jù)示范性實(shí)施例的、解釋指導(dǎo)語音識(shí)別錯(cuò)誤的UI的流程圖。電子設(shè)備100通過語音輸入單元110接收語音啟動(dòng)命令(S14910)。電子設(shè)備100響應(yīng)于通過語音輸入單元110輸入的語音啟動(dòng)命令而將電子設(shè)備100的模式改變?yōu)檎Z音任務(wù)模式(S14920)。電子設(shè)備100在顯示屏幕的下部顯示語音輔助信息以執(zhí)行語音任務(wù)模式(S14930)。電子設(shè)備100通過語音輸入單元110接收用戶語音的輸入(S14940)。如果通過語音輸入單元110輸入的用戶語音的等級(jí)低于預(yù)定等級(jí),則電子設(shè)備100顯示反饋n(S14950)。反饋Π可以是這樣的UI,該Π包括由于用戶語音的等級(jí)低于預(yù)定等級(jí)而無法識(shí)別用戶語音的消息、以及用戶應(yīng)該再大點(diǎn)兒聲說話的消息。如上所述,如果用戶語音太小以至于無法識(shí)別該語音,則電子設(shè)備100通知該語音是不可識(shí)別的,從而用戶能夠容易地意識(shí)到該語音是無法識(shí)別的,從而能夠容易地解決這個(gè)問題。如上所述,用戶能夠通過用戶語音和用戶動(dòng)作之一更有效且更直觀地控制電子設(shè)備 100。在上面的示范性實(shí)施例中,描述了用戶動(dòng)作(諸如作為動(dòng)作啟動(dòng)命令的用戶動(dòng)作,其被設(shè)置為水平搖動(dòng)一只手3至4次的動(dòng)作)。然而,這些示范性實(shí)施例不應(yīng)該被視為限制,因?yàn)槭痉缎詫?shí)施例能夠由任何用戶動(dòng)作來實(shí)現(xiàn)。在上面的示范性實(shí)施例中,描述了用戶語音命令。然而,這些示范性實(shí)施例不應(yīng)該被視為限制,因?yàn)槭痉缎詫?shí)施例能夠由任何用戶語音輸入來實(shí)現(xiàn)。在上面的示范性實(shí)施例中,語音輸入單元110可以由直接接收用戶語音的輸入的麥克風(fēng)來實(shí)現(xiàn),或者由接收輸入到該麥克風(fēng)的語音信號(hào)的接口來實(shí)現(xiàn)。同樣,動(dòng)作輸入單元120可以由直接拍攝用戶的照相機(jī)來實(shí)現(xiàn),或者可以由接收照相機(jī)所拍攝的數(shù)據(jù)的接口來實(shí)現(xiàn)。以上所述的電子設(shè)備100可以由TV實(shí)現(xiàn)。然而,這不應(yīng)該被視為限制,而且電子設(shè)備100可以由各種設(shè)備實(shí)現(xiàn),諸如機(jī)頂盒、PC、膝上型計(jì)算機(jī)、平板PC、電子相冊(cè)、電子書、PDA、移動(dòng)電話等。此外,參照?qǐng)D3,各種軟件模塊存儲(chǔ)在存儲(chǔ)單元130中。然而,軟件模塊不一定存儲(chǔ)在一個(gè)存儲(chǔ)單元130中。也就是說,語音識(shí)別模塊和動(dòng)作識(shí)別模塊可以分別存儲(chǔ)在單獨(dú)的存儲(chǔ)單元中。因此,語音識(shí)別模塊可以從通過麥克風(fēng)輸入的語音信號(hào)中識(shí)別用戶語音,并且可以將識(shí)別的結(jié)果提供給控制單元140。此外,動(dòng)作識(shí)別模塊可以使用照相機(jī)所拍攝的圖像信號(hào)來識(shí)別用戶動(dòng)作,并且可以將識(shí)別的結(jié)果提供給控制單元140。此外,語音識(shí)別模塊和動(dòng)作識(shí)別模塊可以分別存儲(chǔ)在單獨(dú)的外部設(shè)備中。例如,包括麥克風(fēng)的語音識(shí)別設(shè)備可以使用語音識(shí)別模塊來識(shí)別用戶語音,然后可以將識(shí)別的結(jié)果提供給電子設(shè)備100。同樣,包括照相機(jī)的動(dòng)作識(shí)別設(shè)備可以使用動(dòng)作識(shí)別模塊來識(shí)別用戶動(dòng)作,然后可以將識(shí)別的結(jié)果提供給電子設(shè)備100。執(zhí)行上述控制方法的程序代碼可以存儲(chǔ)在各種類型的記錄介質(zhì)中。具體來說,該程序代碼可以存儲(chǔ)在終端設(shè)備可讀的各種類型的記錄介質(zhì)中,諸如隨機(jī)存取存儲(chǔ)器(RAM)、閃存、只讀存儲(chǔ)器(ROM)、可擦除可編程ROM (EPR0M)、電可擦除可編程ROM (EEPR0M)、寄存器、硬盤、可移動(dòng)盤、存儲(chǔ)卡、USB存儲(chǔ)器、CD-ROM等。上述示范性實(shí)施例和優(yōu)點(diǎn)僅僅是示范性的,并且不應(yīng)被解釋為限制本發(fā)明構(gòu)思。示范性實(shí)施例能夠容易地應(yīng)用到其他類型的設(shè)備。此外,對(duì)示范性實(shí)施例的描述旨在說明,而不是限制權(quán)利要求的范圍,而且許多替換、修改和變化對(duì)本領(lǐng)域技術(shù)人員而言將是顯而易見的。
60
權(quán)利要求
1.一種用于控制電子設(shè)備的方法,該方法包括 輸出多個(gè)廣播信號(hào)當(dāng)中的第一廣播信號(hào)和已存儲(chǔ)的內(nèi)容之一; 通過動(dòng)作識(shí)別模塊識(shí)別用戶動(dòng)作;以及 如果輸出的是第一廣播信號(hào),則響應(yīng)于所述用戶動(dòng)作,控制第一廣播信號(hào)的音量等級(jí)或?qū)⒌谝粡V播信號(hào)改變?yōu)樗龆鄠€(gè)廣播信號(hào)當(dāng)中的第二廣播信號(hào),以及 如果輸出的是已存儲(chǔ)的內(nèi)容,則響應(yīng)于所述用戶動(dòng)作,改變顯示已提供的內(nèi)容的屏幕的至少一部分。
2.如權(quán)利要求I所述的方法,其中,所述廣播信號(hào)是從廣播接收單元接收的, 其中,所述已存儲(chǔ)的內(nèi)容是存儲(chǔ)在存儲(chǔ)單元中的、從外部終端輸入單元接收的、或從網(wǎng)絡(luò)接口接收的。
3.如權(quán)利要求I所述的方法,其中,所述已存儲(chǔ)的內(nèi)容包括多個(gè)頁面,所述多個(gè)頁面包括第一頁面和第二頁面, 其中,改變屏幕的至少一部分包括停止顯示第一頁面并顯示第二頁面。
4.如權(quán)利要求3所述的方法,其中,改變屏幕的至少一部分包括響應(yīng)于所述用戶動(dòng)作的方向停止顯示第一頁面并顯示挨著第一頁面的頁面。
5.如權(quán)利要求I所述的方法,其中,所述已存儲(chǔ)的內(nèi)容包括單一頁面,所述單一頁面包括第一部分和第二部分, 其中,改變屏幕的至少一部分包括停止顯示第一部分并顯示第二部分。
6.如權(quán)利要求I所述的方法,其中,改變屏幕的至少一部分包括將顯示已存儲(chǔ)的內(nèi)容的屏幕改變?yōu)轱@示不同于該內(nèi)容的內(nèi)容的屏幕。
7.如權(quán)利要求I所述的方法,還包括 通過語音識(shí)別模塊識(shí)別用戶語音命令;以及 響應(yīng)于所述用戶語音命令,輸出所述多個(gè)廣播信號(hào)當(dāng)中的第三廣播信號(hào)。
8.—種電子設(shè)備,包括 顯示單元,其顯示多個(gè)廣播信號(hào)當(dāng)中的第一廣播信號(hào)和已存儲(chǔ)的內(nèi)容之一; 動(dòng)作輸入單元,其接收用戶動(dòng)作的輸入;以及 控制器, 如果顯示的是第一廣播信號(hào),則控制器響應(yīng)于所述用戶動(dòng)作,控制第一廣播信號(hào)的音量等級(jí)或?qū)⒌谝粡V播信號(hào)改變?yōu)樗龆鄠€(gè)廣播信號(hào)當(dāng)中的第二廣播信號(hào),以及 如果顯示的是已存儲(chǔ)的內(nèi)容,則響應(yīng)于所述用戶動(dòng)作,改變顯示已提供的內(nèi)容的屏幕的至少一部分。
9.如權(quán)利要求8所述的電子設(shè)備,其中,所述已存儲(chǔ)的內(nèi)容包括多個(gè)頁面,所述多個(gè)頁面包括第一頁面和第二頁面,以及 其中,改變屏幕的至少一部分包括停止顯示第一頁面并顯示第二頁面。
10.如權(quán)利要求9所述的電子設(shè)備,其中,改變屏幕的至少一部分包括響應(yīng)于所述用戶動(dòng)作的方向,停止顯示第一頁面并顯示挨著第一頁面的頁面。
11.如權(quán)利要求8所述的電子設(shè)備,其中,所述已存儲(chǔ)的內(nèi)容包括單一頁面,所述單一頁面包括第一部分和第二部分, 其中,改變屏幕的至少一部分包括停止顯示第一部分并顯示第二部分。
12.如權(quán)利要求8所述的電子設(shè)備,還包括語音輸入單元,其接收用戶語音的輸入, 其中,所述顯示單元響應(yīng)于所述用戶語音,顯示所述多個(gè)廣播信號(hào)當(dāng)中的第三廣播信號(hào)。
全文摘要
提供了電子設(shè)備及其控制方法。如果提供了廣播信號(hào),則控制電子設(shè)備的方法響應(yīng)于識(shí)別到的用戶動(dòng)作而控制已提供的廣播信號(hào)的音量等級(jí)或者提供另一個(gè)廣播信號(hào),如果提供了內(nèi)容,則控制電子設(shè)備的方法響應(yīng)于識(shí)別到的用戶動(dòng)作而改變顯示已提供的內(nèi)容的屏幕的至少一部分。
文檔編號(hào)H04N21/472GK102917271SQ20121027698
公開日2013年2月6日 申請(qǐng)日期2012年8月6日 優(yōu)先權(quán)日2011年8月5日
發(fā)明者金正根, 金裕泰, 俞升東, 韓尚珍, 柳熙涉 申請(qǐng)人:三星電子株式會(huì)社