用于提供用戶界面的方法和設(shè)備的制作方法
【專利摘要】本發(fā)明提供一種用于提供用戶界面的方法和設(shè)備,所述方法包括:在執(zhí)行應(yīng)用期間從用戶接收到手寫輸入模式的模式切換請求;根據(jù)模式切換請求,切換到手寫輸入模式;識別從用戶接收的手寫數(shù)據(jù);將識別的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù);通過預(yù)設(shè)方案處理轉(zhuǎn)換的數(shù)據(jù);在觸摸屏上顯示處理的結(jié)果。
【專利說明】用于提供用戶界面的方法和設(shè)備
【技術(shù)領(lǐng)域】[0001]本公開總體涉及一種用于提供用戶界面的方法,更具體地講,涉及一種提供支持手寫輸入的用戶界面的方法。
【背景技術(shù)】
[0002]通常,由鍵盤來實現(xiàn)包括在便攜式終端(例如,移動通信終端)中的用戶輸入單元??赏ㄟ^用戶使用他/她的手直接按壓安裝在終端的按鈕的輸入方案或用戶使用觸摸屏的輸入方案來執(zhí)行通過鍵盤的用戶輸入。在輸入方案當(dāng)中,使用觸摸屏的輸入方案包括軟鍵盤輸入方案和手寫識別方案。軟鍵盤輸入方案在觸摸屏上以鍵盤的形式顯示輸入窗并通過筆點擊和手指點擊來接收輸入,以克服一般鍵盤和鼠標(biāo)不容易被攜帶的便攜式終端的缺點。另外,手寫輸入方案識別人的手寫并將手寫轉(zhuǎn)換為數(shù)據(jù)代碼。
[0003]傳統(tǒng)的手寫輸入方案應(yīng)通過五個步驟,所述五個步驟有:將光標(biāo)置于手寫將被輸入的位置,執(zhí)行手寫輸入應(yīng)用,執(zhí)行到手寫輸入屏的切換,輸入手寫數(shù)據(jù),并識別手寫數(shù)據(jù)的識別結(jié)果并由用戶按壓存儲按鈕。因此,不方便輸入手寫并且在沒有明確的意圖進(jìn)行輸入的情況下經(jīng)常產(chǎn)生不想要的輸入。
【發(fā)明內(nèi)容】
[0004]為了解決上述所討論的現(xiàn)有技術(shù)的缺陷,本公開的一個目的在于提供一種通過使用懸停操作允許輸入模式切換來防止產(chǎn)生用戶不想要的輸入的方法。
[0005]本公開的另一方面在于通過識別由用戶寫入的手寫,將手寫轉(zhuǎn)換為文本并自動將轉(zhuǎn)換的文本插入到在屏幕上執(zhí)行的應(yīng)用的輸入單元來簡化手寫輸入處理。
[0006]根據(jù)本公開的一方面,提供一種在便攜式終端中提供用戶界面的方法。所述方法包括:在執(zhí)行應(yīng)用期間從用戶接收到手寫輸入模式的模式切換請求;根據(jù)模式切換請求,切換到手寫輸入模式;識別從用戶接收的手寫數(shù)據(jù);將識別的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù);通過預(yù)設(shè)方案處理轉(zhuǎn)換的數(shù)據(jù);在觸摸屏上顯示處理的結(jié)果。
[0007]根據(jù)本公開的另一方面,提供一種記錄用于執(zhí)行提供裝置的用戶界面的方法的非暫時性機(jī)器可讀存儲介質(zhì)和具有所述存儲介質(zhì)的裝置。
[0008]根據(jù)本公開的另一方面,提供一種用于提供用戶界面的便攜式終端。所述便攜式終端包括:存儲單元,被配置為存儲應(yīng)用;觸摸屏,被配置為顯示輸入數(shù)據(jù)并檢測觸摸工具的接觸或懸停;控制器,被配置為在執(zhí)行應(yīng)用期間從用戶接收到手寫輸入模式的模式切換請求,根據(jù)用戶的模式切換請求切換到手寫輸入模式,識別從用戶接收的手寫數(shù)據(jù),將識別的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù),通過預(yù)設(shè)方案處理轉(zhuǎn)換的數(shù)據(jù),并在觸摸屏上顯示處理的結(jié)果。
[0009]在進(jìn)行下面的【具體實施方式】之前,對貫穿該專利文檔使用的特定詞語和短語的定義進(jìn)行闡述會是有利的:術(shù)語“包括”和“包含”及其派生詞表示沒有限制地包括;術(shù)語“或”是包括性地表示和/或;短語“與…相關(guān)聯(lián)”和“與此相關(guān)聯(lián)”及其派生詞可表示包括、被包括在…內(nèi)、與…相互連接、包含、包含在…內(nèi)、連接到或與…連接、結(jié)合到或與…結(jié)合、可與…通信、與…協(xié)作、交錯、并置、接近于、綁定到或與…綁定、具有、具有…的屬性等;術(shù)語“控制器”表示控制至少一個操作的任何裝置、系統(tǒng)或者其部分,這樣的裝置可以是以硬件、固件或軟件實現(xiàn)的裝置,或者以硬件、固件以及軟件中的至少兩者的某種組合實現(xiàn)的裝置。應(yīng)該注意,與任意特定控制器相關(guān)聯(lián)的功能性可被集中或散布,而不管是本地還是遠(yuǎn)程。貫穿該專利文檔,提供對特定詞語和短語的定義,本領(lǐng)域普通技術(shù)人員應(yīng)該理解,即使不是大多數(shù)場合,在很多場合,該定義應(yīng)用于這樣定義的詞和短語的先前的使用和將來的使用。
【專利附圖】
【附圖說明】
[0010]為了更完整地理解本公開及其優(yōu)點,現(xiàn)參照結(jié)合附圖的以下描述,其中,相同的標(biāo)號表不相同的部件:
[0011]圖1是示意性示出根據(jù)本公開的實施例的便攜式終端的框圖;
[0012]圖2是根據(jù)本公開的實施例的便攜式終端的前透視圖;
[0013]圖3是根據(jù)本公開的實施例的便攜式終端的后透視圖;
[0014]圖4是用于描述根據(jù)本公開的一實施例的用戶界面提供方法的流程圖;
[0015]圖5是示出懸停操作;
[0016]圖6是用于描述根據(jù)本公開的實施例的語音識別應(yīng)用中的用戶界面提供方法的流程圖;
[0017]圖7示出語音識別應(yīng)用的初始屏幕;
[0018]圖8示出根據(jù)本發(fā)明的一實施例的手寫輸入按鈕;
[0019]圖9示出根據(jù)本公開的一實施例的手寫輸入模式顯示方法;
[0020]圖10示出根據(jù)本公開的另一實施例的手寫輸入模式顯示方法;
[0021]圖11示出根據(jù)本公開的一實施例的手寫輸入數(shù)據(jù);
[0022]圖12示出根據(jù)本公開的一實施例的處理轉(zhuǎn)換的文本數(shù)據(jù)的方法;
[0023]圖13至圖15示出根據(jù)本公開的另一實施例的在消息應(yīng)用中的用戶界面提供方法;
[0024]圖16至圖18示出根據(jù)本公開的另一實施例的在圖庫應(yīng)用中的用戶界面提供方法;
[0025]圖19至圖20示出根據(jù)本公開的修改的示例的在語音識別應(yīng)用中的用戶界面提供方法。
【具體實施方式】
[0026]圖1至圖20、以下所討論的內(nèi)容以及在本專利文檔中用于描述本公開的原理的各種示例性實施例僅用于說明,并且不應(yīng)以任何方式被解釋為限制本公開的范圍。本領(lǐng)域的技術(shù)人員將理解,可以以任何適當(dāng)布置的電子裝置實現(xiàn)本公開的原理。本公開可具有各種修改和實施例,并且將參照特定實施例詳細(xì)描述本公開。然而,本公開不限于特定實施例,而應(yīng)被解釋為在本公開的精神和范圍之內(nèi)包括所有的修改、等同物和替代物。
[0027]盡管可使用包括諸如“第一”和“第二”等的序號的術(shù)語來描述不同的組件,但是這些組件不應(yīng)被這些術(shù)語所限制。這些術(shù)語僅用于區(qū)分一個組件與另一組件。例如,在不脫離本公開的范圍的情況下,第一組件可被稱為第二組件,類似地,第二組件可被稱為第一組件。術(shù)語“和/或”包括多個項的組合或多個項中的任意一個。
[0028]在此使用的術(shù)語僅用于描述特定實施例,而不意于限制本公開。用于單數(shù)的表達(dá)包括復(fù)數(shù)的表達(dá),除非上下文另有清楚的不同的含義。例如“包括”和/或“具有”的術(shù)語可被解釋為指示特定特征、數(shù)量、步驟、操作、組成元件、組件或其組合,但不可解釋為排除存在或添加一個或多個其它特征、數(shù)量、步驟、操作、組成元件、組件或其組合的可能性。
[0029]除非另有定義,否則在此使用的所有術(shù)語具有與本領(lǐng)域的技術(shù)人員通常理解的含義相同的含義。諸如在常用詞典中定義的術(shù)語應(yīng)被解釋為具有與所述術(shù)語在相關(guān)領(lǐng)域的上下文中的含義一致的含義,而不應(yīng)被解釋為具有理想或過于形式的含義,除非在本說明書中清晰地定義。
[0030]圖1是示意性示出根據(jù)本公開的實施例的便攜式終端的框圖,圖2是根據(jù)本公開的實施例的便攜式終端的前透視圖,圖3是根據(jù)本公開的實施例的便攜式終端的后透視圖。
[0031]參照圖1,便攜式終端100可通過使用外部裝置連接器(例如,子通信模塊130、連接器165、耳機(jī)連接插孔167)與外部裝置(未示出)連接。外部裝置包括通過線纜連接到便攜式終端100或脫離便攜式裝置100的各種裝置(例如,耳機(jī)、外部揚聲器、通用串行總線(USB)存儲器、充電器、托架/存放臺(dock)、DMB天線、移動支付相關(guān)的裝置、健康管理裝置(血糖測試儀等)、游戲機(jī)、汽車導(dǎo)航裝置等)。另外,外部裝置包括:藍(lán)牙通信裝置、短距離通信裝置(諸如,近場通信(NFC)裝置)、WiFi直接通信裝置、可無線連接的無線接入點(AC)。另外,外部裝置可包括另一裝置、移動電話、智能電話、平板PC、臺式PC和服務(wù)器。
[0032]便攜式終端100可以是智能電話、移動電話、游戲機(jī)、TV、顯示裝置、用于車輛的頭部單元、筆記本、膝上型計算機(jī)、平板PC、個人多媒體播放器(PMP)、個人數(shù)字助理(PDA)等。便攜式終端100可被實現(xiàn)為以口袋大小的具有無線通信功能的便攜式移動終端。
[0033]參照圖1,便攜式終端100包括觸摸屏190和觸摸屏控制器195。另外,便攜式終端100包括:控制器110、移動通信模塊120、子通信模塊130、多媒體模塊140、相機(jī)模塊150、GPS模塊155、輸入/輸出模塊160、傳感器模塊170、存儲單元175和供電器180。子通信模塊130包括無線LAN模塊131和短距離通信模塊132中的至少一個,多媒體模塊140包括廣播通信模塊141、音頻再現(xiàn)模塊142和視頻再現(xiàn)模塊143中的至少一個。相機(jī)模塊150包括第一相機(jī)151和第二相機(jī)152中的至少一個。輸入/輸出模塊160包括按鈕161、麥克風(fēng)162、揚聲器163、振動電機(jī)164、連接器165、鍵盤166和耳機(jī)連接插孔167中的至少一個。
[0034]控制器110包括CPU111、存儲用于控制便攜式終端100的控制程序的R0M112、用作用于存儲從設(shè)備100的外部輸入的信號或數(shù)據(jù)或用于在便攜式終端100中執(zhí)行的工作的存儲區(qū)域的RAM113。CPUlll包括單核、雙核、三核或四核。CPU111、R0M112和RAM113可通過內(nèi)部總線相互地彼此連接。
[0035]控制器110可控制移動通信模塊120、子通信模塊130、多媒體模塊140、相機(jī)模塊150,GPS模塊155、輸入/輸出模塊160、傳感器模塊170、存儲單元175、供電器180、觸摸屏190和觸摸屏控制器195。
[0036]移動通信模塊120、子通信模塊130、多媒體模塊140的廣播通信模塊141可統(tǒng)稱為通信單元,通信單元被設(shè)置為與外部裝置直接連接或通過網(wǎng)絡(luò)連接,并可以是有線或無線通信單元。通信單元可通過線纜或無線地將數(shù)據(jù)發(fā)送到控制器110、存儲單元175和相機(jī)模塊150,或從外部通信線或空中接收數(shù)據(jù),隨后將數(shù)據(jù)發(fā)送到控制器110或?qū)?shù)據(jù)存儲在存儲單元175中。
[0037]移動通信模塊120根據(jù)控制器110的控制,使便攜式終端100能夠通過使用一個天線或多個天線的移動通信來與外部裝置連接。移動通信模塊120將用于語音電話通信、視頻電話通信、短消息服務(wù)(SMS)或多媒體消息服務(wù)(MMS)的交換、單方向發(fā)送或接收數(shù)據(jù)的無線信號發(fā)送到移動電話(未示出)、智能電話(未示出)、平板PC或?qū)㈦娫捥柎a輸入到設(shè)備100的另一裝置(未示出),或從所述移動電話(未示出)、智能電話(未示出)、平板PC或?qū)㈦娫捥柎a輸入到設(shè)備100的另一裝置(未示出)接收所述用于語音電話通信、視頻電話通信、短消息服務(wù)(SMS)或多媒體消息服務(wù)(MMS)的交換、單方向發(fā)送或接收數(shù)據(jù)的無線信號。
[0038]子通信模塊130可包括無線LAN模塊131和短距離模塊132中的至少一個。例如,子通信模塊130可僅包括無線LAN模塊131、僅包括近場通信模塊132或包括無線LAN模塊131和近場通信模塊132兩者。
[0039]無線LAN模塊131可在安裝無線接入點(AP)(未示出)的地方根據(jù)控制器110的控制被互聯(lián)網(wǎng)連接。無線LAN模塊131支持電氣和電子工程師學(xué)會的無線LAN標(biāo)準(zhǔn)(IEEE802.llx)。短距離通信模塊132可根據(jù)控制器110的控制,無線地執(zhí)行便攜式終端100和成像設(shè)備(未示出)之間的近場通信。近距離通信方案可包括藍(lán)牙、紅外數(shù)據(jù)協(xié)會(IrDA)通信、W1-Fi直接通信、近場通信(NFC)等。
[0040]便攜式終端100可包括移動通信模塊120、無線LAN模塊131、近距離通信模塊132中的至少一個。例如,便攜式終端100可根據(jù)其性能包括移動通信模塊120、無線LAN模塊131和短距離通信模塊132的組合。
[0041]多媒體模塊140包括廣播通信模塊141、音頻再現(xiàn)模塊142或視頻再現(xiàn)模塊143。廣播通信模塊141可根據(jù)控制器110的控制通過廣播通信天線(未示出)接收從廣播站輸出的廣播信號(例如,TV廣播信號、無線電廣播信號或數(shù)據(jù)廣播信號)和廣播補(bǔ)充信息(例如,電子節(jié)目指南=EPG或電子服務(wù)指南:ESG)。音頻再現(xiàn)模塊142可再現(xiàn)根據(jù)控制器110的控制存儲和接收的數(shù)字音頻文件(例如,文件擴(kuò)展名為mp3、wma、ogg或wav的文件)。視頻再現(xiàn)模塊143可再現(xiàn)根據(jù)控制器110的控制存儲和接收的數(shù)字視頻文件(例如,文件擴(kuò)展名為mpeg、mpg、mp4、avi> mov 或 mkv 的文件)。
[0042]多媒體模塊140除廣播通信模塊141之外還包括音頻再現(xiàn)模塊142和視頻再現(xiàn)模塊143。另外,多媒體模塊140的音頻再現(xiàn)模塊142或視頻再現(xiàn)模塊143可被包括在控制器110 中。
[0043]相機(jī)模塊150包括根據(jù)控制器110的控制拍攝靜止圖像和視頻的第一相機(jī)151和第二相機(jī)152中的至少一個。另外,第一相機(jī)151或第二相機(jī)152包括提供拍攝所需的光的輔助光源(例如,閃光燈(未示出))。第一相機(jī)151可被布置在設(shè)備100的前面,第二相機(jī)152可被布置在設(shè)備100的背面??蛇x擇地,第一相機(jī)151和第二相機(jī)152位于彼此接近(例如,第一相機(jī)151和第二相機(jī)152之間的距離大于Icm并小于8cm),并且拍攝三維靜止圖像或三維視頻。
[0044]相機(jī)151和152可包括透鏡系統(tǒng)、圖像傳感器、閃光燈等。相機(jī)151和152將通過透鏡系統(tǒng)輸入(或拍攝)的光信號轉(zhuǎn)換為圖像信號并將轉(zhuǎn)換的圖像信號輸出到控制器110。隨后,用戶可通過相機(jī)151和152拍攝視頻或靜止圖像。
[0045]透鏡系統(tǒng)通過匯聚從外部入射的光來形成對象的圖像。透鏡系統(tǒng)包括至少一個透鏡,并且每個透鏡可以是凸透鏡、非球面透鏡等。透鏡系統(tǒng)針對穿過其中心的光軸具有對稱性,并且光軸被定義為中心軸。圖像傳感器將通過透鏡系統(tǒng)入射的外部光形成的光學(xué)圖像檢測為電圖像信號。圖像傳感器具有以MXN矩陣結(jié)構(gòu)布置的多個像素單元并包括光電二極管和多個晶體管。像素單元積累通過入射光產(chǎn)生的電荷,并且根據(jù)積累的電荷的電壓指示入射光的光照度。在處理包括在靜止圖像或視頻的一個圖像中,從圖像傳感器輸出的圖像信號組成由從像素單元輸出的一組電壓(即,像素值)組成,并且圖像信號指示一個幀(即,靜止圖像)。另外,幀由MXN像素組成。圖像傳感器包括:電荷耦合裝置(CXD)圖像傳感器、互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)圖像傳感器等。
[0046]驅(qū)動器根據(jù)控制器110的控制驅(qū)動圖像傳感器。驅(qū)動器根據(jù)從控制器110接收的控制信號,驅(qū)動圖像傳感器的整個像素或僅驅(qū)動在整個像素中感興趣區(qū)域的像素,從像素輸出的圖像數(shù)據(jù)被輸出到控制器110。
[0047]控制器110以幀為單位處理從相機(jī)151和152輸入的圖像或存儲在存儲單元175中的圖像,并將轉(zhuǎn)換為適用于觸摸屏190的屏幕特性(尺寸、圖片質(zhì)量、分辨率等)的圖像幀輸出到觸摸屏190。
[0048]GPS模塊155可從地球軌道上的多個GPS衛(wèi)星(未示出)接收無線電波,并通過使用從GPS衛(wèi)星到便攜式終端100的到達(dá)時間來計算便攜式終端100的位置。
[0049]輸入/輸出模塊160包括按鈕161、麥克風(fēng)162、揚聲器163、振動電機(jī)164、連接器165和鍵盤166中的至少一個。除連接器165以外的輸入/輸出模塊160被用作用于接收用戶輸入或向用戶通知信息的手段。輸入/輸出模塊160的其他示例不限于此,但鼠標(biāo)、軌跡球、操縱桿或光標(biāo)控制(例如,光標(biāo)方向鍵)可被提供為與控制器110的信息通信和觸摸屏190上的光標(biāo)的運動的控制。
[0050]按鈕161可形成在便攜式終端100的前面100a、側(cè)面IOOb或背面100c,并可包括電源按鈕161d、具有音量增加按鈕161f和音量減小按鈕161g的音量按鈕161e、菜單按鈕161b、主按鈕161a、后退按鈕161c和搜索按鈕中的至少一個。
[0051]麥克風(fēng)162根據(jù)控制器110的控制接收語音或聲音以產(chǎn)生電信號。
[0052]揚聲器163可根據(jù)控制器110的控制將與移動通信模塊120、子通信模塊130、多媒體模塊140或相機(jī)模塊150的各種信號(例如,無線信號、廣播信號、數(shù)字音頻文件、數(shù)字視頻文件、拍攝圖片等)輸出到便攜式終端100的外部。揚聲器163可輸出與由便攜式終端100執(zhí)行的功能相應(yīng)的聲音(例如,與電話通信相應(yīng)的按鈕音、鈴聲和另一用戶的語音)。一個揚聲器163或多個揚聲器163可在便攜式終端100的外殼的適合的位置或多個位置上形成。
[0053]振動電機(jī)164可根據(jù)控制器110的控制將電信號轉(zhuǎn)換為機(jī)械振動。例如,當(dāng)處于振動模式的便攜式終端100從另一裝置(未示出)接收語音或視頻電話通信時,振動電機(jī)被操作。一個振動電機(jī)164或多個振動電機(jī)164可在便攜式終端100的外殼內(nèi)形成。振動電機(jī)可根據(jù)觸摸屏190上用戶的觸摸動作或觸摸屏190上觸摸的連續(xù)運動來進(jìn)行操作。
[0054]連接器165可用作用于將設(shè)備與外部裝置(未示出)或電源(未示出)連接的接口。便攜式終端100可根據(jù)控制器110的控制通過連接到連接器165的有線線纜將存儲在設(shè)備100的存儲單元175的數(shù)據(jù)發(fā)送到外部裝置(未示出),或從外部裝置(未示出)接收所述存儲在設(shè)備100的存儲單元175的數(shù)據(jù)。外部裝置可以是基座,所述數(shù)據(jù)可以是從外部輸入裝置(例如,鼠標(biāo)、鍵盤等)發(fā)送的輸入信號。便攜式終端100可通過連接到連接器165的有線線纜從電源接收電力,或通過使用電源為電池(未示出)充電。
[0055]鍵盤166可從用戶接收鍵輸入以控制便攜式終端100。鍵盤166包括形成在便攜式終端100的物理鍵盤(未示出)或顯示在顯示單元190上的虛擬鍵盤(未示出)。根據(jù)便攜式終端100的性能或結(jié)構(gòu),形成在便攜式終端100的物理鍵盤(未示出)可被排除。
[0056]耳機(jī)(未示出)被插入到耳機(jī)連接插孔167,以與便攜式終端100連接。
[0057]傳感器模塊170包括用于檢測便攜式終端100的狀態(tài)(位置、方向、運動等)的至少一個傳感器。例如,傳感器模塊170包括用于檢測用戶是否接近便攜式終端100的近距離傳感器、用于檢測便攜式終端100的環(huán)境光量的照度傳感器(未示出)、用于檢測便攜式終端100的運動(例如,便攜式終端100的旋轉(zhuǎn)、加速、減速、振動)的運動/方向傳感器,用于測量氣壓以檢測高度的高度表中的至少一個。另外,運動/方向傳感器可包括加速傳感器、用于通過使用地球的磁場來檢測指南針點的地磁傳感器(未示出)、用于檢測重力作用方向的重力傳感器、陀螺儀傳感器、沖擊傳感器、GPS、指南針傳感器等。至少一個傳感器檢測狀態(tài),產(chǎn)生與所述檢測相應(yīng)的信號,并將信號發(fā)送到控制器110。可根據(jù)便攜式終端100的性能添加或省略傳感器模塊170的傳感器。
[0058]存儲單元175可存儲根據(jù)通信模塊120、子通信模塊130、多媒體模塊140、相機(jī)模塊150、GPS模塊155、輸入/輸出模塊160、傳感器模塊170或觸摸屏190的操作輸入/輸出的信號或數(shù)據(jù)。存儲單元175可存儲用于控制便攜式終端100或控制器110的控制程序和應(yīng)用。
[0059]術(shù)語“存儲單元”是用于指示在控制器110內(nèi)的隨機(jī)數(shù)據(jù)存儲裝置(例如,存儲單元175、R0M112和RAM113)或安裝在便攜式終端100中的存儲卡(例如,SD卡或存儲棒)。
[0060]存儲單兀175可存儲用于提供具有各種功能(例如,導(dǎo)航、視頻電話呼叫、游戲等)應(yīng)用和與所述應(yīng)用相關(guān)的圖形用戶界面(GUI)的圖像、與提供用戶信息、文檔、用戶界面、數(shù)據(jù)的方法相關(guān)的數(shù)據(jù)庫、驅(qū)動便攜式終端100所需的背景圖像(菜單屏幕、待機(jī)屏幕等)、操作程序或由相機(jī)拍攝的圖像。操作單元175是機(jī)器(例如,計算機(jī))-可讀介質(zhì),機(jī)器可讀介質(zhì)的術(shù)語可被定義為用于將數(shù)據(jù)提供給機(jī)器以執(zhí)行特定功能的介質(zhì)。機(jī)器可讀介質(zhì)可以是存儲介質(zhì)。存儲單元175可包括非易失性介質(zhì)和易失性介質(zhì)。所有這樣的介質(zhì)可以是通過所述介質(zhì)發(fā)送的命令可被通過機(jī)器讀取上述命令的物理介質(zhì)檢測的類型。
[0061]機(jī)器可讀介質(zhì)不限于此并包括軟盤、柔性盤、硬盤、磁帶、緊湊盤只讀存儲器(CD-ROM)、光盤、打孔卡、紙帶、只讀存儲器(RAM)、可編程ROM (PR0M)、可擦除PROM(EPROM)和閃存EPROM。
[0062]供電器180可根據(jù)控制器110的控制向布置在便攜式終端100的一個電池或多個電池(未示出)供電。一個電池或多個電池(未示出)向便攜式終端100供電。另外,供電器180可通過連接到連接器165的有線線纜將從外部電源(未示出)輸入的電力供應(yīng)到便攜式終端100。另外,供電器180可通過無線充電技術(shù)將從外部電源無線輸入的電力供應(yīng)到便攜式終端100。
[0063]觸摸屏190可將與各種服務(wù)(例如,電話通信、數(shù)據(jù)傳輸、廣播和拍攝)相應(yīng)的用戶界面提供給用戶。觸摸屏190可將與輸入到用戶界面的至少一個觸摸相應(yīng)的模擬信號發(fā)送到觸摸屏控制器195。觸摸屏190可通過觸摸工具(例如,手指、觸控筆等)接收至少一個觸摸。另外,觸摸屏190可接收至少一個觸摸中的一個觸摸的連續(xù)運動。觸摸屏190可將與輸入觸摸的連續(xù)運動相應(yīng)的模擬信號發(fā)送到觸摸屏控制器195。
[0064]另外,觸控筆168可形成在便攜式終端100的下表面。觸控筆168可在被插入到便攜式終端時被保存,并且當(dāng)被使用時可從便攜式終端取出或移除。另外,根據(jù)觸控筆168的安裝或拆卸而操作的筆可移除開關(guān)(未示出)位于觸控筆168插入到便攜式終端的一個區(qū)域,并將與觸控筆168的安裝或拆卸相應(yīng)的信號提供給控制器110。
[0065]另外,根據(jù)本公開的觸摸不限于觸摸屏190和觸摸工具(手指或觸控筆)之間的觸摸,并可包括非接觸(例如,觸摸屏190和觸摸工具之間的距離在Icm或小于Icm的檢測閾值距離之內(nèi))。從觸摸屏190的檢測閾值距離可根據(jù)便攜式終端100的性能或結(jié)構(gòu)而被改變。具體地講,觸摸屏190被實現(xiàn)為根據(jù)觸摸屏190和觸摸工具之間的距離而改變其輸出值,從而可區(qū)別地檢測由觸摸屏190和觸摸工具之間的觸摸進(jìn)行的觸摸事件與在非接觸狀態(tài)下的輸入(例如,懸停)事件。即,觸摸屏190被實現(xiàn)為不同地輸出通過觸摸事件檢測到的值(例如,電流值、電壓值、電容值等)和通過懸停事件檢測到的值。
[0066]同時,觸摸屏控制器195將從觸摸屏190接收的模擬信號轉(zhuǎn)換為數(shù)字信號(例如,(X、Y)坐標(biāo)和檢測值)并將轉(zhuǎn)換的數(shù)字信號發(fā)送到控制器110??刂破?10可通過使用從觸摸屏控制器195接收的數(shù)字信號控制觸摸屏190。例如,控制器110響應(yīng)于觸摸事件或懸停事件,允許顯示在觸摸屏190上的快捷圖標(biāo)被執(zhí)行。另外,觸摸屏控制器195可被包括在控制器110或觸摸屏190中。
[0067]另外,觸摸屏控制器195可基于從觸摸屏190輸出的值計算觸摸工具和觸摸屏190之間的距離,并將計算的距離轉(zhuǎn)換為數(shù)字信號(例如,Z坐標(biāo))并隨后將轉(zhuǎn)換的數(shù)字信號提供給控制器110。
[0068]另外,為了由區(qū)分地檢測通過手指的輸入和通過觸控筆的輸入,觸摸屏190可包括可分別檢測通過手指的輸入和通過觸控筆的輸入的至少兩個觸摸屏面板。所述至少兩個觸摸屏面板將不同的輸出值提供給觸摸屏控制器195,并且觸摸屏控制器195不同地識別從所述至少兩個觸摸屏面板輸入的值以確定來自觸摸屏190的輸入是否通過手指的輸入還是通過觸控筆的輸入。例如,觸摸屏190可具有將電容式的觸摸屏面板和電磁共振(EMR)式的觸摸屏面板組合的結(jié)構(gòu)。
[0069]參照圖2,觸摸屏190被布置在便攜式終端100的前表面IOOa的中心。觸摸屏190具有用于占據(jù)便攜式終端100的大部分前表面IOOa的大尺寸。圖2示出主要主屏幕被顯示在觸摸屏190上的示例。主要主屏幕是當(dāng)便攜式終端100的電源開啟時顯示在觸摸屏190上的第一屏幕。另外,當(dāng)便攜式終端100具有若干頁的不同主屏幕時,主要主屏幕可以是若干頁的主屏幕中的第一主屏幕。用于執(zhí)行頻繁使用的應(yīng)用的快捷圖標(biāo)191-1、191-2和191-3 ;主菜單圖標(biāo)191-4 ;時間、天氣等可被顯示在主屏幕上。主菜單圖標(biāo)191-4將菜單屏幕顯示在觸摸屏190上。另外,顯示便攜式終端100的狀態(tài)(例如,電池充電狀態(tài)、接收的信號強(qiáng)度、當(dāng)前時間)的狀態(tài)欄192可被形成在觸摸屏190的上端。
[0070]主按鈕161a、菜單按鈕161b和后退按鈕161c可形成在觸摸屏190的下端。
[0071]主按鈕161在觸摸屏190上顯示主要主屏幕。例如,當(dāng)在與主要主屏幕不同的主屏幕、菜單屏幕或應(yīng)用屏幕被顯示在觸摸屏190的狀態(tài)下主按鈕161a被按壓時,主要主屏幕圖被顯示在觸摸屏190上。S卩,當(dāng)在觸摸屏190上執(zhí)行應(yīng)用的同時主按鈕161a被觸摸時,圖2中所示的主要主屏幕被顯示在觸摸屏190上。另外,主按鈕161a可被用于在觸摸屏190上顯示最新使用的應(yīng)用或任務(wù)管理器。
[0072]菜單按鈕161b提供可被用在觸摸屏190上使用的連接菜單。連接菜單包括窗口小部件附加菜單、背景改變菜單、搜索菜單、編輯菜單、環(huán)境設(shè)置菜單等。
[0073]后退按鈕161c可被用于顯示當(dāng)前執(zhí)行的屏幕之前執(zhí)行的屏幕或終止最近使用的應(yīng)用。
[0074]第一相機(jī)151、光照度傳感器170a和近距離傳感器170b可被布置在便攜式終端100的前表面IOOa的邊緣上。第二相機(jī)152、閃光燈153和揚聲器可被布置在便攜式終端100的后表面IOOc上。
[0075]例如,電源按鈕161d、音量按鈕161e、用于廣播接收的地面DMB天線141a和一個或多個麥克風(fēng)162可被布置在便攜式終端100的側(cè)面IOOb上。DMB天線141a可固定到便攜式終端100或可被形成為從便攜式終端100拆卸。
[0076]另外,連接器165被形成在便攜式終端100的下側(cè)面。多個晶體管形成在連接在晶體管165中,并且連接器165可通過線纜連接到外部裝置。耳機(jī)插孔167可形成在便攜式終端100的上端的側(cè)面。耳機(jī)可被插入到耳機(jī)插孔167。
[0077]另外,包括在根據(jù)本公開的實施例的便攜式終端100中的控制器110被實現(xiàn)為執(zhí)行根據(jù)本公開的實施例的方法的用戶界面。
[0078]圖4是用于描述根據(jù)本公開的實施例的用戶界面提供方法的流程圖。
[0079]所述方法包括步驟S410至S450。
[0080]在步驟S410,裝置執(zhí)行應(yīng)用,用戶通過觸摸屏190、輸入/輸出模塊160或相機(jī)模塊150,通過選擇按鈕、圖標(biāo)或菜單項或者輸入語音命令、手勢、運動或觸摸圖案來執(zhí)行期望的應(yīng)用。所述應(yīng)用可以是接收用戶輸入的隨機(jī)應(yīng)用(例如,語音識別應(yīng)用、日程管理應(yīng)用、文檔編寫應(yīng)用、音樂應(yīng)用、互聯(lián)網(wǎng)應(yīng)用、地圖應(yīng)用、相機(jī)應(yīng)用、電子郵件應(yīng)用、圖像編輯應(yīng)用、搜索應(yīng)用、文件搜索應(yīng)用、視頻應(yīng)用、游戲應(yīng)用、SNS應(yīng)用、電話應(yīng)用、消息應(yīng)用等)。
[0081]在步驟S420,裝置執(zhí)行到手寫輸入模式的切換。當(dāng)用戶在執(zhí)行應(yīng)用的狀態(tài)下做出切換模式的請求時,控制器110根據(jù)模式切換請求將應(yīng)用執(zhí)行模式切換到手寫輸入模式,隨后進(jìn)行操作。
[0082]模式切換請求可在用戶通過使用觸摸工具經(jīng)過預(yù)設(shè)時間或根據(jù)預(yù)設(shè)圖案在觸摸屏190的表面上執(zhí)行懸停操作、用戶選擇由應(yīng)用或操作系統(tǒng)提供的手寫輸入按鈕或手寫輸入菜單項或用戶輸入預(yù)設(shè)觸摸圖案的情況下產(chǎn)生。懸停圖案或觸摸圖案指示預(yù)設(shè)圖案的軌跡(例如,由觸摸工具繪制的圓形、三角形、長方形等)。
[0083]手寫輸入模式可通過包括用于每個功能的指示器(例如,圖標(biāo)或文本或按鈕)的工具欄或分離的手寫輸入屏幕或窗來被顯示,因此用戶可查看手寫輸入模式。手寫輸入模式可以以在沒有顯示分離的手寫輸入屏的情況下直接顯示應(yīng)用屏幕的形式或顯示分離的手寫輸入屏幕的形式被執(zhí)行。
[0084]圖5是用于描述懸停操作的不圖。
[0085]如圖5中所示,用戶在將觸控筆168的位置維持在從便攜式終端100的觸摸屏190的表面的檢測閾值距離之內(nèi)的同時執(zhí)行懸停操作。
[0086]在步驟S430,裝置接收用戶手寫數(shù)據(jù)。在手寫輸入模式下,用戶通過使用觸摸工具將具有期望的內(nèi)容的手寫數(shù)據(jù)輸入到觸摸屏190。此時,手寫數(shù)據(jù)在重疊于應(yīng)用窗(S卩,與應(yīng)用窗重疊)時被顯示。手寫數(shù)據(jù)可具有可被控制器110識別隨后轉(zhuǎn)換為數(shù)字文字?jǐn)?shù)據(jù)的類型(例如,字符串),即,圖像文本可轉(zhuǎn)換類型,或者圖像文字不可轉(zhuǎn)換類型(例如,繪制)。
[0087]同時,控制器110識別是否可處理從執(zhí)行的應(yīng)用轉(zhuǎn)換的數(shù)據(jù)。當(dāng)輸入的數(shù)據(jù)不可被處理或不需要所述處理時,控制器110可存儲轉(zhuǎn)換的數(shù)據(jù),而不將轉(zhuǎn)換的數(shù)據(jù)輸入到應(yīng)用。另外,控制器110可捕獲和存儲輸入手寫數(shù)據(jù)的屏幕。
[0088]在步驟S440,裝置可將轉(zhuǎn)換的數(shù)據(jù)輸入到應(yīng)用??刂破?10可將由用戶輸入的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù),并將轉(zhuǎn)換的數(shù)據(jù)輸入到執(zhí)行的應(yīng)用??刂破?10識別由用戶輸入的手寫數(shù)據(jù)。當(dāng)手寫數(shù)據(jù)具有圖像-文本可轉(zhuǎn)換類型時,控制器110可將手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的文本數(shù)據(jù)。當(dāng)手寫數(shù)據(jù)具有圖像-文本不可轉(zhuǎn)換類型時,控制器110可將手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的圖像數(shù)據(jù)。圖像數(shù)據(jù)可以是位圖數(shù)據(jù)、由坐標(biāo)串指示的筆畫數(shù)據(jù)等。
[0089]在步驟S450,裝置處理輸入數(shù)據(jù)。執(zhí)行的應(yīng)用根據(jù)輸入的數(shù)據(jù)執(zhí)行程序的操作。輸入數(shù)據(jù)可通過被顯示在應(yīng)用屏幕的輸入窗,隨后由用戶來選擇分離的按鈕或菜單項來被后處理。
[0090]例如,語音識別應(yīng)用可將輸入的數(shù)據(jù)發(fā)送到外部服務(wù)器,并將從外部服務(wù)器接收的響應(yīng)結(jié)果提供給用戶。日程管理應(yīng)用、文檔編寫應(yīng)用、電子郵件應(yīng)用或消息應(yīng)用可將輸入的數(shù)據(jù)插入到文檔(例如,文件、消息、電子郵件等)。音樂應(yīng)用、互聯(lián)網(wǎng)應(yīng)用、相機(jī)應(yīng)用、圖像編輯應(yīng)用、搜索應(yīng)用、文件搜索應(yīng)用、視頻應(yīng)用或電話應(yīng)用可執(zhí)行由輸入的數(shù)據(jù)指示的操作并將所述操作的結(jié)果提供給用戶。
[0091]圖6是用于解釋根據(jù)本公開的一實施例的在語音識別應(yīng)用中的用戶界面提供方法的流程圖。
[0092]所述方法包括步驟S610至S680。在步驟S610,裝置執(zhí)行語音識別應(yīng)用。用戶通過觸摸屏190、輸入/輸出模塊160或相機(jī)模塊150,通過選擇按鈕、圖標(biāo)或菜單項,或者通過進(jìn)行語音命令、手勢、運動或觸摸圖案來執(zhí)行語音識別應(yīng)用。
[0093]例如,用戶可通過雙擊主按鈕161a來執(zhí)行語音識別應(yīng)用。在下文中,盡管語音識別應(yīng)用被描述為程序操作的主體,但所述程序操作可由控制器110來執(zhí)行。
[0094]圖7是示出語音識別應(yīng)用的初始屏幕的示圖。
[0095]當(dāng)語音識別應(yīng)用被初始驅(qū)動時,諸如“你想要執(zhí)行什么操作?”或“你想要做什么”等的使用指南表達(dá)被顯不在應(yīng)用窗710a上。
[0096]用于在被點擊時以語音指導(dǎo)使用方法的語音向?qū)О粹o720、用于在被點擊時執(zhí)行語音識別模式的語音識別按鈕730、用于在被點擊時表示使用方法的示例的求助按鈕740被設(shè)置在應(yīng)用窗710a的下半部。
[0097]在步驟S620,裝置檢測懸停操作??刂破?10確定用戶是否通過使用觸控筆168在觸摸屏190的表面上執(zhí)行懸停操作。即,用戶通過將觸控筆168的位置維持在距觸摸屏190的表面的檢測閾值距離以內(nèi)來執(zhí)行懸停操作,并且控制器IlOd基于觸摸屏190的檢測值檢測懸停事件。當(dāng)檢測到懸停事件時,控制器Iio進(jìn)行到步驟S630。當(dāng)未檢測到懸停事件時,控制器Iio重復(fù)步驟S620。
[0098]在步驟S630,裝置識別是否滿足模式切換條件(S卩,識別模式切換請求)??刂破?10檢測懸停事件是否在沒有任何坐標(biāo)移動的情況下保持預(yù)設(shè)時間??苫诋a(chǎn)生初始懸停事件的初始坐標(biāo),根據(jù)坐標(biāo)是否從預(yù)設(shè)尺寸的區(qū)域脫離來確定坐標(biāo)移動。不同于本實施例,控制器110可不管坐標(biāo)移動僅確定懸停事件是否保持預(yù)設(shè)時間。當(dāng)滿足模式切換條件時,控制器Iio進(jìn)行步驟S640。當(dāng)不滿足模式切換條件時,控制器110返回步驟S620。模式切換條件還可包括點擊手寫輸入按鈕。
[0099]在沒有任何坐標(biāo)移動的情況下懸停事件保持預(yù)設(shè)時間對應(yīng)于預(yù)設(shè)懸停圖案的一示例。
[0100]圖8是示出手寫輸入按鈕的示例的示圖。當(dāng)懸停事件保持預(yù)設(shè)時間時,具有筆尖形狀的指示器的手寫輸入按鈕810被顯示在應(yīng)用窗710b上,其中,所述指示器指示手寫輸入模式。
[0101]在步驟S640,裝置執(zhí)行到手寫輸入模式的切換。控制器110根據(jù)模式切換請求將應(yīng)用執(zhí)行模式切換為手寫輸入模式,隨后進(jìn)行操作。在手寫輸入模式下,用戶通過使用觸控筆168將具有期望的內(nèi)容的手寫數(shù)據(jù)輸入到觸摸屏190。手寫輸入模式可通過包括用于每個功能的指示器(例如,圖標(biāo)或文本或按鈕)的工具欄或分離的手寫輸入屏幕或窗來被顯示,因此用戶可查看手寫輸入模式。
[0102]圖9是示出手寫輸入模式顯示方法的示例的示圖。根據(jù)到手寫輸入模式的切換,筆尖形狀的指示器910被顯示在應(yīng)用窗710c上,其中,指示器910指示手寫輸入模式。指示器910可以使圖像、文本或其組合。
[0103]圖10是示出手寫輸入模式顯示方法的另一示例的示圖。根據(jù)到手寫輸入模式的切換,手寫輸入工具欄1010被顯示在應(yīng)用窗710d的上半部。工具欄1010包括用于使用筆工具和設(shè)置筆(設(shè)置筆的類型、厚度、顏色等)的第一菜單項1011、用于使用橡皮并設(shè)置橡皮的尺寸的第二菜單項1012、用于取消執(zhí)行的第三菜單項1013、用于重新執(zhí)行的第四菜單項1014、用于取消手寫輸入模式的第五菜單項1015和用于存儲手寫輸入數(shù)據(jù)的第六菜單項1016。
[0104]圖11是示出手寫輸入數(shù)據(jù)的示例的示圖。用戶通過使用觸控筆168將期望的內(nèi)容(即,在本實施例中具有“首爾的天氣”或“首爾天氣”的內(nèi)容的手寫數(shù)據(jù)1110)輸入到觸摸屏190。在本實施例中,由于應(yīng)用窗710e占據(jù)大部分觸摸屏,因此用戶將手寫數(shù)據(jù)輸入到應(yīng)用窗710e。
[0105]在步驟S650,裝置識別用于結(jié)束手寫輸入模式或切換到應(yīng)用執(zhí)行模式的請求。用戶可通過將觸控筆168從觸摸屏190移除檢測閾值距離或檢測閾值距離以上經(jīng)過預(yù)設(shè)時間來結(jié)束手寫輸入模式。不同于本實施例,用戶可通過解除在圖10中所示已被選擇的用于使用筆工具并設(shè)置筆的第一菜單項1011的選擇來結(jié)束手寫輸入模式。
[0106]在步驟S660,裝置執(zhí)行到應(yīng)用執(zhí)行模式的切換。當(dāng)觸控筆168從觸摸屏190移除檢測閾值距離或檢測閾值距離以上的狀態(tài)(向上觸摸狀態(tài))維持預(yù)設(shè)時間時,控制器110結(jié)束手寫輸入模式并執(zhí)行到應(yīng)用執(zhí)行模式的切換。
[0107]在步驟S670,裝置識別并轉(zhuǎn)換手寫數(shù)據(jù)??刂破?10識別由用戶輸入的手寫數(shù)據(jù)1110并通過執(zhí)行手寫數(shù)據(jù)1110的圖像-文本轉(zhuǎn)換來將手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的文本數(shù)據(jù)。
[0108]在步驟S680,裝置處理轉(zhuǎn)換的文本數(shù)據(jù)。執(zhí)行的應(yīng)用根據(jù)轉(zhuǎn)換的文本數(shù)據(jù)執(zhí)行程序操作。
[0109]圖12是示出處理轉(zhuǎn)換的文本數(shù)據(jù)的方法的示例的示圖。所述應(yīng)用在應(yīng)用窗710f上顯示轉(zhuǎn)換的文本數(shù)據(jù)1210,通過將轉(zhuǎn)換的文本數(shù)據(jù)1210輸入為搜索詞來搜索首爾的天氣。此時,應(yīng)用可通過輸入轉(zhuǎn)換的文本數(shù)據(jù)1210來搜索首爾的天氣和終端100的當(dāng)前位置(例如,西橋洞)。
[0110]語音識別應(yīng)用將轉(zhuǎn)換的文本數(shù)據(jù)1210再次轉(zhuǎn)換為語音數(shù)據(jù),并將轉(zhuǎn)換的語音數(shù)據(jù)發(fā)送到語音識別服務(wù)器,并將從語音識別服務(wù)器接收的響應(yīng)結(jié)果提供給用戶。
[0111]如上所述,根據(jù)本公開的隨機(jī)應(yīng)用(例如,語音識別應(yīng)用等)可將文本數(shù)據(jù)或語音數(shù)據(jù)發(fā)送到服務(wù)器并將從服務(wù)器接收的響應(yīng)結(jié)果提供給用戶。當(dāng)服務(wù)器從便攜式終端100接收手寫數(shù)據(jù)或語音數(shù)據(jù)時,服務(wù)器可執(zhí)行手寫數(shù)據(jù)轉(zhuǎn)換或語音文本轉(zhuǎn)換。
[0112]例如,在根據(jù)本公開的一實施例中,互聯(lián)網(wǎng)應(yīng)用可訪問請求用戶驗證的服務(wù)器并將用戶的手寫數(shù)據(jù)發(fā)送給服務(wù)器。服務(wù)器識別用戶的登記的手寫和接收的手寫數(shù)據(jù)的手寫。隨后,當(dāng)用戶驗證成功時,服務(wù)器可將安全訪問網(wǎng)頁(例如,帳戶查詢網(wǎng)頁或帳戶傳送網(wǎng)頁)提供給用戶。
[0113]當(dāng)本公開應(yīng)用到這樣的與安全相關(guān)的環(huán)境時,本公開可被應(yīng)用到請求驗證用戶的手寫以及用戶的語音驗證系統(tǒng)。另外,通過向安全服務(wù)器提供語音文本轉(zhuǎn)換信息和手寫文本轉(zhuǎn)換信息兩者,可進(jìn)一步增強(qiáng)安全。
[0114]同時,盡管已描述到手寫輸入模式的切換涉及在前述示例中的懸停操作,可通過在沒有執(zhí)行懸停操作的情況下,僅點擊手寫輸入菜單項或按鈕來執(zhí)行到手寫輸入模式的切換。
[0115]例如,當(dāng)圖8中所示的輸入按鈕810和圖10中所示的工具欄1010伴隨著應(yīng)用的執(zhí)行被自動固定地顯示或預(yù)設(shè)觸摸圖案被輸入時,可通過由應(yīng)用或操作系統(tǒng)提供的菜單(例如,主屏幕或菜單屏幕)來提供輸入按鈕810或工具欄1010。
[0116]圖13至圖15是用于解釋根據(jù)本公開的另一實施例的消息應(yīng)用中的用戶界面提供方法的示圖。
[0117]圖13是示出消息應(yīng)用的屏幕的示圖。
[0118]當(dāng)用戶將從應(yīng)用窗1310a中的“Lee,Sam-Sung”接收的消息1320上輸入預(yù)設(shè)懸停圖案時,控制器110根據(jù)模式切換請求將應(yīng)用執(zhí)行模式切換到手寫輸入模式,隨后進(jìn)行操作。
[0119]圖14是示出手寫輸入數(shù)據(jù)的示例的示圖。在本示例中,用戶通過使用觸控筆168在觸摸屏190上輸入期望的內(nèi)容(例如,具有內(nèi)容“Hong,Gil-Dong”的手寫數(shù)據(jù)1410)。由于應(yīng)用窗1310b占據(jù)大部分觸摸屏190,因此用戶將手寫數(shù)據(jù)1410輸入到應(yīng)用窗1310b。控制器識別由用戶輸入的手寫數(shù)據(jù)1410并通過手寫數(shù)據(jù)1410的圖像文本轉(zhuǎn)換來將手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的文本數(shù)據(jù)。
[0120]圖15是示出處理轉(zhuǎn)換的文本數(shù)據(jù)的方法的示例的示圖。消息應(yīng)用在應(yīng)用窗1510內(nèi)的輸入窗1520中插入并顯示轉(zhuǎn)換的文本數(shù)據(jù)。消息應(yīng)用可自動發(fā)送插入轉(zhuǎn)換的文字?jǐn)?shù)據(jù)的消息,作為從“Lee, Sam-Sung”接收的消息的響應(yīng)消息。[0121]圖16至圖18是用于解釋根據(jù)本公開的另一實施例的在圖庫應(yīng)用中的用戶界面提供方法的示圖。
[0122]圖16是示出圖庫應(yīng)用的屏幕的示圖。
[0123]當(dāng)用戶在應(yīng)用窗1610a選擇的圖片圖像1620a上輸入預(yù)設(shè)懸停圖案時,控制器110根據(jù)模式切換請求將應(yīng)用執(zhí)行模式切換為手寫輸入模式,隨后進(jìn)行操作。
[0124]圖17是示出手寫輸入數(shù)據(jù)的示例的示圖。在本示例中,用戶將期望的內(nèi)容(例如,具有內(nèi)容“至Hong,Gil-Dong"的手寫數(shù)據(jù)1710)輸入到觸摸屏190。由于在本示例中應(yīng)用窗1610b占據(jù)大部分觸摸屏1610b,因此用戶將手寫數(shù)據(jù)1710輸入到應(yīng)用窗1610b??刂破?10識別由用戶輸入的手寫數(shù)據(jù)1710并通過手寫數(shù)據(jù)1710的圖像文本轉(zhuǎn)換將手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的文本數(shù)據(jù)。
[0125]圖18是示出處理轉(zhuǎn)換的文本數(shù)據(jù)的方法的示例的示圖。圖庫應(yīng)用存儲與原始的圖片圖像1620a重疊的轉(zhuǎn)換的文本數(shù)據(jù),并在應(yīng)用窗1610c上顯示存儲的圖片圖像1620b。
[0126]在通過圖6描述的用戶界面提供方法中,已描述具有內(nèi)容“首爾的天氣”的手寫數(shù)據(jù)1110被簡單輸入并且輸入的手寫數(shù)據(jù)被處理的情況。本公開可處理手寫數(shù)據(jù)和語音數(shù)據(jù)的組合的輸入。
[0127]圖19和圖20是用于解釋根據(jù)本公開的修改的示例的在語音識別應(yīng)用中的用戶界面提供方法的示圖。
[0128]參照圖19,用戶在應(yīng)用執(zhí)行模式或語音識別模式下以語音輸入“…的天氣”,隨后在手寫輸入模式下通過使用觸控筆168將具有內(nèi)容“首爾”的手寫數(shù)據(jù)1110輸入到應(yīng)用窗750a。另外,為了允許用戶容易地識別語音輸入內(nèi)容,語音輸入內(nèi)容11 IOb可被轉(zhuǎn)換為文本并顯示在應(yīng)用窗750a上。
[0129]參照圖20,用戶在手寫輸入模式下通過使用觸控筆168將具有內(nèi)容“…的天氣”的手寫數(shù)據(jù)IllOc輸入到應(yīng)用窗750b,隨后在應(yīng)用執(zhí)行模式或語音識別模式下以語音輸入
“首爾”。
[0130]為了輸入手寫數(shù)據(jù)和語音數(shù)據(jù)的組合,控制器110輸入手寫數(shù)據(jù)或語音數(shù)據(jù)并識別是否超過預(yù)設(shè)閾值時間。當(dāng)在閾值時間內(nèi)完成模式切換時,控制器110可等待剩余數(shù)據(jù)的輸入。
[0131]當(dāng)接收到手寫數(shù)據(jù)和語音數(shù)據(jù)的組合的輸入時,控制器110可在沒有任何轉(zhuǎn)換的情況下將語音數(shù)據(jù)和手寫數(shù)據(jù)發(fā)送到服務(wù)器,將語音數(shù)據(jù)和手寫數(shù)據(jù)轉(zhuǎn)換到文本數(shù)據(jù)并隨后將轉(zhuǎn)換的文本數(shù)據(jù)發(fā)送到服務(wù)器、或?qū)⑹謱憯?shù)據(jù)轉(zhuǎn)換為第二語音數(shù)據(jù)并隨后將轉(zhuǎn)換的第二語音數(shù)據(jù)與語音數(shù)據(jù)一起發(fā)送到服務(wù)器。另外,控制器110可僅轉(zhuǎn)換語音數(shù)據(jù)和手寫數(shù)據(jù)中的一個數(shù)據(jù),而不轉(zhuǎn)換其他數(shù)據(jù),隨后將轉(zhuǎn)換的數(shù)據(jù)和未轉(zhuǎn)換的數(shù)據(jù)的組合發(fā)送到服務(wù)器。
[0132]例如,如圖12中所示,語音識別應(yīng)用可將從服務(wù)器接收的響應(yīng)結(jié)果提供給用戶。
[0133]本公開可在用戶執(zhí)行終端的功能的同時通過在沒有附加組件(H/W鍵或S/W按鈕)的情況下僅通過筆的懸停功能執(zhí)行到手寫輸入模式的切換來輸入手寫。另外,根據(jù)本公開,可在沒有通過傳統(tǒng)的手寫輸入的五個步驟的情況下,通過手寫識別將由用戶輸入的筆畫數(shù)據(jù)自動轉(zhuǎn)換為文本,將轉(zhuǎn)換的文本插入到文本輸入窗,并執(zhí)行插入的文本來發(fā)送文本消息并執(zhí)行搜索。[0134]可理解本公開的實施例可在軟件、硬件或其組合中被實現(xiàn)。任何這樣的軟件不管其可被擦除的能力或其可被再記錄的能力,可被存儲在例如易失性或非易失性裝置(例如,ROM)、存儲器(例如,RAM、存儲芯片、存儲裝置或存儲IC)或可記錄光或磁介質(zhì)(例如,⑶、DVD、磁盤或磁帶)。還可理解包括在移動終端中的存儲器是適用于存儲包括由處理器裝置執(zhí)行的指令的程序以實現(xiàn)本公開的實施例的機(jī)器可讀裝置。因此,本公開的實施例提供包括用于實現(xiàn)在附屬的權(quán)利要求中的任意權(quán)利要求所要求保護(hù)的系統(tǒng)和方法的代碼的程序以及用于存儲這樣的程序的機(jī)器可讀裝置。另外,此程序可通過任意介質(zhì)(例如,經(jīng)由有線或無線連接傳送的通信信號)被電輸送,本公開的實施例適當(dāng)?shù)匕ㄆ涞韧铩?br>
[0135]另外,便攜式終端可從無線或有線地連接到便攜式終端的程序提供設(shè)備接收程序,并存儲接收的程序。程序提供設(shè)備可包括:存儲器,用于存儲包含用于允許便攜式終端執(zhí)行預(yù)設(shè)內(nèi)容保護(hù)方法的指令的程序和所述內(nèi)容保護(hù)方法所需的信息;通信單元,用于執(zhí)行與便攜式終端的有線或無線通信,控制器,用于根據(jù)便攜式終端的請求或自動地將相應(yīng)的程序發(fā)送到便攜式終端。
[0136]盡管已使用實施例描述本公開,但是本領(lǐng)域的技術(shù)人員可推薦各種改變和修改。本公開意在包括這樣的改變和修改以落入權(quán)利要求的范圍內(nèi)。
【權(quán)利要求】
1.一種提供便攜式終端的用戶界面的方法,所述方法包括: 在執(zhí)行應(yīng)用期間從用戶接收到手寫輸入模式的模式切換請求; 根據(jù)模式切換請求,切換到手寫輸入模式; 識別從用戶接收的手寫數(shù)據(jù); 將識別的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù); 通過預(yù)設(shè)方案處理轉(zhuǎn)換的數(shù)據(jù); 在觸摸屏上顯示處理的結(jié)果。
2.如權(quán)利要求1所述的方法,其中,模式切換請求是使用觸摸工具的懸停圖案的輸入、使用觸摸工具的觸摸圖案的輸入、手寫輸入按鈕的點擊和手寫輸入菜單項的點擊中的一個。
3.如權(quán)利要求2所述的方法,其中,通過將觸摸工具的位置維持在距觸摸屏的表面的檢測閾值距離之內(nèi)經(jīng)過預(yù)設(shè)時間來執(zhí)行懸停圖案。
4.如權(quán)利要求1所述的方法,其中,手寫數(shù)據(jù)被顯示在應(yīng)用窗上。
5.如權(quán)利要求1所述的方法,其中,手寫數(shù)據(jù)被轉(zhuǎn)換為具有預(yù)設(shè)格式的文本數(shù)據(jù)。
6.如權(quán)利要求1所述的方法,其中,預(yù)設(shè)方案是顯示轉(zhuǎn)換的數(shù)據(jù)、將轉(zhuǎn)換的數(shù)據(jù)輸入到應(yīng)用的輸入窗、將轉(zhuǎn)換的數(shù)據(jù)發(fā)送到外部裝置和執(zhí)行由轉(zhuǎn)換的數(shù)據(jù)指示的操作中的一個。
7.如權(quán)利要求1所述的方法,其中,轉(zhuǎn)換的數(shù)據(jù)被發(fā)送到服務(wù)器,并且從服務(wù)器接收的響應(yīng)結(jié)果被提供給用戶。
8.如權(quán)利要求1所述的方法,其中,轉(zhuǎn)換的數(shù)據(jù)和由用戶輸入的附加數(shù)據(jù)被發(fā)送到服務(wù)器,并且從服務(wù)器接收的響應(yīng)結(jié)果被提供給用戶。
9.如權(quán)利要求1所述的方法,其中,轉(zhuǎn)換的數(shù)據(jù)被轉(zhuǎn)換為語音數(shù)據(jù),轉(zhuǎn)換的語音數(shù)據(jù)被發(fā)送到語音識別服務(wù)器,并且從語音識別服務(wù)器接收的響應(yīng)結(jié)果被提供給用戶。
10.如權(quán)利要求1所述的方法,其中,轉(zhuǎn)換的數(shù)據(jù)被轉(zhuǎn)換為第一語音數(shù)據(jù),轉(zhuǎn)換的第一語音數(shù)據(jù)和由用戶輸入的第二語音數(shù)據(jù)被發(fā)送到語音識別服務(wù)器,并且從語音識別服務(wù)器接收的響應(yīng)結(jié)果被提供給用戶。
11.一種用于提供用戶界面的便攜式終端,所述便攜式終端包括: 存儲單元,被配置為存儲應(yīng)用; 觸摸屏,被配置為顯示輸入數(shù)據(jù)并檢測觸摸工具的接觸或懸停; 控制器,被配置為在執(zhí)行應(yīng)用期間從用戶接收到手寫輸入模式的模式切換請求,根據(jù)用戶的模式切換請求切換到手寫輸入模式,識別從用戶接收的手寫數(shù)據(jù),將識別的手寫數(shù)據(jù)轉(zhuǎn)換為具有預(yù)設(shè)格式的數(shù)據(jù),通過預(yù)設(shè)方案處理轉(zhuǎn)換的數(shù)據(jù),并在觸摸屏上顯示處理的結(jié)果。
12.如權(quán)利要求11所述的便攜式終端,其中,模式切換請求是使用觸摸工具的懸停圖案的輸入、使用觸摸工具的觸摸圖案的輸入、手寫輸入按鈕的點擊和手寫輸入菜單項的點擊中的一個。
13.如權(quán)利要求11所述的便攜式終端,其中,通過將觸摸工具的位置維持在距觸摸屏的表面的檢測閾值距離之內(nèi)經(jīng)過預(yù)設(shè)時間來執(zhí)行懸停圖案。
14.如權(quán)利要求11所述的便攜式終端,其中,手寫數(shù)據(jù)被顯示在應(yīng)用窗上。
15.如權(quán)利要求11所述的便攜式終端,其中,手寫數(shù)據(jù)被轉(zhuǎn)換為具有預(yù)設(shè)格式的文本。
16.如權(quán)利要求11所述的便攜式終端,其中,預(yù)設(shè)方案是顯示轉(zhuǎn)換的數(shù)據(jù)、將轉(zhuǎn)換的數(shù)據(jù)輸入到應(yīng)用的輸入窗,將轉(zhuǎn)換的數(shù)據(jù)發(fā)送到外部裝置并執(zhí)行由轉(zhuǎn)換的數(shù)據(jù)指示的操作中的一個。
17.如權(quán)利要求11所述的便攜式終端,其中,轉(zhuǎn)換的數(shù)據(jù)被轉(zhuǎn)換為語音數(shù)據(jù),轉(zhuǎn)換的語音數(shù)據(jù)被發(fā)送到語音識別服務(wù)器,并且從語音識別服務(wù)器接收的響應(yīng)結(jié)果被提供給用戶。
18.如權(quán)利要求11所述的便攜式終端,其中,轉(zhuǎn)換的數(shù)據(jù)和由用戶輸入的附加數(shù)據(jù)被發(fā)送到服務(wù)器,并且從服務(wù)器`接收的響應(yīng)結(jié)果被提供給用戶。
【文檔編號】H04M1/725GK103631519SQ201310379097
【公開日】2014年3月12日 申請日期:2013年8月27日 優(yōu)先權(quán)日:2012年8月27日
【發(fā)明者】李有珍, 具翰俊, 全漢庚, 趙承煥 申請人:三星電子株式會社