СПОСОБ И УСТРОЙСТВО УПРАВЛЕНИЯ ТАКТИЛЬНОЙ ОТДАЧЕЙ ИНСТРУМЕНТА ВВОДА ДЛЯ ТЕРМИНАЛА МОБИЛЬНОЙ СВЯЗИ
METHOD AND DEVICE FOR CONTROLLING TACTILE FEEDBACK OF INPUT TOOL FOR MOBILE COMMUNICATION TERMINAL

Область техники, к которой относится изобретение
Настоящее изобретение относится в общем к устройству и способу для управления тактильной отдачей.
Уровень техники
В терминалах мобильной связи, имеющих сенсорные экраны, обычно применяется способ сенсорного ввода данных, при котором используется кончик пальца пользователя или инструмент ввода, такой как электронное перо или сенсорное перо. Например, способы сенсорного ввода данных включают в себя способ сенсорного ввода данных контактного типа, при котором устройство ввода данных фактически контактирует с сенсорным экраном, и способ сенсорного ввода данных бесконтактного типа, при котором ввод данных принимается, когда палец пользователя или перо расположены в пределах предварительно определенного расстояния от сенсорного экрана, например, способ ввода данных при наведении.
В последнее время используются усовершенствованные способы сенсорного ввода данных, которые при выполнении пользователем сенсорного ввода данных на сенсорном экране производят тактильную отдачу, например, вибрации, с помощью вибрационного устройства, обеспечивая пользователю возможность ощущать управление кнопками.
Однако эти усовершенствованные способы сенсорного ввода данных просто позволяют пользователю распознавать фактический контакт инструмента ввода с сенсорным экраном и, таким образом, имеют ограничения, связанные с передачей пользователю ощущения управления приложениями (или их использования).
Раскрытие сущности изобретения
Техническая проблема
Настоящее изобретение выполнено с возможностью разрешения вопросов, связанных по меньшей мере с вышеупомянутыми проблемами и/или недостатками, и обеспечения по меньшей мере преимуществ, описанных ниже.
Соответственно, аспект настоящего изобретения обеспечивает способ и терминал мобильной связи, включающий в себя сенсорный экран, который управляет тактильной отдачей инструмента ввода.
Решение проблемы
В соответствии с одним из аспектов настоящего изобретения, предлагается способ управления тактильной отдачей инструмента ввода в терминале мобильной связи. Способ включает в себя обнаружение, посредством терминала мобильной связи, наведения инструмента ввода на объект, отображенный на дисплее с сенсорным экраном терминала мобильной связи; идентифицирование свойства объекта; и передачу, на инструмент ввода, управляющего сигнала для тактильной отдачи, соответствующей свойству объекта.
В соответствии с другим аспектом настоящего изобретения, предлагается терминал мобильной связи, который управляет тактильной отдачей инструмента ввода. Терминал мобильной связи включает в себя сенсорный экран, выполненный с возможностью отображения объектов; контроллер, выполненный с возможностью обнаружения наведения инструмента ввода на дисплей с сенсорным экраном, чтобы определять объект, ассоциированный с наведением инструмента ввода, и генерирования управляющего сигнала для тактильной отдачи, соответствующей свойству объекта; и приемопередатчик для передачи управляющего сигнала на инструмент ввода.
В соответствии с другим аспектом настоящего изобретения, предлагается способ обеспечения тактильной отдачи инструмента ввода в терминале мобильной связи. Способ включает в себя сохранение, посредством терминала мобильной связи, различных комбинаций тактильной отдачи для различных свойств объектов; обнаружение наведения инструмента ввода на объект, отображенный посредством терминала мобильной связи; анализирование свойств объекта; отображение изображения для предварительного просмотра, включающего в себя по меньшей мере одну из деталей объекта, метаданных для объекта и измененного в масштабе изображения объекта; и управление вибрированием терминала мобильной связи в зависимости от комбинации тактильной отдачи, которая установлена для этого объекта.
В соответствии с другим аспектом настоящего изобретения, предлагается инструмент ввода для устройства с сенсорным экраном. Инструмент ввода включает в себя вибрационное устройство; устройство связи малого радиуса действия для приема управляющего сигнала от терминала мобильной связи, в ответ на наведение инструмента ввода на терминал мобильной связи; и контроллер тактильной отдачи для управления вибрационным устройством на основании управляющего сигнала. Управляющий сигнал управляет по меньшей мере одним из действий активизации вибрационного устройства, деактивизации вибрационного устройства, цикла вибрации вибрационного устройства и интенсивности вибрации вибрационного устройства, в зависимости от свойства объекта, отображенного на терминале мобильной связи, на которое обнаружено наведение.
В соответствии с другим аспектом настоящего изобретения, предлагается способ обеспечения тактильной отдачи в инструменте ввода. Способ включает в себя наведение инструмента ввода на объект, отображенный на терминале мобильной связи; прием, от терминала мобильной связи, управляющего сигнала, соответствующего свойству объекта; и управление вибрационным устройством инструмента ввода на основании управляющего сигнала. Управляющий сигнал включает в себя по меньшей мере одну из информации для активизации вибрационного устройства, информации для деактивизации вибрационного устройства, цикла вибрации вибрационного устройства и интенсивности вибрации вибрационного устройства.
Положительные эффекты изобретения
Как видно из приведенного выше описания, если инструмент ввода наведен на объект, отображенный на дисплее с сенсорным экраном терминала мобильной связи, терминал мобильной связи передает управляющий сигнал для обеспечения тактильных эффектов на инструмент ввода, в то же время отображая изображение для предварительного просмотра на сенсорном экране, тем самым обеспечивая возможность полезных взаимодействий с пользователем (UX) для обычных пользователей и для пользователей с пониженным зрением. Кроме того, во время предварительного просмотра объектов, отображенных на сенсорном экране, терминал мобильной связи обеспечивает тактильные эффекты, используя инструмент ввода, таким образом обеспечивая возможность пользователю получать правильное ощущение от манипулирования при манипулировании с сенсорным экраном. Помимо этого, терминал мобильной связи поддерживает реалистичную и естественную среду взаимодействия между пользователем и системой путем вывода тактильных эффектов через инструмент ввода.
Краткое описание чертежей
Вышеупомянутые и другие аспекты, признаки и преимущества настоящего изобретения станут более очевидными из нижеследующего описания в сочетании с прилагаемыми чертежами, на которых:
фиг. 1 представляет собой блок-схему, иллюстрирующую терминал мобильной связи в соответствии с вариантом осуществления настоящего изобретения;
фиг. 2 иллюстрирует вид спереди в перспективе терминала мобильной связи в соответствии с вариантом осуществления настоящего изобретения;
фиг. 3 иллюстрирует вид сзади в перспективе терминала мобильной связи в соответствии с вариантом осуществления настоящего изобретения;
фиг. 4 иллюстрирует инструмент ввода и внутренний вид в разрезе сенсорного экрана в соответствии с вариантом осуществления настоящего изобретения;
фиг. 5 представляет собой блок-схему инструмента ввода в соответствии с вариантом осуществления настоящего изобретения;
фиг. 6A иллюстрирует индивидуальные установочные параметры терминала мобильной связи, использующего инструмент ввода, в соответствии с вариантом осуществления настоящего изобретения;
фиг. 6B иллюстрирует пример установки тактильной комбинации в соответствии с вариантом осуществления настоящего изобретения;
фиг. 6C иллюстрирует тактильную комбинацию, подлежащую установке, в соответствии с вариантом осуществления настоящего изобретения;
фиг. 6D иллюстрирует формы тактильных вибраций, ассоциированные с тактильными комбинациями, в соответствии с вариантом осуществления настоящего изобретения;
фиг. 7A иллюстрирует индивидуальные установочные параметры для тактильной отдачи в соответствии с вариантом осуществления настоящего изобретения;
фиг. 7B иллюстрирует пример установки тактильной комбинации в соответствии с вариантом осуществления настоящего изобретения;
фиг. 8A иллюстрирует индивидуальные установочные параметры для тактильной отдачи в соответствии с вариантом осуществления настоящего изобретения;
фиг. 8B иллюстрирует пример установки тактильной комбинации в соответствии с вариантом осуществления настоящего изобретения;
фиг. 8C иллюстрирует пример установки основной сцены в видеоролике, для которого тактильная комбинация устанавливается в соответствии с вариантом осуществления настоящего изобретения;
фиг. 9A иллюстрирует пример активизации тактильной функции всплывающего элемента изображения в соответствии с вариантом осуществления настоящего изобретения;
фиг. 9B иллюстрирует пример ввода информации об изображении в метаданные в соответствии с вариантом осуществления настоящего изобретения;
фиг. 10 представляет собой графическую схему программы, иллюстрирующую процесс отображения изображения для предварительного просмотра объектов и передачи управляющих сигналов, ассоциированных с тактильной комбинацией, в соответствии с вариантом осуществления настоящего изобретения;
фиг. 11А-11С иллюстрируют способ отображения изображения для предварительного просмотра объекта, на который распознается наведение, в соответствии с вариантом осуществления настоящего изобретения;
фиг. 12A и 12B иллюстрируют пример, в котором наведение указывает просмотр путем прокрутки нескольких объектов в соответствии с вариантом осуществления настоящего изобретения;
фиг. 13 представляет собой графическую схему программы, иллюстрирующую процесс отображения метаданных объекта в виде изображения для предварительного просмотра и передачи управляющего сигнала, ассоциированного с тактильной комбинацией, на инструмент ввода в соответствии с вариантом осуществления настоящего изобретения;
фиг. 14 иллюстрирует пример отображения метаданных объекта в виде изображения для предварительного просмотра в соответствии с вариантом осуществления настоящего изобретения;
фиг. 15 представляет собой графическую схему программы, иллюстрирующую процесс отображения информационного наполнения, ассоциированного с объектом, в виде изображения для предварительного просмотра и передачи управляющего сигнала, ассоциированного с тактильной комбинацией, на инструмент ввода в соответствии с вариантом осуществления настоящего изобретения;
фиг. 16А-16С иллюстрируют пример отображения информационного наполнения, ассоциированного с объектом, в виде изображения для предварительного просмотра в соответствии с вариантом осуществления настоящего изобретения; и
фиг. 17A-17I иллюстрируют формы колебаний различных тактильных комбинаций в соответствии с вариантами осуществления настоящего изобретения.
Способ выполнения изобретения
Теперь будут подробно описаны различные варианты осуществления настоящего изобретения со ссылкой на прилагаемые чертежи. В последующем описании определенные детали, такие как детализированная конфигурация и компоненты, представлены просто для того, чтобы помочь наиболее полному пониманию некоторых вариантов осуществления настоящего изобретения. Поэтому специалистам в данной области техники должно быть очевидно, что различные изменения и модификации вариантов осуществления, описанных в данном документе, могут быть сделаны без отступления от объема и сущности настоящего изобретения. Помимо этого, описания хорошо известных функций и конструкций опущены для ясности и лаконизма.
Фиг. 1 представляет собой блок-схему, иллюстрирующую терминал мобильной связи в соответствии с вариантом осуществления настоящего изобретения. В частности, фиг. 1 иллюстрирует терминал 100 мобильной связи, который взаимодействует с инструментом 168 ввода, чтобы обеспечить для пользователя тактильную отдачу через инструмент 168 ввода.
Как показано на фиг. 1, терминал 100 мобильной связи включает в себя дисплей 190 с сенсорным экраном, контроллер 110, динамик (SPK) 163, приемопередатчик 120 для взаимодействия с инструментом 168 ввода, например, с сенсорным пером, которое используется совместно с дисплеем 190 с сенсорным экраном, и вибродвигатель 164 для обеспечения тактильной отдачи в терминале 100 мобильной связи.
Хотя это и не показано на фиг. 1, терминал 100 мобильной связи может включать в себя другие элементы, такие как модуль связи с подвижными объектами, фотокамеру, GPS (глобальную систему определения местоположения), клавиатуру и т.д. Однако, поскольку эти элементы не связаны определенным образом с обеспечением тактильной отдачи, в данном документе эти элементы не описаны.
Например, контроллер 110 включает в себя центральный блок обработки данных (CPU), постоянное запоминающее устройство (ROM, ПЗУ), в котором хранятся управляющие программы для управления терминалом 100 мобильной связи, и оперативное запоминающее устройство (RAM, ОЗУ), используемое в качестве области памяти для хранения сигналов или данных, принимаемых терминалом 100 мобильной связи извне, и для выполнения операций, выполняемых в терминале 100 мобильной связи.
Контроллер 110 управляет всей работой терминала 100 мобильной связи. Более конкретно, контроллер 110 определяет, обнаружено ли наведение инструмента 168 ввода на какой-либо объект, отображенный на сенсорном экране 190, и идентифицирует объект, соответствующий положению, на который произошло наведение. Контроллер 110 может определять высоту от сенсорного экрана 190 до инструмента 168 ввода, и событие ввода наведением, ассоциированное с обнаруженной высотой.
Например, событие ввода наведением может быть обнаружено с помощью операции, при которой нажимается кнопка, образованная в инструменте 168 ввода, операции, при которой инструмент 168 ввода постукивается, операции, при которой инструмент 168 ввода данных перемещается быстрее, чем с предварительно определенной скоростью, и операции, при которой инструмент 168 для ввода действительно касается объекта, отображенного на дисплее 190 с сенсорным экраном.
Кроме того, для разных расстояний между инструментом 168 ввода и сенсорным экраном 190 могут быть установлены различные тактильные комбинации.
При обнаружении события ввода наведением, контроллер 110 отображает предварительно определенный результат ввода наведением, соответствующий событию ввода наведением, на сенсорном экране 190. Например, чтобы отобразить детали объекта, на который обнаружено наведение, контроллер 110 проверяет, активизирована ли функция быстрого просмотра, генерирует изображение для предварительного просмотра, если функция быстрого просмотра активизирована, и отображает детали объекта в изображении для предварительного просмотра. Изображение для предварительного просмотра может включать в себя детали объекта, а также метаданные, которые введены в объект заранее, и/или увеличенное изображение объекта, в зависимости от типа объекта.
Кроме того, контроллер 110 выдает управляющий сигнал, ассоциированный с предварительно определенной тактильной комбинацией, соответствующей идентифицированному объекту, на инструмент 168 ввода. Контроллер 110 также управляет вибрацией терминала 100 мобильной связи посредством управления вибродвигателем 164 в зависимости от предварительно определенной тактильной комбинации, соответствующей идентифицированному объекту.
Предварительно определенная тактильная комбинация может быть установлена разными способами в зависимости от типа объекта. Например, тактильная комбинация может быть установлена разными способами в зависимости от того, является ли объект видеороликом или фотоизображением, и в зависимости от жанра видеоролика, если объект является видеороликом. Помимо этого, если тип объекта представляет собой сообщение электронной почты, сообщение SMS (службы коротких сообщений), сообщение MMS (службы обмена мультимедийными сообщениями) или новостной сюжет, тактильная комбинация может быть установлена разными способами в зависимости от значимости информационного наполнения в нем, или области объекта. В этом случае, значимость может быть определена путем проверки, присутствует ли в объекте предварительно определенное слово.
При приеме управляющего сигнала, ассоциированного с тактильной комбинацией, инструмент 168 ввода также генерирует вибрации, соответствующие управляющему сигналу. В частности, инструмент 168 ввода принимает от терминала 100 мобильной связи управляющий сигнал, ассоциированный с тактильной комбинацией, анализирует принятый управляющий сигнал и выдает тактильную отдачу пользователю на основании этого анализа. В результате, пользователь может чувствовать вибрации через инструмент 168 ввода, который пользователь держит в руке.
Например, приемопередатчик 120 может включать в себя по меньшей мере одно устройство из модуля WLAN (беспроводной локальной сети) и модуля связи малого радиуса действия, поддерживающего Bluetooth, Ассоциацию по инфракрасной технологии передачи данных (IrDA), WiFi-Direct (технологию беспроводного доступа), NFC (ближнюю бесконтактную связь) и т.д.
Контроллер 110 передает управляющий сигнал, ассоциированный с тактильной комбинацией, на инструмент 168 ввода по меньшей мере через одно устройство из модуля WLAN и модуля связи малого радиуса действия в приемопередатчике 120.
Динамик 163, под управлением контроллера 110, выводит звуки, соответствующие различным сигналам, например, радиосигналам, сигналам оповещения, файлам цифровой звукозаписи, файлам цифровой видеозаписи, тональным посылкам фотографирования и т.д. В дополнение к этому, динамик 163 выводит звуки, соответствующие управляющему сигналу, который подается на инструмент 168 ввода. Например, звуки, соответствующие управляющему сигналу, могут включать в себя звук, указывающий на активизацию вибрационного устройства 520 в инструменте 168 ввода, звук, указывающий на изменение уровня интенсивности вибрации, и звук, указывающий на деактивизацию вибрационного устройства 520. В зависимости от интенсивности вибрации вибрационного устройства 520 в инструменте 168 ввода можно управлять громкостью этих звуков, и эти звуки могут выводиться через динамик 163 терминала 100 мобильной связи и/или динамик (не показан), который может быть установлен в инструменте 168 ввода, при активизации вибрационного устройства 520 или с промежутками в течение предварительно определенного времени (например, 10 мс) перед/после активизации. Звуки могут быть прекращены при деактивизации вибрационного устройства 520 или с промежутками в течение предварительно определенного времени (например, 10 мс) перед/после деактивизации. Один или несколько динамиков 163 могут быть выполнены в надлежащем положении или положениях в корпусе терминала 100 мобильной связи.
Вибродвигатель 164 преобразует электрические сигналы в механические вибрации под управлением контроллера 110. Например, вибродвигатель 164 работает, если терминал 100 мобильной связи принимает голосовой вызов от другого устройства (не показано) в режиме вибрации. В корпусе терминала 100 мобильной связи могут быть установлены один или несколько вибродвигателей 164. Для обеспечения тактильной отдачи в терминале 100 мобильной связи, вибродвигатель 164 работает в ответ на действие прикосновения пользователя к сенсорному экрану 190 и/или непрерывные перемещение прикосновения (или действие перетаскивания) на сенсорном экране 190.
Дисплей 190 с сенсорным экраном принимает сенсорные вводы данных от тела пользователя (например, от пальцев) или от инструмента 168 ввода. Соответственно, дисплей 190 с сенсорным экраном включает в себя панель 191 для распознавания пера, которая распознает сенсорные вводы данных, вводимые инструментом 168 ввода, например, сенсорным пером и электронным пером, при этом панель 191 для распознавания пера может определять расстояние между инструментом 168 ввода и сенсорным экраном 190 в зависимости от магнитного поля. Сенсорный экран 190 может принимать непрерывное перемещение прикосновения, в том числе по меньшей мере одно прикосновение. Сенсорный экран 190 может пересылать сигналы, соответствующие принятым непрерывным перемещениям прикосновения, в контроллер 110.
В соответствии с вариантом осуществления настоящего изобретения, прикосновение не ограничено фактическим контактом между сенсорным экраном 190 и телом пользователя или инструментом 168 ввода, и включает в себя бесконтактные прикосновения (с бесконтактным обнаруживаемым зазором, составляющим, например, приблизительно 5 мм между сенсорным экраном 190 и телом пользователя или инструментом 168 ввода), например, наведение. Зазор, обнаруживаемый на сенсорном экране 190, может изменяться в зависимости от рабочих характеристик или исполнения терминала 100 мобильной связи, и сенсорный экран 190 выполнен с возможностью вывода различных значений обнаружения (например, значений напряжения или тока аналогового сигнала) для события прикосновения посредством контакта с телом пользователя или инструментом 168 ввода и события бесконтактного прикосновения (например, события наведения), таким образом обеспечивая возможность по отдельности обнаруживать событие прикосновения и событие наведения.
В соответствии с вариантом осуществления настоящего изобретения, сенсорный экран 190 может выводить различные значения обнаружения (например, значения тока) в зависимости от зазора между сенсорным экраном 190 и пространством, в котором происходит событие наведения.
Сенсорный экран 190 может быть реализован, например, в виде экрана резистивного типа, емкостного типа, инфракрасного типа или акустического волнового типа.
Кроме того, сенсорный экран 190 может включать в себя по меньшей мере две панели сенсорного экрана, чтобы по отдельности выявлять прикосновение или приближение тела пользователя или инструмента 168 ввода к сенсорному экрану 190, таким образом обеспечивая возможность последовательно или одновременно принимать вводы данных от тела пользователя и инструмента 168 ввода. По меньшей мере две панели сенсорного экрана предоставляют различные выходные значения контроллеру 110, который может определять, является ли ввод данных от сенсорного экрана 190 вводом данных, выполняемым телом пользователя, или вводом данных, выполняемым инструментом 168 ввода, путем распознавания различных значений, принимаемых по меньшей мере от двух панелей сенсорного экрана.
Более конкретно, сенсорный экран 190 может быть образован в конструкции, в которой панель для обнаружения ввода данных посредством кончика пальца или инструмента 168 ввода в зависимости от изменения в индуцированной электродвижущей силе и панель для обнаружения контакта кончика пальца или инструмента 168 ввода 190 с сенсорным экраном уложены последовательно так, что находятся в контакте друг с другом или частично расположены на расстоянии друг от друга. Сенсорный экран 190 имеет множество пикселей (минимальных элементов изображения) для отображения изображений с помощью пикселей. Для сенсорного экрана 190 можно использовать любые из жидкокристаллического дисплея (LCD, ЖКД), органических светоизлучающих диодов (OLED) и светоизлучающих диодов (LED, СИД).
Сенсорный экран 190 включает в себя множество датчиков, которые обнаруживают положение, в котором кончик пальца или инструмент 168 ввода находится в контакте с поверхностью сенсорного экрана 190 или размещен на определенном расстоянии от сенсорного экрана 190. Множество датчиков могут быть образованы в спиральной структуре, и в сенсорном слое, образованном из множества датчиков, датчики образуют множество электродных линий в виде предварительно определенных конфигураций. При использовании этой конструкции, если происходит контакт или ввод данных наведения на сенсорном экране 190 посредством кончика пальца или инструмента 168 ввода, генерируется сигнал обнаружения, имеющий форму колебаний, которая изменяется благодаря емкости между сенсорным слоем и объектом ввода, и сенсорный экран 190 передает сгенерированный сигнал обнаружения в контроллер 110. В зависимости от напряженности магнитного поля, образованного катушкой 510 индуктивности в инструменте 168 ввода, может быть определено конкретное расстояние между инструментом 168 ввода и сенсорным экраном 190.
Фиг. 2 иллюстрирует вид спереди в перспективе терминала мобильной связи в соответствии с вариантом осуществления настоящего изобретения, а фиг. 3 иллюстрирует вид сзади в перспективе терминала мобильной связи в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 2 и 3, дисплей 190 с сенсорным экраном расположен в центре передней стороны 100a терминала 100 мобильной связи. Сенсорный экран 190 может быть образован достаточно большим, чтобы занимать большую часть передней стороны 100a терминала 100 мобильной связи. На фиг. 2, на дисплее 190 с сенсорным экраном отображен основной начальный экран. Основной начальный экран представляет собой первый экран, который отображается на дисплее 190 с сенсорным экраном при включении питания терминала 100 мобильной связи. Если терминал 100 мобильной связи имеет различные начальные экраны множества вкладок, основной начальный экран может быть первым начальным экраном среди начальных экранов множества вкладок. На начальном экране отображены иконки 191-1, 191-2 и 191-3 (условные графические символы) быстрого доступа для выполнения часто используемых приложений. Кроме того, начальный экран включает в себя коммутаторный ключ 191-4 главного меню, время и погоду. Коммутаторный ключ 191-4 главного меню предназначен для отображения экрана меню на дисплее 190 с сенсорным экраном. Строка 192 текущего состояния расположена в верхней части дисплея 190 с сенсорным экраном, указывая текущее состояние терминала 100 мобильной связи, такое как уровень заряда аккумуляторной батареи и индикацию уровня принимаемого сигнала (RSSI). Кнопка 161a «Home» (возвращения в исходное положение), кнопка 161b меню, и кнопка 161c «Back» («Назад») образованы под дисплеем 190 с сенсорным экраном.
Первая фотокамера 151, датчик 170a освещенности, датчик 170b приближения и динамик 163 установлены на краю передней стороны 100a терминала 100 мобильной связи, а вторая фотокамера 152 и фотовспышка 153 установлены на задней стороне 100c терминала 100 мобильной связи.
На боковой створке 100b терминала 100 мобильной связи установлены кнопка 16 «Power/Rest» («Питание/Сброс»), кнопки 161e и 161g громкости, антенна 141a наземного DMB (цифрового мультимедийного телеприемника) для приема сигналов радиопередачи и один или несколько микрофонов 162.
Разъем 165 образован на нижней поверхности терминала 100 мобильной связи, а соединительное гнездо 167 для наушников образовано на верхней стороне терминала 100 мобильной связи.
Инструмент 168 ввода хранится в нижней части терминала 100 мобильной связи. Инструмент 168 ввода может быть установлен в терминале 100 мобильной связи и удерживаться в нем, и может быть вынут и отделен от терминала 100 мобильной связи во время его использования.
Фиг. 4 иллюстрирует инструмент ввода и внутренний вид в разрезе сенсорного экрана в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 4, дисплей 190 с сенсорным экраном включает в себя первую сенсорную панель 440, панель 450 отображения и вторую сенсорную панель 460. Панель 450 отображения может быть такой панелью, как панель LCD и панель OLED активного режима (AMOLED), и она отображает различные изображения и объекты, которые ассоциированы с различными рабочими состояниями терминала 100 мобильной связи, выполняющимися прикладными программами и сервисными функциями.
Первая сенсорная панель 440, то есть, емкостная сенсорная панель, является панелью, покрытой слоем диэлектрика, с обеих сторон стекла которой нанесено покрытие из тонкого металлического проводящего материала (например, пленки оксида индия и олова (ITO)), таким образом, чтобы по стеклянным поверхностям мог протекать ток и там могли сохраняться заряды. Если кончик пальца пользователя или инструмент 168 ввода прикасается к поверхности первой сенсорной панели 440, предварительно определенное количество заряда перемещается в местоположение прикосновения благодаря статическому электричеству, и первая сенсорная панель 440 обнаруживает положение прикосновения, распознавая изменение в токе, обусловленное движением заряда. Первая сенсорная панель 440 может обнаруживать все виды прикосновений, которые могут генерировать статическое электричество. Например, первая сенсорная панель 440 может обнаруживать прикосновения, сделанные и посредством кончика пальца, и посредством инструмента 168 ввода.
Вторая сенсорная панель 460, то есть, сенсорная панель на основе электромагнитного резонанса (EMR), включает в себя датчик электромагнитной индукции с катушками индуктивности (не показано), в котором множество контурных катушек расположены в предварительно определенных первом направлении и втором направлении, пересекающем первое направление, имеющими сетчатую структуру, и процессор обработки электронных сигналов (не показан) для последовательной подачи сигналов переменного тока (AC), имеющих определенную частоту, на контурные катушки датчика электромагнитной индукции с катушками индуктивности. Если инструмент 168 ввода, имеющий встроенный резонансный контур, присутствует вокруг контурной катушки второй сенсорной панели 460, магнитное поле, передаваемое от контурной катушки, генерирует ток, который основан на взаимной электромагнитной индукции, в резонансном контуре в инструменте 168 ввода. На основании этого тока, в инструменте 168 ввода от катушки индуктивности (не показано) резонансного контура генерируется индуцированное магнитное поле, и вторая сенсорная панель 460 обнаруживает положение наведения и положение прикосновения инструмента 168 ввода, обнаруживая индуцированное электромагнитное поле от контурной катушки, которая находится в состоянии приема сигналов.
Терминал 100 мобильной связи обнаруживает высоту «h» от панели 450 отображения до кончика 430 пера инструмента 168 ввода. Высота «h» от первой сенсорной панели 440 сенсорного экрана 190 до кончика 430 пера может изменяться в зависимости от рабочих характеристик или конструкции терминала 100 мобильной связи. Любой инструмент 168 ввода может обнаруживать наведение и прикосновение с помощью второй сенсорной панели 460, пока он может генерировать ток на основании электромагнитной индукции. Можно предположить, что вторая сенсорная панель 460 используется только для обнаружения наведения или прикосновения инструментом 168 ввода. Инструмент 168 ввода также может упоминаться как электромагнитное перо или перо EMR. Инструмент 168 ввода может отличаться от стандартного пера, без резонансного контура, который обнаруживается с помощью первой сенсорной панели 440. Инструмент 168 ввода включает в себя кнопку 420, способную изменять значение электромагнитной индукции, генерируемой катушкой индуктивности, расположенной в ручке пера в области, примыкающей к кончику 430 пера.
Контроллер 110 может включать в себя контроллер первой сенсорной панели и контроллер второй сенсорной панели. Контроллер первой сенсорной панели преобразует аналоговые сигналы, которые принимаются от первой сенсорной панели 440 при обнаружении прикосновения кончика пальца или инструмента 168 ввода, в цифровые сигналы (например, координаты X/Y/Z). Контроллер второй сенсорной панели преобразует аналоговые сигналы, которые принимаются от второй сенсорной панели 460 при обнаружении наведения или прикосновения инструмента 168 ввода, в цифровые сигналы. Контроллер 110 может управлять панелью 450 отображения и первой и второй сенсорными панелями 440 и 460, используя цифровые сигналы, принимаемые от контроллеров первой и второй сенсорных панелей. Например, контроллер 110 может отобразить экран на панели 450 отображения в предварительно определенном виде в ответ на наведение или прикосновение кончика пальца, пера или инструмента 168 ввода.
В терминале 100 мобильной связи, предлагаемом вариантом осуществления настоящего изобретения, первая сенсорная панель 440 обнаруживает прикосновение кончика пальца пользователя или пера, в то время как вторая сенсорная панель 460 обнаруживает наведение или прикосновение инструмента 168 ввода. Поэтому, контроллер 110 терминала 100 мобильной связи может по отдельности обнаруживать прикосновение кончика пальца пользователя или пера и наведение или прикосновение инструмента 168 ввода.
Хотя на фиг. 4 иллюстрируется только одна сенсорная панель, настоящее изобретение не ограничено только одним сенсорным экраном и может быть применено к нескольким сенсорным экранам. Сенсорные экраны могут быть установлены в своих соответствующих корпусах и соединены посредством шарнирного соединения, или несколько сенсорных экранов могут быть установлены в одном корпусе. Каждый из нескольких сенсорных экранов включает в себя панель отображения и по меньшей мере одну сенсорную панель, как показано на фиг. 4.
Фиг. 5 представляет собой блок-схему инструмента ввода в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 5, инструмент 168 ввода включает в себя кончик 430 пера, расположенный на конце инструмента 168 ввода, кнопку 420 для изменения значения электромагнитной индукции, генерируемой катушкой 510 индуктивности, которая расположена в области, примыкающей к кончику 430 пера внутри инструмента 168 ввода, вибрационное устройство 520, которое производит вибрацию при возникновении входных воздействий наведения, контроллер 530 обратной тактильной связи для анализа управляющих сигналов, которые принимаются от терминала 100 мобильной связи при наведении на терминал 100 мобильной связи, и управления интенсивностью вибрации и циклом вибрации вибрационного устройства 520, чтобы обеспечивать ассоциированные тактильные эффекты для инструмента 168 ввода, и аккумуляторную батарею 550 для подачи питания для обеспечения взаимодействия малого радиуса действия между устройством 540 связи малого радиуса действия и терминалом 100 мобильной связи и для вибрации инструмента 168 ввода. Помимо этого, инструмент 168 ввода включает в себя динамик 560 для вывода звука, соответствующего циклу вибрации и/или интенсивности вибрации инструмента 168 ввода. Динамик 560 может выводить звук, соответствующий тактильным воздействиям, обеспеченным для инструмента 168 ввода в то же самое время, что и динамик 163, установленный в терминале 100 мобильной связи, или в течение предварительно определенного времени (например, 10 мс) перед/после того, как динамик 163 выводит звук.
Более конкретно, динамик 560, под управлением контроллера 530 тактильной отдачи, может выводить звуки, соответствующие различным сигналам (например, радиосигналам, сигналам оповещения, файлам цифровой звукозаписи и/или файлам цифровой видеозаписи), которые обеспечены в терминале 100 мобильной связи. Помимо этого, динамик 560 может выводить звуки (например, тональные посылки манипуляции кнопкой, соответствующие телефонным звонкам, тональные сигналы возврата вызова и т.д.), соответствующие функциям, выполняемым терминалом 100 мобильной связи. Один или несколько динамиков 560 могут быть образованы в надлежащем положении (положениях) корпуса инструмента 168 ввода.
Контроллер 530 тактильной отдачи активизирует или включает устройство 540 связи малого радиуса действия и вибрационное устройство 520, если инструмент 168 ввода расположен рядом с сенсорным экраном 190 терминала 100 мобильной связи или принимает по меньшей мере управляющий сигнал от терминала 100 мобильной связи. И наоборот, контроллер 530 тактильной отдачи деактивизирует или отключает вибрационное устройство 520, если инструмент 168 ввода не расположен рядом с сенсорным экраном 190 терминала 100 мобильной связи, или завершает вибрации, принимая по меньшей мере один управляющий сигнал от терминала 100 мобильной связи.
Сенсорный экран 190 обнаруживает положение инструмента 168 ввода. В частности, если инструмент 168 ввода расположен рядом с поверхностью сенсорного экрана 190, предварительно определенное количество заряда перемещается в соседнее местоположение из-за статического электричества, и сенсорный экран 190 обнаруживает это соседнее местоположение, распознавая изменение в токе, обусловленное движением зарядов. Соответственно, сенсорный экран 190 может распознавать, если инструмент 168 ввода находится в пределах предварительно определенного расстояния от сенсорного экрана 190, даже при том, что он фактически не прикасается к сенсорному экрану 190.
Если кончик 430 пера находится на или над сенсорным экраном 190, контроллер 530 тактильной отдачи анализирует по меньшей мере один управляющий сигнал, который принимается от терминала 100 мобильной связи через устройство 540 связи малого радиуса действия, и управляет циклом вибрации и интенсивностью вибрации вибрационного устройства 520, обеспеченного в инструменте 168 ввода, в зависимости от анализируемого управляющего сигнала. Управляющий сигнал представляет собой сигнал, передаваемый терминалом 100 мобильной связи, и может периодически передаваться на инструмент 168 ввода в течение предварительно определенного времени или до прекращения наведения.
В частности, если происходит наведение или прикосновение, когда кончик 430 пера приближается к сенсорному экрану 190, терминал 100 мобильной связи определяет объект (или иконку) на сенсорном экране 190, на который указывает кончик 430 пера, и передает управляющий сигнал, генерируемый в зависимости от тактильной комбинации, которая устанавливается заранее для объекта, на устройство 540 связи малого радиуса действия, выполненное в инструменте 168 ввода. Например, управляющий сигнал может иметь различные вибрации в зависимости от типа объекта, выбираемого или наводимого на дисплее 190 с сенсорным экраном (например, изображения, видеоролика, сообщения SMS, сообщения MMS и электронной почты), или может иметь различные вибрации в зависимости от свойств объекта, например, количества объектов, информационного наполнения объекта, жанра объекта, значимости объекта и т.д.
Более конкретно, управляющий сигнал передается на инструмент 168 ввода приемопередатчиком 120 в терминале 100 мобильной связи. Управляющий сигнал может включать в себя по меньшей мере одну из информации для активизации режима работы вибрационного устройства 520 в инструменте 168 ввода, информации, указывающей интенсивность вибрации инструмента 168 ввода, информации для деактивизации режима работы вибрационного устройства 520 в инструменте 168 ввода, и информации, указывающей полное время, в течение которого обеспечиваются тактильные эффекты. Управляющий сигнал имеет длительность, составляющую приблизительно 8 битов, и неоднократно посылается в предварительно определенном цикле (например, 5 мс), чтобы управлять вибрациями инструмента 168 ввода. Соответственно, пользователь может распознавать, что вибрации, ассоциированные с тактильными воздействиями, неоднократно выполняются в предварительно определенном цикле. Например, управляющий сигнал может включать в себя информацию, как показано в таблице 1 ниже.
Таблица 1
Поле
Активизация
Интенсивность
Деактивизация
вибрационного устройства
вибрации
вибрационного устройства
Информация
1
125 125 131 131 0
2
Как показано в таблице 1, управляющий сигнал включает в себя информацию для активизации вибрационного устройства 520 в инструменте 168 ввода, информацию, указывающую интенсивность вибрации вибрационного устройства 520, и информацию для деактивизации вибрационного устройства 520. Хотя управляющий сигнал может передаваться на инструмент 168 ввода каждых 5 мс, это всего лишь иллюстративный пример, и передача управляющего сигнала может изменяться в зависимости от цикла тактильной комбинации. Цикл передачи и период передачи управляющего сигнала также подлежат изменению. Период передачи может продолжаться до тех пор, пока распознавание наведения не будет прекращено.
Тип объекта и свойства объекта могут быть определены на основании уникальных характеристик каждого объекта (например, почтовых адресов отправителя и получателя в случае электронной почты, и разрешения и времени фотосъемки сделанной фотографии в случае фотографии). Специалистам в этой области техники должно быть очевидно, что настоящее изобретение можно применять к любым другим способам определения типа и/или свойств объекта.
Когда управляющий сигнал ассоциирован с видеороликом, управляющий сигнал может изменяться в зависимости от жанра видеоролика или части высокой значимости видеоролика, и управляющий сигнал может изменяться в зависимости от количества объектов. Жанр или высокая значимость видеоролика могут быть установлены заранее пользователем, и контроллер 110 может определять жанр видеоролика или часть высокой значимости видеоролика в зависимости от установленной информации.
Для папки с большим количеством объектов управляющий сигнал может быть сигналом для повышения интенсивности вибрации, а для папки с несколькими объектами управляющий сигнал может быть сигналом для понижения интенсивности вибрации. Количество объектов, хранящихся в одной папке, может быть установлено пользователем, или может быть определено по умолчанию изготовителем.
Для контактов, с которыми часто устанавливается связь, управляющий сигнал может быть сигналом для повышения интенсивности вибрации, а для контактов, с которыми менее часто устанавливается связь, управляющий сигнал может быть сигналом для понижения интенсивности вибрации.
Помимо этого, терминал 100 мобильной связи предоставляет полосу прокрутки для обеспечения поддержки перехода к позиции объекта, который пользователь желает выбрать на сенсорном экране 190, или вместо полосы прокрутки предоставляет функцию для «пролистывания вверх/вниз». «Пролистывание вверх/вниз» указывает, что несколько объектов, отображаемых на сенсорном экране, отображается посредством действия скольжения пользователя или действия перелистывания пользователя. Например, если все из множества объектов не могут быть отображены на одном экране, объекты, которые не отображены на сенсорном экране, могут быть отображены посредством действия пролистывания вверх/вниз. Такое действие пролистывания вверх/вниз представляет собой быстрое перемещение (то есть, перелистывание вверх и вниз или скольжение вверх и вниз) на сенсорном экране. Если полосу прокрутки подтягивают вверх или вниз, используя инструмент 168 ввода, терминал 100 мобильной связи передает управляющий сигнал на инструмент 168 ввода для увеличения или уменьшения интенсивности вибрации, когда полоса прокрутки оказывается ближе к своей первой позиции (например, к верней или нижней части сенсорного экрана 190), и передает управляющий сигнал на инструмент 168 ввода для уменьшения или увеличения интенсивности вибрации, когда полоса прокрутки оказывается близко к своему концу (например, к верней или нижней части сенсорного экрана 190).
При пролистывании вверх/вниз, терминал 100 мобильной связи передает управляющий сигнал на инструмент 168 ввода для увеличения или уменьшения интенсивности вибрации в зависимости от количества объектов, которое изменяется вследствие пролистывания вверх или вниз, например, если наведение инструментом 168 ввода соответствует пролистыванию вверх или вниз множества объектов, отображенных на сенсорном экране 190. Полоса прокрутки и пролистывание вверх/вниз являются функциями, предназначенными для отображения объектов, которые не могут быть отображены на одном экране из-за ограниченного размера сенсорного экрана 190, используя полосу прокрутки или пролистывание вверх/вниз, в то время как на сенсорном экране 190 отображено несколько объектов. Как правило, полоса прокрутки расположена на правой стороне и/или в нижней части сенсорного экрана 190, а пролистывание вверх/вниз расположено в верхней центральной и/или в нижней центральной части сенсорного экрана 190. Однако это всего лишь иллюстративный пример, и для полосы прокрутки и пролистывания вверх/вниз, предлагаемых настоящим изобретением, можно применять различные положения на сенсорном экране 190.
Инструмент 168 ввода поддерживает индукционный способ ввода данных. Если магнитное поле образуется в определенной точке на сенсорном экране 190 с помощью катушки 510 индуктивности, сенсорный экран 190 может распознавать точку прикосновения, обнаруживая положение магнитного поля.
Фиг. 6A-6D иллюстрируют пример установки тактильной комбинации в зависимости от типа объекта в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 6A, представлено множество элементов, представляющих тактильные установочные параметры, которые включены или выключены. Более конкретно, тактильная функция 611 быстрого просмотра является элементом, предназначенным для установки тактильной функции при отображении внутренней информации объекта, над которым расположен кончик 430 пера инструмента 168, в режиме быстрого просмотра. Зависящий от типа объекта тактильная функция 612 представляет собой элемент для установки тактильной комбинации в соответствии с типом объекта. Тактильная функция 613 предварительного просмотра видеоролика является элементом для установки функции обеспечения предварительного просмотра типа быстрого просмотра невоспроизведенных сегментов во время воспроизведения видеоролика, или показа выбранного сегмента способом предварительного просмотра для невоспроизведенного видеоролика. Аналогичным образом, обеспечены всплывающая тактильная функция 614 электронной почты и сообщений, всплывающая тактильная функция 615 изображений, тактильная функция 616 прокрутки и тактильная функция 617, зависящая от расстояния. В дополнение к вышеописанным функциям, может быть использовано множество других параметров, чтобы обеспечивать управляющий сигнал для инструмента 168 ввода при обнаружении ввода данных путем наведения.
Фиг. 6B иллюстрирует пример установки тактильной комбинации в соответствии с типом объекта, если элемент, выбранный на фиг. 6A, является тактильной функцией 612, зависящей от типа объекта.
Как показано на фиг. 6B, если тип объекта представляет собой фотоснимок, видеоролик, музыку, текст, сообщение электронной почты или текстовое сообщение, одна из различных тактильных комбинаций может быть установлена посредством выбора одной из кнопок 621-626 установки в соответствии с типом объекта. Эти тактильные комбинации могут быть одинаковыми или отличаться друг от друга, и тактильные комбинации могут быть указаны или выбраны пользователем, или могут быть выбраны случайным образом. Также могут быть установлены интенсивность вибрации и цикл вибрации тактильных комбинаций.
Фиг. 6C иллюстрирует тактильную комбинацию, подлежащую установке, если тип объекта представляет собой фотоснимок на фиг. 6B.
Более конкретно, фиг. 6C иллюстрирует экран 630 с установкой тактильной комбинации, когда тип объекта представляет собой фотоснимок. Экран 630 с установкой тактильной комбинации включает в себя меню 640 настройки интенсивности вибрации для регулирования интенсивности вибрации инструмента 168 ввода при возникновении наведения, когда инструмент 168 ввода расположен над фотоснимком, опцию 650 меню цикла вибрации, предоставляющее множество циклов вибрации, опцию 655 меню сохранения для сохранения установленных комбинаций вибрации и опцию 656 меню отмены для отмены комбинаций вибрации. Опция 650 меню цикла вибрации имеет множество тактильных комбинаций 651-654, у которых могут быть одинаковые или разные формы тактильных вибраций.
Фиг. 6D иллюстрирует формы тактильных вибраций, ассоциированные с тактильными комбинациями.
Как показано на фиг. 6D, форма колебаний каждой тактильной комбинации может быть периодической формой колебаний или апериодической формой колебаний. Интенсивность вибрации тактильных комбинаций 661-664 может быть определена пользователем, и у тактильных комбинаций 661-664 могут быть разные интенсивности вибрации.
На фиг. 6D горизонтальная ось (например, ось X) представляет период времени, тогда как вертикальная ось (например, ось У) представляет интенсивность вибрации тактильных комбинаций.
Хотя на фиг. 6D показаны только четыре тактильные комбинации, это всего лишь иллюстративный пример, и настоящее изобретение не ограничено четырьмя формами тактильных вибраций, а может быть применено для четырех или больше форм тактильных вибраций.
Как показано, формы тактильных вибраций могут быть одинаковыми или отличаться друг от друга. Например, в отношении тактильных комбинаций, которые может распознавать пользователь, может быть обеспечено множество тактильных комбинаций, в том числе тактильная комбинация, позволяющая пользователю ощущать такое же чувство или подобное, как при вибрации при распиливании, при демонстрировании жеста распиливания или при прикосновении к объекту, связанному с распиливанием; тактильную комбинацию, позволяющую пользователю ощущать успокаивающее чувство с длительным циклом вибрации и низкой интенсивностью вибрации; тактильную комбинацию, позволяющую пользователю ощущать сильное чувство с коротким циклом вибрации и высокой интенсивностью вибрации; и тактильную комбинацию, позволяющую пользователю ощущать такое же чувство или подобное, как при вибрациях, которые он или она может чувствовать при царапании шероховатых поверхностей, таких как стены. Тактильные комбинации не ограничены вышеописанными иллюстративными тактильными комбинациями, а могут быть применены ко всем видами других вибраций, которые может чувствовать пользователь. Другие тактильные комбинации в соответствии с вариантом осуществления настоящего изобретения будут описаны более подробно в отношении фиг. 17A-17I.
Если инструментом 168 ввода выбран объект, для которого установлена тактильная комбинация, управляющий сигнал, ассоциированный с тактильной комбинацией, которая установлена для этого объекта, передается на инструмент 168 ввода, и инструмент 168 ввода обеспечивает тактильные эффекты для пользователя в соответствии с принятым управляющим сигналом.
Специалистам в данной области техники должно быть очевидно, что опции меню, иллюстрируемые на фиг. 6C для установки этих тактильных комбинаций, и установленные формы колебаний, иллюстрируемые на фиг. 6D, являются просто иллюстративными примерами, и настоящее изобретение не ограничено ими и может включать в себя множество других способов выбора и установки тактильных комбинаций.
Фиг. 7A и 7B иллюстрируют пример установки тактильной комбинации в соответствии с количеством объектов согласно варианту осуществления настоящего изобретения.
Как показано на фиг. 7A, аналогично фиг. 6A, элементы для установки тактильных комбинаций в соответствии с вариантом осуществления настоящего изобретения включают в себя тактильную функцию 711 быстрого просмотра, объекта тактильную функцию 712, зависящую от типа, тактильную функцию 713 предварительного просмотра видео, всплывающую тактильную функцию 714 электронной почты и сообщений, всплывающую тактильную функцию 715 изображений, тактильную функцию 716 прокрутки и тактильную функцию 717, зависящую от расстояния.
Путем выбора тактильной функции 716 прокрутки из этого множества элементов во время регулирования прокрутки пользователь может установить отличающуюся тактильную комбинацию в зависимости от количества объектов, подлежащих отображению на экране, как иллюстрируется на фиг. 7B. Например, если количество объектов, подлежащих отображению на экране, равно 20 или меньше, пользователь может установить тактильную комбинацию путем выбора кнопки 721. Другими словами, пользователь может установить интенсивность вибрации и/или цикл вибрации. Аналогичным образом, если количество объектов находится между 20 и 49, пользователь может установить тактильную комбинацию, выбирая кнопку 722, и если количество объектов составляет 50 или больше, пользователь может установить тактильную комбинацию, выбирая кнопку 723. Эти тактильные комбинации включают в себя интенсивность вибрации и цикл вибрации.
Фиг. 8A-8C иллюстрируют пример установки тактильной комбинации для объекта видеоролика и установки основной сцены в соответствии с вариантом осуществления настоящего изобретения.
Рассмотрим фиг. 8A-8C, на которых устанавливается тактильная комбинация, которая отличается в зависимости от жанра видеоролика, как показано ссылочной позицией 820, посредством активизирования тактильной функции 811 предварительного просмотра видеоролика на экране 810. Например, каждая тактильная комбинация (например, интенсивность вибрации и/или цикл вибрации) может быть установлена разными способами в зависимости от того, является ли жанр видеоролика фильмом для всей семьи, драмой, боевиком или научной фантастикой (SF), и эту установленную интенсивность вибрации и/или цикл вибрации можно применять к определенному сегменту видеоролика, который определяется как важный в видеоролике, как показано ссылочной позицией 830. После этого, если инструмент 168 ввода приближается к объекту видеоролика, терминал 100 мобильной связи передает управляющий сигнал, ассоциированный с установленной тактильной комбинацией, на инструмент 168 ввода, и инструмент 168 ввода управляет своей вибрацией, основываясь на принятом управляющем сигнале.
Фиг. 9A и 9B иллюстрируют пример активизации тактильной функции всплывающего элемента изображения и ввода информации в метаданные в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 9A И 9B, на экране 910 тактильная функция 911 всплывающего элемента изображения активизирована (или «включена») для объекта, который отображен или хранятся на/в терминале 100 мобильной связи, чтобы обеспечить тактильные эффекты инструменту 168 ввода. После этого активизируется меню 920 выбора метаданных, в которые пользователь может ввести информацию об изображении. Метаданные имеют элементы, в которых могут быть записаны различные типы информации об изображении. Информация об элементах, которая может быть записана в метаданных, может включать в себя информацию, которая введена пользователем, или информацию, которая автоматически вводится терминалом 100 мобильной связи. В данной работе, информация об этих элементах может быть введена и пользователем, и терминалом 100 мобильной связи, и в этом случае, может быть определено в соответствии с приоритетом объекта, которая информация вводится в элементы. Например, если изображение представляет собой фотографию, в метаданные могут быть записаны имя человека, изображенного на фотографии, название места, в котором была сделана фотография, и дата и время, когда фотография была сделана. Имя человека и название места могут быть введены пользователем, а дата/время и место могут быть автоматически введены терминалом 100 мобильной связи на основе анализа и определения заголовка сфотографированного объекта.
Метаданные, полученные в результате ввода информации об изображении, сохраняются. Если распознается наведение, когда инструмент 168 ввода приближается к изображению, устанавливается тактильная комбинация. Тактильная комбинация представляет собой управляющий сигнал для возбуждения вибрации инструмента 168 ввода, и может быть установлена по меньшей мере как одна из цикла вибрации и интенсивности вибрации. После этого, если распознано наведение посредством инструмента 168 ввода, активизируется функция быстрого просмотра, изображение увеличивается и отображается на сенсорном экране 190, и на изображении для предварительного просмотра отображается информация метаданных. Помимо этого, терминал 100 мобильной связи передает управляющий сигнал, ассоциированный с тактильной комбинацией, которая установлена для этого изображения, на инструмент 168 ввода, и инструмент 168 ввода анализирует принятый управляющий сигнал и обеспечивает тактильные эффекты, используя по меньшей мере одну из цикла вибрации и интенсивности вибрации.
Фиг. 10 представляет собой графическую схему программы, иллюстрирующую процесс отображения изображений для предварительного просмотра объектов и передачи управляющих сигналов, ассоциированных с тактильными комбинациями, если распознано наведение на несколько объектов, в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 10, в то время как несколько объектов отображено на сенсорном экране 190 терминала 100 мобильной связи, обнаружено наведение инструмента 168 ввода, выполняющего выбор одного из множества объектов на сенсорном экране 190. В частности, на этапах S1010 и S1012, терминал 100 мобильной связи определяет, распознано ли наведение, когда инструмент 168 ввода приближается к объекту. В данном документе, термин «наведение» относится к распознаванию терминалом 100 мобильной связи, что инструмент 168 ввода размещен в пределах предварительно определенного расстояния от сенсорного экрана 190 (например, 3 мм). Предварительно определенное расстояние может быть изменено изготовителем терминала мобильной связи или пользователем.
После распознавания наведения инструмента 168 ввода, на этапе S1014 терминал 100 мобильной связи идентифицирует тип объекта, соответствующего положению, в котором произошло наведение. Сенсорный экран 190 терминала 100 мобильной связи может отображать несколько объектов, включая различные файлы (например, видеоролики, изображения, сообщения электронной почты, сообщения SMS, сообщения MMS, документы Word и музыку), иконки быстрого доступа и папки для группирования нескольких файлов.
После идентификации типа объекта терминал 100 мобильной связи анализирует информационное наполнение объекта. В частности, если тип объекта представляет собой изображение, терминал 100 определяет, имеются ли метаданные в изображении. Если тип объекта представляет собой видеоролик, терминал 100 мобильной связи определяет, имеется ли в видеоролике сегмент, предварительно определенный пользователем. Если тип объекта представляет собой документ, терминал 100 мобильной связи определяет, имеется ли предварительно определенная символьная строка в этом документе.
В данном документе, объекты не ограничены вышеописанными типами объектов, и могут включать в себя все виды иконок быстрого доступа и файлов, которые могут храниться или отображаться в/на терминале 100 мобильной связи.
На этапе S1016, терминал 100 мобильной связи отображает для идентифицированного объекта изображение для предварительного просмотра и передает управляющий сигнал, ассоциированный с предварительно определенной тактильной комбинацией, соответствующей идентифицированному объекту, на инструмент 168 ввода. Изображение для предварительного просмотра показывает информационное наполнение, указанное или установленное для объекта, перекрывая объект или его окружение в виде всплывающего окна, если происходит наведение на объект, и может быть информационным наполнением, которое установлено заранее пользователем, в зависимости от типа или свойств объекта, или может быть информационным наполнением (или деталями) этого объекта. Помимо этого, изображение для предварительного просмотра может быть изображением, полученным путем увеличения или уменьшения объекта, на который произошло наведение. Изображение для предварительного просмотра включает в себя по меньшей мере одну из деталей объекта, метаданные, которые введены заранее в объект, и изображение, полученное путем увеличения масштаба объекта, в зависимости от типа объекта.
Изображение для предварительного просмотра отображается на сенсорном экране 190, и управляющий сигнал, ассоциированный с тактильной комбинацией, передается на инструмент 168 ввода посредством терминала 100 мобильной связи. Управляющий сигнал, ассоциированный с тактильной комбинацией, управляет по меньшей мере одним параметром из интенсивности вибрации и цикла вибрации инструмента 168 ввода в качестве тактильной комбинации. Терминал 100 мобильной связи может передавать управляющий сигнал, ассоциированный с этой тактильной комбинацией, после отображения изображения для предварительного просмотра, или может передавать управляющий сигнал, ассоциированный с тактильной комбинацией, перед отображением изображения для предварительного просмотра. В качестве альтернативы, терминал 100 мобильной связи может передавать управляющий сигнал, ассоциированный с тактильной комбинацией, при отображении изображения для предварительного просмотра.
Эта тактильная комбинация может быть установлена заранее в зависимости от типа и свойств объекта, и может быть установлена разными способами в зависимости от расстояния между инструментом 168 ввода и сенсорным экраном 190. В частности, терминал 100 мобильной связи устанавливает тактильную комбинацию в зависимости по меньшей мере от одного параметра из типа объекта, количества объектов, информационного наполнения объекта, значимости объекта и жанра объекта, и установленная тактильная комбинация сохраняется. Что касается значимости, если символьная строка, которую пользователь считает важной, заранее установлена для объекта, терминал 100 мобильной связи определяет значимость объекта, анализируя эту символьную строку.
Если положение наведения соответствует полосе прокрутки на сенсорном экране 190, тактильная комбинация может быть установлена разными способами в зависимости от количества объектов, которое изменяются, когда инструмент 168 ввода перемещается вверх/вниз или влево/вправо по полосе прокрутки, и результаты настройки сохраняются.
Фиг. 11А-11С иллюстрируют пример отображения изображения для предварительного просмотра объекта при распознавании наведения на объект в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 11А-11С, на экране 1110 отображено множество объектов, включая электронную почту 1111, фотографию 1112, файл 1113 Word и видеоролик 1114. Если выбрана фотография 1121 посредством наведения инструмента 168 ввода на эту фотографию 1121, терминал 100 мобильной связи, определяет, что объект представляет собой фотографию, идентифицируя объект (то есть, фотографию 1121), соответствующий положению, в котором произошло наведение. Впоследствии, терминал 100 мобильной связи отображает изображение для предварительного просмотра путем увеличения масштаба выбранной фотографии и передает по меньшей мере один управляющий сигнал, ассоциированный с тактильной комбинацией, которая была установлена заранее для этой фотографии, на инструмент 168 ввода. После этого инструмент 168 ввода производит вибрацию в тактильной комбинации, соответствующей принятому управляющему сигналу, обеспечивая возможность пользователю чувствовать вибрации предварительно определенной тактильной комбинации.
Фиг. 12A и 12B иллюстрируют пример, в котором наведение указывает пролистывание вниз множества объектов, в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 12A и 12B, если все из нескольких объектов не могут быть отображены на одном экране, объекты, которые не отображены, могут быть отображены с помощью функции пролистывания вверх/вниз. Чтобы отобразить объекты, которые не отображены, если инструмент 168 ввода располагается над иконкой 1222 для пролистывания вверх/вниз, терминал 100 мобильной связи обнаруживает наведение на иконку 1222 и решает, что была введена команда пролистывания вниз. В ответ, терминал 100 мобильной связи отображает вверху перечень объектов, которые в настоящий момент не отображены на сенсорном экране 190, таким образом отображая объекты, которые не отображены. В то время как выполняется пролистывание вверх/вниз объектов, по меньшей мере один управляющий сигнал, ассоциированный с установленной тактильной комбинацией, передается на инструмент 168 ввода. Инструмент 168 ввода анализирует принятый управляющий сигнал и производит вибрацию посредством управления по меньшей мере одним параметром из интенсивности вибрации и цикла вибрации в зависимости от установленной тактильной комбинации.
Как иллюстрируется на фиг. 7B, тактильная комбинация может быть установлена разными способами в зависимости от количества объектов, которые не отображены. Например, как иллюстрируется на фиг. 7B, тактильная комбинация может быть установлена разными способами в зависимости от того, составляет ли количество объектов 20 или меньше, находится между 20 и 49, или составляет 50 или больше. Количество объектов, которые не отображены, может быть определено путем вычитания количества объектов, отображаемых в настоящее время, из общего числа объектов. Например, если в телефонной книге хранится в общей сложности 60 телефонных номеров, и в настоящий момент отображены первые шесть телефонных номеров (начиная с буквы A алфавита), количество телефонных номеров, которые не отображены, составляет 54. Если отображаемая в настоящий момент на экране телефонная книга показывает телефонный номер, соответствующий середине (например, букву C), пользователь может определить количество телефонных номеров (начиная с буквы D до Z), которые не отображены, после телефонных номеров, которые соответствуют середине и отображены.
Фиг. 13 представляет собой графическую схему программы, иллюстрирующую процесс отображения метаданных объекта в виде изображения для предварительного просмотра и передачи управляющего сигнала, ассоциированного с тактильной комбинацией, на инструмент ввода в соответствии с вариантом осуществления настоящего изобретения, а фиг. 14 иллюстрирует пример отображения метаданных объекта в виде изображения для предварительного просмотра в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 13, на этапах S1310 и S1312, в то время как несколько объектов отображены на сенсорном экране 190 терминала 100 мобильной связи, терминал 100 мобильной связи определяет, распознано ли наведение инструмента 168 ввода на сенсорный экран 190. Если на этапе S1312 распознано наведение, терминал 100 мобильной связи на этапе S1314 проверяет, установлена ли функция быстрого просмотра. Например, если функция быстрого просмотра представляет собой настройку по умолчанию для отображения изображения для предварительного просмотра и является функцией изображения для предварительного просмотра, перекрывающей объект, который отображается на сенсорном экране 190, чтобы отображать изображение для предварительного просмотра, функция быстрого просмотра должна быть активизирована.
Если функция быстрого просмотра установлена, на этапе S1316 терминал 100 мобильной связи определяет информационное наполнение 1411 предварительного просмотра, соответствующее объекту в положении, в котором произошло наведение. Например, терминал 100 мобильной связи определяет, является ли объект в положении, в котором произошло наведение, изображением или видеороликом, и затем определяет изображение для предварительного просмотра, подлежащее отображению. В частности, если объект определен как изображение, терминал 100 мобильной связи отображает метаданные, в которых хранится информационное наполнение изображения, как изображение для предварительного просмотра, а если объект определен как видеоролик, терминал 100 мобильной связи воспроизводит видеоролик после перехода к положению, в котором произошло наведение. Чтобы воспроизвести видеоролик после перехода к положению, в котором произошло наведение, терминал 100 мобильной связи может отобразить метаданные, которые были сохранены заранее для этого видеоролика, в виде изображения для предварительного просмотра.
На этапе S1318, терминал 100 мобильной связи определяет, включены ли метаданные, в которых установлена тактильная комбинация, в информационное наполнение предварительного просмотра. Как описано выше, метаданные включают в себя подробную информацию об изображении или видеоролике, и если объект представляет собой изображение, подобное фотографии, метаданные могут включать в себя имя человека на фотографии, название места, в котором была сделана фотография, и дату и время, когда фотография была сделана.
Если на этапе S1318 определено, что метаданные, в которых установлена тактильная комбинация, включены в информационное наполнение предварительного просмотра, терминал 100 мобильной связи на этапе S1320 передает управляющий сигнал, ассоциированный с установленной тактильной комбинацией, соответствующей данным метаданных, на инструмент 168 ввода, в то же время выводя установленное информационное наполнение предварительного просмотра в виде изображения для предварительного просмотра с использованием функции быстрого просмотра. Тактильная комбинация, соответствующий метаданным, может быть установлена заранее пользователем.
Фиг. 15 представляет собой графическую схему программы, иллюстрирующую процесс отображения информационного наполнения объекта в виде изображения для предварительного просмотра и передачи управляющего сигнала, ассоциированного с тактильной комбинацией, на инструмент ввода в соответствии с вариантом осуществления настоящего изобретения.
Как показано на фиг. 15, на этапах S1510 и S1512, в то время как несколько объектов отображены на сенсорном экране 190 терминала 100 мобильной связи, терминал 100 мобильной связи определяет, распознано ли наведение инструмента 168 ввода на сенсорный экран 190.
Если на этапе S1512 распознано наведение, терминал 100 мобильной связи на этапе S1514 проверяет, установлена ли функция быстрого просмотра.
Если функция быстрого просмотра установлена, терминал 100 мобильной связи на этапе S1516 определяет информационное наполнение предварительного просмотра относительно объекта, соответствующего положению, в котором произошло наведение. В частности, терминал 100 мобильной связи определяет, является ли объект, соответствующий положению, в котором произошло наведение, сообщением электронной почты, текстовым сообщением или списком телефонных номеров, определяет формат информационного наполнения, подлежащего отображению в изображении для предварительного просмотра, в соответствии с типом установленного объекта, и отображает информационное наполнение объекта в установленном формате. Например, если объект представляет собой сообщение электронной почты, терминал 100 мобильной связи отображает детали электронной почты в сообщении предварительного просмотра, а если объект представляет собой входящее и исходящее текстовое сообщение, терминал 100 мобильной связи отображает детали текстового сообщения, соответствующего положению, в котором произошло наведение, используя сообщение предварительного просмотра.
На этапе S1518, терминал 100 мобильной связи проверяет, имеется ли предварительно определенная символьная строка в информационном наполнении, подлежащем отображению, в изображении для предварительного просмотра. Символьная строка определяется заранее в зависимости от предпочтения пользователя, и характеристики связанного объекта могут быть определены на основании этой символьной строки. Например, если объект включает в себя экономические термины (например, инфляцию, уровень занятости, акции, котировки и обменные курсы), объект классифицируется как связанные с экономикой новости или сообщение электронной почты. На этапе S1520, терминал 100 мобильной связи передает, на инструмент 168 ввода, управляющий сигнал, ассоциированный с предварительно определенной тактильной комбинацией, соответствующей предварительно определенной символьной строке, при этом отображая информационное наполнение объекта в установленном сообщении предварительного просмотра.
Фиг. 16А-16С иллюстрируют пример отображения информационного наполнения объекта в виде изображения для предварительного просмотра в соответствии с вариантом осуществления настоящего изобретения.
Рассмотрим фиг. 16А-16С, где на фиг. 16A, если пользователь помещает инструмент 168 ввода над объектом, требуемым для чтения, то для объекта, на который распознается наведение инструментом 168 ввода, терминал 100 мобильной связи отображает детали, используя изображение 1611 для предварительного просмотра. Терминал 100 мобильной связи передает управляющий сигнал, ассоциированный с предварительно определенной тактильной комбинацией, на инструмент 168 ввода, и инструмент 168 ввода принимает управляющий сигнал и управляет по меньшей мере одним из его параметров интенсивности вибрации и цикла вибрации в предварительно определенной тактильной комбинации. Аналогичным образом, чтобы определить тип (например, экономика, политика, общество и культура) объекта в зависимости от символьной строки, заранее может быть определено по меньшей мере одно слово, ассоциированное с типом и тактильной комбинацией, ассоциированной с символьной строкой, и если предварительно определенная символьная строка включена в детали объекта, инструмент 168 ввода управляется в отношении тактильной комбинации, которая определяется в зависимости от этого типа.
Даже для входящих и исходящих текстовых сообщений, как иллюстрируется на фиг. 16B, если инструмент 168 ввода находится на или над произвольным текстовым сообщением среди входящих и исходящих текстовых сообщений, терминал 100 мобильной связи отображает детали этого текстового сообщения в виде изображения для предварительного просмотра. Если установленная символьная строка, эмоциональное состояние, ассоциированное с установленной символьной строкой, и тактильная комбинация, ассоциированная с символьной строкой, определяются в текстовом сообщении, терминал 100 мобильной связи проверяет, имеет ли принятое текстовое сообщение установленную символьную строку, и определяет настроения, чувства, эмоции и состояния человека, который отправил это текстовое сообщение, на основании эмоционального состояния, соответствующего проверенной символьной строке. Терминал 100 мобильной связи передает управляющий сигнал, ассоциированный со связанной тактильной комбинацией, на инструмент 168 ввода.
Например, на фиг. 16B, для входящих и исходящих текстовых сообщений, левая сторона представляет текстовые сообщения, написанные другой стороны, при этом правая сторона представляет текстовые сообщения, отправленные пользователем. Если другая сторона отправила текстовое сообщение «Хорошо-OK! Поехали на Боракай–», терминал 100 мобильной связи может определять на основании символьных строк «Хорошо» и «OK», что другая сторона имеет добрые чувства и принимает некоторые предложения. На основании этих определений, терминал 100 мобильной связи передает управляющий сигнал, ассоциированный с предварительно определенной тактильной комбинацией, на инструмент 168 ввода, в зависимости от настроения другой стороны, и инструмент ввода 160 производит вибрацию под управлением по меньшей мере одного параметра из интенсивности вибрации и цикла вибрации в зависимости от принятого управляющего сигнала.
Аналогичным образом, даже для списка телефонных номеров, если инструмент 168 ввода находится на или над произвольным телефонным номером среди нескольких телефонных номеров, терминал 100 мобильной связи генерирует изображение 1631 для предварительного просмотра и отображает его детали в изображении 1631 для предварительного просмотра.
Фиг. 17A-17I иллюстрируют формы колебаний различных тактильных комбинаций в соответствии с вариантом осуществления настоящего изобретения.
В частности, на фиг. 17A представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой видеоролик, на фиг. 17B представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой электронную почту, на фиг. 17C представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой музыку, на фиг. 17D представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой изображение, на фиг. 17E представлены результирующие формы колебаний тактильной комбинации, при которой во время прокрутки количество объектов является небольшим, на фиг. 17F представлены результирующие формы колебаний тактильной комбинации, при которой во время прокрутки количество объектов является обычным, на фиг. 17G представлены результирующие формы колебаний тактильной комбинации, при которой во время прокрутки количество объектов является большим, на фиг. 17H представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой текстовое сообщение, и на фиг. 17I представлены результирующие формы колебаний тактильной комбинации, при которой объект представляет собой документ.
Фиг. 17A-17I иллюстрируют результирующие формы колебаний тактильных комбинаций, ассоциированных со свойствами каждого объекта, который анализирует инструмент 168 ввода, принимая управляющий сигнал от терминала 100 мобильной связи. В частности, контроллер 530 тактильной отдачи инструмента 168 ввода анализирует управляющий сигнал, принимаемый от терминала 100 мобильной связи, и передает проанализированный управляющий сигнал на вибрационное устройство 520 в инструменте 168 ввода. На фиг. 17A-17I представлены результирующие формы колебаний, которые контроллер 530 тактильной отдачи воспринял и проанализировал сигнал, применяемый к вибрационному устройству 520. Инструмент 168 ввода производит вибрацию с формами колебаний, показанными на фиг. 17A-17I, в зависимости от свойств объекта. Как иллюстрируется на фиг. 17A-17I, тактильная комбинация каждого объекта, которая предлагается в настоящем изобретении, может иметь различные формы колебаний в зависимости от свойств объекта. На чертежах, горизонтальная ось представляет ось времени, когда инструмент 168 ввода принимает управляющий сигнал, тогда как вертикальная ось представляет интенсивность вибрации тактильной комбинации. Один промежуток 1730 (на фиг. 17A) горизонтальной оси составляет 10 мс, а один промежуток 1740 (на фиг. 17A) вертикальной оси составляет 1 Вольт. На фиг. 17B-17I, вертикальные оси опущены для удобства.
Рассмотрим фиг. 17A, которая иллюстрирует формы колебаний для тактильной комбинации, когда объект представляет собой видеоролик, контроллер 530 тактильной отдачи переключает вибрационное устройство 520 в режим активизации в момент времени 1710, производит вибрацию инструмента 168 ввода в течение приблизительно 60 мс, и затем переключает вибрационное устройство 520 обратно в режим деактивизации в момент времени 1720 по прошествии 60 мс. В течение 60 мс инструмент 168 ввода вибрирует с интенсивностью вибрации и циклом вибрации, ассоциированными с тактильной комбинацией, которая определяется заранее в зависимости от свойств объекта. Эти интенсивность вибрации и цикл вибрации могут быть установлены изменяющимися.
Как показано на фиг. 17B, которая иллюстрирует формы колебаний для тактильной комбинации, когда объект представляет собой электронную почту, цикл активизации/деактивизации вибрационного устройства 520 в инструменте 168 ввода является более коротким, чем для видеоролика.
Как показано на фиг. 17C, которая иллюстрирует формы колебаний для тактильной комбинации, когда объект представляет собой музыку, цикл активизации/деактивизации вибрационного устройства 520 является более длинным, чем для видеоролика, а интенсивность вибрации является более низкой в начале и в конце формы колебаний, чем в середине формы колебаний.
Как показано на фиг. 17D, которая иллюстрирует формы колебаний для тактильной комбинации, когда объект представляет собой изображение, интенсивность вибрации при переключении активизации/деактивизации вибрационного устройства 520 является более высокой, чем во время вибрации вибрационного устройства 520, и вибрации происходят непрерывно от активизации до деактивизации.
Как показано на фиг. 17E-17G, которые иллюстрируют различные формы колебаний для тактильных комбинаций в зависимости от количества объектов во время прокрутки, тактильные комбинации являются различными в зависимости от остающегося количества объектов.
На фиг. 17H, которая иллюстрирует формы колебаний, когда объект представляет собой текстовое сообщение, инструмент 168 ввода производит вибрацию от активизации до деактивизации вибрационного устройства 520, производит вибрацию снова при повторной активизации вибрационного устройства 520, по прошествии предварительно определенного времени, и затем деактивизирует вибрационное устройство 520.
На фиг. 17I, которая иллюстрирует формы колебаний, когда объект представляет собой документ, цикл вибрации является более коротким, чем для текстового сообщения.
В основном, как иллюстрируется на фиг. 17A-17I, формы колебаний тактильных комбинаций, которые установлены в зависимости от свойств каждого объекта, отличаются друг от друга.
Описанные выше варианты осуществления настоящего изобретения могут быть реализованы с помощью аппаратных средств, программного обеспечения или их комбинации. Программное обеспечение может храниться, например в энергозависимом или энергонезависимом устройстве хранения данных, таком как постоянное запоминающее устройство (ROM, ПЗУ), независимо от того, является ли оно допускающим возможность стирания или перезаписываемым, или, например, в запоминающем устройстве, таком как оперативное запоминающее устройство (RAM, ОЗУ), интегральная схема памяти и кристалл интегральной схемы (IC, ИС), или, например, в носителе информации, который является носителем информации, записываемым оптическим или магнитным способом и читаемым машиной (например, компьютером), таком как компакт-диск (CD), универсальный цифровой диск (DVD), магнитный диск и магнитная лента. Запоминающее устройство, которое может быть включено в терминал мобильной связи, может быть примером носителя информации, который может считываться с помощью машины, которая является подходящей для хранения программы или программ, включая команды для реализации вариантов осуществления настоящего изобретения. Следовательно, настоящее изобретение включает в себя программы, содержащие коды для реализации устройства и способа по любому из пунктов формулы изобретения данного описания, и машиночитаемый носитель информации, хранящий эти программы. Кроме того, эти программы могут быть переданы с помощью электричества через любые носители информации, такие как коммуникационные сигналы, которые передаются через проводные/беспроводные соединения, и настоящее изобретение надлежащим образом может включать в себя их эквиваленты.
Помимо этого, терминал мобильной связи может принимать и сохранять программы от программного сервера, подсоединенного к нему проводным или беспроводным образом. Программный сервер может включать в себя запоминающее устройство для хранения программ, включающих в себя команды для управления терминалом мобильной связи, чтобы выполнять установленный способ защиты информационного наполнения, и информацию для способа защиты информационного наполнения, устройство связи для осуществления проводной/беспроводной связи с терминалом мобильной связи, и контроллер для передачи программ на главное устройство по запросу мобильного терминала или автоматически.
Как видно из приведенного выше описания, если инструмент ввода наведен на объект, отображенный на дисплее с сенсорным экраном терминала мобильной связи, терминал мобильной связи передает управляющий сигнал для обеспечения тактильных эффектов на инструмент ввода, в то же время отображая изображение для предварительного просмотра на сенсорном экране, тем самым позволяя обеспечивать полезные взаимодействия с пользователем (UX) для обычных пользователей и для пользователей с пониженным зрением. Кроме того, во время предварительного просмотра объектов, отображенных на сенсорном экране, терминал мобильной связи обеспечивает тактильные эффекты, используя инструмент ввода, таким образом обеспечивая возможность пользователю получать правильное ощущение от манипулирования при манипулировании с сенсорным экраном. Помимо этого, терминал мобильной связи поддерживает реалистичную и естественную среду взаимодействия между пользователем и системой путем вывода тактильных эффектов через инструмент ввода.
Хотя настоящее изобретение было показано и описано в отношении некоторых его вариантов осуществления, специалистам в данной области техники должно быть понятно, что в нем могут быть сделаны различные изменения в форме и деталях, без отступления от существа и объема настоящего изобретения, как определено прилагаемой формулой изобретения и ее эквивалентами.