ОБНАРУЖЕНИЕ ЖЕСТА ПАНОРАМИРОВАНИЯ И ВЫБОРА Российский патент 2019 года по МПК G06F9/44 

ПРЕДПОСЫЛКИ СОЗДАНИЯ ИЗОБРЕТЕНИЯ

[0001] Современный принцип навигации по различным контекстам информации основан на окнах. Классическим примером этого является случай web-браузера. Пользователь может начать с домашней страницы, которая занимает все пространство браузера. Затем пользователь может выбирать гиперссылку, после чего появляется новое окно. Тем не менее, предыдущее окно либо исчезает, либо, в случае исполнения опции открытия новой страницы в новом окне, предыдущее окно полностью, или, по меньшей мере, частично скрывается.

[0002] Заявленный в данном документе предмет изобретения не ограничивается вариантами осуществления, которые устраняют любые недостатки или которые работают только в средах таких как те, что описаны выше. Наоборот, данные предпосылки создания изобретения предоставлены только, чтобы проиллюстрировать одну примерную область технологии, в которой могут быть реализованы на практике некоторые описываемые в данном документе варианты осуществления.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

[0003] По меньшей мере некоторые варианты осуществления, описанные в данном документе, относятся к интерфейсу пользователя, который имеет холст, который является расширяемым в расширяемом измерении и на котором могут быть помещены многочисленные выбираемые элементы. В данном контексте, когда выбирающий элемент управления ассоциируется с конкретным выбираемым элементом, и предоставляются дополнительные жесты пользователя, механизм обнаружения панорамирования выполнен с возможностью различать намерение панорамировать холст и намерение выбрать конкретный выбираемый элемент. В другом варианте осуществления, механизм обнаружения панорамирования выполнен с возможностью различать намерение панорамировать холст вдоль его расширяемого направления (как например, горизонтально), и намерение прокрутить элемент интерфейса пользователя перпендикулярно (как например, вертикально) расширяемому направлению холста. В еще одном другом варианте осуществления, механизм обнаружения панорамирования выполнен с возможностью различать все три намерения; т.е. 1) намерение панорамировать холст в его расширяемом направлении, 2) намерение прокрутить элемент интерфейса пользователя перпендикулярно расширяемому направлению холста, и 3) намерение выбрать элемент интерфейса пользователя.

[0004] Данная сущность изобретения предоставлена, чтобы представить выбор концепций в упрощенной форме, которые дополнительно описываются ниже в Подробном Описании. Данная Сущность Изобретения как не предназначена для того, чтобы идентифицировать ключевые признаки или существенные признаки заявленного предмета изобретения, так и не предназначена для того, чтобы быть использованной в качестве средства при определении объема заявленного предмета изобретения.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

[0005] Для того, чтобы описать способ, в котором вышеизложенные и прочие преимущества и признаки изобретения могут быть получены, более конкретное описание изобретения, кратко описанного выше, будет представлено посредством ссылки на его конкретные варианты осуществления, которые иллюстрируются на прилагаемых чертежах. Понимая, что эти чертежи изображают только типичные варианты осуществления изобретения, и, вследствие этого, не должны рассматриваться как ограничивающие его объем, изобретение будет описано и объяснено с дополнительными особенностями и подробностями посредством использования сопроводительных чертежей, на которых:

[0006] Фигура 1 абстрактно иллюстрирует примерную вычислительную систему, в которой могут быть использованы описываемые в данном документе принципы;

[0007] Фигура 2 абстрактно иллюстрирует среду, в которой холст, который имеет несколько выбираемых элементов интерфейса пользователя и является с возможностью панорамирования в расширяемом направлении (например, горизонтальном) холста, но несколько выбираемых элементов являются с возможностью панорамирования (или с возможностью прокрутки) также в направлении ортогональном (например, вертикальном к расширяемому направлению) к расширяемому направлению холста;

[0008] Фигура 3 иллюстрирует поддерживающую архитектуру для механизма для различия жестов панорамирования и выбора в соответствии с описанными в данном документе принципами;

[0009] Фигура 4 иллюстрирует много более подробный интерфейс пользователя, который включает в себя холст, наполненный большим количеством выбираемых элементов;

[0010] Фигура 5 иллюстрирует интерфейс пользователя, который подобен интерфейсу пользователя с Фигуры 4, за исключением того, что иллюстрируется дуга, ассоциированная с перемещением указателя;

[0011] Фигура 6 иллюстрирует интерфейс пользователя, в котором примерная область начала панорамирования иллюстрируется по отношению к позиции начала-панорамирования; и

[0012] Фигура 7 иллюстрирует блок-схему последовательности операций способа для разрешения взаимодействия пользователя с холстом, который расширяется в расширяемом измерении в интерфейсе пользователя, и который будет наполнен выбираемыми элементами.

ПОДРОБНОЕ ОПИСАНИЕ

[0013] По меньшей мере, некоторые варианты осуществления, описываемые в данном документе, относятся к интерфейсу пользователя, который имеет холст, который является расширяемым в расширяемом измерении и на котором могут быть помещены многочисленные выбираемые элементы. В данном контексте, когда выбирающий элемент управления ассоциируется с конкретным выбираемым элементом, и предоставляются дополнительные жесты пользователя, механизм обнаружения панорамирования выполнен с возможностью различать намерение панорамировать холст и намерение выбрать конкретный выбираемый элемент. В качестве альтернативы или в дополнение, когда выбирающий элемент управления ассоциируется с конкретным ортогонально прокручиваемым элементом, который может быть прокручен ортогонально расширяемому направлению холста, механизм обнаружения панорамирования может различать намерение панорамировать холст и намерение прокрутить ортогонально прокручиваемый элемент. Некоторое вводное обсуждение вычислительной системы будет описано в отношении Фигуры 1. Затем, примерные интерфейсы пользователя, способы и поддерживающие архитектуры будут описаны в отношении последующих фигур.

[0014] Вычислительные системы в настоящее время все чаще принимают широкое многообразие форм. Вычислительные системы могут, например, быть переносными устройствами, бытовыми приборами, компьютерами класса лэптоп, настольными компьютерами, компьютерами класса мэйнфрейм, распределенными вычислительными системами, или даже устройствами, которые традиционно не рассматривались в качестве вычислительных систем. В данном описании и в формуле изобретения, понятие «вычислительная система» определяется в широком смысле, как включающая в себя любое устройство или систему (или их сочетание), которая включает в себя, по меньшей мере, один физический и вещественный процессор, и физическую и вещественную память, выполненную с возможностью наличия в ней исполняемых компьютером инструкций, которые могут быть исполнены посредством процессора. Память может принимать любую форму и может зависеть от природы и формы вычислительной системы. Вычислительная система может быть распределенной по сетевому окружению и может включать в себя многочисленные составляющие вычислительные системы.

[0015] Как иллюстрируется на Фигуре 1, в своей самой основной конфигурации, вычислительная система 100, как правило, включает в себя, по меньшей мере, один блок 102 обработки и память 104. Память 104 может быть физической системной памятью, которая может быть энергозависимой, энергонезависимой, или некоторым сочетанием двух видов. Понятие «память» также может быть использовано в данном документе, как относящееся к энергонезависимому запоминающему устройству большой емкости, такому как физические запоминающие носители информации. Если вычислительная система является распределенной, то возможности обработки, памяти и/или хранения также могут быть распределенными. Используемое в данном документе понятие «исполняемый модуль» или «исполняемый компонент» может относится к объектам программного обеспечения, подпрограммам, или способам, которые могут быть исполнены в вычислительной системе. Разные компоненты, модули, машины, и услуги, описываемые в данном документе, могут быть реализованы в качестве объектов или процессов, которые исполняются на вычислительной системе (например, в качестве отдельных потоков).

[0016] В описании, которое следует, варианты осуществления описываются со ссылкой на действия, которые выполняются посредством одной или более вычислительных систем. Если такие действия реализуются в программном обеспечении, один или более процессоров ассоциированной вычислительной системы, которая выполняет действие, направляют работу вычислительной системы в ответ на исполнение исполняемых компьютером инструкций. Например, такие исполняемые компьютером инструкции могут быть воплощены на одном или более машиночитаемых носителях информации, которые формируют компьютерный программный продукт. Пример такой работы включает в себя манипулирование данными. Исполняемые компьютером инструкции (и манипулируемые данные) могут быть сохранены в памяти 104 вычислительной системы 100. Вычислительная система 100 также может содержать каналы 108 связи, которые позволяют вычислительной системе 100 осуществлять связь с другими процессорами сообщений через, например, сеть 110.

[0017] Вычислительная система 100 также включает в себя дисплей 112, на котором может быть визуализирован интерфейс пользователя, такой как интерфейсы пользователя, описываемые в данном документе. Такие интерфейсы пользователя могут быть сгенерированы в компьютерном аппаратном обеспечении или другой представляемой-компьютером форме перед визуализацией. Представление и/или визуализация таких интерфейсов пользователя может быть выполнена посредством вычислительной системы 100 путем выполнения блоком(ами) 102 обработки одной или более исполняемых компьютером инструкций, которые воплощены на одном или более машиночитаемых носителях информации. Такие машиночитаемые носители информации могут формировать весь или часть компьютерного программного продукта.

[0018] Описываемые в данном документе варианты осуществления могут содержать или использовать специализированный или общего назначения компьютер, включающий в себя компьютерное аппаратное обеспечение, такое как, например, один или более процессоры и системную память, как рассматривается более подробно ниже. Описываемые в данном документе варианты осуществления также включают в себя физические и другие машиночитаемые носители информации для переноса или хранения исполняемых компьютером инструкций и/или структур данных. Такие машиночитаемые носители информации могут быть любыми доступными носителями информации, доступ к которым может быть осуществлен посредством компьютерной системы общего назначения или специализированной. Машиночитаемые носители информации, которые хранят исполняемые компьютером инструкции, являются физическими запоминающими носителями информации. Машиночитаемые носители информации, которые несут исполняемые компьютером инструкции является средствами передачи. Таким образом, в качестве примера, а не ограничения, варианты осуществления изобретения могут содержать, по меньшей мере, два совершенно разных вида машиночитаемых носителей информации: компьютерные запоминающие носители информации и средства передачи.

[0019] Компьютерные запоминающие носители информации включают в себя RAM, ROM, EEPROM, CD-ROM или другое запоминающее устройство на оптическом диске, запоминающее устройство на магнитном диске или другие магнитные запоминающие устройства, или любой другой вещественный носитель информации, который может быть использован, чтобы хранить требуемые средства программного кода в форме исполняемых компьютером инструкций или структур данных, и доступ к которым может быть осуществлен посредством компьютера общего назначения или специализированного.

[0020] «Сеть» определяется в качестве одной или более линий передачи данных, которые обеспечивают транспортировку электронных данных между компьютерными системами и/или модулями и/или другими электронными устройствами. Когда информация переносится или предоставляется через сеть или другое соединение связи (любое из соединенного проводами, беспроводного, или сочетания из соединенного проводами или беспроводного) компьютеру, компьютер должным образом рассматривает соединение в качестве средства передачи. Средства передачи могут включать в себя сеть и/или линии передачи данных, которые могут быть использованы для переноса требуемых средств программного кода в форме исполняемых компьютером инструкций или структур данных, и доступ к которым может быть осуществлен посредством компьютера общего назначения или специализированного. Сочетания вышеупомянутого также должны быть включены в объем машиночитаемых носителей информации.

[0021] Далее, по достижению различных компонентов компьютерной системы, средства программного кода в форме исполняемых компьютером инструкций или структур данных могут быть автоматически перенесены из средств передачи на компьютерные запоминающие носители информации (или наоборот). Например, исполняемые компьютером инструкции или структуры данных, принятые через сеть или линию передачи данных, могут быть буферизованы в RAM внутри модуля сетевого интерфейса (например, «NIC»), и затем со временем перенесены в компьютерную системную RAM и/или в менее энергозависимые компьютерные запоминающие носители информации в компьютерной системе. Таким образом, должно быть понятно, что компьютерные запоминающие носители информации могут быть включены в компоненты компьютерной системы, которые также (или даже в первую очередь) используют средства передачи.

[0022] Исполняемые компьютером инструкции содержат, например, инструкции и данные, которые, когда исполняются на процессоре, предписывают компьютеру общего назначения, специализированному компьютеру, или специализированному устройству обработки выполнять некоторую функцию или группу функций. Исполняемые компьютером инструкции могут быть, например, двоичным кодом, инструкциями промежуточного формата, как, например, на языке ассемблера, или даже исходным кодом. Несмотря на то, что предмет изобретения был описан языком, характерным для структурных признаков и/или методологических действий, следует понимать, что предмет изобретения, определяемый в прилагаемой формуле изобретения, не обязательно ограничен описанными признаками или действиями, описанными выше. Наоборот, описанные признаки и действия раскрываются в качестве примерных форм реализации формулы изобретения.

[0023] Специалистам в области техники следует иметь в виду, что изобретение может быть реализовано на практике в сетевых вычислительных средах с многими типами конфигураций компьютерной системы, включая, персональные компьютеры, настольные компьютеры, компьютеры класса лэптоп, процессоры сообщений, переносные устройства, многопроцессорные системы, основанную на микропроцессоре или программируемую потребительскую электронику, сетевые PC, миникомпьютеры, компьютеры класса мэйнфрейм, мобильные телефоны, PDA, пейджеры, маршрутизаторы, коммутаторы, и подобное. Изобретение также может быть реализовано на практике в средах распределенной системы, где задачи выполняют как локальные, так и удаленные компьютерные системы, которые связаны (посредством любых из соединенных проводами линий передачи данных, беспроводных линий передачи данных, или посредством сочетания соединенных проводами и беспроводных линий передачи данных) посредством сети. В среде распределенной системы, программные модули могут быть расположены как в локальных, так и удаленных запоминающих устройствах памяти.

[0024] Фигура 2 абстрактно иллюстрирует среду 200, в которой участок 201A холста 201 отображается в отображаемой зоне 210 дисплея, а участок 201B холста 201 не отображается в отображаемой зоне 210 дисплея. В качестве примера, дисплей может быть, например, дисплеем 112 вычислительной системы 100 с Фигуры 1. Тем не менее, дисплей 200 может в качестве альтернативы быть окном внутри дисплея 112, так что не занимать всю зону дисплея 112. Холст 201 расширяется в расширяемом направлении 221 вдоль одного расширяемого измерения 222. Например, на Фигуре 2, расширяемое направление 221 является направлением направо, а расширяемым измерением 222 является горизонтальное измерение.

[0025] В некоторых вариантах осуществления, расширяемое измерение 222 холста 201 может быть конфигурируемым как вертикальное или горизонтальное в соответствии со вкусами пользователя. В других случаях, ограничения дисплея 210 или контейнер могут ограничивать расширяемое измерение 222 горизонтальным измерением, или вертикальным измерением. Также, расширяемое направление 221 может быть конфигурируемым. Например, если расширяемое измерение 222 является вертикальным, пользователь может конфигурировать холст, чтобы он расширялся вниз, или вверх, в соответствии с предпочтениями пользователя. Если расширяемое измерение 222 является горизонтальным (как в случае на Фигуре 2), пользователь может конфигурировать холст, чтобы он расширялся влево, или вправо (как в случае Фигуры 2), в соответствии с предпочтениями пользователя.

[0026] Холст 201 иллюстрируется как включающий в себя многочисленные выбираемые элементы 202. Например, выбираемые элементы 202 в данном конкретном случае иллюстрируются как включающие в себя выбираемые элементы с 202A по 202F. Некоторые из выбираемых элементов 202A и 202B находятся внутри отображаемой зоны 201A холста 201, а некоторые из выбираемых элементов с 202D по 202А находятся в неотображаемой зоне 201B холста 201. Один из выбираемых элементов 202C иллюстрируется как простирающийся за границу между отображаемым участком 201A и неотображаемым участком 201B холста 201. Далее, участок холста, который содержит элементы (выбираемые или иные) будет именоваться «наполненным участком» холста 201. Выбираемый элемент также может включать в себя навигационные элементы управления.

[0027] Когда наполненная часть холста 201 слишком большая, чтобы отображаться полностью за раз, интерфейс пользователя может иметь механизм панорамирования, который разрешает пользователю панорамировать холст 201 вдоль расширяемого измерения. Два из выбираемых элементов 202B и 202E иллюстрируются как обладающие большей величиной в измерении ортогональном к расширяемому направлению (далее «ортогональное направление»). На Фигуре 2, ортогональное направление является вертикальным направлением, представленным посредством двунаправленной стрелки 223. Когда конкретный элемент имеет большую величину в ортогональном направлении, чем дисплей способен визуализировать за раз, сам по себе конкретный элемент может являться с возможностью панорамирования в ортогональном измерении.

[0028] В соответствии с описываемыми в данном документе принципами, после того, как выбирающий элемент управления (такой как курсор мыши) ассоциируется с выбираемым элементом (как например, посредством нажатия левой кнопки мыши у мыши, в то время как курсор мыши отображается поверх выбираемого элемента), механизм обнаружения панорамирования различает жест панорамирования холста и жест выбора элемента посредством последующего взаимодействия с выбираемым элементом. Например, на холсте 201, возможно пользователь знает по опыту о возможности панорамировать холст посредством перетаскивания холста 201 вдоль расширяемого измерения 222. Несмотря на это, на всем протяжении наполненного участка холста 201 присутствуют выбираемые элементы 202. Механизм обнаружения панорамирования позволяет пользователю панорамировать холст 201 посредством активации выбирающего элемента управления на любом участке холста 201, даже если данный участок бывает занят выбираемым элементом. Следовательно, если пользователь желает панорамировать, пользователю не нужно беспокоиться о том, чтобы избегать выбора элементов. Вместо этого, пользователь может предоставлять естественный жест панорамирования на любом участке холста. С другой стороны, если пользователь желает выбрать конкретный выбираемый элемент, пользователь предоставляет жест выбора, в то время как выбирающий элемент управления ассоциирован с этим конкретным выбираемым элементом.

[0029] Дополнительно, после того, как выбирающий элемент управления (такой как курсор мыши) ассоциируется с ортогонально прокручиваемым элементом, который является прокручиваемым перпендикулярно расширяемому направлению холста, механизм обнаружения панорамирования различает жест панорамирования холста и жест прокрутки элемента. Например, на холсте 201, возможно пользователь знает по опыту о возможности панорамировать холст посредством перетаскивания холста 201 вдоль расширяемого измерения 222. Несмотря на это, на всем протяжении наполненного участка холста 201 присутствуют ортогонально прокручиваемые элементы 202B и 202E. Механизм обнаружения панорамирования различает намерение панорамировать холст 201 в расширяемом направлении, и намерение прокрутить ортогонально прокручиваемый элемент 202B или 202E, ассоциированный с выбирающим элементом управления. Кроме того, в данном случае, если выбирающий элемент управления ассоциирован с выбираемым элементом внутри ортогонально прокручиваемого элемента, управление панорамированием различает намерения панорамировать холст в расширяемом измерении, прокрутить ортогонально прокручиваемый элемент в ортогональном измерении, или выбрать выбираемый элемент.

[0030] Фигура 3 иллюстрирует поддерживающую архитектуру 300 для интерфейса 301 пользователя. Например, интерфейс 301 пользователя является примером интерфейса 200 пользователя с Фигуры 2. Поддерживающая архитектура 300 иллюстрируется как включающая в себя выбирающий элемент 311 управления, который выполнен с возможностью выбора любых из выбираемых элементов внутри холста. Механизм 312 обнаружения панорамирования может быть использован, чтобы различать жест панорамирования, жест прокрутки ортогонально прокручиваемого элемента, и жест выбора элемента. Модуль 321 активации может быть использован, чтобы отвечать на жест выбора посредством выбора соответствующего выбираемого элемента. Модуль 322 панорамирования может быть использован для панорамирования холста в ответ на обнаружение механизмом 312 обнаружения панорамирования жеста панорамирования и/или прокручивать ортогонально прокручиваемый элемент в ответ на жест прокрутки ортогонально прокручиваемого элемента.

[0031] Например, предположим, что выбирающий элемент управления находится поверх выбираемого элемента 202A на холсте 201, когда активируется выбирающий элемент управления. В зависимости от перемещения выбирающего элемента управления во время данной активации, пользователь может предоставлять жест панорамирования холста, если пользователь желает осуществить панорамирование холста 201 вдоль расширяемого измерения 222, или пользователь может предоставить жест выбора элемента, если пользователь желает выбрать выбираемый элемент 202A.

[0032] Как упомянуто выше, существует еще больше возможностей для намерения пользователя, если выбирающий элемент управления находится поверх выбираемого элемента 202B на холсте 201, когда активируется выбирающий элемент управления. В данном случае, в зависимости от перемещения выбирающего элемента управления во время данной активации, пользователь может дополнительно предоставлять жест ортогонального панорамирования (также именуемый в данном документе жестом ортогональной прокрутки), если пользователь желает панорамировать выбираемый элемент 202B в ортогональном направлении. Данная опция служит в дополнение к возможности жеста панорамирования холста, если пользователь желает панорамировать холст вдоль расширяемого измерения 222, и жесту выбора элемента, если пользователь желает выбрать выбираемый элемент 202B.

[0033] Обращаясь к Фигуре 3, механизм 312 обнаружения панорамирования может быть использован, чтобы различать жест выбора элемента, жест панорамирования холста, и жест ортогонального панорамирования, когда выбирающий элемент 311 управления ассоциирован с выбираемым элементом. Если механизм 312 обнаружения панорамирования обнаруживает жест выбора элемента, модуль 321 активации может быть использован, чтобы отвечать на жест выбора посредством выбора соответствующего выбираемого элемента. Если механизм 312 обнаружения панорамирования обнаруживает жест панорамирования холста, модуль 322 панорамирования может быть использован, чтобы осуществлять панорамирование в расширяемом измерении. Если механизм 312 обнаружения панорамирования обнаруживает жест ортогонального панорамирования, модуль 322 панорамирования может быть использован, чтобы панорамировать выбираемый элемент в ортогональном измерении.

[0034] Механизм 312 обнаружения панорамирования может работать одинаковым образом, чтобы обнаруживать жест панорамирования холста и жест выбора элемента безотносительно того, какие из выбираемых элементов ассоциируются с выбирающим элементом управления. Кроме того, механизм 312 обнаружения панорамирования может работать, чтобы панорамировать холст в расширяемом измерении, когда выбирающий элемент управления активируется и ассоциируется с зоной холста, которая не ассоциирована с любым из выбираемых элементов 202. Соответственно, принципы, описанные в данном документе, позволяют пользователю панорамировать холст 201 посредством простой операции перетаскивания, не беспокоясь о том, чтобы избегать выбираемых элементов хватаясь холста с помощью выбирающего элемента управления. Кроме того, когда пользователь желает выбрать выбираемый элемент, пользователь может использовать точно такой же выбирающий элемент управления, чтобы также сделать это.

[0035] Фигура 4 иллюстрирует много более подробный интерфейс 400 пользователя, который включает в себя холст, наполненный большим количеством выбираемых элементов. Лишь немногие выбираемые элементы помечены, так как они более актуальны применительно к рассмотрению в данном документе. На Фигуре 4, пользователь имеет выбирающий элемент управления в форме указателя 401. Указатель 401 активируется в позиции, иллюстрируемой на Фигуре 4, так что указатель 401 ассоциируется с выбираемым элементом 402A управления в начале жеста либо панорамирования, либо выбора (в зависимости от перемещения указателя 401 после, в то время как выбран).

[0036] В одном варианте осуществления, механизм 312 обнаружения панорамирования устраняет неоднозначность между жестом выбора элемента (и жестом взаимодействия, так как части могут иметь горячие точки) и жестом панорамирования холста посредством анализа событий (например, событий нажатой кнопки мыши, отпущенной кнопки мыши и перемещения мыши) указателя (например, мыши). Если пользователь нажимает кнопку мыши и затем осуществляет перемещение более чем на некоторое количество (X) пикселей (например, 4 пикселя), тогда механизм обнаружения панорамирования обнаруживает жест панорамирования, вместо жеста выбора элемента. Если пользователь нажимает кнопку мыши, затем отпускает кнопку мыши, без перемещения более чем на X пикселей, механизм 312 обнаружения панорамирования идентифицирует жест выбора элемента. Область, определяемая X пикселями, может именоваться «ромбом начала-панорамирования», зоной, с которой может взаимодействовать пользователь, чтобы выразить свое намерение, даже не требуя от него познавательного признания того, что он выражает данное намерение.

[0037] Например, если выбирающий элемент управления остается в области начала панорамирования, до тех пор, пока выбирающий элемент управления более не активирован, механизм обнаружения панорамирования идентифицирует жест выбора элемента. С другой стороны, если выбирающий элемент управления выходит за пределы области начала панорамирования в то время как выбирающий элемент управления все еще активирован, механизм обнаружения панорамирования идентифицирует, по меньшей мере, одно из (и потенциально оба из) жеста ортогонального панорамирования и жеста панорамирования холста в соответствии с перемещением выбирающего элемента управления. При первом выходе выбирающего элемента управления за пределы области начала панорамирования, в то время как элемент управления выбора остается активированным, жест выбора более невозможен. Кроме того, если выбирающий элемент управления был активирован поверх ортогонально прокручиваемого элемента, механизм выбора панорамирования различает жест панорамирования холста или жест ортогональной прокрутки на основании того, где выбирающий элемент управления выходит из области начала панорамирования.

[0038] Для того, чтобы учесть пользователей с разными навыками владения мышью и касания, размеры ромба начала-панорамирования могут быть отрегулированы посредством простого изменения ширины и высоты ромба начала-панорамирования. Кроме того, ромб начала-панорамирования может быть отрегулирован, чтобы отшлифовать основные навыки панорамирования. Когда пользователи панорамируют холст, они часто не перемещают их мышь по совершенно прямой линии. Наоборот, они осуществляют панорамирование по дуге. Данная дуга более преувеличена при панорамировании влево и вправо, так как расстояние перемещения часто более далекое.

[0039] Фигура 5 иллюстрирует интерфейс 500 пользователя, который подобен интерфейсу 400 пользователя с Фигуры 4, за исключением того, что иллюстрируется дуга, ассоциированная с перемещением указателя. Например, указатель непрерывно перемещался из его исходной позиции в позицию 501, 502, 503, 504 и 505 в последовательности, чтобы создать перемещение 510 перетаскивания, которое включает в себя ортогональное падение в или вблизи позиции начала панорамирования указателя. Если данная дуга не учитывается, ошибочно может предполагаться намерение осуществить ортогональную прокрутку. Следовательно, ортогонально прокручиваемый элемент может незначительно ортогонально прокрутиться перед тем, как начнется панорамирование холста в расширяемом измерении. Это может понизить ощущение пользователя в отношении качества восприятия.

[0040] Для того чтобы компенсировать данную тенденцию пользователя, механизм 312 обнаружения панорамирования может использовать область начала панорамирования, которая является ромбом, который является вытянутым, а не квадратным. В иллюстрируемом случае, область начала панорамирования имеет больший размах в ортогональном измерении, чем в расширяемом измерении холста. Более конкретно, в случае на Фигуре 5, область начала панорамирования выше, чем шире. Это означает, что пользователь должен осуществлять панорамирование чуть более ортогонально, чем они будут это делать в расширяемом измерении, перед тем, как механизм обнаружения панорамирования обнаружит жест ортогонального панорамирования. Посредством этого, значительно сокращается шанс того, что пользователь увидит ортогональное панорамирование выбираемого элемента, когда пользователь в действительности намерен бегло просмотреть холст в расширяемом измерении.

[0041] Фигура 6 иллюстрирует интерфейс 600 пользователя, в котором примерная область 601 начала панорамирования иллюстрируется в отношении позиции 401 начала-панорамирования. В данном варианте осуществления, горизонтальная полуширина области ромба начала-панорамирования составляет 3 пикселя, а вертикальная полувысота области ромба начала-панорамирования составляет 6 пикселей. Тем не менее, значения 3 пикселя и 6 пикселей служат лишь в целях иллюстрации.

[0042] Фигура 7 иллюстрирует блок-схему последовательности операций способа 700 для разрешения взаимодействия пользователя с холстом, который расширяется в расширяемом измерении в интерфейсе пользователя, и который наполнен выбираемыми элементами. Способ 700 инициируется по обнаружению активации выбирающего элемента управления (событие 701). Например, пользователь может активировать указатель (например, нажимать левую кнопку мыши).

[0043] Далее, способ 700 определяет область начала панорамирования (действие 702). По существу, область начала панорамирования окружает зону интерфейса пользователя, где пользователь сначала активирует элемент управления выбора в действии 701. Точная форма области начала панорамирования будет определять, решает или нет механизм обнаружения панорамирования, что пользователь намеревается выбрать элемент (если выбирающий элемент управления остается внутри зоны начала панорамирования в то время, как выбирающий элемент управления является активным), или намеревается панорамировать холст или ортогонально прокручиваемого элемента (если выбирающий элемент управления выходит за зону начала панорамирования в любой точке, в то время как активирован). Соответственно, форма зоны начала панорамирования должна быть тщательно выбрана с тем, чтобы сократить ложные обнаружения намерения. В некоторых вариантах осуществления, форма зоны начала панорамирования может варьироваться пользователем.

[0044] Кроме того, возможно вычислительная система может обнаруживать, когда она ошибочно обнаружила намерение для заданного пользователя, и регулировать 1) соответственно форму и/или размер зоны начала панорамирования, и/или 2) размещение зоны начала панорамирования вокруг начальной точки, в которой начально был активирован элемент управления активации. Например, возможно зона начала панорамирования изначально является ромбом, у которого начальная точка активации находится в его центре. Тем не менее, при последующем отслеживании поведения пользователя, месяц спустя, система может регулировать зону начала панорамирования, чтобы она имела другую форму (возможно незначительно скругленную на верхушках, или возможно незначительно выпуклую с одного конца), и может иметь возможно смещенную зону начала панорамирования незначительно вправо по отношению к начальной точке активации. Вычислительная система может, таким образом, экспериментировать, чтобы улучшить предсказание намерения пользователя, исходя из пользователя.

[0045] В любом случае, в то время пока активен элемент управления выбора, пользователь может делать любую одну из некоторого количества вещей. Механизм обнаружения панорамирования активно отслеживает, выходит ли элемент управления выбора за область начала панорамирования (блок 703 принятия решения) и деактивирован или нет элемент управления выбора (блок принятия решения 704). Эти два решения могут возникать довольно часто и, следовательно, могут быть рассмотрены в качестве единого консолидированного решения. В любое заданное время, если элемент управления выбора все еще активирован («Нет» в блоке 704 принятия решения) и элемент управления выбора не выходит за область начала панорамирования («Нет» в блоке 703 принятия решения), тогда отсутствует существенное изменение в состоянии способа 700. Тем не менее, если элемент управления выбора деактивирован («Да» в блоке 704 принятия решения) в то время, как элемент управления выбора все еще не вышел из области начала панорамирования (все еще «Нет» в блоке 703 принятия решения), механизм обнаружения панорамирования определяет, был или нет элемент управления выбора активирован на выбираемом элементе управления внутри интерфейса пользователя (блок 705 принятия решения). Если элемент управления выбора был активирован на выбираемом элементе («Да» в блоке 705 принятия решения), тогда механизм обнаружения панорамирования вызывает активацию выбираемого элемента (действие 706). В противном случае, если элемент управления выбора был активирован в зоне интерфейса пользователя, которая не является выбираемой («Нет» в блоке 705 принятия решения), тогда способ 700 просто завершается (действие 707). Например, возможно был лишь случайный щелчок мышью.

[0046] С другой стороны, если в то время, пока еще активирован элемент управления выбора (из действия 701), и механизм обнаружения панорамирования обнаруживает, что элемент управления выбора вышел из области начала панорамирования («Да» в блоке 703 принятия решения), тогда происходит панорамирование (действие 708). Например, холст может быть панорамирован, как указано элементом управления выбора. В качестве другого более сложного примера, если пользователь активировал механизм выбора на ортогонально прокручиваемом элементе, механизм обнаружения панорамирования может либо осуществлять панорамирование холста, либо прокручивать ортогонально прокручиваемый элемент (или возможно оба действия), в зависимости от того, где элемент управления выбора вышел из области начала панорамирования. Данное панорамирование (действие 708) продолжается, как направленное любым перемещением в элементе управления выбора, до тех пор, пока элемент управления выбора продолжает быть активированным («Нет» в блоке 709 принятия решения). Тем не менее, когда элемент управления выбора деактивируется («Да» в блоке 709 принятия решения), способ 700 завершается.

[0047] Следует отметить, что нет необходимости в отслеживании области начала панорамирования, как только механизм обнаружения панорамирования определяет, что элемент управления выбора вышел за область начала панорамирования. Область начала панорамирования будет, следовательно, генерироваться всякий раз, когда активируется элемент управления выбора. При некоторых обстоятельствах, форма области начала панорамирования может отличаться в соответствии с обстоятельствами. Например, как описано выше, область начала панорамирования может иметь разную форму, размер, и позицию относительно точки активации, в зависимости от пользователя. Тем не менее, область начала панорамирования также может отличаться из-за любого одного или более из следующих обстоятельств: 1) является ли холст уже визуализирующим весь наполненный участок холста; 2) панорамирован ли уже холст вплоть до конца или другого наполненного участка холста в одном пределе расширяемого измерения; 3) был ли выбираемый элемент управления активирован поверх выбираемого элемента, 4) был ли выбираемый элемент управления активирован поверх ортогонально прокручиваемого элемента, и если так, то прокрученная позиция ортогонально прокручиваемого элемента в ортогональном измерении, и т.д.

[0048] В одном примере, выбор выбираемого элемента управления приводит к созданию дополнительного выбираемого элемента управления. Например, выбор выбираемого элемента управления может создавать новый элемент интерфейса пользователя, который может быть добавлен в наполненный участок холста в расширяемом направлении, и который сам по себе может включать в себя один или более выбираемых элементов. Такие дополнительные выбираемые элементы в новом элементе могут быть дополнительно выбраны, чтобы добавить еще больше элементов интерфейса пользователя в наполненный участок холста.

[0049] Например, на Фигуре 4, холст исходно может включать в себя только зону 410 избранного, которая включает в себя многочисленные выбираемые элементы, включая выбираемый элемент 411. Когда выбирается выбираемый элемент 411, появляется новый элемент 420 интерфейса пользователя. Элемент интерфейса пользователя может рассматриваться в качестве части (или сегмента) холста которая, в рамках заданных размеров в расширяемом направлении холста, расширяется вдоль всего или по существу всего холста в ортогональном направлении. Например, если расширяемое направление является горизонтальным, как в случае на Фигуре 4, колонка является вертикальным срезом холста. Сам будучи выбираемым элементом, элемент 420 интерфейса пользователя может дополнительно включать в себя выбираемые элементы, такие как выбираемый элемент 421 (и 402A упомянутый ранее). Когда выбирается выбираемый элемент 421, появляется дополнительный элемент 430 интерфейса пользователя (например, сегмент) и сам будучи выбираемым элементом, может дополнительно включать в себя выбираемые элементы, такие как выбираемый элемент 431. Когда выбирается выбираемый элемент 431, появляется дополнительный элемент 440 (например, сегмент) интерфейса пользователя и сам будучи выбираемым элементом может дополнительно включать в себя выбираемые элементы, такие как выбираемый элемент 441. Это может продолжаться, чтобы позволить пользователю участвовать в маршруте, наращивая холст из истории, показывающей путь, пройденный для того, чтобы попасть туда, где пользователь находится в настоящее время. Несмотря на то, что маршрут может начинаться образом, который хорошо помещается в отображаемой области, по мере того, как маршрут добавляет дополнительные элементы интерфейса пользователя, и расширяется наполненная зона холста, маршрут может быстро превысить возможности дисплея по одновременной визуализации.

[0050] Настоящее изобретение может быть воплощено в других конкретных формах, не отступая от его сущности или неотъемлемых характеристик. Описанные варианты осуществления должны рассматриваться во всех отношениях только в качестве иллюстративных, а не ограничивающих. Вследствие этого, объем изобретения указывается прилагаемой формулой изобретения, а не вышеприведенным описанием. Все изменения, которые входят в значение и диапазон эквивалентности формулы изобретения, должны быть включены в ее объем.

Изобретение относится к интерфейсам пользователя. Технический результат заключается в повышении скорости обработки данных. Способ содержит: действие обнаружения того, что выбирающий элемент управления ассоциируется с конкретным выбираемым элементом из множества выбираемых элементов на холсте; и действие различения между жестом панорамирования холста и жестом выбора элемента, когда выбирающий элемент управления все еще ассоциирован с этим конкретным выбираемым элементом из множества выбираемых элементов, при этом действие различения дает результатом идентификацию жеста выбора элемента, причем способ дополнительно содержит действие выбора данного конкретного выбираемого элемента. 2 н. и 6 з.п. ф-лы, 7 ил.

1. Машиночитаемый носитель информации, на котором имеются машиноисполняемые инструкции, которые структурированы таким образом, что при их исполнении одним или более процессорами вычислительной системы предписывают вычислительной системе исполнять программу пользовательского интерфейса, которая выполнена с возможностью отображения пользовательского интерфейса на дисплее вычислительной системы, при этом пользовательский интерфейс содержит:

холст, который протягивается вдоль расширяемого измерения в пользовательском интерфейсе и который может быть наполнен множеством выбираемых элементов;

механизм обнаружения панорамирования, выполненный с возможностью различения между жестом панорамирования холста и жестом выбора элемента, когда выбирающий элемент управления ассоциируется с конкретным выбираемым элементом из множества выбираемых элементов, при этом

программа пользовательского интерфейса реагирует на жест панорамирования холста панорамированием холста вдоль расширяемого измерения,

программа пользовательского интерфейса реагирует на жест выбора элемента выбором конкретного выбираемого элемента, таким образом ассоциируемого с выбирающим элементом управления, при этом в качестве реакции на действие выбора этого конкретного выбираемого элемента дополнительно выполняется следующее:

действие генерирования первого сегмента на холсте, причем первый сегмент включает в себя множественные выбираемые элементы, при этом каждый из, по меньшей мере, некоторых из этих множественных выбираемых элементов имеет по меньшей мере один соответствующий сегмент, так что если соответствующий элемент выбирается, то соответствующий сегмент появляется на холсте в качестве второго сегмента на холсте, причем второй сегмент является смежным с первым сегментом в расширяемом направлении холста.

2. Машиночитаемый носитель информации по п.1, при этом упомянутый конкретный выбираемый элемент находится внутри ортогонально панорамируемого элемента, помещенного внутри холста, причем этот ортогонально панорамируемый элемент является панорамируемым в ортогональном измерении, которое является ортогональным расширяемому измерению холста.

3. Машиночитаемый носитель информации по п.1, при этом, если выбирающий элемент управления выходит за пределы области начала панорамирования в то время, как выбирающий элемент управления все еще активирован, механизм обнаружения панорамирования идентифицирует как жест ортогонального панорамирования, так и жест панорамирования холста.

4. Машиночитаемый носитель информации по п.1, при этом механизм обнаружения панорамирования различает между жестом панорамирования холста и жестом выбора элемента, используя область начала панорамирования, которая определяется по отношению к позиции на холсте выбирающего элемента управления, когда выбирающий элемент управления активируется,

так что если выбирающий элемент управления остается внутри области начала панорамирования до тех пор, пока выбирающий элемент управления более не активирован, механизм обнаружения панорамирования идентифицирует жест выбора элемента, и

так что если выбирающий элемент управления выходит за пределы области начала панорамирования, в то время как выбирающий элемент управления все еще активирован, механизм обнаружения панорамирования идентифицирует жест панорамирования холста.

5. Машиночитаемый носитель информации по п.1, при этом механизм обнаружения панорамирования работает одинаковым образом, чтобы обнаруживать жест панорамирования холста и жест выбора элемента, безотносительно того, какие из множества выбираемых элементов ассоциируются с выбирающим элементом управления.

6. Машиночитаемый носитель информации по п.1, при этом механизм обнаружения панорамирования работает, чтобы панорамировать холст, когда выбирающий элемент управления активируется и ассоциируется с холстом в зоне, которая не ассоциирована с каким-либо из множества выбираемых элементов.

7. Способ разрешения взаимодействия пользователя с холстом, который протягивается в расширяемом измерении в пользовательском интерфейсе и который наполняется множеством выбираемых элементов, при этом способ содержит:

действие обнаружения того, что выбирающий элемент управления ассоциируется с конкретным выбираемым элементом из множества выбираемых элементов на холсте; и

действие различения между жестом панорамирования холста и жестом выбора элемента, когда выбирающий элемент управления все еще ассоциирован с этим конкретным выбираемым элементом из множества выбираемых элементов, при этом действие различения дает результатом идентификацию жеста выбора элемента, причем способ дополнительно содержит действие выбора данного конкретного выбираемого элемента,

при этом способ дополнительно содержит следующее в качестве реакции на действие выбора конкретного выбираемого элемента:

действие генерирования первого сегмента на холсте, при этом первый сегмент включает в себя множественные выбираемые элементы, причем каждый из, по меньшей мере, некоторых из этих множественных выбираемых элементов имеет по меньшей мере один соответствующий сегмент, так что если соответствующий элемент выбирается, соответствующий сегмент появляется на холсте в качестве второго сегмента на холсте, при этом второй сегмент является смежным с первым сегментом в расширяемом направлении холста.

8. Способ по п.7, в котором действие различения дает результатом идентификацию жеста панорамирования холста, при этом способ дополнительно содержит действие панорамирования холста в расширяемом измерении в соответствии с перемещением жеста панорамирования холста в расширяемом измерении.