Программа cortana для чего нужна

Windows 10 по 10. Выпуск #3. Использование Кортаны для взаимодействия с пользователями

В этом выпуске нашей серии статей Windows 10 по 10 мы расскажем, о том, как расширить опыт взаимодействия с вашим приложением в Windows 10 на те моменты, когда приложение даже не запущено. Тема прошлой статьи, — живые плитки и уведомления, — раскрывала один из возможных путей, сегодня мы посмотрим, как для этой задачи использовать Кортану, персональную помощницу в Windows 10. В качестве основы для приводимых фрагментов кода мы будем использовать пример AdventureWorks, доступный на GitHub.

В данной статье, мы постараемся разобраться, что же собой представляет Кортана, как сделать так, чтобы она поддержала осмысленное взаимодействие с вашими пользователями, что необходимо сделать для интеграции Кортаны в приложение, и далее рассмотрим два способа (из многих), как ваше приложение может взаимодействовать с пользователями в зависимости от сценария.

Что собой представляет Кортана?

Одна из самых интересных возможностей Windows 10 – это персональная помощница Кортана, ранее доступная в Windows Phone. Кортана – это ключевой элемент для общения с Windows 10 на естественном языке. С помощью Кортаны пользователи могут взаимодействовать с Windows (как с самой ОС, так и с вашими приложениями), используя привычный голосовой способ общения с другими людьми.

К примеру, подумайте о вопросах, ответы на которые может дать только ваше приложение и которые человек мог бы задать голосом Кортане: «когда моя следующая поездка?», «найди радиостанцию», «доступен ли Джек?». В свою очередь ваше приложение может ответить на такие вопросы, предоставив ответ Кортане для произнесения и отображения.

Или представьте себе задачи, которые человек мог бы попросить Кортану сделать в контексте вашего приложения: «отмени мою поездку в Лондон», «запомни эту радиостанцию», «напиши Джеку, что я буду позже».

Голосовые команды могут предоставить быстрый доступ к информации внутри приложения. Это своего рода глубокие ссылки в вашем приложении. Также как вы сегодня создаете плитки, чтобы предоставить быстрый доступ к содержимому вашего приложения, вы можете использовать голосовые команды, как быстрый способ «заглянуть» внутрь приложения. И аналогично тому, как вы делаете возможным закрепить ближайшую поездку, созданную в приложении, на экране Пуск, вы также можете разрешить пользователю использовать голосовую команду для Кортаны для доступа к той же самой поездке. Такая возможность сделает ваших пользователей более продуктивными, а взаимодействие с приложением более доступным.

Расширяя Кортану, вы можете улучшить взаимодействие с вашими пользователями и порадовать их возможностью совершать действия быстрыми голосовыми командами. Впрочем, так как это статья не о пользовательских возможностях Кортаны, давайте разберемся, как с ней интегрироваться.

Хей, Кортана, давай поговорим

Так как взаимодействие с Кортаной опирается на голос, то создаваемый опыт взаимодействия должен быть наиболее приближен к естественному диалогу. На MSDN вы найдете общее руководство по дизайну для Кортаны с рекомендациями по построению опыта взаимодействия. Для достижения наилучшего результата, советуем следовать следующим принципам: эффективность, релевантность, ясность и доверие.

Заодно вам стоит подумать о локализации взаимодействия с Кортаной, особенно, если вы уже локализовали остальную часть приложения и сделали его глобально доступным. Кортана на сегодня доступна в США, Великобритании, Китае, Франции, Италии, Германии и Испании (анонс про расширение на дополнительные рынки). Локализация поможет вам побудить пользователей чаще использовать Кортану для взаимодействия с вашим приложением.

Учим Кортану, на что нужно отвечать

Кортана использует файл с определениями голосовых команд (Voice Command Definition, VCD), чтобы понять, как именно пользователь может взаимодействовать с вашим приложением, используя голос. Данный файл может быть готовым XML-файлом или генерироваться из кода (вам нужно будет заполнить набор команд в VCD-файле при первом запуске). Ниже приведен пример VCD-файла:

При активации приложения из события запуска приложения OnLaunched вам нужно вызвать метод InstallCommandSetsFromStorageFileAsync, чтобы зарегистрировать команды, которые Кортана должна распознавать. Имейте в виду, что если устройство восстанавливается из бекапа и ваше приложение переустанавливается, то голосовые команды не восстанавливаются автоматически. Чтобы убедиться, что данные с описанием голосовых команд остаются нетронутыми, вы можете инициализировать VCD-файл при каждом запуске или активации приложения. Но лучше хранить настройку, указывающую, установлен ли уже VCD-файл, и проверять именно этот параметр. Ниже простой пример кода, показывающий, как установить VCD-файл из приложения:

Добавляем динамичность

Теперь, когда вы знакомы с основами, мы можем добавить немного разнообразия во время выполнения. Ниже пример динамичного переключения VCD-файла, который нужно загрузить:

Как мое приложение будет взаимодействовать с Кортаной?

Запуск приложения

Если у вас сложная задача и вы хотите, чтобы пользователь перешел напрямую в ваше приложение, использовать для этого Кортану – отличная идея! Так как некоторые сложные задачи в реальности могут быть быстрее и аккуратнее выполнены через голосовые команды, это может действительно помочь пользователям.

Простое взаимодействие внутри Кортаны для сохранения или запроса данных

Теперь, когда к Кортане подключен ваш VCD-файл, и вы знаете, как осуществлять базовое взаимодействие, давайте посмотрим, как делать более сложные операции. К примеру, вы хотите, чтобы Кортана показала пользователю некоторые данные или наоборот их сохранила. На сайте MSDN есть подробная инструкция по настройке фоновых задач для Кортаны. Вот краткое резюме:

Ниже приведен пример фрагмента файла Package.appxmanifest:

После запуска фоновый сервис приложения имеет 0.5 секунды на вызов метода ReportSuccessAsync. Кортана использует данные, предоставленные приложением, для демонстрации и произнесения голосом ответа, указанного в VCD-файле. Если приложение тратит на возврат результата больше, чем полсекунды, Кортана вставит промежуточный экран, как показано ниже. Кортана отображает временный экран до тех пор, пока приложение не вернет результат через ReportSuccessAsync, но не более 5 секунд. Если приложение не вызвало метод ReportSuccessAsync или любой из методов VoiceCommandServiceConnection для предоставления информации Кортане, пользователь получит сообщение об ошибке и вызов сервиса будет отменен.

Вот простой пример кода для реализации IBackgroundTask в сервисе приложения:

Взаимодействие внутри Кортаны

Давайте рассмотрим подробнее один из этих сценариев: неопределенность. Иногда случается так, что у вашего приложения есть несколько вариантов, которые оно может вернуть. В таких ситуациях вам нужно разрешить неуверенность, что же делать дальше. Например, если пользователь выбирал музыку и нужно было решить, что играть дальше: ABBA, Nickelback или White Snake, Кортана может помочь сделать выбор. Фрагмент кода ниже из примера Adventure Works показывает, как разрешить появившуюся в рамках сервиса приложения неопределенность:

Подводим итоги

Мы надеемся, что теперь вы лучше понимаете, насколько легко в ваше приложение можно добавить интеграцию с Кортаной и тем самым улучшить опыт взаимодействия для ваших пользователей. От простого запуска приложения и вплоть до сложных моделей взаимодействия даже без запуска приложения – во всех случаях Кортана действительно может оказаться полезной. Чтобы воспользоваться преимуществами интеграции с Кортаной, вы можете начать с самого простого – добавить новый способ работы с глубокими ссылками в вашем приложении.

Если вы чувствуете, что работа с Кортаной на практике может добавить ценность вашему приложению, не стесняйтесь это реализовать. Как только вы обновите свое приложение, не забудьте заявить о себе в программе DVLUP в номинации “Adding Cortana to your app”, чтобы получить очки и XP за обновление приложения. Расскажите нам, что вы сделали, через твиттер @WindowsDev с хештегом #Win10x10 – мы будем рады узнать, что разработчики создают под Windows.

Источник

Cortana в Windows 10: что это такое?

Cortana – слово, знакомое не каждому. Мы привыкли к искусственному интеллекту на смартфонах и компьютерах – это Алиса или Сири, ассистент от Гугла или Амазон. Но в этом обзоре мы обсудим помощник, который был создан разработчиком Майкрософт – расскажем, что он из себя представляет, какими возможностями и особенностями обладает, как его включить и использовать.

Определение и обзор функций

Сначала дадим подробное определение, что это за приложение – Кортана. Кортана — это встроенный голосовой помощник с навыками искусственного интеллекта, который способен выполнять базовые команды пользователя и избавить его от рутинной работы.

Программа появилась в десятой версии операционной системы, она встраивается в оболочку по умолчанию. К сожалению, пользователи не могут запустить Кортану Windows 10 на русском языке – но некоторые ухищрения позволяют получить доступ к оригинальной английской версии.

Недоступность родного языка связана с поисковой системой, которая лежит в основе работы помощника – она не адаптирована под определенные страны.

Давайте обсудим, какие возможности ассистент может предложить пользователям:

Отметим выдающуюся особенность Cortana – возможность воспринимать запросы на простом языке. Вам не нужно составлять сложные точные команды – естественные языковые возможности помощника позволяют упростить ввод запроса.

Вы узнали, что такое Кортана в Windows 10, рассмотрели доступные возможности ассистента. Пора поговорить о том, как активировать его работу.

Включение и использование Cortana

Так как Microsoft Cortana на русском языке не работает, вы можете выбрать один из следующих вариантов:

К сожалению, пока разработчики не реализовали возможность запустить Кортана на русском языке, планируемая дата релиза – 2020 год. Мы рекомендуем использовать самый привычный вариант и запустить ассистента на английском.

Итак, давайте разбираться, как включить Cortana Windows 10?

Вам необходимо выполнить следующую последовательность действий:

Если вы уже авторизовались ранее, пропустите этот пункт и переходите к активации;

Отметим, что если вы не нашли английский язык в меню языковых пакетов, загрузите его из магазина разработчика операционной системы.

Давайте кратко рассмотрим, как работает Кортана, после того, как вы смогли ее активировать.

А вот и небольшой полезный совет – два сочетания быстрых клавиш:

Поговорили о том, как использовать помощника – пора разбираться, как отключить Cortana. А еще, вы можете прочитать про другой малоизвестный в России голосовой помощник Alexa.

Отключение и удаление

Отключение голосового помощника – процесс несложный, вам не понадобится сложная настройка. Просто следуйте нашей инструкции:

Ещё один интересный способ удаления вы найдете в видео:

Вы узнали, как полностью отключить Cortana в Windows 10 – как видите, это действительно несложно. Только не забудьте запустить процессы от имени администратора. А вот удалить искусственный интеллект полностью будет сложнее – программа встроена в оболочку операционной системы автоматически.

Прежде чем разбираться, как полностью удалить Cortana в Windows 10, стоит отметить, что это действие является безвозвратным. Восстановить помощник можно будет только после переустановки операционной системы.

Вы узнали, что это за программа – Cortana в Windows 10, какими особенностями обладает и зачем вообще необходима. Изучайте обзор, активируйте работу помощника и упрощайте рабочие процессы во много раз! Правда, не забудьте немного подтянуть английский.

Источник

Зачем нужен сервис Cortana и как умерить его любопытство?

Голосовой сервис от Microsoft пока недоступен в России. Мы познакомились с работой Cortana на примере англоязычной версии Windows и расскажем, как ограничить доступ данного инструмента к персональным данным пользователя.

Новинка, бросающаяся в глаза сразу же при загрузке Рабочего стола Windows 10, — поисковая строка, расположенная теперь рядом с кнопкой «Пуск» на Панели задач.

Только поиском она не ограничивается: при первом клике на строку вас поприветствует новая цифровая ассистентка, предоставленная компанией Microsoft, — Cortana. Подобно Siri от Apple или Google Now она должна обеспечить более удобную и персонализированную форму работы.

Супер-строка поиска

Cortana — это не просто поисковый инструмент: сервис задуман компанией Microsoft как незаменимый цифровой помощник в повседневных делах на всех устройствах.

Cortana наглядно предоставляет самую важную информацию на текущий день. Однако для этого ей нужны обширные права доступа к данным

С Cortana можно общаться посредством голоса или клавиатуры. Среди прочего она способна рассказать о погоде и новостях, напомнить о встрече или событии, причем информация предоставляется в комплексе (1).

Также по запросу помощница проигрывает музыку, открывает приложения и распознает в электронных письмах данные о забронированных билетах и отправленных пакетах. Но у всего есть своя цена: поскольку вычисления осуществляются в облаке, для использования сервиса Cortana необходимо подписать цифровую договоренность с Microsoft.

После согласия с положениями о защите персональных данных концерн получает доступ к таким сведениям, как история местоположения, контакты, данные ввода, история поиска, данные из календаря, а также из сообщений и приложений (2).

Согласие на такие условия автоматически отменяет настроенные прежде параметры конфиденциальности. Если же вы не хотите подвергать себя опасности, лучше просто не активировать помощницу, выбрав «Нет, спасибо» («No thanks»).

Как ограничить любопытство Cortana?

Впрочем, существует возможность сначала запустить сервис Cortana, а затем пошагово ограничить ему доступ к информации. Для этого нажмите на вторую иконку сверху на панели меню Cortana. В разделе «Notebook» (3) вы можете ввести личные данные, например, место работы и проживания, а также рассказать, как вы предпочитаете передвигаться — с помощью автомобиля или же общественного транспорта.

Через раздел «Notebook» можно перейти к настройкам. Здесь следует решить, будет ли Cortana реагировать на ваши голосовые команды

Чтобы настроить Lite-версию ассистента, в «Notebook» зайдите в настройки («Settings»). С помощью самого верхнего ползунка отключите Cortana (4). Теперь у вас появилась возможность активировать обычный онлайн веб-поиск.

В этом случае помимо установленных программ, настроек и локальных данных при поиске будут задействованы магазин приложений и сервис Bing (5). Если же отключить и эту опцию, останется лишь строка, посредством которой будут сканироваться только локальные программы и данные, как в Windows 7.

Даже при отключенном сервисе Cortana остается расширенный веб-поиск. Однако придется смириться с отсутствием напоминаний

Для просмотра всех встреч и напоминаний воспользуйтесь иконкой, стилизованной под лампочку (6). Нажатие на значок плюса с правом нижнем углу откроет новую запись.

На смартфонах с Windows 10 цифровая ассистентка встроена по умолчанию, а соответствующие приложения для Android и iOS должны выйти в ближайшее время.

Фото: компания-производитель

Источник

Настройка Кортана в Windows 10 и Windows 11

Что такое Кортана?

Кортана является личным помощником по производительности в Microsoft 365, помогая пользователям достичь большего с меньшими усилиями и сосредоточиться на том, что важно. Приложение Кортана в Windows 10 и Windows 11 помогает пользователям быстро получать информацию по Microsoft 365, используя введите или разговорные запросы для подключения к людям, проверки календарей, набора напоминаний, добавления задач и других.

Где Кортана доступна для использования в организации?

Ваши сотрудники могут использовать Кортана на перечисленных здесь языках. Однако большинство навыков повышения производительности в настоящее время включено только для английского языка (США), для пользователей с почтовыми ящиками в США.

Приложение Кортана в Windows 10 версии 2004 требует последнего обновления Microsoft Store для поддержки языков, кроме английского (США).

Требуемое оборудование и программное обеспечение

Кортана для успешного запуска включенного сценария в организации Windows 10 версии 1703 или более поздней версии, а также следующего программного обеспечения.

Микрофон не требуется использовать Кортана.

— Windows 10 версии 1703 (устаревшая версия Кортана)

Дополнительные сведения о различиях между Кортана в Windows 10 версии 2004 и более ранних версиях см. в Кортана ниже.Azure Active Directory (Azure AD)Хотя всем сотрудникам, Кортана требуется учетная запись Azure AD, клиент премиум-класса Azure AD не требуется.Дополнительные политики (групповая политика и управление мобильными устройствами (MDM))Существует широкий ассортимент политик, которые можно использовать для управления разными аспектами Кортаны. Большинство из этих политик ограничит возможности Кортана, но не отключит Кортана. Например, если вы отключите speech, ваши сотрудники не смогут использовать слово wake («Кортана») для активации без рук или голосовых команд, чтобы легко обратиться за помощью.

Для Windows 11 Кортана больше не прикрепяется к панели задач по умолчанию. Вы по-прежнему можете прикрепить Кортана приложение к панели задач, как и любое другое приложение. Кроме того, клавиша, запущенная Кортана (Win+C), больше не открывается Кортана.

Вход в систему с помощью Azure AD

В организации должен быть клиент Azure AD, а’ устройства должны быть соединены с Azure AD для наилучшего Кортана работы. (Пользователи также могут Кортана с учетной записью Майкрософт, но не смогут использовать корпоративную электронную почту или календарь.) Сведения о том, что такое клиент Azure AD, как присоединить устройства, а также другие сведения об обслуживании Azure AD см. в Azure Active Directory документации.

Как обрабатываются мои данные Кортана?

Кортана подход к интеграции с Microsoft 365 изменился с Windows 10 версии 2004 и более поздней версии.

Кортана версии Windows 10 версии 2004 и более поздней версии Windows 11

Кортана корпоративные службы, к которые можно получить доступ с помощью Azure AD Кортана соответствуют тем же обещаниям конфиденциальности, безопасности и соответствия требованиям, которые отражены в Терминах online Services (OST). Дополнительные дополнительные Кортана в Microsoft 365.

Как Майкрософт хранит, сохраняет, обрабатывает и использует данные клиентов в Кортана?

В таблице ниже описывается обработка данных для Кортана корпоративных служб.

Как работает слово wake (Кортана)? Если включить его, Кортана всегда прослушивать?

Слово wake было повторно включено в последней версии Кортана в Windows. Если вы на Windows 10 версии 2004, убедитесь, что вы обновили сборку 19041.329 или более поздней версии, чтобы использовать слово wake с Кортана. Для более ранних сборки можно по-прежнему щелкнуть кнопку микрофона, чтобы использовать голос Кортана.

Кортана начинается прослушивание команд или запросов только при обнаружении слова пробуждения или выборе кнопки микрофона.

Во-первых, пользователь должен включить слово пробуждения из Кортана параметров. После включения компонент Windows платформы Windows голосового помощника начнет слушать слово wake. Звук не обрабатывается с помощью распознавания речи, если только два локальных детектора слов пробуждения и серверная сторона не согласятся с высокой уверенностью в том, что это слово было услышано.

Первое решение принимается платформой Windows голосового помощника, используя оборудование, необязательно включенное в компьютер пользователя’для экономии электроэнергии. Если обнаружено слово wake, Windows будет показывать значок микрофона в подносе системы, указывающий, что приложение-помощник прослушивает.

В этот момент Кортана будет получать звук, запускать второй, более точный детектор слов пробуждения и необязательно отправлять его в облачную службу Майкрософт, где будет подтвержден третий детектор слов пробуждения. Если служба не подтвердит, что активация действительна, звук будет удален и удален из любых журналов обработки или сервера. На компьютере’пользователя приложение Кортана будет молча отклоняться, и запрос не будет показан в истории беседы, так как запрос был удален.

Если все три детектора слов пробуждения согласны, Кортана холст покажет, какая речь была распознана.

Кортана в Windows 10 версии 1909 и более ранних версий

Кортана в Windows 10 версии 1909 и более ранних версий не является службой, охватываемой центром Office 365 доверия. Дополнительные сведения о том, как Кортана в Windows 10 версии 1909и более ранних версий, обрабатывает ваши данные.

Источник