Как интелигентните дисплеи наблюдават хоста и контролират интелигентния дом

Интелигентният дисплей е интелигентно устройство, състоящо се от високоговорител и екран. Има вградени микрофони за далечно поле

действия, динамика и за комуникация сГласовият асистент отговаря на потребителя. Тези устройства също поддържат алгоритми за гласово управление: машина за събуждане, VAD (откриване на гласова активност, Hi-Tech) и други алгоритми за обработка на глас.

Екранът показва видео, текст и графикиинформация, можете да я използвате за видео разговори. Някои хора мислят за интелигентния дисплей като за електронен таблет, но те са концептуално различни устройства. Интерфейсът на интелигентния дисплей е умишлено опростен, тъй като основната му цел е да решава ежедневни задачи с помощта на гласов асистент: управление на интелигентен дом, планиране и управление на календар, търсене на информация, настройка на таймер или будилник.

Интелигентните дисплеи правят същото като интелигентните високоговорители, но добавят допълнителна функционалност към това. Например ето на какво е способен Google Nest Hub Max:

  • Показвайте видеоклипове и филми, но поради естеството на DRM, Netflix се появи на Hub и Hub Max сравнително наскоро, едва през юли 2020 г.
  • Показване на снимки.
  • Търсене на информация и показване на резултатите от търсенетона екрана. Интересното е, че рецептите заемат голям дял в статистиката на заявките за търсене от интелигентни дисплеи - това дава едно от най-популярните местоположения на устройството в къщата.
  • Правете видеообаждания с Duo and Meet, а от август 2020 г. и Zoom.
  • Превеждайте гласови команди на чужди езици в реално време - докато четенето на превода от екрана е по-лесно за разбиране.

Ако говорим за управление на интелигентен дом, тогава, като изберете желаното устройство от списъка, можете например да регулирате яркостта на лампата с едно докосване. Много удобно.

Интересен вариант е наличен и при изпълнениетовидео разговори, - автоматично кадриране (известно също като автоматично увеличение или автоматично панорамиране). При автоматичното кадриране камерата се фокусира върху човек и го „проследява“ по време на движение (разбира се, в полезрението на камерата). Това се постига с помощта на компютърно зрение и изрязване на изображения. За първи път на интелигентни дисплеи автоматичното кадриране е внедрено на портала Facebook, а след това и на Nest Hub Max. Тази функция се използва активно от Google и Facebook и потребителите реагират положително на нея - това се вижда от оценката на Net Promoter.

Как започна всичко

Прототипи на интелигентен дисплей без гласови асистентисе появи през 2000г. Производителят на цифрова електроника 3Com (съосновател Робърт Меткалф изобретил Ethernet) е пионер в разработването на екранни IoT устройства. 3Com Audrey беше замислен като кухненско устройство и имаше достъп до Интернет, писане и изпращане на имейли и възпроизвеждане на аудио и видео.

През 2006 г. първото сензорно устройство отChumby за консумация на медийно съдържание, което бележи началото на линията от устройства със същото име. Sony Dash, пуснат през 2010 г., използва платформата на Chumby с алармени функции, радио, достъп до интернет, възпроизвеждане на аудио и видео и огромен брой приложения. Въпреки стабилната работа на устройството, през 2017 г. Sony спря работата на сървърите, обслужващи Sony Dash, без да пусне друг аналог.

Основното нещо, което отличава тези устройства от настоящите интелигентни дисплеи, е липсата на виртуален асистент, контрол с жестове и гласов контрол.

Sony Dash, 2010

От ранните осиновители до бум на потребителския дисплей

През последните три години излезе само в САЩ и Европаповече от 30 модела смарт дисплеи от повече от 12 марки. През юни 2017 г. Amazon стартира продажбите на първия си интелигентен дисплей Amazon Echo Show, а през септември същата година продажбите на Echo Spot, интелигентен будилник с екран и гласов асистент.

До лятото на 2018 г. онлайн гигантът бешемонополист на пазара на интелигентни екрани, докато Lenovo и JBL пуснаха своите устройства с Google Assistant. Самата Google обяви Google Home Hub (по-късно преименуван на Nest Hub) през октомври 2018 г., позиционирайки устройството като хъб за управление на интелигентен дом, докато нейните партньори, които използваха Google Assistant, разчитаха на качеството на звука.

Месец по-късно Facebook Portal излезе на пазара сгласов асистент Alexa от Amazon, а основният му потребителски сценарий се наричаше видео разговори. Русия също не изостана от тенденцията - в края на 2020 г. SberDevices обяви SberPortal - първият руски интелигентен дисплей със система от виртуални асистенти на борда. Между другото, дизайнът на руския портал е извършен от екипа на notAnotherOne и още през април 2021 г. устройството спечели най-престижните награди за дизайн - Red Dot Design и iF design awards - и с тях признание от световната дизайнерска общност. И накрая, наскоро обявената актуализация на линията iMac, въпреки че не може да се нарече интелигентен дисплей, редица функции са извлечени от интелигентни дисплеи - микрофонна матрица от три микрофона и шест вградени високоговорителя. Тези нововъведения ви позволяват да използвате устройството както за конферентна връзка, така и за функции за управление с помощта на гласов асистент / гласово въвеждане (започвайки с ревизията на macOS Catalina, потребителите имат достъп до разширени функции за гласово управление в допълнение към функционалността на Siri).

Днес можем да видим експлозивния растеж на сегмента на интелигентните дисплеи по целия свят.

Малко аналитика

Интелигентен дисплей на пазара

Първо място заема Amazon с 55% пазарен дял,следвани от Google - 33% и Facebook - само 2% със своите три поколения устройства: Facebook Portal, Facebook Portal Plus и Facebook Portal Mini. Интелигентните дисплеи от Lenovo, JBL и LG с вграден Google Assistant представляват 6% от пазара (без разбивка на марката).

Ръстът в популярността на дисплеите се илюстрира ясно от цифрите: през първото тримесечие на 2018 г. делът на интелигентните дисплеи е бил под 2% от пазара, през първото тримесечие на 2019 г. - 10%, а до края на 2020 г. - вече 26%.

* Глобален доклад за пазара на интелигентни високоговорители Q3 2020

Към четвъртото тримесечие на 2020 г. продажбите на интелигентни дисплеи представляват малко над 25% от общите продажби на интелигентни високоговорители. През първото тримесечие на 2018 г. делът на продажбите на смарт дисплеи е под 2%, през първото тримесечие на 2019 г. - около 10%

Интелигентни дисплейни места

Местата, където е обичайно да се поставят интелигентни дисплеи и високоговорители, са силно предвидими: 44% от устройствата са в дневни, 37% от устройствата са в спалнята, 32% са в кухнята.

Ако в хола често има високоговорители, тъй като телевизорът поема функцията на дисплея, в кухнята има умни дисплеи, то в спалнята преобладават умните будилници и умните часовници.

На изображението по-горе има няколко представители от тяхустройства. Те са обединени от малък основен екран, чиято резолюция е достатъчна за показване на основна информация, както и матрица на микрофона, високоговорител и гласов асистент. Цената на такова устройство може да започне от $50. Първоначално Amazon зае премиум сегмента, като добави камера и висококачествени високоговорители.

Трябва да споменем и новото издание на smartдисплей от Google - Nest Home Hub 2. Благодарение на вградения радар mmWave, устройството може да наблюдава фазите и продължителността на съня на собственика, така че е подходящо за поставяне на нощното шкафче.

Използвайки набор от микрофони, устройството също така може да измерва честотата на дишане, продължителността на хъркането и броя на кашлицата на нощ.

Все още не е ясно дали устройството разпознава собственика по хъркане, но определено ще тестваме тази точка.

Дисплеи за кухнята

През 2018 г. General Electricобяви интелигентна абсорбатор с 27-инчов сензорен екран, две камери и вграден асистент на Google, Kitchen Hub. Качулката може да прави видео разговори, да преглежда рецепти и да възпроизвежда видеоклипове на дисплея. Гласовото управление на устройството се осъществява чрез дистанционното управление.

След като вече стартира продажбите на Kitchen Hub, GE обявиКухненски хъб 2, микровълнова фурна с екран. Разработчиците са поставили трета AI камера вътре в устройството, което дава възможност да се разпознаят съставките и готовността на ястията. За съжаление все още няма информация за старта на продажбите.

Друг прототип, представен на CES 2019Интелигентен дисплей KitchenAid - 10-инчов интелигентен дисплей KitchenAid с Google Assistant от Whirlpool. Основната му разлика е устойчивостта на влага и олеофобното покритие на дисплея, благодарение на което пръстовите отпечатъци не остават на повърхността - нещо често в кухнята. Уви, устройството така и не е пуснато в продажба.

Дисплеи за други стаи

През 2018 г. Kohler обяви smartогледало. За съжаление, функционалността му е ограничена само до гласов асистент и не може да показва информация. През 2019 г. няколко китайски компании започнаха да разработват интелигентно огледало с интегриран дисплей. Въпреки големия брой DIY продукти, масови и комерсиално успешни умни огледала за дома все още не са се случили.

Бихме искали да погледнем в бъдещето и да покажем как виждаме концепцията за интелигентно огледало, което идеално се вписва във всяка баня.

Няколко възможни функции на това устройство:

  • Фокусирайте се върху поверителността - без камери + физически бутон за включване на микрофона или жест за включване и изключване.
  • Електрохромно стъкло - променлива степен на зрелищност и прозрачност в зависимост от условията и съдържанието, което се показва там.
  • Водоустойчив, това ще помогне за използването на високоговорители MEMS и пиезо микрофони.
  • Вграден mmWave радар за разпознаванепотребители, управление с жестове, разпознаване на жизненоважни параметри (температура, пулс, цвят на кожата, състояние на зеницата). Радарът може, без използването на камери, като същевременно запазва поверителността на потребителя, да разпознава скелета и движенията на потребителя и да отчита сърдечната честота и честотата на дишане.

Какво може да се случи с пазара на интелигентни дисплеи в близко бъдеще?

  • С течение на времето пазарът на дисплеи ще стане още повечесегментирани, сценариите за специализация и използване на устройството ще се увеличат: от кухненски дисплеи до усъвършенствани дисплеи за спални. Например интелигентен будилник с меко осветление, който нежно ще събуди потребителя.
  • Поява на нов сегмент:Днес на пазара има недостиг на премиум устройства. Средната цена на устройство за дома е около 400 долара. Може би има нужда от страна на производителите на луксозна техника, включително премиум аудио марки.
  • Възможно е да се използват технологии за активиране:дисплеи (microLED, AMOLED, 3D дисплеи, проектори), високоговорители и микрофони (масиви от CMOS високоговорители, параметрични високоговорители, допълнително увеличаване на броя на микрофоните в матрици, използването на пиезо микрофони), радари и сензори (mmWave радари, сензори за околната среда) , свързаност (WiFi 6, 5G).
  • По-нататъшен растеж на сегмента с малко количествонови играчи: само ограничен брой компании са готови да си партнират с Google / Amazon с голям обем инвестиции и ниски маржове. Но цялата сметана днес е обезмаслена от малък брой играчи с пълна инфраструктура от услуги.

Дисплеи за B2B

Показва в корпоративния сегмент

В много компании, особено Fortune 500,използването на устройства с микрофони и интелигентни високоговорители е забранено, тъй като има огромно недоверие към поверителността и защитата на данните. Една от малкото компании, които успяха да навлязат в големия корпоративен сегмент, беше Cisco.

Cisco актуализира линията си от интелигентни дисплеи през 2020 г.за конферентни разговори. Вече има два модела. Най-младият модел е 23 ″, по-старият е 27 ″. Камерата е снабдена с физически затвор и при двата модела. По-старият модел поддържа стилус, свързващ лаптоп с паралелно зареждане, AI / динамичен фон, патентована система за намаляване на шума. Цената на по-младата започва от $ 1490. Цената на по-старата започва от $ 5990.

Отделно си струва да споменем инициативата за съвместно брандиране от Zoom -Мащабиране за дома,линия професионални уреди за работа откъщи. Препоръчителната цена на дребно за първото устройство от линията е $599. В същото време устройството има широк набор от интерфейси, като се започне с 27-инчов сензорен дисплей с поддръжка на писалка, завършващ с три камери, набор от осем микрофона и стерео високоговорители. При всичко това това е високоспециализирано устройство за видеоконференции и презентации; друга функционалност е ограничена на ниво ОС. Липсвайки опит в областта на електрониката, Zoom Inc. привлече производителя на конферентни решения DTEN като партньор, което даде плодове - устройството беше удостоено с титлата Best of The Best Red Dot design award през 2019 г.

Интелигентни дисплеи за гостоприемство

Голяма тенденция е използването на интелигентни високоговорители и дисплеи в хотелите.

Въпреки че Amazon стартира Alexa for Hospitality още през юни 2018 г., поддръжката за тази програма в Echo Show все още не е налична.

Гнездо за гостоприемство - програма и инициатива отGoogle има за цел да използва интелигентни устройства в хотелски вериги. Използва се персонализирана версия на Hub Max без камера (в персонализираната версия камерата присъства, във версията за хотела тя е премахната) и специална версия на фърмуера / потребителския интерфейс (функционалността е ограничена, управлява се дистанционно; акцентът е върху поверителността, след като потребителят се откаже, цялата информация за него се изтрива). Основната цел на дисплея в този случай е да предостави на потребителя информация за услугите на хотела и околностите му, да получи финансова информация (фактура за настаняване и допълнителни услуги).

Друг интересен случай за хотели бешепредставено от CIRQ + миналата година. Тази модулна система ви позволява да управлявате климатични, мултимедийни и осветителни системи. Устройството разполага с радар за управление на системи. Например, ако радарът е в друга стая, той регулира интензивността на климатика по такъв начин, че да спести разходи за енергия.

Но, както и в много други индустрии, Китай изпреварва западните конкуренти - китайският стартъп Xiezhu представи пет интелигентни устройства, насочени към хотелския сегмент:

  • Дисплей за саморегистриране, предназначен да замести персонала на рецепцията.
  • Интелигентен видео звънец за хотели с възможност за пускане на посетители, без да стават от леглото.
  • Интелигентен дисплей за стаи, интегриран с осветление, контрол на климата и мултимедийни системи.
  • Smart TV дистанционно управление с гласово управление.

Интелигентни дисплеи в телемедицината

Пандемията доведе до повишен интерес към телемедицината, както към услугите, така и към устройствата за телемедицински прегледи.

Редица играчи (Amwell, H4D и др.) обяви телемедицински павилиони, чийто централен елемент е интелигентен дисплей. Що се отнася до устройствата, основните препоръки/инструкции се дават от гласов асистент, а самият процес се извършва под наблюдението на лекар.

Нека да пофантазираме малко по тематапавилион за телемедицина: преносима система, чийто мозък е интелигентен дисплей. Най-често се изисква насочване на екрана по-близо до потребителя; предполага се автоматично регулиране с помощта на сервоприводи. Набор от камери и сензори за проследяване на жизненоважни параметри/индикатори.

  • Преносима телемедицинска система, центрирана върху интелигентен дисплей.
  • Автоматично регулиране на позицията на екрана на серво.
  • Множество камери за анализ на жизнени показатели, мимики.
  • Силно чувствителни микрофони в далечно поле (анализ на дишането, кашлица, хрипове).
  • Мощност на платформата, достатъчна за обработка на задачи с късо съединение.

Развитие и популярност на технологиите за смарт дисплеиводени от безусловното търсене на тяхната функционалност: от интелигентно управление на дома до наблюдение на съня и демонстрация на рецепти в кухнята. Пълната социална изолация допълнително засили интереса към подобни устройства, а развитието на Интернет на нещата и безжичните комуникационни технологии ще направи възможно адаптирането на използването на смарт дисплеи за по-приложни случаи, включително при трудни условия на приложение.

Вижте също:

Умни дрехи: какво е и как работи

Учените представиха микроскоп, който ви позволява да видите най-малките клетъчни структури

Животното оживя след 24 хиляди години зимен сън в сибирската вечна лед