Руководство пользователя (полное)

2023:

RUS: Полное_Руководство_пользователя_Promobot_V.4_17_03_2023.pdf (2023, Март)

2022:

RUS: Руководство_пользователя_Promobot_V.4_08_12_2022.pdf (2022, Декабрь)

RUS: Руководство_пользователя_Promobot_V.4_27_07_2022.pdf (2022, Июль)

2020:

RUS: Инструкция пользователя на русском языке (2020, Апрель)

ENG: Инструкция пользователя на английском языке США (2019, Декабрь)

2019:

RUS: Инструкция пользователя на русском языке (2019, Май)

ENG: Инструкция пользователя на английском языке (2019, Май)

2018:

RUS: Инструкция пользователя на русском языке

ENG: Инструкция пользователя на английском языке (2018, Май)

Руководство пользователя (краткое)

RUS: Краткое_руководство_пользователя_Promobot_V.4_08_12_2022.pdf (2022, Декабрь)

RUS: Краткое_руководство_пользователя_Promobot_V.4_23_06_2022.pdf (2022, Июнь)

2022:

RUS: Инструкция по использованию веб-интерфейса 18.11.2022.pdf (2022, Ноябрь)

ENG: Promobot-v4_-_Admin_Web_Interface_18.11.2022.pdf (2022, Ноябрь)

2020:

RUS: Инструкция для владельца по использованию веб-интерфейса Promobot (2020, Январь)

ENG: Promobot-v4_-_Admin_Web_Interface_27.01.2020.pdf (2020, Январь)

2019:

RUS: Инструкция для владельца по использованию веб-интерфейса Promobot (2019, Февраль)

ENG: Admin Web Interface Guide (2019, Декабрь)

2018:

RUS: Инструкция для владельца по использованию веб-интерфейса Promobot

ENG: Instructions for using the web interface of Promobot (Owner)

Добавлено:

1. Добавлено отображение текста экрана из лингвобазы в gui
   
   

Добавлено:

1. Добавлено ПО для работы с поворотным узлом.
2. Добавлена поддержка новых лицевых матриц.
3. Добавлена актуальная библиотека для nested_chat.
4. Добавлен актуальный макрос погоды

Улучшено:

1. Возможность работы с USB камерами

Исправлено:

1. Исправлена ошибка face_recognize при выходе лица за пределы кадра

Добавлено:

1. Добавлена поддержка новых плат управления сервоприводами и ушами.

Исправлено:

1. Исправлена верстка на экране показа промо при печати фото.
2. Исправлена работа функции "робот, расскажи о текущем дне в истории".
3. Исправлена ошибка генерации аудиофайла при воспроизведении через SIP.
4. Исправлена ошибка, при которой неправильно выбирался лингвокейс с одинаковым именем для разных языков.

Добавлено:

1. Для сервиса телеприсутствия добавлен перезапуск виртуальной веб-камеры (когда нет новых кадров), чтобы избежать зависания изображения.
2. Добавлена возможность настраивать соотношение кнопок и осей джойстика в конфигурационном файле для поддержки джойстика Xbox Series X/S в Ubuntu 18.04.
3. Добавлена автоматическая передача прав на воспроизведение аудио/видео с js-страницы.

Улучшено:

1. Удалено автоматическое добавление расширения ".json" при сохранении MSS-скрипта, чтобы избежать ошибки при загрузке параметра для scripts_calibration.
2. Доработано отключение датчиков в MSS при создании скрипта (устаревший метод заменен актуальным).
3. Увеличена кнопка Закрыть на всех виджетах, теперь она более заметна. Переработана компоновка виджетов для корректного отображения элементов с кнопкой Закрыть нового размера.
4. Доработаны переводы интерфейса на Норвежский, Чешский, Азербайджанский, Финский, Румынский, Английский языки.
5. Доработаны элементы интерфейса для корректного позиционирования с учетом того, что на разных языках текст имеет разную длину.

Исправлено:

1. Исправлена ошибка, при которой происходило дрожание сервоприводов при выполнении MSS-скрипта.
2. Исправлена ошибка, при которой происходило дрожание сервоприводов во время калибровки.
3. Исправлена ошибка, при которой скорость робота зависела от радиуса установленных колес.
4. Исправлена ошибка, при которой при переключении языка через правило фраза-ответ могла не произнестись.
5. Исправлена ошибка, при которой робот произносил "восклицательный знак" при вызове макроса play.
6. Исправлена ошибка, при которой робот не снимался с паузы при ignoreInteraction = true.
7. Исправлена ошибка сброса кэша при перезагрузке lightview на Ubuntu 18.04.

Добавлено:

1. Для русского языка разработан плагин для работы с Nested Chat (которым будет заменена общая Лингвобаза).

Исправлено:

1. Исправлена ошибка, при которой происходило зависание GUI при прерывании реплики.
2. Исправлена ошибка, при которой в некоторых случаях не отображалось модальное окно с выбором вариантов.
3. Исправлена ошибка, при которой срабатывало правило без якоря, когда должно было сработать правило с якорем.
4. Исправлена ошибка, при которой макрос повторения корректно отрабатывал только один раз.

Добавлено:

1. Добавлена новая логика отъезда от зарядки (проверка, подключен ли робот в данный момент к кабелю) для повышения безопасности.
2. Добавлена возможность работы с двумя RFID-считывателями одновременно.
3. Добавлены и актуализированы переводы GUI.

Улучшено:

1. Ускорена обработка команд модулем синтеза речи.
2. Заменено изображение стартового экрана.

Исправлено:

1. Устранена часть утечек памяти в GUI при воспроизведении промо.
2. Исправлена ошибка сохранения кадра с главным.

Добавлено:

1. Создан новый набор talk-скриптов (21 шт), которые используются для жестикуляции во время речи.
2. Добавлена поддержка камер подъезда к зарядной станции, отличных от Logitech C270.

Улучшено:

1. Обновлены анимации лица робота: заменены эмоциональные и нейтральные эмоции, сердечки, сканирование и стандартное изображение лица.
2. Ускорен поиск ответа в лингвобазе.

Важно! В релизе 2.7.0 использование микрофонного массива недопустимо из-за большой задержки в распознавании речи.

Новое:

1. Осуществлен переход на Ubuntu 18.04 для поддержки новых CPU со встроенным графическим ядром

Улучшено:

1. Переработано приветствие после знакомства.
2. Доработан виджет визуализации калибровки Hark:
   
   • Изменен порядок подразделов в меню настроек.
   • Добавлена блокировка пункта "Микрофонный массив", если выбран другой источник для аудиозахвата.
   • Добавлена возможность регулирования чувствительности микрофона с джойстика.
3. Улучшено качество распознавания речи с микрофонного массива.

Исправлено:

1. Исправлен сбой GUI при многократном клике по крестику в JS example.
2. Исправлена ошибка логирования GUI, когда при выбранном обычном микрофоне отображалась информация, будто выбран микрофонный массив.
3. Исправлена ошибка, при которой не сохранялся способ установки громкости синтеза.
4. Добавлены недостающие переводы в GUI и в приложение знакомства.

Добавлено:

1. Добавлено считывание мультиформатных карт.
2. Добавлены новые режимы работы RFID-считывателя.
3. Добавлено управление фильтром детектирования лиц через параметр.
4. Добавлена обработка нажатия на кнопку закрытия приложения отправки на зарядку.
5. Добавлено два параметра для управления виджетом показа видеопотока:
   • Вкл/Выкл отображение виджета на главном экране.
   • Вкл/Выкл автоматический показ видеопотока при наличии лиц.

6. Добавлен виджет показа даты/времени в статусной строке GUI. Для виджета создано два параметра:

   • Видимость виджета.
   • Формат отображения даты/времени.

7. Для ускорения работы распознавания лиц добавлены параметры для отключения некоторых опций:

   • Параметр для использования детектора пола и возраста.
   • Параметр количества кадров для начала детекции «живого» лица.
   • Параметр для включения оптимизации периода детекции.
   • Параметр для детектирования быстрых перемещений лиц.

Улучшено:

1. Доработан модуль оплаты для работы со скидками:
   • Печать нефискальных документов (текст, QR-код).
   • Добавлено указание размера скидки для позиций (информационной поле).
   • Работа с пинпадом 2can (ВТБ).

2. Изменен запуск телеопа в GUI 2.5. Стабильное открытие телеопа при запуске робота, притом остальная работа робота не блокируется.

3. Ускорено добавление лиц во временную базу.
4. Уменьшена нагрузка на face_manager в простое без смены анимаций.

Исправлено:

1. Исправлена ошибка GUI при перезагрузке с отправкой на зарядку.
2. Исправлены ошибки при открытии ссылок в 2ГИС.
3. Исправлена ошибка, при которой не отключалась возможность распознавания лиц.

Добавлено:

1. Добавлены push уведомления. Реализованы три типа push уведомлений:

• • Робот использовал нераспознанную фразу;
  • Робот не может двигать руками из-за сработавших датчиков;
  • Робот застрял при передвижении.

1. Добавлена возможность массовой загрузки новых пользователей через инструмент обучения лиц.
2. Добавлен Азербайджанский синтез речи.
3. Добавлена возможность переключения языка голосовой командой.

Улучшено:

1. Улучшена работа слежения за лицом по источнику звука.
2. Улучшена работа системы распознавания лиц.
3. Улучшена оптимизация aibox.

Исправлено:

1. Исправлена ошибка, из-за которой при использовании расписания включения, выбор опции «повторять каждый день/по будням» приводил к некорректной загрузке расписания.
2. Исправлена ошибка, из-за которой после перезнакомства данные о пользователе не попадали на других роботов владельца.
3. Исправлена ошибка, из-за которой робот мог принимать некоторые сетевые устройства за лидар.
4. Исправлена ошибка, из-за которой иногда робот отвечал на предпоследний вариант распознавания.
5. Исправлена ошибка, из-за которой при включенном взаимодействии по лицу и отключенных других условиях начала взаимодействия, возникала некорректная работа взаимодействия.
6. Исправлена ошибка, из-за которой при потере лица голова робота не возвращалась в начальное положение.

Добавлено:

1. Добавлена настройка калибровки микрофонного массива в системное меню.

2. Добавлено видео, воспроизводимое при печати фото.

3. Добавлено изменение порядка уровней лингвобазы через веб-интерфейс.

4. Добавлен параметр, запрещающий отключение микрофона.

5. Добавлена возможность записывать в файл аудиопоток, отправляемый на распознавание.

6. Добавлена возможность смены языка через виджет на главном экране робота.

7. Добавлена возможность привязки приветствия к определённому человеку.

Улучшено:

1. Изменена логика работы категорий реплик. Робот теперь умеет работать с категориями реплик помимо категории по умолчанию.

2. В JS приложениях реализованы непрерываемые реплики.

Исправлено:

1. Исправлена ошибка, из-за которой робот не возвращал голову в исходное положение после исчезновения лица, если поворот был выполнен при обнаружении лица широкоугольной камерой, но лицо при этом исчезло до обнаружения основной камерой;

2. Исправлена ошибка, из-за которой робот отвечал дважды при включённых VAD и AEC.

3. Актуализирована заставка при включении робота.

4. Исправлена ошибка, возникающая при попытке обучения лица с отрицательным ID.

5. Исправлена ошибка, из-за которой сигнал с микрофонного массива не отключался при запуске видео.

6. Исправлена ошибка, из-за которой робот следил за лицом, когда не запущено взаимодействие.

Добавлено:

1. Анимации подмигивания во время разговора.

2. Добавлена проверка подключения к зарядке после автовозврата. Если спустя несколько секунд после установки на зарядку робот не подключен к источнику питания, будет выполнена повторная установка на зарядку.

Улучшено:

1. Переработан виджет сервисного меню для подключения к WiFi.

2. Обработка сброса одометрии при перезагрузке VESC.

3. Расширены возможности выдачи карт в JS.

4. Параметр включения/выключения уведомления о статусе подключения оператора добавлен в сервисное меню робота;

5. Улучшена точность локализации источника звука и распознавания речи при использовании микрофонного массива за счёт настройки параметров.

Исправлено:

1. Исправлена ошибка, из-за которой робот не возвращал голову в исходное положение после исчезновения лица, если поворот был выполнен при обнаружении лица широкоугольной камерой, но лицо при этом исчезло до обнаружения основной камерой.

2. Исправлена ошибка, из-за которой таймаут показа промо применялся только при добавлении промо.

3. Исправлены ошибки в работе SIP.

Добавлено:

1. Добавлена возможность настраивать несколько обращений к неизвестным лицам. Используемое обращение определяется случайным образом из списка.
2. Добавлен новый алгоритм хаотичного передвижения. Алгоритм включает следующие особенности:
   
   • Теперь робот выбирает точку на карте в заданном радиусе и едет к ней.
   • Точка не может быть дальше определённого радиуса или ближе определенного значения.
   • Новая точка не может быть в том же секторе, что и предыдущая точка (угловое расстояние в радиальной системе координат с центром в центре хаотичного движения, не может быть меньше, чем 30 градусов).
   • В случае неудачной попытки движения к точке, робот выбирает новую.
   • После трех попыток, робот едет в центр хаотичного движения.
   • Если нет ограничения по радиусу, то робот выбирает точку в случайном направлении и пытается туда ехать.
3. Добавлена возможность назначения центральной точки для радиуса передвижения.
4. Теперь комбинация LB+RB будет переводить робота в режим сохранения точки хаотичного движения.
5. В режиме сохранения робот ищет маркер стыковки и, в случае его обнаружения, запоминает точку.
6. После удачной попытки сохранения, робот возвращается в исходное состояние, то в котором он находился до перехода в режим.
7. В случае неудачной попытки, робот переходит в паузу, ожидая человеческого вмешательства.
8. Добавлен новый алгоритм определения главного. При определении учитывается положение лица относительно робота и остальных лиц в кадре;
9. Добавлена поддержка нового термопринтера.
10. Добавлены виземы злости и удивления.
11. Добавлена общая база лиц. Поиск по общей базе использует дескрипторы всех известных лиц для сравнения. Сравнение с лицами из общей базы использует более высокий порог совпадения лиц.
12. Добавлены новые оповещения в систему мониторинга, которые возникают, когда в роботе заканчивается бумага для принтера или карты в раздатчике. Настроена передача уведомлений через Telegram бота.
13. Добавлена защита от автоматического передвижения с подключенным кабелем питания.
14. Добавлена возможность отключения поворота головы робота при слежении за лицом.
15. Добавлена возможность приёма карт диспенсером.
16. Добавлена возможность учёта датчиков при управлении роботом через Teleop.
17. Добавлен сброс параметров к значению по умолчанию кнопкой в сервисном меню.

Улучшено:

1. Расширены возможности приложения для обучения лиц.

2. Улучшена стабильность в работе Teleop.

3. Произведён рефакторинг SDK.

4. Улучшена работа оффлайн распознавания aibox на роботах с микрофонным массивом.

5. Улучшена работа функции автоматического возврата на зарядную станцию.

6. Улучшена работа безопасных рук.

7. Улучшена функция исправления произношения.

Исправлено:

1. Исправлена проблема загрузки памяти из-за web_video_service.

2. Исправлена проблема переключения распознавания, из-за которой робот продолжал распознавать фразы на русском, после переключения на другой язык.

3. Исправлена проблема, из-за которой запуск интерфейса по расписанию мог быть произведён некорректно.

4. Исправлены проблемы в работе безопасных рук.

5. Исправлена проблема, из-за которой иногда возникала ошибка при поиске в лингвобазе.

6. Исправлена проблема в работе Lidar.

7. Исправлена ошибка, из-за которой иногда при восстановлении интернет-соединения робот не переключался с оффлайн распознавания.

8. Исправлена ошибка, из-за которой робот мог поехать в авто режиме даже во время взаимодействия.

9. Исправлена ошибка, из-за которой происходили резкие движения головы после восстановления рук.

10. Исправлена ошибка, из-за которой иногда не работало восстановление рук, после их остановки по датчикам.

11. Исправлена ошибка, из-за которой проверка китайского синтеза работала некорректно.

12. Исправлена проблема, из-за которой робот не выезжал из узких мест при возникновении пограничного состояния датчиков.

13. Исправлена ошибка, из-за которой не работало ограничение на количество попыток стыковки с зарядной станцией.

14. Исправлена ошибка, из-за которой робот при отключении поиска человека продолжал ехать в последнюю обнаруженную позицию.

15. Исправлена ошибка, из-за которой робот не продолжал движение по навигации, если был установлен на зарядную станцию вручную (не выключая авто режим).

16. Исправлена ошибка, из-за которой робот оставался на паузе после окончания взаимодействия, если пауза была вызвана взаимодействием во время передвижения, а во время взаимодействия любой скрипт был прерван по датчикам.

Добавлено:

1. Добавлена проверка на принадлежность к базе знаменитостей во время процедуры знакомства лица.
   Подробнее:

   1. Во время знакомства теперь происходит проверка источника информации о лице.
   2. Лица из базы знаменитостей нельзя изменять через процедуру знакомства.
   3. При попытке выполнить знакомство лица из базы знаменитостей, робот выдаст ошибку.
      
      
2. Добавлена поддержка сканера отпечатка пальца.

Улучшено:

1. Снижено время ответа от робота.
   Подробнее:

   1. Снижена нагрузка на систему за счёт сокращения fps FishEye камеры с 25 до 10, сокращения битрейта основной камеры на устройстве АйТек.
   2. Снижена нагрузка на систему за счёт снижения затрат ресурсов на анализ эмоций.  Теперь анализ эмоций производится только у главного и с частотой 1 раз в секунду.
   3. Распознавание лиц теперь задействует в 2 раза меньше ресурсов.
   4. Снижение частоты кадров при повышенной загрузке.
   5. Снижена задержка между получением ответа и началом синтеза за счёт запуска Wine при старте TTS.
   6. Сервис TTS перенесён в топик, сокращены задержки на передачу сигнала синтеза речи.
   7. Добавлено кеширование правил для снижения количества запросов к лингвобазе.
   8. Добавлен многопоточный поиск ответа в лингвобазе.

Исправлено:

1. Исправлена ошибка, из-за которой окно фотоприложения в «промо при печати» не закрывалось, если в нём не было промо изображений.
2. Исправлена проблема, из-за которой функция разделения экрана в VNC не работала с новым Wi-Fi адаптером.
3. Исправлена часть проблем, из-за которых происходила утечка памяти.
4. Исправлена ошибка, из-за которой по умолчанию было включено прерывание фраз.
5. Исправлена ошибка, из-за которой некорректно обрабатывались якоря.
6. Исправлена проблема с повторным произношением фраз.

Добавлено:

1. Добавлена регулировка времени ожидания загрузки всех систем робота.
2. Добавлены новые возможности по контролю доступа в сервисное меню.
   Подробнее:
   1. Добавлен обязательный ввод пароля при входе в сервисное меню со стартового экрана робота.
   2. Добавлена возможность ограничить количество попыток ввода пароля и соответствующий параметр: robot_settings/access_control/maxInputAttempts.
   3. Добавлена блокировка входа в систему при достижении заданного количества неудачных попыток ввода.
   4. Время блокировки устанавливается параметром: robot_settings/access_control/restrictTime.
   5. Таймаут сброса неудачных попыток задаётся параметром: robot_settings/access_control/timeoutAttempts.
3. Добавлена поддержка RFID считывателей.
4. Возобновление выполнения скриптов Motion Studio после остановки по датчикам.
5. Добавлена возможность настройки прерывания фразы микрофонным массивом.
6. Добавлена возможность запуска взаимодействия при срабатывании микрофонного массива.

Улучшено:

1. Повышена детализация рамок для фото.
2. Часть старых эмоций заменена на виземы.
3. Убран показ лого Promobot в непустых слайдшоу.
4. Изменена логика работы приложения знакомства.
   Подробнее:
   1. Для знакомства, робот по умолчанию выбирает последнего главного пользователя.
   2. Процесс сохранения лица в базу происходит иначе.
   3. Новый параметр для списка слов, которые можно использовать вместо нажатия кнопки далее: /basic/nextWords.
5. Обновлена система распознавания лиц.
   Подробнее:
   1. Существенный прирост точности идентификации (всех 3 алгоритмов).
   2. Существенное ускорение слежения за лицом.
   3. Небольшое повышение точности классификации демографии и внешних атрибутов.
6. Доработан алгоритм обработки ложных срабатываний системы распознавания лиц во время навигации.

Исправлено:

1. Исправлена ошибка, из-за которой значение чувствительности УЗ датчиков не применялось при перезапуске робота.
2. Исправлена ошибка, из-за которой, после выполнения команд с джойстика, робот не мог двигать руками и головой.
3. Исправлена ошибка, из-за которой робот сообщал о низком заряде батареи, даже после установки на зарядку.
4. Исправлена ошибка, из-за которой робот не всегда выдавал карту.
5. Исправлена ошибка, из-за которой термопринтер выдавал некорректный результат при печати нескольких файлов подряд.
6. Исправлена ошибка, из-за которой робот не поворачивал при езде задом, даже при сработавших датчиках.
7. Исправлена ошибка, из-за которой робот мог поехать на зарядку с поднятой рукой.
8. Исправлена ошибка, из-за которой иногда не отображалось окно «Информация о соединении» в меню подключений робота.
9. Исправлена ошибка, из-за которой имена файлов, состоящие только из цифр, некорректно отображались в системе.

Добавлено:

1. Использование возможностей микрофонного массива в диалоге. Локализация людей по звуку. Разделение диалога при общении с несколькими людьми. Прерывание речи робота с помощью систем VAD и AEC. Подавление шумов.
2. Настройка масштаба при кадрировании распознанного лица.
3. Включение и выключение робота по расписанию.
4. Запрос правильного произношения имени и отчества в базе.

Исправлено:

1. Неработающая функция перезнакомства.
2. Ошибка, из-за которой робот мог не сбросить положения серв и актуатора при возврате на зарядку.
3. Медленное переключение распознавания речи при отсутствии интернета.
4. Проблема при добавлении лиц через виджет.
5. Повышенное использование памяти при переключении языка.
6. Ошибка в статусе периферии.

Добавлено:

1. Обновлённая система спикера. Появилась возможность продолжить произношение прерванной реплики с момента прерывания. Появилась функция визем для синхронизации анимации лица робота с синтезом речи.
2. Обновлённая навигация.
3. Возможность прерывания скриптов по нажатию на кнопку «микрофон».
4. Возможность регулировать громкость в промо при печати.
5. Функция хранения дескрипторов и фотографий посетителей в БД.
6. Функция создания макросов и система справочников в БД.
7. Функция включения робота по расписанию.
8. Светлая тема клавиатуры.

Улучшено:

1. Система офлайн распознавания речи. Распознавание проходит быстрее и точнее. Новый декодер.
2. Алгоритм переключения с основной системы распознавания речи на резервную.

Исправлено:

1. Нестабильная работа системы распознавания лиц при распознавании эмоций.
2. Поиск по синонимам в БД останавливался на первом успешном.
3. Нестабильная работа в меню промо-материалов при добавлении картинки в слайдшоу.

• Добавлена возможность печатать HTML файлы на чековом принтере.
• Добавлена возможность задать громкость для каждого конкретного синтеза речи.
• Добавлена функция блокировки изменения главного для слежения только за одним лицом;
• Добавлено включение робота по расписанию;
• Добавлена поддержка MSS «из коробки»;
• Добавлена новая система поиска QR-меток (используется при поиске зарядной станции).
• Улучшена система распознавания лиц. Распознавание проходит быстрее и точнее. Повышена точность определения демографических и внешних атрибутов. Существенный прирост в скорости отслеживания лица;
• Улучшена работа браузера на сенсорном экране. Добавлены «свайп» жесты.

• Добавлены новые алгоритмы работы подсветки головы;
• Добавлены женские анимации эмоций лицевой матрицы.

• Добавлена поддержка нового джойстика.
• Добавлены новые алгоритмы работы подсветки головы.
• Добавлены женские анимации эмоций лицевой матрицы.

• Улучшена оптимизация офлайн распознавания речи. Офлайн распознавание работает стабильнее.

• Добавлена поддержка сканера паспортов. Теперь, при установленном оборудовании, робот может сканировать и распознавать данные паспорта.
• Добавлена поддержка сканера документов. Теперь, при установленном оборудовании, робот может сканировать документы в .pdf файл.
• Добавлен виджет для добавления людей в базу пользователей. С помощью виджета удобнее заполнять базу;
• Добавлен индикатор прогресса при печати фото. Теперь процесс печати фотографии отображается графически;
• Улучшено приложение для SIP-телефонии. Добавлены скрытые звонки (отправка текстового или аудио сообщения по указанному номеру);
• Улучшено приложение знакомства. Переработана логика работы приложения, добавлена функция быстрого знакомства по ключевым словам. Добавлена возможность пройти знакомство заново;
• Улучшена вопросно-ответная система. Сокращены задержки при распознавании речи и получении ответа;
• Улучшена система распознавания лиц. В 2 раза снижена нагрузка на вычислительные ресурсы при распознавании.

• Добавлена новая система определения поддельных лиц. Робот может отличить лицо живого человека от рисунка, а значит снизится число ложных срабатываний;
• Добавлено отображение статуса синхронизации данных. Теперь синхронизация данных оперативно отражается в статусной строке интерфейса;
• Добавлены новые эмоции для лицевой матрицы;
• Выпущена новая версия программного обеспечения для роботов Promobot V2;
• Улучшена система распознавания лиц. Распознавание проходит быстрее и точнее (максимальная точность распознавания теперь достигает 99,92%);
• Улучшена система навигации. Точность передвижения повышена.

• Добавлена новая система офлайн распознавания речи. Улучшилась скорость поиска и точность ответов при отсутствии интернета;
• Добавлена экспериментальная система распознавания на основе нейронной сети. Улучшение ответов на вопросы по заданному тексту, обработанному нейронной сетью;
• Добавлена адаптация направления текста в интерфейсе в зависимости от выбранного языка (актуально для арабских языков);
• Добавлены новые скрипты робота. Увеличено разнообразие доступных движений во время диалога;
• Улучшена логика поиска ответа. Ответы не из интернета теперь приходят гораздо быстрее;
• Улучшена работа датчиков определения препятствий. Доступна более детальная настройка датчиков.
• Улучшена система синтеза речи. Все языки доступны на роботе по умолчанию. Переработан интерфейс выбора языков и синтезов речи;
• Улучшена система навигации.

• Добавлен новый экран тестирования робота. Проверять основные функции робота теперь можно прямо из интерфейса;
• Улучшена работа скриптов. При выполнении скриптов теперь учитываются показания датчиков;
• Улучшены возможности кейсов лингвобазы;
• Улучшена работа с раздатчиком карт.

• Добавлена возможность отключения поиска лица.
• Улучшено отображение gif-анимаций в показе слайдов и превью.
• Улучшен интерфейс приложения телеприсутствия. Добавлена возможность премодерации ответов.

Рисунок1. Схема передачи данных при распознавании лиц.

Рисунок 2. Схема передачи данных при общении голосом с роботом.

Рисунок 3. Схема передачи данных при сканировании документов.

Рисунок 4. Схема передачи данных при использовании терминала оплаты.

Рисунок 5. Схема передачи данных при использовании приложения Фото от робота.

Рисунок 6. Схема передачи данных при управлении роботом через сервис Телеприсутствия.

Рисунок 7. Схема передачи данных при использовании робота с датчиком температуры (например, кейс Консьерж).

User Manual (full)

2023:

RUS: Полное_Руководство_пользователя_Promobot_V.4_17_03_2023.pdf (2023, Март)

2022:

RUS: User_Manual_Promobot_V.4_08_12_2022.pdf (2022, December)

RUS: Full user manual Promobot V.4 - 07.2022.pdf (2022, July)

RUS: userguide_publication_rus_21.01.22 (2022, February)

2020:

ENG: userguide_publication_eng(us)_11.12.2019.pdf USA (2019, December)

RUS: userguide_publication_rus_20.04.2020.pdf (2020, April)

2019:

ENG: userguide_publication_eng_30.05.2019.pdf (2019, May)

RUS: userguide_publication_rus_30.05.2019.pdf (2019, May)

2018:

ENG: userguide_publication_eng_24_05_18.pdf (2018, May)

RUS: userguide_publication_rus_24_05_18.pdf (2018, May)

User Manual (short)

RUS: Краткое_руководство_пользователя_Promobot_V.4_08_12_2022.pdf (2022, December)

RUS: Short user manual Promobot V.4.pdf (2022, June)

2022:

ENG: Promobot-v4_-_Admin_Web_Interface_18.11.2022.pdf (2022, November)

RUS: admin_web_interface_rus_18.11.2022.pdf (2022, November)

2020:

ENG: admin_web_interface_eng (2020, January)

RUS: web_interface_manual_rus (2020, January)

2019:

ENG: admin_web_interface_eng (2019, December)

RUS: web_interface_manual_rus (2019, February)

2018:

ENG: admin_web_interface_eng

RUS: web_interface_manual_rus

Added:

• Support for new boards to control servos and ears is added.

Fixed:

• Layout on the promo display screen when printing a photo is fixed.
• A "robot, tell me about the current day in history" feature is fixed.
• Generating an audio file error when playing it via SIP is fixed.
• An error, when the linguistic case with the same name was not chosen correctly for different languages, is fixed.

Added:

• For the telepresence service, a restart (when there are no new frames) feature of the virtual webcam is added. This feature helps to avoid picture freezing.
• The ability to map gamepad buttons and axes in the configuration file is added to implement Xbox Series X/S gamepad support on Ubuntu 18.04.
• Webpage permissions (to play audio/video) auto passing from js-page is added.

Improved:

• Auto adding ".json" extension while saving MSS-script is removed. This improvement helps to avoid an error on loading parameter for scripts_calibration.
• Disabling sensors in MSS while creating a script is improved (deprecated method is replaced with new one).
• Close button is enlarged on all of the widgets, now this button is more visible. Widgets layout is altered for correct displaying of elements according to the new size of Close button.
• Interface translations into Norwegian, Czech, Azerbaijani, Finnish, Romanian, English languages are improved.
• Interface elements are updated for correct positioning according to the fact that text has different lengths in different languages.

Fixed:

• An error, when servos started to tremble while executing MSS-script, is fixed.
• An error, when servos started to tremble while robot calibration, is fixed.
• An error, when robot's speed depended on wheels radius, is fixed.
• An error, when the answer phrase might not be pronounced after switching the language using the rule.
• An error, when running play macro triggered robot to pronounce "Exclamation mark", is fixed.
• An error, when interrupting robot's pause doesn't work on ignoreInteraction = true, is fixed.
• An error of cache reset in lightview reloading on Ubuntu 18.04 is fixed.

Added:

• Plugin, which implements Nested Chat (to replace general linguo base) for russian language, is developed.

Fixed:

• GUI-not-responding when interrupting a replica is fixed.
• In some cases a modal window with a choice of options was not displayed, fixed.
• The rule without an anchor was triggered, when the rule with an anchor should have been triggered, fixed.
• The repeat macro worked correctly only once, fixed.

The key feature of this release is an increasing the robot response speed by an average of 160 ms, thus, taking into account the edits of the release 2.8.0, the response speed is optimized by ~1 second. 

Added:

• New algorithm for leaving from charging station (a check is added: is robot connected to charging cable or not) to improve the safety of use.
• Two RFID-scanners at the same time support added.
• New translations for GUI are added and/or updated.

Improved:

• Commands processing by speech synthesis module made faster.
• Image of the start screen is replaced.

Fixed:

• Some of memory leakages in GUI at the process of showing promo are eliminated.
• Bug with saving frame with main person is fixed.

Added:

• A new set of talk-scripts(21 items), which are used for gesturing during speech, is created.
• Support of more cameras for driving to charging station is added.

Improved:

• Robot face animations are updated: emotional and neutral animations, hearts, scanning and standard face images are replaced.
• Answer search in linguobase made faster.

New:

1. Migrated to Ubuntu 18.04.

Improved:

1. Greeting after acquaintance improved.
2. Hark calibration visualization widget improved:
   • The order of subsections in the settings menu changed.
   • Added blocking of the "Microphone array" item if another source for audio capture is selected.
   • Added the ability to adjust the microphone sensitivity from the joystick.
3. The quality of recognition from the microphone array improved.

Fixed:

1. GUI was crashing because of multiple clicks on cross in JS example.
2. Fixed a bug with logging GUI: when the usual microphone was selected, information was displayed as if a microphone array was selected.
3. Fixed a bug: can't save choice of speech synthesis volume mode.
4. Missing translations added to GUI and acquaintance app.

Added:

1. Reading of multi-format cards is added.
2. New RFID reader modes is added.
3. Face detection filter control via parameter is added.
4. Handling of pressing the button to close the application "send to the charging station" is added.
5. Two parameters to control the widget of video stream display is added:
   • On/Off display of the widget on the home screen.
   • On/Off automatic display of the video stream in the presence of faces.

6. Widget for showing date/time in the status bar of the GUI is added. Two parameters for the widget are created:

   • Widget visibility.
   • Date/time display format.

7. To speed up the work of face recognition, parameters to disable some options are added:

   • Parameter for using gender and age detector.
   • Parameter of the number of frames for starting the detection of a "live" face.
   • Parameter for enabling optimization of the detection period.
   • Parameter for detecting rapid movements of faces.

Improved:

1. Payment module for working with discounts improved:
   • Printing of non-fiscal documents (text, QR code).
   • Indication of the amount of discount for items (information field) is added.
   • 2can pinpad (VTB bank) support is added.

2. Teleop launch in GUI 2.5 is changed. Stable opening of the teleop when starting the robot, while the rest of the robot's processes are not blocked.

3. Adding faces to the temporary base is made faster.
4. Load on face_manager in idle mode without changing animations is reduced.

Fixed:

1. GUI error while rebooting with sending to the charging station is fixed.
2. Errors while opening links in 2GIS are fixed.
3. Error: face recognition doesn't disabling - is fixed.

Added:

1. Push notifications. Three types of push notifications are implemented:
   

   • The robot used an unrecognized phrase.

   • The robot can't move its hands because of triggered sensors.

   • The robot got stuck while moving.

2. Mass uploading of new users via the face learning tool.
3. Azerbaijani speech synthesis.
4. The ability to switch the language with voice commands.

Improved:

1. Face tracking by the source of the sound.
2. Operation of the facial recognition system.
3. Aibox optimization.

Fixed:

1. Fixed a bug in the schedule of switching the robot on where selecting the "repeat every day/weekday" option caused the schedule to load incorrectly.
2. Fixed a bug that prevented the user's data to be transferred to other robots of the owner after getting reacquainted.
3. Fixed a bug where the robot could mistake some network devices for LIDAR mapping system.

Added:

• Updated speaker system. Now you can continue the pronunciation of the interrupted replica from the moment of the interruption. There was a visem function to synchronize the robot's face animation with speech synthesis;

• Updated navigation.

• Ability to stop scripts by tapping on the "microphone" button;

• Ability to adjust the volume in promo when printing;

• The function of storing descriptors and photographs of visitors in the database;

• The function of creating macros and a handbook in the database;

• The function of a scheduled start of the robot;

• Light theme of the keyboard.

Improved:

• Offline speech recognition system. Recognition is faster and more accurate. New decoder;

• Algorithm for switching from the main speech recognition system to the additional one.

Fixed:

• Unstable operation of the face recognition system when recognizing emotions;

• Search by synonyms in the database stopped when the first was found;

• Unstable operation in the menu of promotional materials when adding pictures to the slideshow.