Динамическая система информирования о разговорах (варианты) - RU2704663C2

Чертежи

Описание

ПЕРЕКРЕСТНАЯ ССЫЛКА НА РОДСТВЕННЫЕ ЗАЯВКИ

[0001] Не применимо.

ЗАЯВЛЕНИЕ ОТНОСИТЕЛЬНО ФЕДЕРАЛЬНО СПОНСИРУЕМОГО ИССЛЕДОВАНИЯ

[0002] Не применимо.

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

[0003] Настоящее изобретение в общем относится к динамическим системам информирования водителя.

УРОВЕНЬ ТЕХНИКИ, К КОТОРОМУ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

[0004] Когда молодой водитель, пожилой водитель или начинающий водитель управляет транспортным средством, водитель должен уделять особое внимание и не отвлекаться от задачи вождения и не должен отвлекаться на другие внешние условия при вождении транспортного средства. Различные события, такие как громкая музыка, а также находящиеся в транспортном средстве люди, могут способствовать отвлечению внимания водителя. Например, громкие или оживленные разговоры могут приводить к потере концентрации не только на задаче вождения, но могут препятствовать тому, чтобы водитель быстро реагировал на оповещения транспортного средства, выводимые транспортным средством, и тем более при выполнении маневров, которые могут потребовать повышенного внимания и быстрой реакции со стороны водителя. Главным образом, хорошо известно, что присутствие других находящихся в транспортном средстве людей, таких как подростки, которые вероятно могут вести оживленные разговоры, может быть вредным для внимания и информированности водителей, для которых внимание может быть проблемой, или внимание которых может быть легко отвлечено. Когда оживленные разговоры продолжаются, важно, чтобы водитель не отвлекался на эти разговоры и вновь фокусировался на событии вождения. Существуют известные методы, помогающие водителю восстанавливать фокус и внимание на дороге, по которой осуществляется движение, но такие системы часто относятся ко всем водителям одинаково и могут применять одни и те же методы.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

[0005] Преимуществом вариантов выполнения, описанных в данном документе, является система порогового анализатора разговоров в салоне (ICTA) для анализа определенного частотного диапазона, относящегося к звукам разговоров в транспортном средстве. ICTA анализирует соответствующие звуковые данные звуков разговоров, которые находятся в пределах заданной полосы частот, для определения того, превышают ли анализируемые звуковые данные заданное пороговое значение, для определения того, что водитель может участвовать в разговорах, которые могут отвлечь внимание водителя от задачи вождения. Система и методы, описанные в данном документе, позволяют ответственному лицу, предпочтительно не водителю, устанавливать пользовательский профиль для водителя в системе ICTA так, что типичные настройки подсистемы транспортного средства могут быть установлены для этого водителя, чтобы помогать удерживать внимание водителя на задаче вождения. В дополнение к анализу звуковых данных из соответствующего частотного диапазона также из зафиксированных звуковых данных удаляется фоновый шум. Если анализируемые звуковые данные превышают заданное пороговое значение, то устанавливается флаг, и блок принятия решения о чувствительности использует пользовательский профиль для персонализации настроек чувствительности транспортного средства для водителя. В результате время обеспечения предупреждающего сообщения для водителя может быть изменено, а также может быть задержано подключение определенных устройств, таких как телефоны и другие устройства обмена сообщениями. Различные устройства, такие как HMI, устройство распознавания лиц или устройство брелока, передающие сигнал транспортному средству, могут использоваться для идентификации водителя транспортного средства, чтобы пользовательский профиль, связанный с водителем, был включен для события вождения.

[0006] Вариант выполнения предусматривает динамическую систему информирования о разговорах, которая включает в себя по меньшей мере один микрофон, фиксирующий звуковые данные в салоне транспортного средства. Пороговый анализатор разговоров в салоне (ICTA) анализирует звуковые данные в заданном частотном диапазоне. ICTA определяет, превышают ли звуковые данные в заданном частотном диапазоне пороговое значение. Блок принятия решения о чувствительности (SDT) изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Соответствующая измененная настройка транспортного средства используется для обеспечения управления бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.

В дополнительном варианте выполнения заданный частотный диапазон, анализируемый ICTA, относится к звукам разговоров, произносимым находящимися в транспортном средстве людьми в салоне транспортного средства.

В другом дополнительном варианте выполнения ICTA включает в себя широкополосный фильтр для фильтрации фоновых шумов из звуковых данных.

В еще одном дополнительном варианте выполнения фоновые шумы включают в себя звуковые данные мультимедийной системы.

В еще одном дополнительном варианте выполнения фоновые шумы включают в себя звуковые данные окружающей среды.

В еще одном дополнительном варианте выполнения пользовательский профиль хранится в памяти ICTA.

В еще одном дополнительном варианте выполнения пользовательский профиль хранится в облаке.

В еще одном дополнительном варианте выполнения пользовательский профиль включает в себя настраиваемые правила принятия решений для изменения настроек транспортного средства.

В еще одном дополнительном варианте выполнения каждый пользовательский профиль связан с соответствующим пользователем, причем каждый пользовательский профиль включает в себя набор настраиваемых правил принятия решений, персонализированных для соответствующего пользователя.

В еще одном дополнительном варианте выполнения блок SDT получает доступ к пользовательскому профилю идентифицированного водителя и применяет правила принятия решений в пользовательском профиле для адаптивного изменения настроек транспортного средства.

В еще одном дополнительном варианте выполнения система транспортного средства включает в себя систему предупреждения о столкновении, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о столкновении по сравнению с выполненной на заводе настройкой.

В еще одном дополнительном варианте выполнения система транспортного средства включает в себя систему предупреждения о сходе с полосы движения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки транспортного средства включают в себя активацию более раннего предупреждения о сходе с полосы движения по сравнению с выполненной на заводе настройкой.

В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих телефонных звонков.

В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки подключения включают в себя задержку подключения входящих сообщений.

В еще одном дополнительном варианте выполнения система транспортного средства включает в себя настройку подключения, и при этом правила принятия решений в пользовательском профиле для адаптивного изменения настройки включают в себя снижение настройки громкости мультимедийного устройства транспортного средства.

В еще одном дополнительном варианте выполнения динамическая система информирования о разговорах дополнительно включает в себя устройство идентификации водителя для идентификации водителя транспортного средства.

В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство человеко-машинного интерфейса, в котором пользователь вручную выбирает идентификатор водителя.

В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство брелока, причем устройство брелока передает сигнал транспортному средству, идентифицирующий пользователя.

В еще одном дополнительном варианте выполнения устройство идентификации водителя включает в себя устройство распознавания лиц для идентификации водителя.

[0007] Вариант выполнения предусматривает систему, которая включает в себя микрофон, фиксирующий звуковые данные в салоне транспортного средства. Пороговый анализатор анализирует звуковые данные в заданном частотном диапазоне для определения, превышают ли звуковые данные пороговое значение. Блок принятия решения о чувствительности изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Измененная настройка транспортного средства обеспечивает управление бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

[0008] Фиг. 1 представляет собой структурную схему адаптивной системы информирования о разговорах находящихся в транспортном средстве людей.

[0009] Фиг. 2 иллюстрирует примерный график выходного напряжения микрофона в дискретные моменты времени.

[0010] Фиг. 3 иллюстрирует примерный график распределения звуковой энергии.

[0011] Фиг. 4 иллюстрирует блок-схему способа работы системы информирования о разговорах.

ПОДРОБНОЕ ОПИСАНИЕ

[0012] На Фиг. 1 показана структурная схема адаптивной системы 10 информирования о разговорах находящихся в транспортном средстве людей. Адаптивная система 10 информирования о разговорах находящихся в транспортном средстве людей включает в себя по меньшей мере один салонный микрофон 12, систему 14 порогового анализатора разговоров в салоне (ICTA), систему 16 принятия решения о чувствительности (SDT), систему 18 хранения данных, которые адаптивно используются для изменения систем 20 помощи водителю транспортного средства для помощи водителю в удержании внимания на дороге, по которой осуществляется движение.

[0013] Салонный микрофон 12 расположен в салоне транспортного средства для фиксации звуков разговоров в нем. Салонный микрофон 12 фиксирует звуковые данные в салоне транспортного средства, и звуковые данные передаются к ICTA 14. Альтернативно, система 18 хранения данных может включать в себя бортовое запоминающее устройство или удаленную облачную систему, соединенную по беспроводной связи с транспортным средством.

[0014] ICTA 14 включает в себя процессор, который определяет, участвуют ли водитель и другие находящиеся в транспортном средстве люди в громких оживленных разговорах. ICTA 14 вычисляет уровни звуковой энергии разговоров, которые представляют собой конкретные характерные уровни шума в салоне транспортного средства, на основе зафиксированных звуковых данных и определяет, когда уровни звука превышают соответствующее пороговое значение, чтобы были отмечены условия для адаптивного изменения систем 20 помощи водителю транспортного средства для помощи водителю в удержании внимания на дороге, по которой осуществляется движение. ICTA 14 получает зафиксированный звук от салонного микрофона 12 и концентрирует свой анализ на соответствующей полосе частот, которая включает в себя характеристики звука в пределах соответствующего частотного диапазона, который связан с ожидаемым общением водителей и других находящихся в транспортном средстве людей. ICTA 14 дополнительно включает в себя широкополосный фильтр для фильтрации фоновых шумов для изоляции фонового звука от звука разговоров находящихся в транспортном средстве людей. Фоновые шумы, которые отфильтровываются, могут включать в себя, но не ограничиваясь, окружающие шумы в салоне, кроме голосов находящихся в транспортном средстве людей, такие как производимые транспортным средством звуки, внешние звуки окружающей среды и звук мультимедийной системы.

[0015] Адаптивная система 10 информирования о разговорах находящихся в транспортном средстве людей может дополнительно включать в себя устройство 22 идентификации водителя для идентификации водителя, чтобы к соответствующему пользовательскому профилю, хранящемуся в памяти, мог быть получен доступ для использования ICTA 14 и SDT 16. Устройство 22 идентификации пользователя может включать в себя, но не ограничиваясь, человеко-машинный интерфейс (HMI), брелок, устройство распознавания находящихся в транспортном средстве людей или лиц или биометрическое сенсорное устройство. Более того, одно или более из устройств идентификации водителя, как описано, могут использоваться совместно для идентификации водителя.

[0016] Фиг. 2 иллюстрирует примерный график выходного напряжения салонного микрофона 12 в дискретные моменты времени. Ось y представляет собой напряжение, а ось х представляет собой количество выборок в течение определенного периода времени. ICTA 14 определяет распределение энергии, как показано на Фиг. 3, на основе графика зависимости напряжения от времени на Фиг. 2. Ось y представляет собой спектральную плотность энергии (PSD), а ось х представляет собой частоту. ICTA 14, основываясь на графике PSD, выполняет агрегацию выходных данных на соответствующих частотах в течение определенного периода времени для определения того, участвуют ли водитель и находящиеся в транспортном средстве люди в громких оживленных разговорах, что может приводить к потере концентрации водителя на задаче вождения.

[0017] ICTA 14 устанавливает ICTA_flag, который представлен следующим выражением:

где

[0018] Флаг сообщается системе 16 SDT, если энергия превышает заданное пороговое значение. SDT 16 представляет собой подсистему, которая обеспечивает индивидуальные настройки системы транспортного средства для водителя и, конкретнее, для начинающих водителей или пожилых водителей. SDT 16 применяет правила принятия решений для определения активации соответствующего средства оповещения и/или модификации подсистемы. Средства оповещения могут включать в себя визуальные оповещения, звуковые оповещения или тактильные оповещения. Модификации подсистемы могут включать в себя, но не ограничиваясь, задержку осуществления связи с водителем, обеспечение более раннего предупреждения о столкновении (например, с помощью системы предупреждения о столкновении) и предупреждения о сходе с полосы движения (например, с помощью системы предупреждения о сходе с полосы движения). SDT 16 персонализирует настройки чувствительности транспортного средства для водителя на основе заданного профиля. То есть каждый выбранный водитель, в частности, начинающие водители с минимальным опытом вождения, может иметь пользовательский профиль, установленный в SDT 16. Пользовательский профиль может быть установлен ответственным лицом (например, родителем), который настраивает индивидуальные настройки для изменения предупреждения, относящегося к управлению бдительностью водителя, и другие настройки чувствительности подсистемы транспортного средства, когда система обнаруживает, что шумы разговоров в салоне транспортного средства превышают соответствующее пороговое значение, что является признаком того, что водитель не уделяет полного внимания задаче вождения. Когда ICTA 14 ставит отметку о превышении порогового значения шума связи, SDT 16 просматривает профиль водителя и определяет, какие настройки подсистемы транспортного средства требуют изменения, чтобы либо вызвать предупреждение раньше, либо задержать активацию подсистемы по сравнению с заводской настройкой. Например, если предупреждение о возможном столкновении требует активации, SDT 16 может указывать соответствующей подсистеме увеличивать время предупреждения, обеспечивая более ранее уведомление водителя о столкновении и предупреждение о сходе с полосы движения, чем так, как обычно настроено. Ответственное лицо, настраивающее пользовательский профиль, может хотеть, чтобы предупреждение срабатывало ранее на основе расстояния между транспортным средством и обнаруженным объектом или на основе времени до столкновения, чтобы дать водителю больше времени для реагирования. Другие конфигурации могут включать в себя задержку входящего подключения, которая включает в себя, но не ограничиваясь, задержку подключения входящих телефонных звонков/сообщений или снижение громкости мультимедийного устройства, в настоящее время выводящего аудиосигнал.

[0019] SDT 16 применяет правила принятия решений для определения активации соответствующего средства оповещения. Пример общего правила может иметь следующий вид:

где

ICTA_flag: 1 - частые разговоры в салоне превышают настраиваемое пороговое значение; 0 - минимум разговоров

Категория водителя: 1 - новичок, пожилой; 0 - средний уровень вождения

SDT_value:

где

1: Задержка информации о входящем подключении;

2: Более ранние оповещения для систем помощи; и

0: Бездействие.

[0020] Фиг. 4 иллюстрирует блок-схему способа работы системы информирования о разговорах. В блоке 30 осуществляется метод контроля условий в салоне транспортного средства.

[0021] В блоке 31 водитель идентифицируется либо водителем, вводящим свою идентификационную информацию, либо системой транспортного средства, идентифицирующей водителя с помощью различных методов, включая, но не ограничиваясь, обнаружение находящихся в транспортном средстве людей, метки RFID, биометрическое определение, распознавание лиц, MyKey или брелоки.

[0022] В блоке 32 информация о звуках в салоне транспортного средства, данные подключения, информация о транспортном средстве и водителе получается либо из запоминающего устройства транспортного средства, либо из другого запоминающего устройства, такого как облако.

[0023] В блоке 33 один или более салонных микрофонов фиксируют звуковые данные в салоне транспортного средства.

[0024] В блоке 34 ICTA анализирует зафиксированные звуковые данные в соответствующем частотном диапазоне, относящемся к голосам находящихся в транспортном средстве людей в пассажирском салоне, а также отфильтровывает фоновые шумы из звуковых данных. ICTA вычисляет уровни звуковой энергии разговоров и определяет связанные флаги принятия решений (ICTA_value) для SDT.

[0025] В блоке 35 определяется, превышает ли ICTA_value пороговое значение. Если определено, что ICTA_value не превышает пороговое значение, то процедура возвращается к блоку 33 для контроля звуковых данных в салоне транспортного средства. Если определено, что ICTA_value превышает пороговое значение, то процедура переходит к блоку 36.

[0026] В блоке 36 SDT применяет правила принятия решений, которые персонализированы для идентифицированного водителя, и определяет настройки активации, связанные с водителем, на основе профиля водителя. Соответствующие настройки активации, связанные с водителем, динамически изменяются с их типичных настроек на основе профиля водителя.

[0027] В блоке 37 системы транспортного средства и настройки подключения регулируются в реальном времени и активируются соответственно в том случае, если соответствующая система транспортного средства или подключение активировано, и управление бдительностью водителя требует активации соответствующей системы транспортного средства.

[0028] Хотя определенные варианты выполнения настоящего изобретения описаны подробно, знакомым с областью техники, к которой относится это изобретение, будут очевидны различные альтернативные конструкции и варианты выполнения для осуществления изобретения, как определено следующей далее формулой изобретения.

Реферат

Группа изобретений относится к вариантам динамической системы информирования о разговорах. Система содержит: минимум один микрофон, пороговый анализатор разговоров в салоне (ICTA), систему принятия решения о чувствительности (SDT). Микрофон фиксирует звуковые данные в салоне транспортного средства. Пороговый анализатор разговоров в салоне (ICTA) анализирует звуковые данные в заданном частотном диапазоне и определяет, превышают ли звуковые данные пороговое значение в заданном частотном диапазоне. Система принятия решения о чувствительности (SDT) изменяет настройки транспортного средства, связанные с пользовательским профилем, когда звуковые данные превышают пороговое значение. Причем соответствующая измененная настройка транспортного средства используется для обеспечения управления бдительностью водителя системы транспортного средства в ответ на активацию системы транспортного средства. Достигается предоставление системы для помощи водителю в удержании внимания на дороге. 2 н. и 18 з.п. ф-лы, 4 ил.

Формула