Устройство формирования изображения и способ управления дисплеем для этого устройства - RU2517064C2
Код документа: RU2517064C2
Чертежи
Описание
Область техники, к которой относится изобретение
Настоящее изобретение относится к устройству формирования изображения и его способу управления дисплеем и, в частности, относится к работе дисплея устройства формирования изображения, в котором множество модулей панели дисплея предусмотрены на его кожухе.
Уровень техники
Устройства формирования изображения, такие как цифровые фотокамеры, цифровые видеокамеры и т.д. получили широкое распространение, и во многих из них сформирована панель дисплея, выполненная как жидкокристаллическая панель или тому подобное.
Например, как раскрыто в публикации находящейся на экспертизе заявки на японский патент №2007-158799, выполнена компоновка, в которой панель дисплея предусмотрена на кожухе камеры с относительно большой площадью, выполняют отслеживание изображения субъекта во время формирования изображения и выполняют отображение воспроизведения во время воспроизведения снимаемого изображения.
Сущность изобретения
Настоящее изобретение направлено на создание компоновки, в которой два модуля панели дисплея расположены на кожухе устройства формирования изображения. В частности, аналогично предшествующему уровню техники, в дополнение к модулю панели дисплея, выполненному с возможностью отображения изображения в направлении пользователя (человека, использующего устройство формирования изображения) на кожухе устройства формирования изображения на передней стороне (стороне, используемой как сторона субъекта) или тому подобное на кожухе устройства, предусмотрен модуль панели дисплея, выполненный с возможностью отображения изображения в направлении стороны субъекта.
Таким образом, в случае, когда предусмотрены два модуля панели дисплея, соответствующее отображение должно быть выполнено для каждой панели дисплея, то есть отображение, представляемое для зрителя, и операция отображения, позволяющие исключить ненужные операции и потребление электроэнергии, в соответствии с состоянием работы или ситуацией, относящейся к формированию изображения.
Таким образом, существует необходимость реализовать соответствующее отображение в устройстве формирования изображения, включающем два модуля панели дисплея.
В соответствии с вариантом выполнения настоящего изобретения устройство формирования изображения включает в себя: первый модуль панели дисплея, выполненный с возможностью отображения в направлении стороны пользователя, расположенный на кожухе устройства; второй модуль панели дисплея, выполненный с возможностью отображения в направлении стороны субъекта, расположенный на кожухе устройства; модуль обработки формирования изображения, выполненный с возможностью подвергать свет, падающий со стороны субъекта, фотоэлектрическому преобразованию для получения сигнала снятого изображения; и модуль управления, выполненный с возможностью управления обработкой формирования изображения в соответствии с режимом формирования изображения и отображением на основе сигнала снятого изображения, полученного модулем обработки формирования изображения, с первым модулем панели дисплея, при управлении операциями отображения на основе сигнала снятого изображения, полученного модулем обработки формирования изображения второго модуля панели дисплея, по меньшей мере, в соответствии с режимом формирования изображения.
Кроме того, модуль управления может выполнять управление для отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, на второй панели дисплея, в случае, когда режим формирования изображения представляет собой заданный режим формирования изображения, определенный заранее среди множества режимов формирования изображений.
Кроме того, модуль управления может выполнять управление для отключения отображения второй панели дисплея в случае, когда режим формирования изображения не представляет собой заданный режим формирования изображения.
Кроме того, модуль управления может выполнять управление для отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, на втором модуле панели дисплея в состоянии с низкой яркостью, в случае, когда режим формирования изображения не представляет собой заданный режим формирования изображения.
Кроме того, устройство формирования изображения может дополнительно включать в себя: модуль считывания данных изображения, выполненный с возможностью считывания данных изображения, записанных на носителе информации; в котором модуль управления выполняет управление для отображения, на основе данных изображения, считываемых модулем считывания данных изображения, на второй панели дисплея, в случае, когда режим формирования изображения не представляет собой заданный режим формирования изображения.
Кроме того, модуль управления может управлять операцией отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, во втором модуле панели дисплея, на основе режима формирования изображения и состояния установок в соответствии с операциями пользователя, относящимся к другим операциям устройства формирования изображения, кроме режима формирования изображения.
Кроме того, модуль управления может управлять операцией отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, во втором модуле панели дисплея, на основе режима формирования изображения и информации внутреннего детектирования устройства формирования изображения.
Кроме того, устройство формирования изображения может дополнительно включать в себя: модуль анализа изображения, выполненный с возможностью анализа изображения сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, когда модуль управления управляет операцией отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения, со вторым модулем панели дисплея, на основе режима формирования изображения и информации анализа изображения, полученной из модуля анализа изображения.
Кроме того, модуль анализа изображения может детектировать, присутствует или нет человек на стороне субъекта, по анализу изображения сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения.
Кроме того, устройство формирования изображения может дополнительно включать в себя: модуль операций, выполненный с возможностью выбирать режим формирования изображения.
Способ управления дисплеем для устройства формирования изображения с первым модулем панели дисплея, выполненным с возможностью отображения в направлении стороны пользователя, и вторым модулем панели дисплея, выполненным с возможностью отображения в направлении стороны субъекта, включающий в себя следующие этапы: выполняют отображение в первой панели дисплея на основе сигнала снятого изображения, полученного в результате фотоэлектрического преобразования падающего света, падающего со стороны субъекта; и во втором модуле панели дисплея, выполненным с возможностью отображения в направлении стороны субъекта, расположенном на кожухе устройства; и управляют операциями отображения упомянутого сигнала снятого изображения на второй панели дисплея в соответствии с режимом формирования изображения, выбранным среди различных типов режимов формирования изображения, для выполнения обработки формирования изображения, пригодной для ситуации формирования изображения.
То есть, в соответствии с описанной выше конфигурацией, операции для второго модуля панели дисплея выполняют в соответствии с режимом формирования изображения. Режим формирования изображения представляет собой режим, установленный в соответствии с различными типами ситуаций формирования изображения и целей формирования изображения. Например, существуют режимы, когда пользователь может сделать такой выбор, например, что пригодная обработка формирования изображения может быть выполнена, например, в соответствии с требуемым типом изображения и типом местоположения и ситуацией. Условия регулировки экспозиции, параметры обработки сигналов и т.д. устанавливают для каждого из различных типов режимов формирования изображения.
В случае описанной выше конфигурации определяют возможность присутствия человека на стороне субъекта и выполняют отображение с использованием второй панели дисплея.
Кроме того, например, во время периода мониторинга при формировании изображения, такого как неподвижное изображение (ожидая соответствующий момент времени для съемки изображения с помощью фотокамеры), пользователь устройства формирования изображения (то есть пользователь, который пытается выполнить съемку неподвижного изображения с помощью устройства формирования изображения) выполняет мониторинг изображения субъекта, используя первый модуль панели дисплея. Такое изображение мониторинга представляет собой сигнал снятого изображения, получаемый в модуле устройства формирования изображения во время этого периода, Которое также называется "прямым изображением" и представляет собой движущееся изображение, снимаемое в режиме реального времени, сцены субъекта. Пользователь проверяет изображение субъекта, формируемое таким образом, для выполнения операции съемки (операции спуска затвора) в требуемый момент времени. Это выполняется так же, как и в обычном устройстве формирования изображения.
Во время такого периода мониторинга с помощью второго модуля панели дисплея возможно выполнять отображение на основе снимаемого сигнала изображения, то есть отображать изображение мониторинга, используемое как прямое изображение. Например, в случае, когда субъект представляет собой человека, этот человек может проверять свое снимаемое выражение лица, позу или тому подобное через дисплей второго модуля панели дисплея.
Однако такой подход эффективен только, когда человек находится на стороне субъекта. Например, когда пользователь выбирает режим сцены, который используется как режим формирования изображения, и пытается получить сцену изображения, в которой отсутствует человек, можно предположить, что отсутствует какой-либо человек, который мог бы просматривать отображение во втором модуле панели дисплея. Поэтому в таком случае отсутствует какая-либо причина отображения изображения мониторинга во втором модуле панели дисплея. Следовательно, в таком случае целесообразно попытаться сэкономить энергию путем подключения второго модуля панели дисплея.
Например, операциями дисплея вторых модулей панели дисплея управляют соответствующим образом в соответствии со статусом, оценка которого была получена по режиму формирования изображения в этот момент времени, в результате чего можно реализовать полезное отображение или более приятное отображение, используя два модуля панели дисплея, исключить повышенное потребление энергии, даже если предусмотрены два модуля панели дисплея или тому подобное.
В соответствии с описанной выше конфигурацией, используя устройство формирования изображения, предусмотрены два модуля панели дисплея, в результате чего сторона пользователя и сторона субъекта могут визуально распознавать свои стороны, соответственно, и каждая панель дисплея может выполнять соответствующее отображение в соответствии со статусом формирования изображения, оценка которого была получена по режиму формирования изображения.
В частности, предусмотрен модуль, определяющий присутствует или нет человек на стороне субъекта, который может просматривать вторую панель дисплея и отображение на ней, и работой дисплея второго модуля панели дисплея управляют соответствующим образом. То есть можно реализовать полезное отображение, отображение, доставляющее большое удовольствие, исключение ненужного отображения или тому подобное, и, соответственно, может быть предусмотрено новое и полезное устройство формирования изображения.
Краткое описание чертежей
На фиг.1А и 1В представлены пояснительные схемы примера внешнего вида устройства формирования изображения в соответствии с вариантом выполнения настоящего изобретения;
на фиг.2 показана блок-схема устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.3 показана пояснительная схема перехода операции устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.4А-4С показаны пояснительные схемы примера отображения изображения устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.5А-5С показаны пояснительные схемы примера отображения изображения устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.6 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения в соответствии с вариантом выполнения;
на фиг.7 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения в соответствии с вариантом выполнения;
на фиг.8 показана блок-схема последовательности операций примера управления дисплеем с учетом режима самостоятельного формирования изображения на передней панели дисплея в соответствии с вариантом выполнения;
на фиг.9 показана блок-схема последовательности операций примера управления дисплеем для передней панели дисплея на основе режима формирования изображения и установок пользователя в соответствии с вариантом выполнения;
на фиг.10 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения и информация детектирования камеры в соответствии с вариантом выполнения;
на фиг.11 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения и результатов анализа изображения в соответствии с вариантом выполнения;
на фиг.12 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения и результатов анализа изображения в соответствии с вариантом выполнения;
на фиг.13 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея на основе режима формирования изображения и результатов анализа изображения в соответствии с вариантом выполнения;
на фиг.14 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея с учетом режима спуска затвора при появлении улыбки в соответствии с вариантом выполнения; и
на фиг.15 показана блок-схема последовательности операций примера управления дисплеем передней панели дисплея во время воспроизведения в соответствии с вариантом выполнения.
Подробное описание изобретения
Ниже приведено описание вариантов выполнения настоящего изобретения в соответствии со следующей последовательностью.
1. Конфигурация устройства формирования изображения
2. Переход операции
3. Примеры отображения экрана обоих модулей панели дисплея
4. Управление отображением переднего модуля панели дисплея во время мониторинга
<4-1: Пример обработки на основе режима формирования изображения>
<4-2: Пример обработки на основе режима формирования изображения и установок пользователя>
<4-3: Пример обработки на основе режима формирования изображения и внутренней информация детектирования>
<4-4: Пример обработки на основе режима формирования изображения и информации анализа изображения>
5. Управление дисплеем переднего модуля панели дисплея во время воспроизведения
6. Примеры модификации
1. Конфигурация устройства формирования изображения
В качестве варианта выполнения настоящего изобретения, со ссылкой на фиг.1А, 1В и 2 будет описана конфигурация устройства формирования изображения, используемого, например, как цифровая камера.
На фиг.1А и 1В представлен внешний вид устройства 1 формирования изображения в соответствии с настоящим примером, который представлен с его задней стороны (сторона пользователя) и передней стороны (сторона субъекта). В устройстве 1 формирования изображения, на передней стороне предусмотрен модуль 20 объектива формирования изображения и модуль 15 излучения фотовспышки и т.д.
Кроме того, органы управления, используемые для выполнения операций пользователя, сформированы на различных участках, таких как верхняя сторона кожуха, задняя сторона и т.д. Например, предусмотрена кнопка 5а элемента управления съемкой, участок 5b элемента управления с круглой шкалой, кнопка 5 с управления широкоугольной/телефотосъемкой, различные типы кнопок 5d управления, D-площадка 5е и т.д. Участок 5b операции элемента управления с круглой шкалой используется, например, для выбора режима изображения или тому подобное. Такие элементы управления, как инструкция меню, инструкция воспроизведения, инструкция коррекции экспозиции и т.д. доступны через кнопки 5d управления. D-площадка 5е используется для различных типов операций, включающих в себя, например, выбор/определение элемента меню управления, отображаемого на панели 6 дисплея.
В устройстве 1 формирования изображения, как показано на фиг.1А, панель 6М основного дисплея, состоящая из жидкокристаллической панели, панели органической электролюминесценции (EL, ЭЛ), или тому подобное предусмотрена на задней стороне, и как показано на фиг.1В, передняя панель 6F дисплея, аналогично состоящая из жидкокристаллической панели, органической ЭЛ панели или тому подобное, предусмотрена на передней стороне.
Панель 6М основного дисплея и передняя панель 6F дисплея имеют, например, одинаковый размер экрана, и предусмотрены так, что они занимают относительно широкую область на задней стороне кожуха и на передней стороне кожуха, соответственно. На панели 6М основного дисплея, в основном выполняют, во время периода мониторинга (во время ожидания соответствующего момента в режиме формирования изображения), отображение изображения мониторинга (прямое изображение), где пользователь представляет собой субъект, в результате чего пользователь может подтверждать сцену субъекта, используемую как цель формирования изображения. Кроме того, в режиме воспроизведения выполняют отображение воспроизводимого изображения или миниатюрных изображений, в соответствии с операцией пользователя.
С другой стороны, передняя панель 6F дисплея направлена в сторону субъекта для выполнения отображения. На передней панели 6F дисплея также выполнена компоновка, в которой выполняют отображение отслеживаемого изображения или тому подобное, в результате чего человек, используемый, как сторона субъекта, может просматривать содержание своего отображения, как будет описано ниже.
Пример конфигурации такого устройства 1 формирования изображения будет описан со ссылкой на фиг.2. Как показано на фиг.2, устройство 1 формирования изображения включает в себя систему 2 формирования изображения, систему 3 управления, цифровой сигнальный процессор 4 (DSP, ЦСП) камеры, модуль 5 операций, панель 6М основного дисплея, переднюю панель 6F дисплея, контроллер 7 дисплея, внешний интерфейс 8, SDRAM (СДОЗУ, синхронное динамическое оперативное запоминающее устройство) 9 и интерфейс 10 подключения.
Система 2 формирования изображения представляет собой участок, предназначенный для выполнения операции формирования изображения, и включает в себя механический модуль 21 объектива, механизм 22 диафрагмы/фильтра ND (НП, нейтральной плотности), модуль 23 устройства формирования изображения, модуль 24 обработки аналогового сигнала, модуль 25 A/D (А/Ц, аналогово-цифрового) преобразования, модуль 26 привода объектива, модуль 27 детектирования положения объектива, схему 28 генерирования тактовой частоты, модуль 13 детектирования смазанного изображения, модуль 14 управления излучением света, модуль 15 излучения фотовспышки, модуль 17 привода объектива, модуль 18 привода диафрагмы/привода НП и модуль 19 привода устройства формирования изображения.
Падающий свет от субъекта направляют в модуль 23 устройства формирования изображения через механический модуль 21 объектива и механизм 22 диафрагмы/фильтра НП. Механический модуль 21 объектива имеет внутреннюю конфигурацию модуля 20 объектива формирования изображения на фиг.1В, и включает в себя множество групп оптических линз, таких как закрывающая линза, фокусирующая линза, линза степени увеличения и т.д. Кроме того, модуль 26 привода объектива представляет собой механизм перемещения, предназначенный для перемещения линзы фокусирования или линзы степени увеличения в направлении оптической оси. Модуль 26 привода объектива, в который подают энергию привода от модуля 17 привода объектива, перемещает линзу фокусирования или линзу степени увеличения. Описанное ниже CPU (ЦПУ, центральное процессорное устройство) 31 управляет модулем 17 привода объектива, выполняя, таким образом, управление фокусированием или операцией изменения степени увеличения.
Механизм 22 диафрагмы/фильтра НП включает в себя механизм диафрагмы и механизм фильтра НП, который предназначен для аттенюации количества падающего света, при его вставке в оптическую систему объектива, и выполняет количественную регулировку оптического потока. Механизм 22 диафрагмы/фильтра НП выполняет оптическую количественную регулировку, открывая/закрывая механизм диафрагмы. Кроме того, модуль 18 привода диафрагмы/привода НП, перемещает фильтр НП внутрь и наружу относительно оптической оси падающего света, регулируя, таким образом, количество падающего света. ЦПУ 31 управляет модулем 18 привода диафрагмы/привода НП для управления механизмом диафрагмы или фильтром НП, в результате чего можно выполнять управление количеством падающего света (управление регулировкой экспозиции).
Световой поток от субъекта проходит через механический модуль 21 объектива и механизм 22 диафрагмы/НП фильтра, в результате чего изображение субъекта формируется в модуле 23 устройства формирования изображения. Модуль 23 устройства формирования изображения подвергает сформированное изображение субъекта фотоэлектрическому преобразованию для вывода сигнала снятого изображения, соответствующего изображению субъекта. Модуль 23 устройства формирования изображения включает в себя прямоугольную область формирования изображения, состоящую из множества пикселей, и последовательно выводит в модуль 24 обработки аналогового сигнала сигнал изображения, который представляет собой аналоговый сигнал, соответствующий заряду, накопленному в каждом пикселе с последовательным приращением пикселей. Например, массив датчиков CCD (ПЗС - прибор с зарядовой связью), массив датчиков CMOS (КМОП - комплиментарный металло-оксидный полупроводник) или тому подобное используют в качестве модуля 23 устройства формирования изображения.
Модуль 24 обработки аналогового сигнала внутри себя включает в себя схему CDS (ДВК, двойная выборка корреляции), схему AGC (АРУ - автоматическая регулировка усиления) и т.д., и подвергает сигнал изображения, вводимый из модуля 23 устройства формирования изображения, заданной аналоговой обработке. Модуль 25 А/Ц преобразования преобразует аналоговый сигнал, обработанный в модуле 24 обработки аналогового сигнала в цифровой сигнал, и передает его в ЦСП 4 камеры.
Схема 28 генерирования тактовой частоты, которой управляют с помощью ЦПУ 31, управляет синхронизацией различных операций модуля 23 устройства формирования изображения, модуля 24 обработки аналогового сигнала и модуля 25 А/Ц преобразования.
В частности, схема 28 генерирования тактовой частоты передает, для управления моментами времени выполнения операции формирования изображения модуля 23 устройства формирования изображения, сигнал синхронизации для формирования выдержки/считывания заряда, сигнал синхронизации, используемый в качестве функции электрического затвора, сигнал синхронизации для передачи, сигнал синхронизации в соответствии с частотой кадров и т.д., в модуль 23 устройства формирования изображения через модуль 19 привода устройства формирования изображения. Кроме того, схема 28 генерирования тактовой частоты также передает описанные выше различные сигналы синхронизации в модуль 24 обработки аналогового сигнала таким образом, что модуль 24 обработки аналогового сигнала может выполнять обработку синхронно с передачей сигнала изображения в модуль 23 устройства формирования изображения.
ЦПУ 31 выполняет управление каждым из сигналов синхронизации, генерируемых схемой 28 генерирования тактовой частоты, в результате чего можно выполнять изменение частоты кадров снятого изображения, и управление электрическим затвором (управление переменным временем выдержки в пределах кадра). Кроме того, ЦПУ 31 вырабатывает сигнал регулирования коэффициента усиления и передает его в модуль 24 обработки аналогового сигнала через схему 28 генерирования тактовой частоты, в результате чего можно выполнять переменное управление коэффициентом усиления сигнала снятого изображения.
Модуль 13 детектирования степени смазанности детектирует количество сотрясений, и величину движения самого устройства 1 формирования изображения. Модуль 13 детектирования степени смазанности выполнен, например, на основе датчика ускорения, датчика вибрации или тому подобное и передает информацию детектирования, используемую, как величину степени смазанности, в ЦПУ 31.
Модуль 15 излучения света фотовспышки работает под управлением модуля 14 управления излучением света, для излучения света фотовспышки. ЦПУ 31 передает инструкцию в модуль 14 управления излучением света фотовспышки для излучения фотовспышки в заданный момент времени, например, во время операция пользователя или тому подобное, в результате чего модуль 15 излучения света фотовспышки может излучать свет.
ЦСП 4 камеры подвергает сигнал снятого изображения, который поступает из модуля 25 А/Ц преобразования системы 2 формирования изображения, различным типам обработки цифрового сигнала. С помощью ЦСП 4 камеры, реализуют такие функции обработки, например, как показано на чертеже, как функции модуля 41 обработки сигнала изображения, модуля 42 обработки сжатия/расширения, контроллера 43 СДОЗУ, модуля 44 анализа изображения и т.д., с использованием внутренних аппаратных и программных средств.
Модуль 41 обработки сигнала изображения выполняет обработку для входного сигнала снятого изображения. Например, модуль 41 обработки сигнала изображения выполняет обработку автофокусирования (AF, АФ), обработку автоматической экспозиции (АЕ, АЭ) или тому подобное, как обработку операции, используемой для управления приводом системы 2 формирования изображения, используя сигнал снятого изображения, и также выполняет обработку автоматической балансировки белого (AWB, АББ) или тому подобное, как обработку, применяемую для самого сигнала снятого изображения, предназначенного для ввода.
Например, в качестве обработки автофокуса, модуль 41 обработки сигнала изображения выполняет детектирование контраста входного сигнала снятого изображения, и передает информацию детектирования в ЦПУ 31. Различные типы способов управления используются как способы управления автофокусом, но с помощью технологии, называемой "автофокус на основе контраста", выполняют детектирование контраста в отношении сигнала снятого изображения в каждый момент времени, принудительно перемещая линзу фокусирования, в результате чего определяют положение линзы фокусирования с оптимальным состоянием контраста. То есть ЦПУ 31 выполняет управление для подтверждения детектируемой величины детектирования контраста, детектируемой в модуле 41 обработки сигнала изображения, при выполнении управления движением линзы фокусирования перед операцией съемки изображения, и для определения положения оптимального состояния контраста, в качестве положения оптимального фокуса.
Кроме того, в качестве управления фокусом во время формирования изображения, можно выполнять способ детектирования формирования изображения, который называется здесь как, так называемое, автофокусирование с качанием. ЦПУ 31 проверяет значение детектирования контраста, детектируемое в модуле 41 обработки сигнала изображения, перемещая положение линзы фокусирования, постоянно качая линзу фокусирования на незначительное расстояние вперед и назад время операции формирования изображения. Оптимальное положение линзы фокусирования изменяется в зависимости от состояния субъекта, но детектирование контраста выполняют при малых перемещениях линзы фокусирования вперед и назад, в результате чего можно определять изменения направления управления формата в соответствии с изменением субъекта. Таким образом, автофокусирование может быть выполнено в состоянии отслеживания субъекта.
Следует отметить, что для механизма перемещения модуля 26 привода объектива назначают адрес для каждого из положений перемещения, и положение линзы определяют по его адресу положения перемещения.
Модуль 27 детектирования положения объектива определяет адрес линзы фокусирования, используемый как текущее положение линзы для линзы фокусирования, рассчитывая, таким образом, расстояние до субъекта в сфокусированном состоянии, и соответственно, оно может быть передано в ЦПУ 31, как информация расстояния. Таким образом, ЦПУ 31 может различать расстояние до основного субъекта в сфокусированном состоянии.
Обработка автоматической экспозиции, выполняемая модулем 41 обработки сигнала ЦСП 4 камеры, например, выполняет расчет яркости субъекта. Например, рассчитывают среднюю яркость входных снятых сигналов изображения и передают ее в ЦПУ 31 как информацию яркости субъекта, то есть информацию о величине экспозиции. В качестве расчета среднего значения яркости можно рассмотреть различные типы способов, например, такой как расчет среднего значения в отношении значений сигнала яркости для всех пикселей данных снятого изображения, для одного кадра, расчет среднего значения величины сигнала яркости, в котором вес передан в участок центра изображения или тому подобное.
ЦПУ 31 может выполнять автоматическое управление экспозицией на основе такой информации величины экспозиции, то есть может выполнять регулировку экспозиции в соответствии с управлением электронным затвором в механизме диафрагмы, фильтре НП или в модуле 23 устройства формирования изображения, или может осуществлять управление усилением модуля 24 аналоговой обработки сигнала.
Модуль 41 обработки сигнала изображения ЦСП 4 камеры выполняет автоматическую балансировку белого, гамма-коррекцию, обработку улучшения кромки, обработку коррекции сотрясений или тому подобное, как обработку сигнала самого сигнала снятого изображения, в дополнение к обработке генерирования сигнала, используемой для операции автофокуса или операции автоматического определения экспозиции.
Модуль 42 обработки сжатия/расширения ЦСП 4 камеры выполняет обработку сжатия сигнала снятого изображения или обработку расширения сжатых данных изображения. Например, модуль 42 обработки сжатия/расширения выполняет обработку сжатия/расширения, используя такой способ, как JPEG (Объединенная группа экспертов по машинной обработке фотографических изображений), MPEG (Экспертная группа по вопросам движущегося изображения), или тому подобное.
Контроллер 43 СДОЗУ выполняет запись/считывание СДОЗУ 9. СДОЗУ 9 используют для временного сохранения сигнала снятого изображения, введенного через систему 2 формирования изображения, сохраняемого на этапе обработки в модуле 41 обработки изображения или в модуле 42 обработки сжатия/расширения, обеспечивая рабочую область, сохраняя информацию, полученную в модуле 44 анализа информации или тому подобное, и контроллер 43 СДОЗУ выполняет запись/считывание таких данных для СДОЗУ 9.
Модуль 44 анализа изображения выполняет анализ изображения, например, в отношении данных снятого изображения, обработанных в модуле 41 обработки сигнала изображения, и выполняет различные типы распознавания изображения. В случае настоящего примера, модуль 44 анализа изображения выполняет обработку распознавания человека или лица, включенного в изображение субъекта. Кроме того, в случае распознавания лица человека, модуль 44 анализа изображения, в некоторых случаях, выполняет обработку распознавания для ориентации лица, направления взгляда или тому подобное. Кроме того, модуль 44 анализа изображения, в некоторых случаях, детектирует информацию различных типов, которая может быть распознана с помощью анализа изображения, такую как величина относительного движения между устройством 1 формирования изображения и субъектом, или тому подобное.
Система 3 управления включает в себя ЦПУ 31, ОЗУ 32, ПЗУ 33 типа флэш и схему 34 часов. Каждый модуль системы 3 управления, ЦСП 4 камеры и каждый модуль системы 2 формирования изображения, контроллер 7 дисплея, внешний интерфейс 8 и интерфейс 10 подключения могут передавать данные изображения и могут взаимно управлять информацией через системную шину.
ЦПУ 31 управляет всем устройством 1 формирования изображения. В частности, ЦПУ 31 выполняет различные типы операций обработки и изменяет сигнал управления или тому подобное для каждого модуля на основе программы, сохраненной во внутреннем ПЗУ или тому подобное, и операцией пользователя с помощью модуля 5 операций, обеспечивая, таким образом, выполнение каждым модулем заданной операции. В частности, ЦПУ 31 выполняет управление отображением в основной панели 6М дисплея и обработку управления, используемую для операции дисплея описанной ниже передней панели 6F дисплея или тому подобное.
ОЗУ (оперативное запоминающее устройство) 32 используют для временного сохранения сигнала снятого изображения (данных изображения каждого кадра), обрабатываемого ЦСП 4 камеры, и сохранения этой информации в соответствии с каждым типом обработки ЦПУ 31.
Запоминающее устройство 33 типа флэш используется для сохранения данных изображения (снятых пользователем, как неподвижное изображение или движущееся изображение), которые используются как снятое изображение, или сохранения информации, запрашиваемой для сохранения в энергонезависимом запоминающем устройстве. ПЗУ 33 типа флэш может сохранять программы управления устройством 1 формирования изображения, данные установки камеры и т.д.
Схема 34 часов подсчитывает текущую информацию даты и времени (год, месяц, день, час, минута, секунда).
Модуль 5 операций составлен из различных типов элементов управления (5а-5е и т.д.), показанных на фиг.1А и 1В, и модуля генерирования сигнала, основанного на его операции. Информацию операции пользователя с использованием различных типов элементов управления передают из модуля 5 операций в ЦПУ 31. Следует отметить, что модуль 5 операций может быть выполнен так, что он обеспечивает для пользователя возможность выполнения операции с сенсорной панелью в дополнение к операциям, выполняемых операторами. Например, может быть выполнена компоновка, в которой сенсорный датчик предусмотрен на панели 6М основного дисплея, и ввод операции выполняют с использованием операции прикосновения пользователя к экрану дисплея.
Контроллер 7 дисплея управляет основной панелью 6М дисплея и передней панелью 6F дисплея для выполнения заданной операции дисплея на основе управления, выполняемого ЦПУ 31.
В качестве операции отображения дисплея в панели 6М основного дисплея выполняют отображение мониторинга (так называемое, отображение прямого изображения), отображение воспроизводимого изображения, считываемого с носителя 90 записи или из ПЗУ типа флэш, отображение меню операции, различные типы отображения пиктограмм, отображение точки во времени или тому подобное. Кроме того, выполняют операцию отображения на передней панели 6F дисплея отображения мониторинга или отображения изображения воспроизведения.
Интерфейс 10 носителя записи выполняет считывание/запись данных с носителя 90 записи, такого как карта памяти (съемное запоминающее устройство в форме карты), установленного в устройство 1 формирования изображения, или тому подобное, на основе управления ЦПУ 31. Например, интерфейс 10 носителя записи выполняет операцию записи данных неподвижного изображения или данных движущегося изображения, используемых как результат формирования изображения, на носитель 90 записи. Кроме того, интерфейс 10 носителя записи выполняет операцию считывания данных изображения с носителя 90 записи во время режима воспроизведения.
Следует отметить, что портативная карта памяти представлена здесь в качестве примера носителя 90 записи, но другие типы носителя записи можно использовать, если только этот носитель можно использовать для записи данных изображения, используемых как неподвижное изображение или движущееся изображение, которое требуется сохранить как результат формирования изображения. Например, можно использовать носитель в виде портативного диска, такого как оптический диск или тому подобное, или может быть установлен HDD (НЖМД - накопитель на жестком магнитном диске) для записи данных изображения.
Внешний интерфейс 8 выполняет передачу/прием различных типов данных во внешнее устройство через заданный кабель, в соответствии со стандартом сигнала, например, таким как USB (УПШ - универсальная последовательная шина) или тому подобное. Само собой разумеется, что внешний интерфейс в соответствии с другим стандартом, таким как IEEE (Институт инженеров по электронике и радиотехнике) 1394 или тому подобное, можно использовать независимо от способа УПШ.
Кроме того, внешний интерфейс 8 может быть выполнен на основе способа беспроводной передачи данных, такого как инфракрасная передача, беспроводная передача данных на коротких расстояниях, или тому подобное, вместо способа передачи по кабелю.
Устройство 1 формирования изображения может выполнять передачу/прием данных оборудования различных типов, такого как персональный компьютер или тому подобное, через внешний интерфейс 8. Например, снятые данные изображения могут быть переданы во внешнее устройство.
Следует отметить, что на фиг.2 показан бесконтактный датчик 50. Пусть бесконтактный датчик 50 представляет собой датчик, предназначенный для детектирования, находится или нет человек перед устройством 1 формирования изображения (сторона субъекта). Здесь можно использовать, например, пироэлектрический датчик или тому подобное. Как описано выше, в случае, когда выполняют детектирование человека с помощью обработки анализа изображения модуля 44 анализа изображения, бесконтактный датчик 50 может не быть предусмотрен, или можно одновременно использовать детектирование человека по анализу изображения и детектирование с помощью бесконтактного датчика 50.
2. Переход операции
Переход состояния операции устройства 1 формирования изображения в соответствии с настоящим примером будет описан со ссылкой на фиг.3. Различные состояния операции представляют собой состояния операции, которые, в частности, рассматривают с перспективы содержания, отображаемого на панели 6М основного дисплея.
Состояние операции устройства 1 формирования изображения меняется с периода мониторинга на период записи, период предварительного просмотра и период воспроизведения, в соответствии с операциями пользователя или тому подобное. Следует отметить, что, в действительности, существуют другие состояния операций, такие как период, в который выполняют обмен данными с внешним устройством, но их описание здесь не будет приведено для упрощения пояснения.
Когда, например, включают устройство 1 формирования изображения, начинается операция мониторинга. Следует отметить, что возникают случаи, когда устройство 1 формирования изображения переходит в состояние выполнения операции воспроизведения в момент его включения, например, в случае, когда пользователь выполняет операцию воспроизведения из состояния отключенного питания или тому подобное.
Период мониторинга представляет собой период операции, используемый для формирования изображения с помощью системы 2 формирования изображения. В случае, когда пользователь обычно использует устройство 1 формирования изображения для формирования неподвижного изображения, вначале выполняют такую операцию мониторинга.
В такой период мониторинга отображают изображение субъекта (прямое изображение) на панели 6М основного дисплея. В частности, ЦПУ 31 управляет системой 2 формирования изображения и ЦСП 4 камеры для выполнения операции формирования изображения во время периода мониторинга. После этого ЦПУ 31 сохраняет снятые данные изображения для каждого кадра, передаваемые из ЦСП 4 камеры, например, в ОЗУ 32. После этого ЦПУ 31 передает снятые данные изображения для каждого кадра в контроллер 7 дисплея, и управляет панелью 6М основного дисплея для выполнения отображения мониторинга. В это время возникает случай, когда передней панелью 6F дисплея также управляют для выполнения отображения мониторинга, как будет описано ниже.
Во время такого периода мониторинга пользователь выбирает субъект, или ожидает соответствующий момент времени для съемки изображения, просматривая отображение на панели 6М основного дисплея.
Во время периода мониторинга, после того, как пользователь нажмет на кнопку 5а съемки изображения, то есть после того, как пользователь выполнит операцию спуска затвора, состояние операции переходит в период записи.
ЦПУ 31 выполняет обработку сохранения снятых данных изображения одного кадра, изображение которого будет сформировано в момент выполнения такой операции съемки, как данные неподвижного изображения. В частности, ЦПУ 31 передает данные снятого изображения, снятые в такой момент времени, в интерфейс 10 носителя информации для записи его на носитель 90 записи.
Следует отметить, что операция записи в соответствии с операцией съемки может быть выполнена не на носитель 90 записи, а в ПЗУ 33 типа флэш. Кроме того, может использоваться операционная система, в которой запись обычно выполняют на носитель записи, но в случае, когда носитель записи 90 не установлен, запись выполняют в ПЗУ 33 типа флэш. Такой период записи, с точки зрения пользователя, представляет собой очень короткий период времени непосредственно после операции съемки и представляет собой, например, состояние, в котором ничего не отображается на панели 6М основного дисплея.
Определенный период времени - непосредственно после операции записи - в соответствии с операцией съемки, называется периодом предварительного просмотра. Период предварительного просмотра представляет собой период, в течение которого изображение, записанное в непосредственно предшествующей операции записи, отображают на панели 6М основного дисплея, то есть период, в который пользователь получает возможность проверки снятого неподвижного изображения непосредственно после съемки.
Например, период от двух секунд до нескольких секунд представляет собой период предварительного просмотра, и в течение этого периода ЦПУ 31 выполняет управление по отображению записанных данных неподвижного изображения на панели 6М основного дисплея.
После того как пройдет заданное время, используемое как период предварительного просмотра, ЦПУ 31 возвращает состояние операции в состояние мониторинга и выполняет управление операциями, используемое как период мониторинга. То есть последовательность операций, таких как формирование изображения для получения неподвижного изображения, выполняют как период мониторинга, период записи и период предварительного просмотра.
Следует отметить, что с помощью устройства 1 формирования изображения можно выполнять формирование движущегося изображения, но в случае движущегося изображения период записи продолжается в течение периода от начала до конца формирования такого движущегося изображения. Кроме того, в этом случае не предусмотрен период предварительного просмотра.
В случае, когда пользователь выполнил операцию передачи инструкции на выполнение операции воспроизведения, устройство 1 формирования изображения переходит в состояние операции воспроизведения (период воспроизведения). В течение периода воспроизведения выполняют операцию воспроизведения изображения, записанного на носитель 90 записи или в ПЗУ 33 типа флэш, в результате формирования изображения или тому подобное.
ЦПУ 31 считывает изображение, записанное на носитель 90 записи или в ПЗУ 33 типа флэш, в ответ на операцию пользователя, и передает инструкцию в контроллер 7 дисплея отобразить миниатюрные изображения или воспроизводимое изображение на панели 6М основного дисплея. Кроме того, в некоторых случаях, изображение воспроизведения отображают на передней панели 6F дисплея.
3. Примеры отображения на экране обоих модулей панели дисплея
Примеры отображения экрана, отображаемого в панели 6М основного дисплея и на передней панели 6F дисплея устройства 1 формирования изображения в соответствии с настоящим примером, будут описаны со ссылкой на фиг.4А-5С.
На фиг.4А-5А показаны примеры отображения экрана выполняемого в течение периода мониторинга.
На фиг.4А иллюстрируется состояние, в котором изображение мониторинга (прямое изображение) отображают на панели 6М основного дисплея, и отображение передней панели 6F дисплея выключено.
На фиг.4В иллюстрируется состояние, в котором изображение мониторинга отображают на панели 6М основного дисплея, и такое же изображение мониторинга также отображается на передней панели 6F дисплея.
На фиг.4С представлено состояние, в котором изображение мониторинга отображается на панели 6М основного дисплея, и другое изображение мониторинга, например, воспроизводимое изображение, отображают на передней панели 6F дисплея. Изображение воспроизведения может представлять собой изображение воспроизведения для изображения, сформированного в прошлом и записанного на носитель 90 записи или в ПЗУ 33 типа флэш, или может представлять собой изображение, заранее сохраненное в устройстве 1 формирования изображения. Пример такого случая представляет собой случай, когда данные изображения подготовлены для отображения, когда изображение мониторинга не отображается на передней панели 6F дисплея, и заранее сохранены как заданное изображение в ПЗУ 33 типа флэш или тому подобное, и заданные их данные изображения считывают и отображают.
Кроме того, изображение воспроизведения не ограничивается данными изображения, используемыми как, так называемые, снятые изображения, текстовые данные, данные анимации, данные компьютерной графики или тому подобное, записанные на носитель 90 записи или в ПЗУ 33 типа флэш, и такие данные могут отображаться. То есть воспроизводимое изображение включает в себя изображение любого вида, которое может быть отображено. На фиг.5А показан пример, в котором отображение на панели 6М основного дисплея выключено, и изображение мониторинга отображается на передней панели 6F дисплея.
Эти примеры можно рассматривать, как состояния отображения панели 6М основного дисплея и передней панели 6F дисплея во время периода мониторинга, но управление видом отображаемого изображения выполняют с помощью ЦПУ 31 в соответствии с состоянием субъекта, состоянием операции устройства 1 формирования изображения, и режимом формирования изображения во время периода мониторинга.
На фиг.5В и 5С показаны примеры отображения экрана, выполняемого во время периода воспроизведения. На фиг.5В иллюстрируется состояние, в котором отображение списка с использованием миниатюрных изображений воспроизводимого изображения выполняют на панели 6М основного дисплея, и с другой стороны, на передней панели 6F дисплея, при этом отображают воспроизводимое изображение, выбранное с помощью курсора К среди миниатюрного изображения. На фиг.5С показано состояние, в котором одно изображение воспроизведения отображают на панели 6М основного дисплея, и то же изображение воспроизведения также отображают на передней панели 6F дисплея.
Эти примеры можно рассматривать, как состояния дисплея панели 6М основного дисплея и передней панели 6F дисплея во время периода воспроизведения. Само собой разумеется, что другие примеры также можно рассмотреть. Например, можно рассмотреть отображение воспроизводимого изображения на панели 6М основного дисплея и отображение заданного изображения на передней панели 6F дисплея. Кроме того, также можно рассмотреть выполнение отображения меню из миниатюрных изображений на панели 6М основного дисплея, при последующем отображении (отображение в виде последовательности слайдов) различных воспроизводимых изображений на передней панели 6F дисплея.
Хотя примеры отображения показаны на фиг.4А-5С, отображение на панели 6М основного дисплея, которая обращена к пользователю, который выполняет операции формирования изображения, и операции воспроизведения, и т.д., в основном представляют собой следующие.
Вначале в течение периода мониторинга отображают изображение мониторинга. Кроме того, изображение, для которого выполняют процесс формирования изображения и которое записывают, временно отображают в течение периода предварительного просмотра. Миниатюрное изображение и воспроизводимые изображения отображают в период воспроизведения в соответствии с операциями пользователя и т.д. ЦПУ 31 управляет панелью 6М основного дисплея, для выполнения этих отображений в соответствии с рабочим состоянием и операциями.
С другой стороны, ЦПУ 31 выполняет управление отображением на передней панели 6F дисплея с точки зрения перспективы выполнения полезного отображения или интересного отображения для человека, рассматривающего переднюю панель 6F дисплея. Различные типы примеров управления отображением на передней панели 6F дисплея будут описаны ниже.
[4. Управление отображением модуля передней панели дисплея во время мониторинга]
<4-1: Пример обработки на основе режима формирования изображения>
На фиг.6А показан пример управления отображением, которое выполняет ЦПУ 31 в отношении передней панели 6F дисплея во время периода мониторинга. Как описано выше, изображение мониторинга, получаемое при обработке в системе 2 формирования изображения и с помощью ЦСП 4 камеры, отображают на панели 6М основного дисплея. То есть ЦПУ 31 выполняет управление для отображения данных снятого изображения, передаваемых из ЦСП 4 камеры, на панели 6М основного дисплея в виде прямого изображения во время периода мониторинга.
В это время, для выполнения управления отображением на передней панели 6F дисплея, ЦПУ 31 выполняет обработку по фиг.6А параллельно с управлением отображением на панели 6М основного дисплея.
Вначале на этапе F101 ЦПУ 31 подтверждает текущий режим формирования изображения. Режим формирования изображения будет описан ниже.
Режим формирования изображения представляет собой режим, когда пользователь делает выбор для выполнения формирования изображения в соответствующем состоянии в различных ситуациях, таких как режим ночного видения, ночной вид и режим человека, режим портрета, режим сцены, режим "мягкой съемки", режим снега, режим пляжа, режим высокой скорости работы затвора, режим высокой чувствительности, режим срабатывания затвора при появлении улыбки и т.д.
В каждом из этих режимов формирования изображения заранее определены, соответствующая скорость затвора, соответствующая установка экспозиции соответствующая установка коэффициента усиления для сигнала снятого изображения, соответствующая установка обработки сигнала, такая как улучшение кромки и обработка цветов и т.д., и эти установки пользователь может выбирать, например, в соответствии с операциями участка 5b управления с круговым переключателем, показанным на фиг.1А.
Режим ночного видения представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для формирования изображения ночного видения. Ночное видение и режим съемки человека представляют собой режим формирования изображения, в котором формирование изображения выполняют при установках, позволяющих формировать изображения ночного видения со спины и выражение лица человека с живой четкостью.
Режим портрета представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, соответствующих для формирования изображения человека.
Режим сцены представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для формирования изображения сцены. Режим "мягкой съемки" представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, которые представляют для зрителя впечатление того, что текстура кожи человека является яркой и мягкой.
Режим съемки с высокой скоростью срабатывания затвора представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для съемки движущегося субъекта.
Режим с высокой чувствительностью представляет собой режим съемки изображения, в котором формирование изображения выполняют в естественной тональности, без использования темных сцен или фотовспышки.
Режим срабатывания затвора при появлении улыбки представляет собой режим формирования изображения, в котором после того, как у человека - субъекта съемки появляется улыбка на лице, автоматически выполняется обработка срабатывания затвора (съемка изображения), когда человек - субъект съемки улыбается.
Хотя режим формирования изображения, используемый для выполнения формирования изображения, пригодного для такой ситуации формирования изображения, выбирает пользователь, ЦПУ 31 выполняет управление обработкой формирования изображения в соответствии с установками режима формирования изображения, используя этап формирования неподвижного изображения от периода мониторинга до периода записи. То есть ЦПУ 31 выполняет различные типы инструкций параметров в системе 2 формирования изображения и ЦСП 4 камеры, в соответствии с режимом формирования изображения, выбранным оператором через участок 5b управления с круговым переключателем. Например, инструкцию выполняют таким образом, что упомянутые выше установки скорости затвора, установки экспозиции, установки обработки сигнала или тому подобное.
Этап F101 на фиг.6А представляет собой разветвление обработки в зависимости от того, как режим формирования изображения используется в настоящее время, в качестве такого режима формирования изображения. В случае, когда выполняют описанные выше различные типы режимов формирования изображения, текущий режим формирования изображения представляет собой заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея, при этом ЦПУ 31 переводит обработку на этап F102 и выполняет отображение изображения мониторинга на передней панели 6F дисплея. То есть контроллер 7 дисплея передает инструкцию на отображение изображения мониторинга, отображаемого на панели 6М основного дисплея, а также на передней панели 6F дисплея. В этом случае, состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показано на фиг.4В.
С другой стороны, на этапе F101, в случае, когда текущий режим формирования изображения подтверждают, как режим, который не является заданным режимом формирования изображения, пригодным для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 переводит обработку на этап F103, и выполняет управление отображением на передней панели 6F дисплея, с тем, чтобы ее выключить. В этом случае состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показаны на фиг.4А.
ЦПУ 31 повторно выполняет обработку, показанную здесь на фиг.6А, во время периода мониторинга. Окончание периода мониторинга происходит, например, в случае операции съемки изображения, выполняемой и преобразуемой в действие записи, или в случае выполнения операции воспроизведения, и перехода к воспроизведению, или случае, когда выполняют операцию выключения питания устройства 1 формирования изображения, и выполняют обработку отключения питания. Таким образом, до тех пор, пока период мониторинга не будет закончен, ЦПУ 31 многократно выполняет обработку, показанную на фиг.6А.
Соответственно, во время периода мониторинга, в случае, когда заданный режим формирования изображения выбирают как режим формирования изображения, изображение мониторинга отображают на передней панели 6F дисплея, как показано на фиг.4В, и в случае, когда заданный режим формирования изображения не выбран, переднюю панель 6F дисплея отключают, как показано на фиг.4А.
Например, среди различных описанных режимов формирования изображения на этапе F101 ЦПУ 31 определяется заданный режим формирования изображения, пригодный для отображения на передней панели 6F дисплея так, чтобы они представляли собой ночную сцену и режим съемки человека, режим портрета, режим "мягкой съемки", режим срабатывания затвора при появлении улыбки и т.д. То есть эти режимы формирования изображения определяют заранее, как применимые для заданного режима формирования изображения, при обработке, выполняемой на этапе F101.
Такие режимы формирования изображения выбирают в случае, когда целью поставлено формирование изображения человека, и соответственно, существует высокая вероятность того, что человек будет включен в изображение как субъект. То есть существует высокая вероятность того, что в качестве субъекта существует человек, который может просматривать отображение на передней панели 6F дисплея.
Поэтому ЦПУ 31 определяет, что, если режим формирования изображения представляет собой один из режима ночной сцены и режима съемки человека, режима портрета, режима "мягкой съемки" и режима срабатывания затвора при появлении улыбки, на этапе F102 изображение мониторинга отображают на передней панели 6F дисплея.
В случае, когда режим формирования изображения представляет собой другой режим формирования изображения, кроме описанных, то есть кроме режима ночной сцены, режима сцены, режима срабатывания затвора с высокой скоростью или режима с высокой чувствительностью, предполагается, что режим формирования изображения выбирают при отсутствии задачи формирования изображения человека, или когда предполагается плохая видимость передней панели дисплея 6F.
Например, режим ночной сцены и режим сцены предназначены для формирования изображения на сцене, и можно предположить ситуацию, в которой человек не будет включен в изображение как субъект, или даже, если человек будет включен в изображение как субъект, его личность не будет играть основную роль в пределах изображения. Кроме того, в случае режима ночной сцены или режима с высокой чувствительностью, даже если на переднем плане присутствует человек, изображение мониторинга, отображаемое во время формирования изображения темной сцены на передней панели 6F дисплея, может привести в результате к плохой видимости человека, находящегося перед ним.
Кроме того, субъект, движущийся с высокой скоростью, представляет собой субъект, находящийся в движении. Например, даже если человек представляет собой субъект, такой человек находится в такой ситуации, например, участвует в спортивном событии, танцует или тому подобное, и, соответственно, он не находится в ситуации, позволяющей внимательно просматривать переднюю панель 6F дисплея.
То есть, в случае этих режимов формирования изображения, предполагается ситуация, в которой человек спереди отсутствует, или даже, если человек находится спереди, переднюю панель 6F дисплея отображают с плохой видимостью, или такой человек не в состоянии просматривать переднюю панель 6F дисплея.
Таким образом, ЦПУ 31 отключает переднюю панель 6F дисплея на этапе F103, в случае, когда режим формирования изображения представляет собой один из режима ночной сцены, режима съемки на сцене, режима съемки с высокой скоростью срабатывания затвора и режима с высокой чувствительностью.
Следует отметить, что представленные выше режимы представляют собой примеры, и в дополнение к ним, в некоторых случаях, предусмотрены режим вечернего просмотра, в котором выполняют формирование изображения с установками, пригодными для формирования изображения вечернего просмотра, макрорежим, пригодный для близкой съемки объектов, таких как растения, насекомые или тому подобное, режим фейерверка, пригодный для формирования изображения фейерверков, режим подводной съемки, пригодный для формирования изображения под водой, или тому подобное. Кроме того, режим снега, в котором формирование изображения выполняют с установками, позволяющими выразить спуск на лыжах и серебряный снег заснеженных ландшафтов, так, как они выглядят для глаза человека, режим пляжа, в котором формирование изображения выполняют при установках, с помощью которых синева моря и неба будут подчеркнуты, или тому подобное, будут предусмотрены в некоторых случаях. В этих случаях также следует заранее установить, как определять на этапе F101 (включен или нет режим формирования изображения в заданные режимы формирования изображения, для выполнения отображения на передней панели 6F дисплея), в соответствии с тем, присутствует или нет человек, видимостью отображаемого содержания на передней панели 6F дисплея, и ситуацией с человеком на стороне субъекта.
То есть в соответствии с примером обработки на фиг.6А, во время мониторинга существует вероятность того, что человек будет присутствовать на передней стороне (стороне субъекта), или визуализацию передней панели 6F дисплея оценивают в соответствии с режимом формирования изображения. В этом случае существует высокая вероятность того, что человек, который будет просматривать изображение мониторинга на передней панели 6F дисплея, находится с передней стороны, и велика вероятность возникновения состояния просмотра с хорошей видимостью изображения мониторинга, отображаемого на передней панели 6F дисплея.
С другой стороны, в случае, когда возникает большая вероятность, что человек, который мог просматривать переднюю панель 6F дисплея, не присутствует на передней стороне, или в случае получения оценки такого состояния, что, даже если человек присутствует, видимость не будет хорошей, переднюю панель 6F дисплея отключают.
Например, когда человек представляет собой объект съемки, пользователь выбирает один из режима ночной сцены и режима съемки человека, режима портрета, режима "мягкой съемки" и режима спуска затвора после появления улыбки. В случае, представленном здесь, человек, который представляет собой объект съемки, может просматривать переднюю панель 6F дисплея.
Поэтому человек, который представляет собой субъект, может просматривать изображение мониторинга самого себя, которое будет снято, и может проверять свое выражение лица, позу и т.д. Отображение на передней панели 6F дисплея можно эффективно использовать, например, как подтверждение для самого себя, является или нет, например, выражение лица предпочтительным для фотографа.
С другой стороны, в случае, когда пользователь выполняет формирование изображения путем выбора ночной сцены и персонального режима, режима портрета, режима "мягкой съемки" или режима срабатывания затвора после появления улыбки, отображение на передней панели 6F дисплея отключают (например, только передняя панель 6F дисплея находится в состоянии выключенного питания), в результате чего потребление энергии может быть уменьшено. То есть бесполезное отображение, которое никто не видит, или бесполезное отображение, отображаемое с плохой видимостью, не будут выполнено.
На фиг.6В показан другой пример обработки, и здесь представлен пример передней панели 6F дисплея, которая не находится в состоянии выключенного питания, даже если человек не находится на передней стороне. Аналогично фиг.6А, на этапе F101 ЦПУ 31 разветвляет обработку в зависимости от текущего режима формирования изображения. В случае, когда выбирают заданный режим формирования изображения, такой как ночная сцена и режим съемки человека, режим портрета, режим "мягкой съемки" или режим срабатывания затвора после появления улыбки, ЦПУ 31 переводит поток обработки на этап F102A, и в состоянии повышенной яркости отображения на передней панели дисплея, передает инструкции в контроллер 7 дисплея отобразить изображение мониторинга.
Кроме того, в случае, когда текущий режим формирования изображения будет другим, кроме упомянутых выше заданных режимов формирования изображения, ЦПУ 31 переводит поток обработки на этап F103A, и в состоянии уменьшенной яркости отображения передней панели 6F дисплея, передает инструкции в контроллер 7 дисплея отобразить изображение мониторинга.
То есть в случае, когда присутствует человек, который может просматривать переднюю панель 6F дисплея, и получают оценку, что видимость для отображения является хорошей, яркость дисплея передней панели 6F дисплея повышают таким образом, что человек может просматривать яркое изображение. С другой стороны, когда предполагают, что человек спереди отсутствует, видимость слишком плохая для просмотра отображения или тому подобное, яркость дисплея понижают, и реализуют уменьшение степени потребления энергии. В случае, когда устройство дисплея, состоящее из самоизлучающих элементов, таких как панель органической ЭЛ, используют как переднюю панель 6F дисплея, уменьшение яркости отображения используют для уменьшения потребляемой энергии.
Далее, со ссылкой на фиг.7, будет описан пример обработки. Аналогично фиг.6А, на этапе F101 ЦПУ 31 разветвляет обработку в зависимости от текущего режима формирования изображения. В случае, когда будет выбран такой заданный режим формирования изображения, как ночная сцена и режим съемки человека, режим съемки портрета, режим "мягкой съемки" или режим срабатывания затвора после появления улыбки, ЦПУ 31 переводит поток обработки на этап F103, и передает инструкцию в контроллер 7 дисплея отобразить изображение мониторинга на передней панели 6F дисплея.
Кроме того, в случае, когда используют другой режим формирования изображения, кроме описанного выше заданного режима формирования изображения, ЦПУ 31 переводит поток обработки на этап F104, и выполняет такую обработку, как считывание данных изображения, записанных на носитель 90 записи, и т.д., и заданных данных изображения, и т.д. Например, ЦПУ 31 передает инструкцию в интерфейс 10 носителя информации выполнить воспроизведение данных изображения с носителя 90 записи (данные снятого изображения и т.д.). В качестве альтернативы, ЦПУ 31 выполняет считывание заданных данных изображения и данных снятого изображения из ПЗУ 33 типа флэш. ЦПУ 31 передает инструкции в контроллер 7 дисплея отобразить считываемые данные изображения с него на переднюю панель 6F дисплея. То есть, как показано на фиг.4С, выполняют отображение изображения, которое отличается от изображения мониторинга на передней панели 6F дисплея.
В этом случае, когда присутствует человек, который может видеть переднюю панель 6F дисплея, когда получают оценку, что видимость дисплея хорошая, его состояние будет таким, как показано на фиг.4В, и человек может отслеживать изображение самого себя во время фотографической съемки.
С другой стороны, когда оценивают состояние, что человек спереди отсутствует, или что дисплей можно просматривать с плохой видимостью, несвязанное изображение отображают на передней панели 6F дисплея, такое, как показано на фиг.4С. Даже если человек, который представляет собой субъект отображения, не присутствует, во многих случаях получают такое состояние, что человек находится поблизости. Кроме того, возникает случай, когда человек находится в ситуации, в которой человек может непосредственно просматривать дисплей на передней панели 6F дисплея, в зависимости от положения этого человека.
Для человека, который присутствует в этих обстоятельствах, отображение на передней панели 6F дисплея можно распознавать как часть дизайна внешнего вида устройства 1 формирования изображения, что может быть интересным.
Кроме того, в таком случае пользователь может выбирать изображение, отображаемое на передней панели 6F дисплея, в результате чего пользователь может произвольным образом устанавливать внешний вид своего устройства 1 формирования изображения, и, соответственно, пользователь может наслаждаться использованием камеры различным образом.
Следует отметить, что данные изображения, считываемые и отображаемые с носителя 90 записи, в некоторых случаях могут представлять собой текстовые данные или данные анимации.
Далее будет представлен еще один пример обработки со ссылкой на фиг.8. На фиг.8 представлена обработка, которая соответствует случаю, когда в качестве одного из описанных выше режимов формирования изображения, выбрали режим формирования собственного изображения. Режим формирования собственного изображения представляет собой режим формирования изображения в случае, когда пользователь обращен к передней стороне устройства 1 формирования изображения, которое обращено к нему.
На этапе F151 по фиг.8, ЦПУ 31 подтверждает, представляет ли собой или нет текущий режим формирования изображения режим формирования собственного изображения. В случае, когда текущий режим формирования изображения представляет собой режим формирования собственного изображения, ЦПУ 31 переводит поток на этап F152, и выполняет обработку выключения отображения на панели 6М основного дисплея. Управление выполняют так, что на этапе F153 отображают изображение мониторинга на передней панели 6F дисплея.
В случае, когда выбран другой режим формирования изображения, чем режим формирования собственного изображения, ЦПУ 31 подтверждает на этапе F154, был ли выбран или нет заданный режим формирования изображения в качестве режима формирования изображения, такой как ночная сцена и режим съемки человека, режим съемки портрета, режим "мягкой съемки" или режим срабатывания затвора после появления улыбки.
В случае заданного режима формирования изображения поток обработки переходит на этап F153, и контроллер 7 дисплея получает инструкцию отобразить изображение мониторинга на передней панели 6F дисплея.
Кроме того, в случае, когда режим формирования изображения будет другим, кроме описанных выше заданных режимов формирования изображения, ЦПУ 31 переводит поток обработки на этап F155, и выполняет управление с выключенным отображением на передней панели 6F дисплея.
То есть в случае, когда выбирают режим формирования собственного изображения как установку пользователя, передняя панель 6F дисплея и панель 6М основного дисплея находятся в состоянии, показанном на фиг.5А, в случае, когда не включен режим формирования собственного изображения в состоянии, аналогичном представленному на фиг.6А.
В случае, когда включен режим формирования собственного изображения, пользователь обращает устройство формирования изображения на себя самого и выполняет операцию формирования изображения, в результате чего панель 6М основного дисплея не видна. В соответствии с этим, субъект можно проверять, рассматривая изображение мониторинга на передней панели 6F дисплея. Панель 6М основного дисплея при этом выключена, что позволяет уменьшить потребление энергии.
Следует отметить, что в качестве модифицированного примера после примеров обработки, показанных на фиг.8, на этапе F155 можно рассмотреть другие примеры обработки, кроме выключения отображения на передней панели 6F дисплея, такие как отображение в состоянии с низкой яркостью, так, как описано на фиг.6А, или отображение воспроизводимого изображения или заданного изображения, как описано со ссылкой на фиг.7.
<4-2: Пример обработки, основанный на режиме формирования изображения и установках пользователя>
Со ссылкой на фиг.6-8, были описаны примеры управления состоянием отображения передней панели 6F дисплея в соответствии с режимом формирования изображения, но здесь будет описан пример выполнения управления отображением передней панели 6F дисплея с учетом других состояний установок пользователя, для устройства 1 формирования изображения, в дополнение к режиму формирования изображения.
Режим формирования изображения представляет собой одну из установок пользователя, но пусть установки пользователя, упомянутые здесь, представляют собой состояние установки в соответствии с другой операцией пользователя, кроме установки режима формирования изображения, например, такой как установка лампы фотовспышки, операция положения степени увеличения или тому подобное.
На фиг.9 показан пример управления отображением, которое ЦПУ 31 выполняет для передней панели 6F дисплея во время периода мониторинга.
Изображение мониторинга, получаемое с помощью системы 2 формирования изображения, ЦСП 4 камеры, отображают на панели 6М основного дисплея во время периода мониторинга. То есть ЦПУ 31 выполняет управление для отображения данных формирования изображения, передаваемых из ЦСП 4 камеры на панели 6М основного дисплея, в качестве прямого изображения во время периода мониторинга. В это время, для выполнения управления отображением передней панели 6F дисплея, ЦПУ 31 выполняет параллельную обработку, показанную на фиг.9.
На этапе F201 ЦПУ 31 разветвляет обработку в зависимости от того, представляет ли собой текущий режим формирования изображения заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея. То есть выполняют подтверждение, представляет собой или нет заданный режим, такой режим формирования изображения, как ночная сцена и режим съемки человека, режим съемки портрета, режим "мягкой съемки" или режим срабатывания затвора после улыбки, выбранный как режим формирования изображения.
В случае заданного режима формирования изображения, пригодного для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 переводит поток обработки на этап F202, и разветвляет обработку в зависимости от того, представляет или нет собой другое состояние установки пользователя, кроме текущего режима формирования изображения, состояние установки, пригодное для отображения изображения мониторинга на передней панели дисплея. В случае, когда определяют, что состояние установки пользователя представляет собой состояние установки, пригодное для отображения изображения мониторинга на передней панели дисплея, поток обработки переходит на этап F203, и выполняют отображение изображения мониторинга с использованием передней панели 6F дисплея. То есть контроллер 7 дисплея получает инструкцию отображать изображение мониторинга, отображаемое на панели 6М основного дисплея, также на передней панели 6F дисплея. В этом случае, состояние отображения на панели 6М основного дисплея и состояние отображения на передней панели 6F дисплея представляют собой такие состояния, как показано на фиг.4В.
С другой стороны, в случае, когда на этапе F201 определяют, что режим формирования изображения не представляет собой описанный выше заданный режим формирования изображения, ЦПУ 31 переводит поток обработки с этапа F201 на этап F204 и выполняет управление с отключением отображения передней панели 6F дисплея. Также, в случае, когда на этапе F202 определяют, что другие установки пользователя, кроме режима формирования изображения, не представляют собой состояние установки, пригодное для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 переводит поток обработки на этап F204, и выполняет управление с отключенным отображением на передней панели 6F дисплея. В этих случаях состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют такие состояния, как показаны на фиг.4А.
ЦПУ 31 многократно выполняет обработку по фиг.9 в течение периода мониторинга. В соответствии с этим, во время периода мониторинга, когда выбирают заданный режим формирования изображения, и состояние установок пользователя представляет собой заданное состояние в этот момент времени, изображение мониторинга отображают на передней панели 6F дисплея, как показано на фиг.4В.
С другой стороны, в режиме сцены или тому подобное, в основном, когда цель представляет собой сцену субъекта, которая не включает в себя человека, или когда используют заданный режим формирования изображения, такой как режим съемки портрета или тому подобное, но состояние установки пользователя не представляет собой заданное состояние, переднюю панель 6F дисплея отключают, как показано на фиг.4А.
Установки пользователя представляют собой установки включения лампы фотовспышки, операции положения степени увеличения и т.д., например, как упомянуто выше. Приложение, выполняющее обработку по фиг.9, для каждого случая представляет собой следующее.
Установка излучения света фотовспышки среди установок пользователя будет рассмотрена ниже. Установка излучения света фотовспышки представляет собой установку, при которой пользователь выбирает, следует ли выполнять излучение света фотовспышки (фотовспышка включена), не следует выполнять излучение фотовспышки (фотовспышка выключена), или следует автоматически выполнять включение/выключение излучения фотовспышки (фотовспышка-авто). В этом случае пользователь обычно включает фотовспышку в ситуации с темным окружающим освещением. В случае ситуации с темным освещением изображение мониторинга во время периода мониторинга находится в состоянии низкой яркости, и, соответственно, видимость дисплея на передней панели 6F дисплея можно рассматривать как плохую.
Таким образом, что касается установок излучения света фотовспышки, в случае, когда "фотовспышка включена", ЦПУ 31 переводит обработку на этап F204 и выполняет управление с выключением отображения на передней панели 6F дисплея.
Установка операции положения степени увеличения среди установок пользователя будет рассмотрена ниже. Установка положения степени увеличения представляет собой установку положения степени увеличения, например, в случае, когда пользователь выполняет операцию с кнопкой 5 с управления широкоугольной съемкой/телесъемкой на фиг.1А для выполнения операции изменения степени увеличения.
Например, даже если человек был установлен как субъект, когда положение степени увеличения установлено как телесъемка (телефотосъемка), степень увеличения в котором превышает степень увеличения в заданном положении, можно предположить, что человек - субъект съемки, будет расположен далеко от устройства 1 формирования изображения. Само собой разумеется, что, если человек - субъект съемки находится слишком далеко от устройства 1 формирования изображения, этот человек с трудом сможет просматривать соответствующим образом отображение на передней панели 6F дисплея.
Таким образом, в случае, когда положение степени увеличения, установленное с помощью операции пользователя, представляет собой положение в состоянии большого расстоянии, которое больше, чем заданное на этапе F202, ЦПУ 31 переводит поток обработки на этап F204, и выполняет управление с выключением отображения на передней панели 6F дисплея.
На этапе F203 по фиг.9, ЦПУ 31 выполняет определение в соответствии с установками пользователя, как описано выше, при этом для передней панели 6F дисплея может быть выполнено соответствующее управление отображения. Другими словами, в соответствии с обработкой, показанной на фиг.9, в случае, когда получают оценку, что человек, который может видеть переднюю панель 6F дисплея, присутствует, или что видимость отображения хорошая, человек на стороне субъекта может отслеживать собственное изображение.
Поэтому человек, который представляет собой субъект, может просматривать изображение мониторинга, которое представляет его самого, и может подтверждать собственные выражение лица, позу и т.д.. С другой стороны, когда получают оценку, что человек спереди отсутствует, или что видимость плохая, и состояние таково, что дисплей невозможно рассматривать, переднюю панель 6F дисплея выключают (например, только передняя панель 6F дисплея находится в выключенном состоянии). Таким образом, можно дополнительно уменьшить потребление энергии.
Следует отметить, что операция установки излучения света фотовспышки и положения степени увеличения были описаны выше, как установки пользователя, но режим определения с использованием обеих этих установок, может быть выполнен на этапе F202, или может быть выполнено определение с использованием только одной из установок пользователя на этапе F203.
Кроме того, установки чувствительности, установки включения/выключения коррекции смазанного изображения, специализированные установки формирования изображения и т.д. могут быть предусмотрены как установки пользователя, помимо описанных выше. Каждую из них также можно рассматривать, как отраженные во время определения на этапе S202, в зависимости от того, предполагается или нет соответствующая ситуация в отношении поведения, при котором человек - субъект изображения соответствующим образом рассматривает отображение на передней панели 6F дисплея.
Кроме того, в качестве модифицируемого примера в соответствии с примером обработки по фиг.9, помимо отключения отображения на передней панели 6F дисплея, можно рассмотреть примеры обработки, такие как отображение с пониженной яркостью, как описано со ссылкой на фиг.6В, или отображение воспроизводимого изображения или заданного изображения, как описано на фиг.7.
<4-3: Пример обработки на основе режима формирования изображения и информации внутреннего детектирования>
Ниже будет описан пример выполнения управления отображением на передней панели 6F дисплея с учетом информации детектирования камеры (информация внутреннего детектирования), которую устройство 1 формирования изображения детектирует внутри себя, в дополнение к режиму формирования изображения.
Информация детектирования камеры, упомянутая здесь, представляет собой информацию, детектируемую внутренним датчиком устройства 1 формирования изображения, информацию, которую ЦПУ 31 может распознавать в соответствии с управлением операцией устройства 1 формирования изображения, например, информацией детектирования количества внешнего света, используемой для управления фотовспышкой или управления экспозицией, информацией положения степени увеличения, информацией фокуса, информацией детектирования сотрясений, информацией расстояния до субъекта или тому подобное.
На фиг.10 показан пример управления с помощью ЦПУ 31 отображением на передней панели 6F дисплея во время периода мониторинга.
Во время периода мониторинга ЦПУ 31 выполняет управление отображением данных снятого изображения, передаваемых из ЦСП 4 камеры, как прямым изображением на панели 6М основного дисплея, но обработку, показанную на фиг.10, предназначенную для управления отображением на передней панели 6F дисплея, выполняют параллельно с нею.
На этапе F301 ЦПУ 31 разветвляет обработку в зависимости от того, представляет ли собой текущий режим формирования изображения заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея. То есть ЦПУ 31 проверяет, выбран ли заданный режим формирования изображения, такой как ночная сцена и режим съемки человека, режим съемки портрета, режим "мягкой съемки", или режим срабатывания затвора после появления улыбки.
В случае подтверждения, что используется текущий заданный режим формирования изображения, ЦПУ 31 переводит поток обработки на этап F302, подтверждает заданную информацию детектирования камеры и разветвляет обработку в зависимости от того, пригодно или нет это состояние для отображения изображения мониторинга на передней панели 6F дисплея.
В случае, когда определяют, что это состояние в данный момент времени пригодно для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 переводит поток обработки на этап F303 и выполняет отображение изображения мониторинга на передней панели 6F дисплея. То есть контроллер 7 дисплея получает инструкции отображать изображение мониторинга, отображаемое на панели 6М основного дисплея, также на передней панели 6F дисплея. В этом случае состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показаны на фиг.4В.
С другой стороны, в случае, когда ЦПУ 31 подтверждает, что в настоящее время заданный режим формирования изображения не используется, на этапе F301, ЦПУ 31 переводит поток обработки на этап F304 и управляет с отключением отображения на передней панели 6F дисплея. Кроме того, на этапе F302, также в случае, когда определяют, что состояние не пригодно для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 переводит поток обработки на этап F304 и выполняет обработку с отключением отображения на передней панели 6F дисплея. В этих случаях состояние отображения панели 6М основного дисплея и состояние отображения передней панели 6F дисплея представляют собой такие состояния, как показано на фиг.4А.
ЦПУ 31 многократно выполняет обработку, показанную на фиг.9, в течение периода мониторинга. В соответствии с этим, когда пользователь выбирает заданный режим формирования изображения во время периода мониторинга, и когда состояние, распознанное по информации детектирования камеры в этот момент времени, представляет собой заданное состояние, изображение мониторинга отображают на передней панели 6F дисплея, как показано на фиг.4В.
С другой стороны, когда выбирают другой режим формирования изображения, кроме упомянутых выше заданных режимов формирования изображения, таких как режим сцены или тому подобное, или когда состояние, распознанное по информации детектирования камеры, не представляет собой заданное состояние, даже когда был выбран заданный режим формирования изображения, переднюю панель 6F дисплея отключают, как показано на фиг.4А.
Информация детектирования камеры представляет собой, например, информацию детектирования количества внешнего света, информацию положения степени увеличения, информацию расстояния до субъекта, информацию фокуса, информацию детектирования сотрясения или тому подобное. Определение на этапе F302, с использованием здесь информации детектирования камеры, представляет собой следующее.
Количество внешнего света можно детектировать по среднему значению яркости снимаемых данных изображения, взвешенному среднему значению яркости, получаемому путем применения взвешивания к участку в пределах экрана, или тому подобное, и такую обработку обычно используют при выполнении автоматического управления экспозицией, управления излучением света фотовспышки, в случае, когда установлен автоматический режим излучения света фотовспышки, или тому подобное. Такие значения яркости рассчитывают, например, в модуле 41 обработки сигнала изображения ЦСП 4 камеры, в результате чего ЦПУ 31 может получать эту информацию.
Кроме того, хотя это и не показано на фиг.2, может быть предусмотрена компоновка, в которой будет предусмотрен внешний датчик количества света или тому подобное, и количество внешнего света детектируют непосредственно.
В случае, когда количество внешнего света, детектируемое с использованием этих технологий, мало, можно предусмотреть ситуацию, в которой даже если изображение мониторинга или подобное отображают на передней панели 6F дисплея, яркость самого экрана будет низкой, и, соответственно, невозможно обеспечить отличную видимость. Кроме того, при съемке напротив ярко освещенного фона, где уровень внешнего света слишком высокий, можно предположить ситуацию, в которой будет трудно визуально соответствующим образом распознавать отображение мониторинга на передней панели 6F дисплея.
Таким образом, даже в случае, когда выбирают заданный режим формирования изображения, в случае, когда количество внешнего света ниже, чем заданный уровень, или определяют состояние подсветки заднего фона, ЦПУ 31 определяет, что такое состояние не соответствует отображению изображения мониторинга на передней панели 6F дисплея, поток обработки переводят с этапа F302 на F304, и выполняют управление с выключением отображения на передней панели 6F дисплея.
Что касается информации о положении степени увеличения, ЦПУ 31 выполняет привод и управляет линзой степени увеличения в соответствии с операцией пользователя, в результате чего можно детектировать положение степени увеличения. Даже если человек был установлен как субъект, когда положение степени увеличения находится на стороне телесъемки (телефотосъемки), которое превышает заданное положение, можно предположить, что человек - субъект этой съемки, будет расположен слишком далеко от устройства 1 формирования изображения. То есть можно предположить, что человек - субъект фотосъемки не в состоянии просматривать соответствующим образом отображение на передней панели 6F дисплея.
Таким образом, на этапе F302, в случае, когда положение степени увеличения представляет собой положение на большом расстоянии, которое больше, чем заданное значение, ЦПУ 31 переводит поток обработки на этап F302 и выполняет управление с отключением отображения на передней панели 6F дисплея.
Информация о расстоянии до субъекта представляет собой информацию о расстоянии от устройства 1 формирования изображения до субъекта. ЦПУ 31 может получать информацию о расстоянии до субъекта, используя информацию из модуля 27 детектирования положения объектива, как описано выше. Например, даже если человек был установлен как субъект, в случае, когда можно определить, что этот человек - субъект находится на слишком большом расстоянии от устройства 1 формирования изображения, можно предположить, что этот человек - субъект не в состоянии рассматривать соответствующим образом отображение на передней панели 6F дисплея.
Таким образом, на этапе F302, в случае, когда детектируют, что субъект находится на более далеком расстоянии, чем заданное положение, по информации расстояния до субъекта, ЦПУ 31 переводит поток обработки на этап F302, и выполняет управление с отключенным отображением на передней панели 6F дисплея.
Информация фокусирования представляет собой информацию определения сфокусированного состояния, используемую для обработки автофокуса в модуле 41 обработки сигнала изображения.
В случае состояния не сфокусированного изображения, ЦПУ 31 определяет, что соответствующее отображение изображения мониторинга невозможно выполнить, поток обработки переводят с этапа F302 на этап F304, и можно предусмотреть управление с отключенным отображением передней панели 6F дисплея. То есть только в случае сфокусированного состояния можно выполнять отображение мониторинга на передней панели 6F дисплея.
Информация детектирования степени смазанности представляет собой информацию детектирования сотрясений и движения устройства 1 формирования изображения. ЦПУ 31 может получать информацию детектирования степени смазанности, например, как информацию из 13 модуля детектирования степени смазанности.
В случае больших сотрясений или в случае, когда пользователь перемещает устройство 1 формирования изображения так, что оно следует за движущимся субъектом или тому подобное, изображение мониторинга на передней панели 6F дисплея не может быть соответствующим образом визуально распознано. Таким образом, на этапе F302, в случае, когда определяют, что степень смазанности или движение устройства 1 формирования изображения велики, по информации детектирования степени смазанности, ЦПУ 31 переводит поток обработки на этап F304, и можно рассмотреть управление с отключением отображения на передней панели 6F дисплея.
На этапе F302 по фиг.10, соответствующее управление отображением может быть выполнено для передней панели 6F дисплея с помощью ЦПУ 31, которое выполняет определение в соответствии со всеми или частью различных типов информации детектирования камеры, как описано выше.
То есть, в соответствии с обработкой, показанной на фиг.10, когда выбран заданный режим формирования изображения и заданное состояние, пригодное для отображения изображения мониторинга на передней панели 6F дисплея, по информации детектирования камеры, изображение мониторинга отображают на передней панели 6F дисплея
Поэтому человек, который представляет собой субъект, может рассматривать изображение мониторинга, которое представляет его самого, во время съемки, и может проверять свое собственное выражение лица, позу и т.д. Однако, в случае, когда определяют, что состояние не соответствует отображению изображения мониторинга на передней панели 6F дисплея, переднюю панель 6F дисплея выключают. Таким образом, можно более эффективно уменьшить потребление электроэнергии.
Следует отметить, что в качестве модифицируемого примера в соответствии с примером обработки на фиг.10, на этапе F305, помимо отключения отображения на передней панели 6F дисплея, можно предусмотреть отображение в состоянии пониженной яркости, как описано со ссылкой на фиг.7, или отображение воспроизводимого изображения или заданного изображения, как описано на фиг.8.
<4-4: Пример обработки на основе режима формирования изображения и информации анализа изображения>
Ниже будет описан пример выполнения управления отображением на передней панели 6F дисплея с учетом информации анализа изображения, в дополнение к режиму формирования изображения. Информация анализа изображения представляет собой информацию, получаемую в процессе анализа изображения, который выполняет модуль 44 анализа изображения.
На фиг.11 показан пример управления отображением, который ЦПУ 31 выполняет для передней панели 6F дисплея во время периода мониторинга.
Как описано выше, во время периода мониторинга, изображение мониторинга, получаемое при обработке системы формирования изображения и ЦСП 4 камеры, отображают на панели 6М основного дисплея. То есть во время периода мониторинга ЦПУ 31 выполняет управление для отображения данных снятого изображения, передаваемых из ЦСП 4 камеры на панели 6М основного дисплея, как прямое изображение.
В это время, для выполнения управления отображением передней панели 6F дисплея, ЦПУ 31 выполняет обработку на фиг.11 параллельно управлению отображением панели 6М основного дисплея.
На этапе F401, ЦПУ 31 разветвляет обработку в зависимости от того, представляет ли собой текущий режим формирования изображения заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея. То есть ЦПУ 31 подтверждает, был ли выбран заданный режим формирования изображения, такой как ночная сцена и режим съемки человека, режим съемки портрета, режим "мягкой съемки", режим срабатывания затвора после появления улыбки, или тому подобное, как режим формирования изображения.
В случае подтверждения текущего режима, в качестве упомянутого выше режима формирования изображения, ЦПУ 31 переводит поток обработки на этап F402 и подтверждает результаты анализа изображения, выполняемого с помощью модуля 44 анализа изображения.
Модуль 44 анализа изображения выполняет обработку анализа изображения в отношении снятых данных изображения, отображаемых в системе 2 формирования изображения и захваченных в ЦСП 4 камеры во время периода мониторинга. Например, модуль 44 анализа изображения выполняет обработку анализа изображения в отношении данных изображения каждого кадра, обработанного в модуле 41 обработки сигнала изображения, или данных изображения кадра, периодически выбираемого из кадров, обрабатываемых в модуле 41 обработки сигнала изображения. Определяют, включено или нет изображение, распознанное, как человек, в данные снятого изображения, используемые как цель анализа, то есть определяют, включен или нет участок контура, распознаваемый как человек, в данные изображения. Затем модуль 44 анализа изображения передает результат своего определения в ЦПУ 31. На этапе F402, ЦПУ 31 подтверждает, было ли распознано или нет присутствие человека, как результат его определения.
В случае, когда присутствие человека подтверждается в результате анализа изображения, ЦПУ 31 переводит поток обработки на этап F404, и выполняет отображение изображения мониторинга на передней панели 6F дисплея. То есть контроллер 7 дисплея получает инструкцию отображать изображение мониторинга, отображаемого на панели 6М основного дисплея, также и на передней панели 6F дисплея.
В этом случае состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показаны на фиг.4В.
С другой стороны, в случае, когда на этапе F401 будет получено подтверждение, что текущий режим не представляет собой заданный режим формирования изображения, ЦПУ 31 переводит поток обработки на этап F405 и выполняет управление с отключенным отображением передней панели 6F дисплея. Кроме того, в случае, когда получают подтверждение по результату результата анализа изображения на этапе F402, что человек не присутствует, ЦПУ 31 переводит поток обработки с этапа F403 на этап F405, и выполняет управление с выключенным отображением передней панели 6F дисплея.
В этом случае, состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют такие состояния, как показаны на фиг.4А.
ЦПУ 31 многократно выполняет обработку, показанную на фиг.9 в течение периода мониторинга. В соответствии с этим, когда пользователь выбирает заданный режим формирования изображения и поворачивает устройство 1 формирования изображения таким образом, что человек становится субъектом, в течение периода мониторинга, изображение мониторинга отображается на передней панели 6F дисплея.
Кроме того, когда выбирают другой режим формирования изображения, кроме заданных режимов формирования изображения, или когда выбирают в качестве цели сцену субъекта, которая не включает в себя человека, такую как сцена или тому подобное, переднюю панель 6F дисплея отключают. Следует отметить, что в случае, когда выбирают заданный режим формирования изображения, в момент времени, когда человека включают как субъект изображения, изображение мониторинга должно отображаться на передней панели 6F дисплея.
То есть в соответствии с примером обработки, представленным здесь, управляют не только включением/выключением отображения на передней панели 6F дисплея, в случае представленных выше, заранее определенных режимов формирования изображения, изображение мониторинга отображают на передней панели 6F дисплея в случае, когда человек присутствует как субъект изображения на передней стороне.
Когда человек становится субъектом, человек, который представляет собой субъекта, может рассматривать переднюю панель 6F дисплея. Кроме того, поскольку режим формирования изображения представляет собой заданный режим формирования изображения, предполагается, что обеспечивается хорошая видимость. Поэтому человек, который представляет собой субъекта, может рассматривать изображение мониторинга, на котором представлен он сам, и может проверять свои выражение лица, позу и т.д. Отображение на передней панели 6F дисплея можно эффективно использовать, например, как подтверждение для самого себя, представляет ли собой, например, выражение лица предпочтительным для фотографирования.
С другой стороны, в случае, когда человек не присутствует как субъект, определяют, что никто не присутствует перед передней панелью 6F дисплея. В соответствии с этим, отображение на передней панели 6F дисплея выключают (например, только передняя панель дисплея 6F находится в состоянии выключенного питания), в результате чего можно уменьшить потребление энергии. То есть ненужные отображения, которые никто не просматривает, не выполняют.
Следует отметить, что на этапе F402, выполняют определение, присутствует или нет человек с передней стороны, как субъект, используя результаты анализа изображения модуля 44 анализа изображения, но на этапе F402 может быть выполнена обработка для подтверждения результатов детектирования датчика 50 приближения, показанного на фиг.2. Кроме того, на этапе F402, могут быть подтверждены оба результата анализа изображения и результата детектирования бесконтактного датчика 50.
Кроме того, определение присутствия человека на передней стороне в результате детектирования лица путем анализа изображения было описано на основе различных примеров обработки со ссылкой на фиг.12-14, в модифицированных примерах, с использованием бесконтактного датчика 50, также можно аналогично рассматривать случаи, показанные на фиг.12-14.
Теперь, в ходе обработки, показанной на фиг.11, выполняют детектирование человека и управляют операцией отображения на передней панели 6F дисплея, но в качестве детектирования человека, может быть выполнено детектирование "лица".
Например, модуль 44 анализа изображения определяет присутствие контура, распознаваемого как лицо, и присутствие элемента лица, такого как глаза, нос, рот или тому подобное, среди снятых данных изображения, и определяет, включено ли лицо человека, используемого как субъект, в данные снятого изображения.
Обработка, выполняемая ЦПУ 31, в этом случае показана на фиг.12. Следует отметить, что этапы F401, F402, F404 и F405, показанные на фиг.12, аналогичны представленным на фиг.11. На этапе F402 ЦПУ 31 подтверждает результаты анализа изображения модуля 44 анализа изображения и определяет, присутствует или нет "лицо". Если "лицо" детектируют, поток обработки переходит с этапа F403A на F404, и выполняют отображение изображения мониторинга с помощью передней панели 6F дисплея, и, с другой стороны, если "лицо" не детектируют, поток обработки переходит с этапа F403A на этап F405, и переднюю панель 6F дисплея выключают. Таким образом, вместо определения всего тела человека, присутствие человека спереди можно подтверждать путем определения лица.
Затем будет описан пример управления отображением передней панели 6F дисплея с учетом различной информации результата анализа, в дополнение к распознаванию человека, в качестве результата анализа изображения, выполняемого модулем 44 анализа изображения.
Различные типы результатов распознавания изображения могут быть получены с помощью другого подхода, помимо распознавания человека и распознавания лица, в зависимости от обработки анализа изображения в модуле 44 анализа изображения. Например, может быть получена информация определения количества внешнего света. Кроме того, относительное количество движения между устройством 1 формирования изображения и субъектом может быть определено в соответствии с детектированием движения при сравнении кадров, анализа величины смазанности для каждого пикселя или тому подобное.
Кроме того, в качестве обработки распознавания изображения в случае, когда было детектировано изображение лица, размер лица (процент участка лица, занятого изображением одного кадра), ориентация лица, направление, в котором направлены глаза субъекта, или тому подобное в пределах экрана, также могут быть получены как результаты анализа.
Теперь будет описан случай такого использования дополнительных различных типов результатов анализа изображения. На фиг.13 показан пример управления отображением ЦПУ 31, которое выполняют для передней панели 6F дисплея во время периода мониторинга. Следует отметить, что этапы F401, F402, F403A, F404 и F405 аналогичны показанным на фиг.12.
На этапе F401 ЦПУ 31 разветвляет обработку, в зависимости от того, представляет ли собой текущий режим формирования изображения заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея. В случае, когда текущий режим формирования изображения не представляет собой заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея, отображением на передней панели 6F дисплея управляют таким образом, что его отключают на этапе F405.
В случае, когда текущий режим формирования изображения представляет собой заданный режим формирования изображения, пригодный для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 подтверждает результаты анализа с помощью модуля 44 анализа изображения на этапе F402. Однако в настоящем примере выполняют не только детектирование присутствия лица, но и другие различные типы обработки распознавания изображения, как описано выше, и ЦПУ 31 подтверждает результаты своего анализа информации.
Если детектируют "лицо" человека, поток обработки переходит с этапа F403A на этап F405, и выполняют управление для отключения отображения передней панели 6F дисплея.
Если "лицо" человека детектируют как результат анализа, выполняемого с помощью модуля 44 анализа изображения, ЦПУ 31 разветвляет обработку в соответствии с другими результатами анализа изображения на этапе F410. То есть ЦПУ 31 подтверждает другие результаты анализа изображения, кроме детектирования присутствия лица, и определяет, соответствует ли или нет это состояние отображению изображения мониторинга на передней панели 6F дисплея.
В случае, когда ЦПУ 31, по различным типам результатов анализа изображения, определяет, что состояние пригодно для отображения изображения мониторинга на передней панели 6F дисплея, поток обработки переходит на этап F404, и отображение изображения мониторинга выполняют с использованием передней панели 6F дисплея. То есть в контроллер 7 дисплея поступают инструкции отображения изображения мониторинга, отображаемого в панели 6М основного дисплея, также на передней панели 6F дисплея. В этом случае, состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют такие состояния, как показаны на фиг.4В.
С другой стороны, в случае, когда определение выполняют по другим результатам анализа на этапе F410, причем это состояние не пригодно для отображения изображения мониторинга на передней панели 6F дисплея, ЦПУ 31 управляет отображением на передней панели 6F дисплея так, что его выключают на этапе F405.
В случае перехода на этап F405 с этапа F401, F403A или F410, состояние отображения на панели 6М основного дисплея и передней панели 6F дисплея.
ЦПУ 31 многократно выполняет обработку, показанную на фиг.9, в течение периода мониторинга. В соответствии с этим, во время периода мониторинга, когда пользователь выбирает заданный режим формирования изображения и поворачивает устройство 1 формирования изображения так, что оно будет обращено к лицу человека, включенному в субъект, и состояние, распознаваемое по результатам анализа изображения различных типов, в этот момент времени, представляет собой заданное состояние, изображение мониторинга отображают на передней панели 6F дисплея. С другой стороны, в случае, когда режим формирования изображения не представляет собой заданный режим формирования изображения, или даже если, находясь в заданном режиме формирования изображения, человек (лицо) не будет включен в субъект, кроме того, в случае заданного режима формирования изображения, и когда лицо включено в субъект, но состояние, распознаваемое по различным типам анализа результатов, не представляет собой заданное состояние, переднюю панель 6F дисплея отключают.
Пример обработки на этапе F410 в соответствии с другими результатами анализа изображения, кроме присутствия изображения лица, представлен ниже. Количество внешнего света может быть определено как результат анализа изображения. В случае, когда количество внешнего света мало или чрезмерно велико, когда выполняют съемку с использованием яркого света или тому подобное, отображение мониторинга на передней панели 6F дисплея можно просматривать, как не распознанное соответствующим образом, как описано выше, с использованием информации детектирования камеры.
Таким образом, даже в случае, когда выполняют детектирование лица в заданном режиме формирования изображения, в случае, когда определяют, что количество внешнего света меньше, чем заданный уровень, представляет собой состояние задней подсветки, ЦПУ 31 рассматривает это состояние, как не соответствующее для отображения изображения мониторинга на передней панели 6F дисплея. То есть на этапе F405 отображением на передней панели 6F дисплея управляют так, что его выключают.
Кроме того, количество относительного движения между устройством 1 формирования изображения и субъектом может быть определено как результат анализа изображения. То есть может быть определен случай, в котором устройство 1 формирования изображения само формирует смазанные изображения или перемещается (пользователь перемещает устройство 1 формирования изображения), или случай, когда субъект перемещается, или случай, в котором они оба движутся.
Когда количество движения в этих случаях велико, можно предусмотреть, что, даже если присутствует человек, используемый как субъект, такой человек - субъект вряд ли сможет распознать соответствующим образом переднюю панель 6F дисплея.
Таким образом, на этапе F410, в случае, когда ЦПУ 31 определяет, что относительное движение устройства 1 формирования изображения и субъекта велико, поток обработки переводят на этап F405, и при этом можно управлять отображением передней панели 6F дисплея с ее выключением.
Не только простое детектирование лица, но также и размер лица (процент участка лица на экране) можно определять для анализа изображения. Хотя, в зависимости от состояния положения степени увеличения, если рассматривать определенное фиксированное состояние степени увеличения, размер лица можно использовать как показатель для определения расстояния от устройства 1 формирования изображения до человека, используемого в качестве субъекта. Например, даже если состояние степени увеличения представляет собой состояние широкоугольной съемки, но лицо снято малым, такого человека можно рассматривать, как находящегося на расстоянии.
Поэтому, на этапе F410 ЦПУ 31 определяет расстояние до человека - субъекта на основе размера лица этого человека, учитывая положение степени увеличения. Затем, в случае, когда такой человек находится на большом расстоянии, и ему трудно рассматривать содержание, отображаемое на передней панели 6F дисплея, на этапе F405, можно предусмотреть выполнение управления ЦПУ 31 с отключением отображения передней панели 6F дисплея.
Кроме того, ориентацию лица или направление глаз субъекта, также можно распознавать для анализа изображения. В случае, когда лицо не направлено вперед на снятом изображении, или в случае, когда субъект не смотрит на устройство 1 формирования изображения, такого человека - субъекта можно определять как человека, который не смотрит на устройство 1 формирования изображения, то есть на переднюю панель 6F дисплея.
Поэтому, на этапе F410, ЦПУ 31 подтверждает ориентацию лица или направление, в котором направлены глаза такого субъекта. В случае, когда определяют, что такой человек не смотрит на отображаемое содержание передней панели 6F дисплея, отображением передней панели 6F дисплея можно управлять с его отключением.
На этапе F410 по фиг.13, соответствующее управление отображением может быть выполнено для передней панели 6F дисплея путем определения ЦПУ 31, выполняемого в соответствии с результатами анализа изображения, как описано выше.
То есть в соответствии с обработкой, показанной на фиг.13, в заданном режиме формирования изображения, когда детектируют лицо и заданное состояние по другим результатам анализа изображения, изображение мониторинга отображают на передней панели 6F дисплея. В ситуации, когда человек присутствует на передней стороне субъекта, которого оценивают по режиму формирования изображения, и когда, по результатам анализа изображения, человек на стороне субъекта может, соответственно, визуально подтверждать (или визуально подтверждает) изображение мониторинга, изображение мониторинга отображают на передней панели 6F дисплея. В соответствии с этим, выполняют отображение изображения мониторинга на передней панели 6F дисплея в состоянии, в котором вероятность того, что человек, который представляет собой субъекта, будет просматривать отображение на передней панели 6F дисплея, чрезвычайно высока.
Кроме того, в случае, когда человек, который представляет собой субъекта, не существует, или в случае плохой видимости, или человек присутствует, но отсутствует причина выполнять отображение изображения мониторинга на передней панели 6F дисплея (не просматривает или не может просматривать), отображение на передней панели 6F дисплея выключают. Таким образом, можно рационально снизить потребление энергии.
Затем на фиг.14 показан модифицированный пример примера обработки по фиг.13, который применим в случае режима срабатывания затвора после появления улыбки, описанного выше в качестве одного из режимов формирования изображения. Кроме этапов F420-F422, показанных на фиг.14, поток обработки остается тем же, что и на фиг.13. Следует отметить, что на фиг.13 операция спуска затвора пользователем (инициирование перехода в период формирования изображения) не обозначена, но обработка, вплоть до этого периода формирования изображения обозначена на фиг.14, как этапы F420-F422.
В соответствии с обработкой анализа изображения, в дополнение к детектированию лица и различным типам детектирования, упомянутым выше, также можно определять выражения лица человека - субъекта съемки. Таким образом, в случае, когда отображение мониторинга выполняют на передней панели 6F дисплея в соответствии с режимом формирования изображения, присутствием человека - субъекта съемки, и другими результатами анализа, ЦПУ 31 может подтверждать результат определения выражения лица человека - субъекта съемки на этапе F420.
В случае, когда по результатам анализа изображения при определении выражения лица получают состояние улыбки, в этот момент времени поток обработки автоматически переводят на этап F422 и выполняют обработку спуска затвора, то есть обработку записи данных снятого изображения. Следует отметить, что в случае, когда пользователь вручную выполнил операцию спуска затвора, поток обработки переводят с этапа F421 на этап F422 и выполняют обработку спуска затвора.
Таким образом, путем комбинирования отображения мониторинга на передней панели 6F дисплея и обработки режима срабатывания затвора при возникновении улыбки, человек, который представляет собой субъект съемки, может просматривать свое собственное выражение лица на передней панели 6F дисплея и улыбнуться, в результате чего может быть выполнена запись снятого изображения.
Следует отметить, что в модифицированных примерах, в соответствии с примерами обработки, показанными на фиг.11-14, на этапе F405, помимо отключения отображения передней панели 6F дисплея, можно рассмотреть отображение в состоянии низкой яркости, как описано на фиг.6В, или отображение воспроизводимого изображения или заданного изображения, как описано на фиг.7.
Кроме того, в примерах обработки, показанных на фиг.12-14, определяют, находится или нет на передней стороне человек, который может визуально проверять переднюю панель дисплея, путем детектирования его лица, используя анализ изображения, но также можно использовать детектирование человека (детектирование тела человека в пределах изображения) вместо детектирования лица. Кроме того, можно использовать результаты детектирования, выполняемого бесконтактным датчиком 50.
[5. Управление отображением в модуле передней панели дисплея во время воспроизведения]
Различные примеры обработки, описанные до этого момента, представляют собой примеры обработки управления передней панели 6F дисплея во время периода мониторинга, но теперь будет описан пример управления отображением передней панели 6F дисплея во время периода воспроизведения.
Как показано на фиг.3, в случае, когда пользователь выполнил операцию передать инструкцию на выполнение операции воспроизведения, устройство 1 формирования изображения переходит в состояние операции воспроизведения (период воспроизведения). В течение периода воспроизведения выполняют операцию воспроизведения изображения, записанного в носитель 90 записи или в ПЗУ 33 типа флэш.
ЦПУ 31 считывает изображение, записанное на носителе 90 записи или в ПЗУ 33 типа флэш, в соответствии с операцией пользователя, и передает инструкции в контроллер 7 дисплея отобразить миниатюрные изображения или воспроизводимое изображение на панели 6М основного дисплея.
В это время ЦПУ 31 выполняет обработку по фиг.15, относящуюся к передней панели 6F дисплея.
На этапе F501, во время периода воспроизведения, ЦПУ 31 определяет, представляет ли собой режим отображения режим отображения, предназначенный для выполнения отображения на панели 6М основного дисплея и передней панели 6F дисплея, или режим отображения, при котором отображение выполняют только на панели 6М основного дисплея. Например, такой режим отображения может быть выбран с помощью операции пользователя.
Если не включен режим отображения с выполнением отображения на обоих экранах, ЦПУ 31 переводит обработку с этапа F501 на этап F505, и выполняет управление отключения передней панели 6F дисплея. То есть отображение воспроизводимого изображения выполняют только на панели 6М основного дисплея.
Если устройство находится в режиме отображения, в котором выполняют отображение на обоих экранах, ЦПУ 31 переводит поток обработки с этапа F501 на этап F502 и разветвляет обработку в соответствии с состоянием отображения при воспроизведении на текущей панели 6М основного дисплея. То есть в данный момент времени ЦПУ 31 разветвляет обработку в зависимости от того, отображается ли список миниатюрных изображений для воспроизводимых изображений или одиночное изображение на панели 6М основного дисплея.
В случае, когда в данный момент времени отображают одиночное воспроизводимое изображение на панели 6М основного дисплея, ЦПУ 31 переводит обработку на этап F503 для передачи инструкции в контроллер 7 дисплея отобразить эти же данные воспроизводимого изображения также на передней панели 6F дисплея. В этом случае, состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют такие состояния, как показаны на фиг.5С.
С другой стороны, в случае, когда список миниатюрных изображений отображают в данный момент времени на панели 6М основного дисплея, ЦПУ 31 переводит обработку на этап F504. В этом случае ЦПУ 31 передает инструкции в контроллер 7 дисплея для отображения на передней панели 6F дисплея данных воспроизводимого изображения, выбранных с помощью курсора К при отображении списка миниатюрных изображений. В этом случае, состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показаны на фиг.5В.
Когда ЦПУ 31 выполняет такую обработку, человек на передней стороны одновременно также может видеть сторону передней панели 6F дисплея. В соответствии с этим, пользователь устройства 1 формирования изображения и человек, находящийся с передней стороны, могут наслаждаться воспроизводимым изображением.
Кроме того, как показано на фиг.5В, в случае, когда список миниатюрных изображений отображают на панели 6М основного дисплея, пользователь устройства 1 формирования изображения перемещает курсор К, в результате чего человек на передней стороне может видеть выбранное воспроизводимое изображение на стороне передней панели 6F дисплея.
6. Примеры модификации
Различные типы примеров обработки и модификации, используемые как варианты выполнения, были описаны выше, но дополнительные различные модификации можно рассмотреть как варианты выполнения настоящего изобретения.
Например, может быть выполнена компоновка, в которой, в случае, когда общее отображение изображения мониторинга не выполняют на передней панели 6F дисплея, представлен пример, в котором отображение на передней панели 6F дисплея выключено, отображение на передней панели 6F дисплея установлено, как отображение с малой интенсивностью, или воспроизводимое изображение или заданное изображение отображают на передней панели 6F дисплея, но пользователь может выбрать, какое из этих состояний следует использовать.
В настоящем варианте выполнения были описаны примеры выполнения управления отображением на передней панели 6F дисплея на основе предположения, представляет ли собой или нет режим формирования изображения заданный режим формирования изображения, для оценки состояния, пригодного для отображения передней панели 6F дисплея, и дополнительно, путем комбинирования состояния установки пользователя, определения информации детектирования с помощью камеры (информация внутреннего детектирования) и результатов анализа изображения. Эти подходы могут быть дополнительно скомбинированы.
Например, можно рассмотреть пример, в котором выполняют управление отображением передней Панели 6F дисплея в режиме формирования изображения, в состоянии установки пользователя и на основе информации детектирования камеры.
Кроме того, можно рассмотреть пример выполнения управления отображением на передней панели 6F дисплея в режиме формирования изображения, в состоянии установки пользователя и на основе результатов анализа изображения.
Кроме того, можно рассмотреть пример выполнения управления отображением на передней панели 6F дисплея в режиме формирования изображения и на основе информации детектирования камеры, и на основе результатов анализа изображения.
Кроме того, можно рассмотреть пример выполнения управления отображением на передней панели 6F дисплея в режиме формирования изображения, в состоянии установки пользователя, на основе информации детектирования камеры и результатов анализа изображения.
Кроме того, при выборе режима съемки, возникают случаи, в которых подготовлен автоматический режим, помимо примеров, описанных выше. Автоматический режим представляет собой режим, в котором ЦПУ 31 устанавливает соответствующие параметры формирования изображения и управляет обработкой системы 2 формирования изображения и ЦСП 4 камеры в соответствии с состоянием внешнего освещения, анализа изображения и т.п.
В случае, когда автоматический режим подготовлен, как режим формирования изображения, такой автоматический режим может представлять собой, например, один из заданных режимов формирования изображения, пригодных для отображения на передней панели 6F дисплея. Применяют обработку, такую, какая показана на фиг.9-14, и состоянием отображения передней панели 6F дисплея управляют в соответствии с информацией детектирования камеры, информацией установки пользователя и результатами анализа изображения.
В заданном варианте выполнения представлено описание на основе предположения съемки неподвижного изображения. Однако настоящий пример также можно применять к движущемуся изображению. В случае движущегося изображения, описанный выше период мониторинга аналогичен периоду готовности к съемке, пока не будет запущено формирование изображения. Описанный выше период записи представляет собой период записи движущегося изображения, с начала записи до окончания записи. В соответствии с этим, управление отображением движущегося изображения на передней панели 6F дисплея выполняют в течение периода готовности к съемке и периода записи.
Если устройство 1 формирования изображения может снимать, как неподвижное изображение, так и движущееся изображение, режим съемки движущегося изображения подготавливают как один из режимов формирования изображения. Здесь режим съемки изображения переходит в один из заданных режимов формирования изображения, применяемых для отображения на передней панели 6F дисплея. В течение периода готовности к съемке и периода записи, применяют такую обработку, какая показана на фиг.9-14, и состоянием отображения на передней панели 6F дисплея управляют в соответствии с информацией детектирования камеры, информацией установки пользователя и результатами анализа изображения.
В настоящем примере устройство, в общем, называемое цифровой фотокамерой, было представлено в качестве примера, как устройство 1 формирования изображения, но вариант выполнения настоящего изобретения можно применять к устройствам различных типов, например, таким как видеокамеры, сотовые телефоны, имеющие функции формирования изображения, PDA (КПК - карманный персональный компьютер) и т.д.
Настоящая заявка содержит предмет изобретения, относящийся к тому, что раскрыто в приоритетной заявке на японский патент JP 2008-284293, поданной в японское патентное ведомство 5 ноября 2008 г., полное содержание которой приведено здесь в качестве ссылочного материала.
Для специалистов в данной области техники должно быть понятно, что различные модификации, комбинации, подкомбинации и изменения могут возникнуть в зависимости от требований к конструкции и других факторов, если только они находятся в пределах объема приложенной формулы изобретения или ее эквивалентов.
Реферат
Изобретение относится к устройствам формирования изображения. Техническим результатом является расширение арсенала технических возможностей устройства формирования изображения. Результат достигается тем, что устройство формирования изображения включает в себя: первый модуль панели дисплея, выполненный с возможностью отображения в направлении стороны пользователя, расположенный на корпусе устройства; второй модуль панели дисплея, выполненный с возможностью отображения в направлении стороны субъекта, расположенный на кожухе устройства; модуль обработки формирования изображения, выполненный с возможностью подвергать свет, падающий со стороны субъекта, фотоэлектрическому преобразованию для получения сигнала снятого изображения; и модуль управления, выполненный с возможностью осуществлять управление обработкой формирования изображения в соответствии с установкой режима формирования изображения и выполнять отображение на основе сигнала снятого изображения, полученного модулем обработки формирования изображения, с первым модулем панели дисплея, при управлении операциями отображения на основе сигнала снятого изображения, полученного с помощью модуля обработки формирования изображения второго модуля панели дисплея, по меньшей мере, в соответствии с режимом формирования изображения. 2 н. и 9 з.п. ф-лы, 21 ил.
Формула
первый модуль панели дисплея, выполненный с возможностью отображения в направлении стороны пользователя, расположенный на корпусе устройства;
второй модуль панели дисплея, выполненный с возможностью отображения в направлении стороны субъекта, расположенный на упомянутом корпусе устройства;
модуль обработки формирования изображения, выполненный с возможностью подвергать свет, падающий с упомянутой стороны субъекта, фотоэлектрическому преобразованию для получения сигнала снятого изображения; и
модуль управления, выполненный с возможностью управления обработкой формирования изображения в соответствии с режимом формирования изображения и отображением на основе сигнала снятого изображения, полученного упомянутым модулем обработки формирования изображения, с упомянутым первым модулем панели дисплея, при управлении операциями отображения на основе сигнала снятого изображения, полученного упомянутым модулем обработки формирования изображения упомянутого второго модуля панели дисплея, по меньшей мере, в соответствии с упомянутым режимом формирования изображения.
модуль считывания данных изображения, выполненный с возможностью считывания данных изображения, записанных на носителе информации;
в котором упомянутый модуль управления выполняет управление для отображения на основе данных изображения, считываемых упомянутым модулем считывания данных изображения, на упомянутой второй панели дисплея, в случае, когда упомянутый режим формирования изображения не представляет собой упомянутый заданный режим формирования изображения.
модуль анализа изображения, выполненный с возможностью анализа изображения сигнала снятого изображения, полученного с помощью упомянутого модуля обработки формирования изображения,
в котором упомянутый модуль управления управляет операцией отображения на основе сигнала снятого изображения, полученного с помощью упомянутого модуля обработки формирования изображения с упомянутым вторым модулем панели дисплея, на основе упомянутого режима формирования изображения и информации анализа изображения, полученной из упомянутого модуля анализа изображения.
модуль операций, выполненный с возможностью выбирать упомянутый режим формирования изображения.
выполняют отображение на первой панели дисплея на основе сигнала снятого изображения, полученного в результате фотоэлектрического преобразования света, падающего со стороны субъекта; и
управляют операциями отображения упомянутого сигнала снятого изображения на второй панели дисплея в соответствии с режимом формирования изображения, выбранным среди различных типов режимов формирования изображения, для выполнения обработки формирования изображения, пригодной для ситуации формирования изображения.
