KR20220108638A - Appararus for providing meditation using multiple displays - Google Patents

Appararus for providing meditation using multiple displays Download PDF

Info

Publication number
KR20220108638A
KR20220108638A KR1020210011863A KR20210011863A KR20220108638A KR 20220108638 A KR20220108638 A KR 20220108638A KR 1020210011863 A KR1020210011863 A KR 1020210011863A KR 20210011863 A KR20210011863 A KR 20210011863A KR 20220108638 A KR20220108638 A KR 20220108638A
Authority
KR
South Korea
Prior art keywords
display
screen
displayed
present
upper display
Prior art date
Application number
KR1020210011863A
Other languages
Korean (ko)
Inventor
김경훈
김진겸
이승환
Original Assignee
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대모비스 주식회사 filed Critical 현대모비스 주식회사
Priority to KR1020210011863A priority Critical patent/KR20220108638A/en
Priority to EP22153690.7A priority patent/EP4036757A1/en
Priority to US17/586,362 priority patent/US12019846B2/en
Priority to CN202210103779.4A priority patent/CN114801735A/en
Publication of KR20220108638A publication Critical patent/KR20220108638A/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • B60K37/06
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2370/152
    • B60K2370/157
    • B60K2370/33
    • B60K2370/52

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

The present invention relates to an apparatus for providing a meditation function using a plurality of displays. The apparatus for providing the meditation function using the plurality of displays according to the present invention comprises: an input unit receiving a mediation function request signal; a memory in which a program for providing the meditation function using the plurality of displays in response to receiving the meditation function request signal; and a processor which runs the program. The processor uses at least one of a lower display disposed on a cockpit and an upper display disposed above the lower display. In addition, the processor provides the meditation function by interlocking a speaker and a mood lamp. An objective of the present invention is to provide the apparatus for providing the meditation function for a vehicle occupant.

Description

복수의 디스플레이를 이용한 메디테이션 기능 제공 장치{APPARARUS FOR PROVIDING MEDITATION USING MULTIPLE DISPLAYS}Apparatus for providing mediation function using multiple displays

본 발명은 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치에 관한 것이다. The present invention relates to an apparatus for providing a mediation function using a plurality of displays.

종래 기술에 따르면, 단순히 차량 내 앰비언트 라이트의 색상을 조절하는 기능을 제공할 뿐, 차량 탑승자의 명상 기능을 제공하지 못한 한계가 있다. According to the prior art, there is a limitation in that a function of simply adjusting the color of an ambient light in a vehicle is provided, and a meditation function of a vehicle occupant is not provided.

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, 차량 내 복수의 디스플레이, 스피커, 무드램프를 제어하여 차량 탑승자의 명상 기능을 제공하는 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and an object of the present invention is to provide an apparatus for providing a meditation function for a vehicle occupant by controlling a plurality of displays, speakers, and mood lamps in a vehicle.

본 발명에 따른 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치는 메디테이션 기능 요청 신호를 수신하는 입력부와, 메디테이션 기능 요청 신호를 수신함에 따라, 복수의 디스플레이를 이용하여 메디테이션 기능을 제공하는 프로그램이 저장된 메모리 및 프로그램을 실행시키는 프로세서를 포함하고, 프로세서는 칵핏에 배치되는 하부 디스플레이 및 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나를 이용하고, 스피커와 무드 램프를 연동하여 메디테이션 기능을 제공한다. The apparatus for providing a meditation function using a plurality of displays according to the present invention includes an input unit for receiving a meditation function request signal, a memory and a program storing a program for providing a meditation function using a plurality of displays when the meditation function request signal is received and a processor for executing , the processor uses at least one of a lower display arranged in the cockpit and an upper display arranged above the lower display based on the lower display, and provides a meditation function by interlocking a speaker and a mood lamp.

프로세서는 운전자 모드에서 하부 디스플레이를 오프시키고, 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어한다. The processor turns off the lower display in the driver mode and controls the upper display to display a mediation app execution screen.

프로세서는 노브 조작 시, 노브 조작 방향에 따라 메디테이션 앱 실행 화면에서 이벤트 동작이 수행되도록 제어한다. When a knob is manipulated, the processor controls an event operation to be performed on the execution screen of the Meditation app according to the direction of knob manipulation.

프로세서는 동승자 모드에서 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어한다. The processor controls to display the mediation app execution screen on the upper display in the passenger mode.

프로세서는 상부 디스플레이에 메디테이션 멀티태스킹 화면을 표시하도록 제어하고, 앱 드로어 버튼 터치 및 메디테이션 앱 선택 시 메디테이션 썸네일 화면을 표시하도록 제어한다. The processor controls to display the mediation multitasking screen on the upper display, and controls to display the mediation thumbnail screen when the app drawer button is touched and the mediation app is selected.

프로세서는 상부 디스플레이에 표시되는 메디테이션 앱에 연동하는 음원을 동승자 헤드레스트 스피커를 통해 출력되도록 제어하고, 하부 디스플레이에서 실행 화면이 표시되는 미디어의 음원을 차량 내 스피커를 통해 출력되도록 제어한다.The processor controls the sound source linked to the Meditation app displayed on the upper display to be output through the passenger's headrest speaker, and controls the sound source of the media whose execution screen is displayed on the lower display to be output through the in-vehicle speaker.

프로세서는 헤드레스트 스피커 및 차량 내 스피커가 사운드 버블을 형성하도록 제어한다. The processor controls the headrest speakers and in-vehicle speakers to form sound bubbles.

본 발명에 따르면, 차량 디스플레이, 스피커, 무드램프와 연동하여 메디테이션 기능을 제공하여, 차량 탑승자의 명상을 지원하는 것이 가능한 효과가 있다. According to the present invention, it is possible to provide a meditation function in conjunction with a vehicle display, a speaker, and a mood lamp to support the meditation of a vehicle occupant.

본 발명의 효과는 이상에서 언급한 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.Effects of the present invention are not limited to those mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 발명의 실시예에 따른 통합 칵핏의 개념도이다.
도 2는 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 검색 장치를 도시한다.
도 3은 본 발명의 실시예에 따른 글로벌 메뉴를 도시한다.
도 4는 본 발명의 실시예에 따른 프로필을 도시한다.
도 5는 본 발명의 실시예에 따른 프로필 변경 과정을 도시한다.
도 6은 본 발명의 실시예에 따른 검색 전 및 검색 결과 화면을 도시한다.
도 7은 본 발명의 실시예에 따른 상부 디스플레이의 내비게이션 동작 중 하부 디스플레이의 검색 전 및 검색 결과 화면을 도시한다.
도 8 내지 도 10은 본 발명의 실시예에 따른 통합 검색 과정을 도시한다.
도 11및 도 12는 본 발명의 실시예에 따른 동승자 모드에서의 통합 검색을 도시한다.
도 13은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 전방 카메라 영상 및 서라운드 뷰 모니터링 제어 장치를 도시한다.
도 14는 본 발명의 실시예에 따른 기본 모드에서 상부 디스플레이 및 하부 디스플레이 화면을 도시한다.
도 15는 본 발명의 실시예에 따른 이미지 사이즈를 고려한 영상 디스플레이를 도시한다.
도 16 및 도 17은 본 발명의 실시예에 따른 전방 영상 디스플레이를 도시한다.
도 18 및 도 19는 본 발명의 실시예에 따른 서라운드 뷰 모니터링 화면 디스플레이를 도시한다.
도 20은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 내비게이션 제어 장치를 도시한다.
도 21은 본 발명의 실시예에 따른 주행 전 내비게이션 표시를 도시한다.
도 22는 본 발명의 실시예에 따른 주행 중 내비게이션 표시를 도시한다.
도 23은 본 발명의 실시예에 따른 하부 디스플레이를 이용한 조작을 도시한다.
도 24는 본 발명의 실시예에 따른 상부 디스플레이를 이용한 조작을 도시한다.
도 25는 본 발명의 실시예에 따른 상부 디스플레이를 이용한 내비게이션 설정을 도시한다.
도 26및 도 27은 본 발명의 실시예에 따른 내비게이션 실행 중 동승자 모드 변경에 따른 상황을 도시한다.
도 28은 본 발명의 실시예에 따른 내비게이션 미 실행 중 동승자 모드 변경에 따른 상황을 도시한다.
도 29는 본 발명의 실시예에 따른 하부 디스플레이를 이용한 목적지 검색 과정을 도시한다.
도 30은 본 발명의 실시예에 따른 상부 디스플레이를 이용한 목적지 검색 과정을 도시한다.
도 31은 본 발명의 실시예에 따른 3D 내비게이션 및 AR 내비게이션 설정을 도시한다.
도 32는 본 발명의 실시예에 따른 동승자 모드에서의 내비게이션 제어를 도시한다.
도 33은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 미디어 사운드 멀티커넥션 제어 장치를 도시한다.
도 34는 본 발명의 실시예에 따른 운전자 모드 및 동승자 모드에서의 미디어 멀티 커넥션을 도시한다.
도 35는 본 발명의 실시예에 따른 블루투스 오디오 재생을 도시한다.
도 36은 본 발명의 실시예에 따른 블루투스 오디오 리스트를 도시한다.
도 37은 본 발명의 실시예에 따른 블루투스 오디오 재생 과정을 도시한다.
도 38은 본 발명의 실시예에 따른 USB 음악 재생을 도시한다.
도 39는 본 발명의 실시예에 따른 USB 음악 재생 리스트를 도시한다.
도 40은 본 발명의 실시예에 따른 USB 음악 재생 과정을 도시한다.
도 41은 본 발명의 실시예에 따른 USB 비디오 재생을 도시한다.
도 42는 본 발명의 실시예에 따른 USB 비디오 재생 리스트를 도시한다.
도 43은 본 발명의 실시예에 따른 디스플레이간 동영상 이동을 도시한다.
도 44는 본 발명의 실시예에 따른 노브 조작 과정을 도시한다.
도 45는 본 발명의 실시예에 따른 비디오 동시 재생 과정을 도시한다.
도 46은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치를 도시한다.
도 47은 본 발명의 실시예에 따른 운전자 모드 중 메디테이션 실행 화면을 도시한다.
도 48은 본 발명의 실시예에 따른 동승자 모드 중 메디테이션 실행 화면을 도시한다.
도 49는 본 발명의 실시예에 따른 메디테이션 기능 제공 과정을 도시한다.
도 50은 본 발명의 실시예에 따른 동승자 모드 메디테이션 화면을 도시한다.
도 51은 본 발명의 실시예에 따른 동승자 모드에서의 메디테이션 기능 제공 과정을 도시한다.
도 52는 본 발명의 실시예에 따른 동승자 모드 메디테이션 멀티태스킹 화면을 도시한다.
도 53은 본 발명의 실시예에 따른 동승자 모드 메디테이션 기능 제공 과정을 도시한다.
도 54는 본 발명의 실시예에 따른 동승자 모드 메디테이션 기능 제공 시 사운드 버블 형성을 도시한다.
도 55는 본 발명의 실시예에 따른 IVI 시스템과 모바일 디바이스의 미디어 캐스트 제어 장치를 도시한다.
도 56은 본 발명의 실시예에 따른 스마트폰 앱 홈 화면을 도시한다.
도 57은 본 발명의 실시예에 따른 스마트폰 앱 동영상 플레이어 화면을 도시한다.
도 58은 본 발명의 실시예에 따른 스마트폰 앱 뮤직 플레이어 화면을 도시한다.
도 59는 본 발명의 실시예에 따른 스마트폰 앱 캐스트 시 제어기 화면을 도시한다.
도 60은 본 발명의 실시예에 따른 컨텐츠 위치 변경을 도시한다.
도 61은 본 발명의 실시예에 따른 비디오 캐스트 과정을 도시한다.
도 62는 본 발명의 실시예에 따른 뮤직 캐스트 과정을 도시한다.
도 63은 본 발명의 실시예에 따른 운전자 상태에 따른 단계별 경고 제공 장치를 도시한다.
도 64는 본 발명의 실시예에 따른 운전자 모드에서의 DSW 실행을 도시한다.
도 65는 본 발명의 실시예에 따른 동승자 모드에서의 DSW 실행을 도시한다.
도 66은 본 발명의 실시예에 따른 운전자 모드에서 단계별 경고 제공 과정을 도시한다.
도 67은 본 발명의 실시예에 따른 동승자 모드에서 단계별 경고 제공 과정을 도시한다.
1 is a conceptual diagram of an integrated cockpit according to an embodiment of the present invention.
2 illustrates a search apparatus using a plurality of displays according to an embodiment of the present invention.
3 shows a global menu according to an embodiment of the present invention.
4 shows a profile according to an embodiment of the present invention.
5 illustrates a profile change process according to an embodiment of the present invention.
6 is a view showing a search result screen and before a search according to an embodiment of the present invention.
7 illustrates a search result screen and before a search of a lower display during a navigation operation of an upper display according to an embodiment of the present invention.
8 to 10 show an integrated search process according to an embodiment of the present invention.
11 and 12 illustrate an integrated search in a passenger mode according to an embodiment of the present invention.
13 illustrates a front camera image and surround view monitoring control apparatus using a plurality of displays according to an embodiment of the present invention.
14 shows an upper display and a lower display screen in a basic mode according to an embodiment of the present invention.
15 shows an image display in consideration of the image size according to an embodiment of the present invention.
16 and 17 show a front image display according to an embodiment of the present invention.
18 and 19 show a surround view monitoring screen display according to an embodiment of the present invention.
20 illustrates a navigation control apparatus using a plurality of displays according to an embodiment of the present invention.
21 shows a navigation display before driving according to an embodiment of the present invention.
22 illustrates a navigation display while driving according to an embodiment of the present invention.
23 shows an operation using a lower display according to an embodiment of the present invention.
24 shows an operation using an upper display according to an embodiment of the present invention.
25 illustrates a navigation setting using an upper display according to an embodiment of the present invention.
26 and 27 illustrate a situation according to a change of a passenger mode while navigation is executed according to an embodiment of the present invention.
28 is a diagram illustrating a situation in which a passenger mode is changed while navigation is not executed according to an embodiment of the present invention.
29 illustrates a destination search process using a lower display according to an embodiment of the present invention.
30 illustrates a destination search process using an upper display according to an embodiment of the present invention.
31 shows 3D navigation and AR navigation settings according to an embodiment of the present invention.
32 illustrates navigation control in a passenger mode according to an embodiment of the present invention.
33 shows a media sound multi-connection control apparatus using a plurality of displays according to an embodiment of the present invention.
34 illustrates a media multi-connection in a driver mode and a passenger mode according to an embodiment of the present invention.
35 shows Bluetooth audio playback according to an embodiment of the present invention.
36 shows a Bluetooth audio list according to an embodiment of the present invention.
37 shows a Bluetooth audio playback process according to an embodiment of the present invention.
38 shows USB music playback according to an embodiment of the present invention.
39 shows a USB music play list according to an embodiment of the present invention.
40 shows a USB music playback process according to an embodiment of the present invention.
41 shows USB video playback according to an embodiment of the present invention.
42 shows a USB video play list according to an embodiment of the present invention.
43 illustrates movement of a moving picture between displays according to an embodiment of the present invention.
44 shows a knob operation process according to an embodiment of the present invention.
45 shows a video simultaneous playback process according to an embodiment of the present invention.
46 illustrates an apparatus for providing a mediation function using a plurality of displays according to an embodiment of the present invention.
47 illustrates a mediation execution screen in a driver mode according to an embodiment of the present invention.
48 illustrates a mediation execution screen in a passenger mode according to an embodiment of the present invention.
49 illustrates a process of providing a mediation function according to an embodiment of the present invention.
50 illustrates a passenger mode mediation screen according to an embodiment of the present invention.
51 illustrates a process of providing a meditation function in a passenger mode according to an embodiment of the present invention.
52 illustrates a passenger mode meditation multitasking screen according to an embodiment of the present invention.
53 illustrates a process of providing a passenger mode mediation function according to an embodiment of the present invention.
54 illustrates the formation of a sound bubble when the passenger mode mediation function is provided according to an embodiment of the present invention.
55 shows an IVI system and a media cast control apparatus of a mobile device according to an embodiment of the present invention.
56 shows a smartphone app home screen according to an embodiment of the present invention.
57 shows a smartphone app video player screen according to an embodiment of the present invention.
58 shows a smartphone app music player screen according to an embodiment of the present invention.
59 shows a controller screen when casting a smartphone app according to an embodiment of the present invention.
60 illustrates a content location change according to an embodiment of the present invention.
61 illustrates a video cast process according to an embodiment of the present invention.
62 shows a music cast process according to an embodiment of the present invention.
63 is a diagram illustrating an apparatus for providing a warning step-by-step according to a driver's state according to an embodiment of the present invention.
64 illustrates DSW execution in driver mode according to an embodiment of the present invention.
65 illustrates DSW implementation in passenger mode according to an embodiment of the present invention.
66 illustrates a step-by-step warning providing process in a driver mode according to an embodiment of the present invention.
67 illustrates a step-by-step warning providing process in a passenger mode according to an embodiment of the present invention.

본 발명의 전술한 목적 및 그 이외의 목적과 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. The above and other objects, advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings.

그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 목적, 구성 및 효과를 용이하게 알려주기 위해 제공되는 것일 뿐으로서, 본 발명의 권리범위는 청구항의 기재에 의해 정의된다. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only the following examples are provided to those of ordinary skill in the art to which the present invention pertains to the purpose of the invention, It is only provided to easily inform the composition and effect, and the scope of the present invention is defined by the description of the claims.

한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자가 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가됨을 배제하지 않는다.Meanwhile, the terminology used herein is for the purpose of describing the embodiments and is not intended to limit the present invention. In this specification, the singular also includes the plural, unless specifically stated otherwise in the phrase. As used herein, “comprises” and/or “comprising” means that a referenced component, step, operation, and/or element is the presence of one or more other components, steps, operations and/or elements. or added.

종래 기술에 따르면, 차량 내부 디스플레이에서 제한된 영역 내에서 특정 메뉴(예: 내비게이션 목적지 검색)에 대한 검색만을 수행할 수 있다는 문제점이 있다. According to the prior art, there is a problem in that only a search for a specific menu (eg, navigation destination search) can be performed within a limited area on the display inside the vehicle.

도 1은 본 발명의 실시예에 따른 통합 칵핏의 개념도이다. 1 is a conceptual diagram of an integrated cockpit according to an embodiment of the present invention.

본 발명의 실시예에 따르면, 통합 칵핏에는 12.3인치의 상부 디스플레이와, 13.2인치의 모니터 일체형 제어기가 배치된다. According to an embodiment of the present invention, a 12.3 inch upper display and a 13.2 inch monitor integrated controller are arranged in the integrated cockpit.

12.3인치의 상부 디스플레이는 동승자 모드로 동작되는 것이 가능하며, 13.2인치의 모니터 일체형 제어기는 클러스터, DSW, 블루밍 사운드, 12.3인치 상부 디스플레이, 3D 패턴 조명, 헤드레스트 스피커, SVM, 노브 조작계, 에어벤트, 그라데이션 조명, CMS 카메라와 연결된다. The 12.3-inch upper display can be operated in passenger mode, and the 13.2-inch monitor integrated controller includes cluster, DSW, blooming sound, 12.3-inch upper display, 3D pattern lighting, headrest speaker, SVM, knob control system, air vent, Gradient lighting, connected to the CMS camera.

이하, 도 1의 12.3인치의 디스플레이를 상부 디스플레이로, 13.2인치의 모니터 일체형 제어기를 하부 디스플레이로 명명하여, 본 발명의 바람직한 실시예에 대해 설명한다. Hereinafter, the 12.3-inch display of FIG. 1 is named as the upper display, and the 13.2-inch integrated monitor controller is named as the lower display, and a preferred embodiment of the present invention will be described.

도 2는 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 검색 장치를 도시한다. 2 illustrates a search apparatus using a plurality of displays according to an embodiment of the present invention.

본 발명의 실시예에 따른 복수의 디스플레이를 이용한 검색 장치는 통합 검색 명령 신호를 수신하는 입력부(110)와, 통합 검색 명령 신호에 따라 상부 디스플레이 및 하부 디스플레이 중 적어도 어느 하나에 통합 검색 기능을 표시하도록 제어하는 프로그램이 저장된 메모리(120) 및 프로그램을 실행시키는 프로세서(130)를 포함하고, 프로세서(130)는 칵핏에 배치되는 하부 디스플레이 및 부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나에 대한 통합 검색창 표시를 제어한다. A search apparatus using a plurality of displays according to an embodiment of the present invention is configured to display an integrated search function on at least one of an input unit 110 for receiving an integrated search command signal and an upper display and a lower display according to the integrated search command signal. It includes a memory 120 in which the controlling program is stored and a processor 130 that executes the program, and the processor 130 is displayed on at least one of a lower display arranged in the cockpit and an upper display arranged on the upper side based on the secondary display. Controls the display of the integrated search box for

프로세서(130)는 사용자 프로필에 대한 선택 정보를 이용하여, 사용자 프로필에 해당되는 메뉴 별 검색 결과를 디스플레이한다. The processor 130 displays a search result for each menu corresponding to the user profile by using the selection information on the user profile.

프로세서(130)는 통합 검색 요청이 수신되면, 사용자 프로필에 따라 메뉴 별 최신 사용 순서에 따른 목록을 표시하도록 제어한다. When the integrated search request is received, the processor 130 controls to display a list according to the latest order of use for each menu according to the user profile.

프로세서(130)는 통합 검색 요청이 수신되고, 검색어가 입력되면, 검색어에 해당되는 목록을 기설정된 순서에 따라 표시하도록 제어한다. When an integrated search request is received and a search word is input, the processor 130 controls to display a list corresponding to the search word according to a preset order.

프로세서(130)는 상부 디스플레이에 기설정된 메뉴 별 목록을 정렬하여 표시하고, 하부 디스플레이에 기설정된 메뉴 별 사용빈도가 높은 정보를 표시하도록 제어한다. The processor 130 arranges and displays a list for each preset menu on the upper display, and controls to display information with a high frequency of use for each preset menu on the lower display.

프로세서(130)는 상부 디스플레이에 기설정된 메뉴 별 최신 사용 순서에 따른 정보를 표시하고, 하부 디스플레이에 검색어가 입력되면 검색어에 해당되는 목록을 기설정된 순서에 따라 상부 디스플레이에 표시하도록 제어한다. The processor 130 displays information according to the latest order of use for each preset menu on the upper display, and controls to display a list corresponding to the search word on the upper display according to a preset order when a search word is input on the lower display.

프로세서(130)는 상부 디스플레이에 앱 기능이 실행 중인 경우, 하부 디스플레이를 이용하여 통합 검색창 표시를 수행하도록 제어한다. When an app function is being executed on the upper display, the processor 130 controls to display the integrated search window using the lower display.

프로세서(130)는 동승자 모드가 실행 중인 경우, 상부 디스플레이를 이용하여 통합 검색창 표시를 수행하도록 제어한다. When the passenger mode is running, the processor 130 controls to display the integrated search window using the upper display.

도 3은 본 발명의 실시예에 따른 글로벌 메뉴를 도시한다. 3 shows a global menu according to an embodiment of the present invention.

상부 디스플레이에는 온도, 문구(Life Is Good), 현재 시간 정보(11:23)가 표시된다. The upper display displays temperature, text (Life Is Good), and current time information (11:23).

상부 디스플레이에 표시되는 컨텐츠는 도 3의 (a), (b)에 도시한 것에 한정되지 않는다. The content displayed on the upper display is not limited to those shown in FIGS. 3A and 3B .

도 3의 (a) 및 (b)를 참조하면, 사용자가 하부 디스플레이에서 특정 영역을 탭하거나 드래그함에 따라, 기존의 내비게이션 정보 표시 영역 및 미디어 표시 영역은 어둡거나 흐리게 표시되고, 글로벌 메뉴가 표시된다. Referring to FIGS. 3A and 3B , as the user taps or drags a specific area on the lower display, the existing navigation information display area and the media display area are dark or dimmed, and a global menu is displayed. .

도 3의 (b)에 도시한 글로벌 메뉴의 각 구성은 다음 [표 1]과 같이 정의된다. Each configuration of the global menu shown in FIG. 3B is defined as follows [Table 1].

[표 1][Table 1]

Figure pat00001
Figure pat00001

도 4는 본 발명의 실시예에 따른 프로필을 도시한다. 4 shows a profile according to an embodiment of the present invention.

도 4의 (a)를 참조하면, 하부 디스플레이의 유저 프로필에는 각 유저의 프로필 이미지 및 명칭이 도시되고, 좌우 스크롤 영역에 따라 게스트와 프로필 추가 버튼이 구비된다. Referring to FIG. 4A , each user's profile image and name are shown in the user profile of the lower display, and guest and profile addition buttons are provided according to the left and right scrolling areas.

도 4의 (b)는 하부 디스플레이의 화면 내에 최대 6개의 유저 프로필을 디스플레이한 것을 도시하고, 도 4의 (c)는 팝업 내 프로필 리스트를 중앙 정렬하는 것을 도시한다. Figure 4 (b) shows the display of up to six user profiles in the screen of the lower display, Figure 4 (c) shows the center arrangement of the profile list in the pop-up.

도 4에 도시한 유저 프로필의 각 구성은 다음 [표 2]와 같이 정의된다. Each configuration of the user profile shown in FIG. 4 is defined as follows [Table 2].

[표 2][Table 2]

Figure pat00002
Figure pat00002

도 5는 본 발명의 실시예에 따른 프로필 변경 과정을 도시한다. 5 illustrates a profile change process according to an embodiment of the present invention.

하부 디스플레이의 글로벌 메뉴에서 “Eric”이라는 프로필 명칭을 선택하면, 유저 프로필 화면이 디스플레이되고, “”에 대해 포커스된 화면이 디스플레이된다. When a profile name of “Eric” is selected from the global menu of the lower display, a user profile screen is displayed, and a screen focused on “” is displayed.

사용자가 여기서 “Aaron”을 선택하면, 유저가 “”으로 변경된다. If the user selects “Aaron” here, the user is changed to “”.

하부 디스플레이의 글로벌 메뉴에서 “Aaron”이라는 프로필 명칭을 선택하면, 유저 프로필 화면이 디스플레이되고, “”에 대해 포커스된 화면이 디스플레이된다. When a profile name of “Aaron” is selected from the global menu of the lower display, a user profile screen is displayed, and a screen focused on “” is displayed.

사용자가 여기서 “Guest”을 선택하면, 유저가 “”로 변경된다. If the user selects “Guest” here, the user is changed to “”.

유저 프로필에서의 선택에 따라, 변경된 프로필에 해당하는 프로필 사진과 이름이 표시된다. According to the selection in the user profile, the profile picture and name corresponding to the changed profile are displayed.

도 6은 본 발명의 실시예에 따른 검색 전 및 검색 결과 화면을 도시한다. 6 is a view showing a search result screen and before a search according to an embodiment of the present invention.

도 6의 (a)는 검색 전 미디어, 연락처, 목적지에 대한 최신 순 정렬을 도시하고, 도 6의 (b)는 검색 결과에 따른 미디어, 연락처, 목적지에 대한 알파벳 순 정렬을 도시한다. FIG. 6(a) shows the latest sorting of media, contacts, and destinations before a search, and FIG. 6(b) shows alphabetical sorting of media, contacts, and destinations according to the search results.

본 발명의 실시예에 따른 통합 칵핏에서, 하부 디스플레이로부터 상부 디스플레이로 위젯을 올리거나, 상부 디스플레이로부터 하부 디스플레이로 위젯을 내리는 것이 가능하다. In the integrated cockpit according to an embodiment of the present invention, it is possible to raise a widget from the lower display to the upper display, or lower the widget from the upper display to the lower display.

통합 검색이 수행되면, 상부 디스플레이 화면과 하부 디스플레이 화면에 통합 검색 화면이 표시된다. When the integrated search is performed, the integrated search screen is displayed on the upper display screen and the lower display screen.

도 6의 (a)를 참조하면, 검색 전 상부 디스플레이의 미디어, 연락처, 목적지에는 최근 선택, 연락 및 설정한 미디어, 연락처, 목적지의 순서대로 정렬하여 표시되고, 하부 디스플레이에는 자주 찾은 미디어, 연락처 및 목적지가 최상단에 표시된다. Referring to FIG. 6 (a), the media, contacts, and destinations of the upper display prior to the search are displayed in order of recently selected, contacted and set media, contacts, and destinations, and the frequently found media, contacts, and destinations are displayed on the lower display. The destination is displayed at the top.

도 6의 (b)를 참조하면, 검색창에 a를 입력하면, a가 포함되는 미디어, 연락처, 목적지가 알파벳 순서대로 정렬되어 검색 결과를 표시한다. Referring to (b) of FIG. 6 , when a is entered in the search window, media, contacts, and destinations including a are arranged in alphabetical order to display the search results.

이 때, 사용 빈도와 알파벳 순서를 함께 고려하여 표시할 수 있다. In this case, the frequency of use and the alphabetical order may be taken into consideration.

도 6에 도시한 통합 검색 화면의 구성은 다음 [표 3]과 같이 정의된다. The configuration of the integrated search screen shown in FIG. 6 is defined as follows [Table 3].

[표 3][Table 3]

Figure pat00003
Figure pat00003

도 7은 본 발명의 실시예에 따른 상부 디스플레이의 내비게이션 동작 중 하부 디스플레이의 검색 전 및 검색 결과 화면을 도시한다. 7 illustrates a search result screen and before a search of a lower display during a navigation operation of an upper display according to an embodiment of the present invention.

상부 디스플레이에서 내비게이션 정보가 표시되고 있고, 하부 디스플레이에는 통합 검색 화면이 표시된다. Navigation information is displayed on the upper display, and the integrated search screen is displayed on the lower display.

도 7의 (a)는 검색 전 미디어, 연락처, 목적지에 대한 최신 순 정렬을 도시하고, 도 7의 (b)는 검색 결과에 따른 미디어, 연락처, 목적지에 대한 알파벳 순 정렬을 도시한다. FIG. 7A shows the latest sorting of media, contacts, and destinations before a search, and FIG. 7B shows alphabetical sorting of media, contacts, and destinations according to the search results.

도 7의 (a)를 참조하면, 검색 전 하부 디스플레이의 미디어, 연락처, 목적지에는 최근 선택, 연락 및 설정한 미디어, 연락처, 목적지의 순서대로 정렬하여 표시된다. Referring to (a) of FIG. 7 , media, contacts, and destinations of the lower display prior to search are displayed in order of recently selected, contacted and set media, contacts, and destinations.

도 7의 (b)를 참조하면, 검색창에 a를 입력하면, a가 포함되는 미디어, 연락처, 목적지가 알파벳 순서대로 정렬되어 검색 결과를 표시한다. Referring to (b) of FIG. 7 , when a is entered in the search window, media, contacts, and destinations including a are arranged in alphabetical order to display the search results.

이 때, 사용 빈도와 알파벳 순서를 함께 고려하여 표시할 수 있다. In this case, the frequency of use and the alphabetical order may be taken into consideration.

도 7에 도시한 통합 검색 화면의 구성은 다음 [표 4]와 같이 정의된다. The configuration of the integrated search screen shown in FIG. 7 is defined as follows [Table 4].

[표 4][Table 4]

Figure pat00004
Figure pat00004

도 8 내지 도 10은 본 발명의 실시예에 따른 통합 검색 과정을 도시한다. 8 to 10 show an integrated search process according to an embodiment of the present invention.

도 8을 참조하면, 통합 검색으로 이동하는 경우, 통합 검색 팝업이 제공되며, 미디어, 연락처, 목적지 별로 최근 사용 리스트가 표시되며, 검색창에 검색어가 입력되면, 그에 해당하는 미디어, 연락처, 목적지 별 검색 겨로가가 표시된다. Referring to FIG. 8 , when moving to an integrated search, an integrated search pop-up is provided, a list of recent uses for each media, contact, and destination is displayed, and when a search term is entered in the search box, the corresponding media, contact, and destination The search price is displayed.

전술한 바와 같이, 상부 디스플레이와 하부 디스플레이를 이용하여 통합 검색 화면이 제공되는 경우, 상부 디스플레이에는 미디어, 연락처, 목적지에 대해 최근 사용 순서 또는 알파벳 순서에 따라 표시하고, 하부 디스플레이에는 자주 검색한 검색어 버튼이 표시될 수 있다. As described above, when the integrated search screen is provided using the upper display and the lower display, media, contacts, and destinations are displayed in the order of recent use or alphabetical order on the upper display, and frequently searched keywords are displayed on the lower display. can be displayed.

통합 검색 화면에서 특정 미디어를 선택하면, 미디어 위젯에서 해당 미디어를 재생하고, 연락처를 선택하면, 해당 연락처에 대한 전화걸기/메시지 전송하기 기능 선택이 가능하고, 특정 목적지를 선택하면, 내비게이션 위젯에서 해당 목적지까지의 경로에 대한 미리 보기 화면으로 진입한다. If you select a specific media on the integrated search screen, the media widget plays that media. If you select a contact, you can select a function to make a call/send message to the contact. If you select a specific destination, the corresponding media is displayed on the navigation widget. Enter the preview screen for the route to the destination.

검색 결과에 대한 실행 앱이 하부 디스플레이의 화면 내에 있을 경우, 해당 위치에서 검색 및 선택 결과에 후속하여 실행되고, 검색 결과에 대한 실행 앱이 화면 내에 없을 경우, 내비게이션은 최좌측에 실행되고, 미디어 또는 전화 위젯은 내비게이션이 없을 경우 최좌측에서, 내비게이션이 있을 경우 그 오른 편 위치에서 실행된다. When the launch app for the search result is within the screen of the lower display, it is executed following the search and selection results at the corresponding location. The phone widget runs on the left-most position when there is no navigation, and on the right-hand side when there is navigation.

도 9를 참조하면, 상부 또는 하부 디스플레이의 미디어 위젯에서 “검색” 관련 아이콘을 선택하거나, 상부 또는 하부 디스플레이의 내비게이션 위젯에서 “search”아이콘을 선택하거나, 하부 디스플레이의 폰 위젯에서 “검색” 관련 아이콘을 선택하는 경우, 통합 검색창이 호출되며, 통합 검색창은 전술한 바와 같이 검색 전에는 미디어, 연락처, 목적지에 대해 최근 사용 순서대로 디스플레이되고, 검색어가 입력되면 관련한 미디어, 연락처, 목적지가 알파벳 순 또는 가나다 순으로 디스플레이된다. Referring to FIG. 9 , a “search” related icon is selected from the media widget of the upper or lower display, a “search” icon is selected from the navigation widget of the upper or lower display, or a “search” related icon is selected from the phone widget of the lower display. If you select , the integrated search window is called, and as described above, before the search, the integrated search window is displayed for media, contacts, and destinations in the order of recent use. displayed in order.

도 10을 참고하면, 상부 디스플레이에는 내비게이션 정보가 표시되고 있고, 하부 디스플레이의 내비게이션 위젯에서 “search”아이콘이 선택되면, 상부 디스플레이에는 내비게이션 정보가 지속적으로 표시되고, 하부 디스플레이에만 통합 검색창이 호출된다(즉, 상부 디스플레이를 통합 검색창 표시용으로 활용하지 않는다). Referring to FIG. 10 , navigation information is displayed on the upper display, and when the “search” icon is selected from the navigation widget of the lower display, the navigation information is continuously displayed on the upper display, and the integrated search window is called only on the lower display ( That is, the upper display is not used to display the integrated search box).

하부 디스플레이의 검색창에서 검색어를 입력하면, 목적지에 대한 선택이 이루어지면, 하부 디스플레이의 내비게이션 위젯에는 선택된 목적지까지의 경로 요약 정보가 표시된다. When a search term is input in the search box of the lower display, when a destination is selected, summary information on the route to the selected destination is displayed on the navigation widget of the lower display.

하부 디스플레이의 내비게이션 위젯에 표시되는 경로 요약 정보에서, 시작에 대한 선택이 입력되면, 상부 디스플레이를 통해 내비게이션 정보가 표시되고, 하부 디스플레이의 내비게이션 위젯을 통해서도 경로 안내 정보가 표시된다. In the route summary information displayed on the navigation widget of the lower display, when a selection for start is input, navigation information is displayed through the upper display, and route guidance information is also displayed through the navigation widget of the lower display.

도 11및 도 12는 본 발명의 실시예에 따른 동승자 모드에서의 통합 검색을 도시한다. 11 and 12 illustrate an integrated search in a passenger mode according to an embodiment of the present invention.

도 11을 참조하면, 동승자 모드에서 검색 전에는 미디어와 목적지에 대한 최신 사용 순서대로 정렬하여 표시하고, 검색 후에는 그에 따른 미디어와 목적지에 대한 검색 결과를 알파벳 순으로 정렬하여 표시한다. Referring to FIG. 11 , in the passenger mode, media and destinations are sorted and displayed in the order of latest use before the search, and after the search, the search results for the media and destination are sorted and displayed in alphabetical order.

도 11에 도시한 동승자 모드에서의 통합 검색의 구성은 다음 [표 5]와 같이 정의된다. The configuration of the integrated search in the passenger mode shown in FIG. 11 is defined as follows [Table 5].

[표 5][Table 5]

Figure pat00005
Figure pat00005

도 12를 참조하면, 동승자 모드에서 상부 디스플레이의 내비게이션 위젯에서 “search”관련 아이콘이 선택되거나, 내비게이션과 다른 앱이 멀티태스킹으로 실행 중일 때 내비게이션 위젯에서 “search”관련 아이콘이 선택되거나, 미디어 위젯에서 “검색” 관련 아이콘이 선택되면, 상부 디스플레이에는 통합 검색창이 표시되며, 미디어와 목적지에 대한 최신 순서의 선택 이력과, 검색어 입력에 따른 미디어와 목적지에 대한 알파벳 순 검색 결과가 표시된다. Referring to FIG. 12 , in passenger mode, a “search” related icon is selected from the navigation widget on the upper display, or a “search” related icon is selected from the navigation widget when the navigation and other apps are running in multitasking, or from the media widget. When a “search” related icon is selected, an integrated search window is displayed on the upper display, and the latest selection history for media and destinations, as well as alphabetical search results for media and destinations according to search terms are displayed.

상부 디스플레이의 통합 검색창의 검색 결과에서 미디어에 대한 선택이 입력되면, 해당 미디어를 재생시키고, 특정 목적지에 대한 선택이 입력되면, 해당 목적지까지의 내비게이션 경로 미리보기 화면이 표시된다. When a selection for media is input in the search result of the integrated search box of the upper display, the media is played, and when a selection for a specific destination is input, a preview screen of a navigation route to the corresponding destination is displayed.

종래 기술에 따르면, 전방 카메라 영상을 이용하여 정보를 제공하고, 서라운드 뷰 모니터링 장치를 이용하여 차량 주변 객체에 대한 정보를 제공하고 있으나, 제한된 영역에 대한 촬영 영상을 고정된 영역의 디스플레이를 통해 표시하는 것에 국한되는 문제점이 있다. According to the prior art, information is provided using a front camera image and information about objects around a vehicle is provided using a surround view monitoring device, but a photographed image for a limited area is displayed through a display of a fixed area. There is a problem that is limited to

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, 복수의 디스플레이를 이용하여 촬영 각도에 따라 획득되는 영상을 운전자가 직관적으로 인지할 수 있도록 제공하고, 디스플레이 설정 및 주행 상황에 따라 서러운드 뷰 모니터링 화면을 제공하는 것이 가능한 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and provides a driver to intuitively recognize an image obtained according to a shooting angle using a plurality of displays, and monitors a surround view according to display settings and driving conditions An object of the present invention is to provide a device capable of providing a screen.

도 13은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 전방 카메라 영상 및 서라운드 뷰 모니터링 제어 장치를 도시한다. 13 illustrates an apparatus for controlling a front camera image and a surround view monitoring using a plurality of displays according to an embodiment of the present invention.

본 발명의 실시예에 따른 복수의 디스플레이를 이용한 전방 카메라 영상 및 서라운드 뷰 모니터링 제어 장치는 차량 주변 확인 요청 신호를 수신하는 입력부(210)와, 차량 주변 확인 요청 신호가 수신됨에 따라, 전방 영상과 서라운드 뷰 모니터링 영상을 표시하도록 제어하는 프로그램이 저장된 메모리(220) 및 프로그램을 실행시키는 프로세서(230)를 포함하고, 프로세서(230)는 칵핏에 배치되는 하부 디스플레이 및 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나를 이용하여 영상을 표시하되, 노브의 조작에 따라 영상 촬영 각도 또는 표시 영상 영역을 조절하도록 제어하는 것을 특징으로 한다. The front camera image and surround view monitoring control apparatus using a plurality of displays according to an embodiment of the present invention includes an input unit 210 for receiving a vehicle perimeter confirmation request signal, and a front image and surround as the vehicle perimeter confirmation request signal is received. A program for controlling to display a view monitoring image includes a stored memory 220 and a processor 230 for executing the program, and the processor 230 includes a lower display arranged in the cockpit and an upper portion arranged above the lower display based on the lower display. An image is displayed using at least one of the displays, and an image capturing angle or a display image area is controlled to be controlled according to the manipulation of a knob.

프로세서(230)는 전방 영상을 표시함에 있어서, 기설정 범위 이내의 노브 앵글 조작에 대해 전방 카메라의 촬영 각도 또는 획득된 전방 영상의 표시 영역을 조절한다. In displaying the front image, the processor 230 adjusts a photographing angle of the front camera or a display area of the acquired front image with respect to a knob angle manipulation within a preset range.

프로세서(230)는 기설정 범위를 벗어나는 노브 앵글 조작에 대해, 차량 하부 인식용 카메라를 통해 획득된 영상을 표시하도록 제어한다. The processor 230 controls to display an image acquired through a camera for under-vehicle recognition in response to a knob angle manipulation that is out of a preset range.

프로세서(230)는 차량의 전폭 및 차량의 바퀴 위치에 대한 가이드라인 중 적어도 어느 하나를 영상에 오버레이하여 표시하도록 제어한다. The processor 230 controls to overlay and display at least one of the guidelines for the overall width of the vehicle and the wheel position of the vehicle on the image.

프로세서(230)는 운전자 모드의 경우 상부 디스플레이에 서라운드 뷰 모니터링 영상을 표시하도록 제어하고, 동승자 모드의 경우 하부 디스플레이에 서라운드 뷰 모니터링 영상을 표시하도록 제어한다. The processor 230 controls to display the surround view monitoring image on the upper display in the driver mode, and controls to display the surround view monitoring image on the lower display in the passenger mode.

프로세서(230)는 서라운드 뷰 모니터링 영상의 표시에 대한 요청 또는 기어 R단에 따라, 서라운드 뷰 모니터링 영상을 상부 디스플레이 상기 하부 디스플레이에 표시하도록 제어한다. The processor 230 controls to display the surround view monitoring image on the upper display and the lower display according to a request for display of the surround view monitoring image or gear R stage.

프로세서(230)는 노브가 기설정된 영역으로 이동함에 따라, 팝업 화면을 호출하여 영상 디스플레이에 대한 요청을 대기하도록 제어한다. As the knob moves to a preset area, the processor 230 calls a pop-up screen and controls to wait for a request for image display.

도 14는 본 발명의 실시예에 따른 기본 모드에서 상부 디스플레이 및 하부 디스플레이 화면을 도시한다. 14 shows an upper display and a lower display screen in a basic mode according to an embodiment of the present invention.

상부 디스플레이에는 전방 카메라를 이용하여 획득된 영상이 표시되고, 하부 디스플레이에는 위젯이 표시된다. An image obtained using the front camera is displayed on the upper display, and a widget is displayed on the lower display.

상부 디스플레이에는 경고 문구가 오버레이 형태로 표시되고, 현재 영상을 획득하는 카메라의 앵클 정보가 표시되고, 객체 감지 정보가 표시되며, 차량 전폭 정보가 표시된다. On the upper display, a warning phrase is displayed in the form of an overlay, angle information of a camera that acquires a current image is displayed, object detection information is displayed, and vehicle width information is displayed.

도 14에 도시한 상부 디스플레이의 전방카메라 화면의 구성은 다음 [표 6]과 같다. The configuration of the front camera screen of the upper display shown in FIG. 14 is as follows [Table 6].

[표 6][Table 6]

Figure pat00006
Figure pat00006

도 15는 본 발명의 실시예에 따른 이미지 사이즈를 고려한 영상 디스플레이를 도시한다. 15 shows an image display in consideration of the image size according to an embodiment of the present invention.

본 발명의 실시예에 따르면 상부 디스플레이 영역이 1920*720, 상부 디스플레이 영역이 1920*1080이다. According to an embodiment of the present invention, the upper display area is 1920*720 and the upper display area is 1920*1080.

카메라를 통해 획득한 영상의 해상도가 1620*1250인 경우, 디스플레이의 가로폭 1920에 맞게 확대된다. If the resolution of the image acquired through the camera is 1620*1250, it is enlarged to fit the width of 1920 of the display.

도 15에 도시한 바와 같이, 일부 이미지를 상부 디스플레이 및 하부 디스플레이 중 어느 하나에 표시할 수 있다. As shown in FIG. 15 , some images may be displayed on either the upper display or the lower display.

도 15에 도시한 바와 같이, 상부 디스플레이 및 하부 디스플레이의 영역에 걸쳐 이미지 사이즈 전체에 해당하는 이미지를 표시할 수 있다. As shown in FIG. 15 , an image corresponding to the entire image size may be displayed over the areas of the upper display and the lower display.

노브 조작 정보에 따라, 카메라를 이용하여 획득한 영상의 어느 부분을 디스플레이할 것인지 조정하는 것이 가능하다. According to the knob operation information, it is possible to adjust which part of the image acquired using the camera to be displayed.

예컨대, 도 15에 도시한 바와 같이, 노브를 시계 방향으로 기설정 각도로 조정하는 경우, 그에 대응되어 획득된 영상의 아래 부분을 상부 디스플레이에 표시하도록 조정할 수 있다. For example, as shown in FIG. 15 , when the knob is adjusted to a preset angle in a clockwise direction, a corresponding lower portion of an acquired image may be adjusted to be displayed on the upper display.

도 16 및 도 17은 본 발명의 실시예에 따른 전방 영상 디스플레이를 도시한다. 16 and 17 show a front image display according to an embodiment of the present invention.

도 16을 참조하면, 하부 디스플레이에서 전방 카메라 아이콘을 선택하여, 상부 디스플레이에 전방 카메라 영상이 디스플레이 되도록 요청한다. Referring to FIG. 16 , a front camera image is requested to be displayed on the upper display by selecting the front camera icon on the lower display.

전방 카메라 영상 디스플레이가 실행 중일 경우, 노브의 앵글을 조절하여, 앵글에 따라 실시간으로 전방 카메라의 영상 촬영 각도를 조절한다. When the front camera image display is running, the angle of the knob is adjusted to adjust the image capturing angle of the front camera in real time according to the angle.

노브가 기설정된 범위 이상으로 회전하면, 차량 하부 인식용 카메라가 활성화되어, 차량 하부 이미지에 대해 상부 디스플레이에 표시한다. When the knob is rotated more than a preset range, the camera for recognizing the underside of the vehicle is activated, and an image of the underside of the vehicle is displayed on the upper display.

이를 통해, 차량 하부의 장애물에 대해 운전자가 직관적으로 인지할 수 있도록 지원한다. Through this, it supports the driver to intuitively recognize the obstacle under the vehicle.

전방 카메라 및 차량 하부 인식용 카메라를 통해 획득된 영상이 디스플레이됨에 있어서, 전폭에 대한 가이드라인 및 차량 바퀴 위치에 대한 가이드 라인 중 적어도 어느 하나를 영상에 오버레이로 표시하여, 운전자가 용이하게 장애물을 회피할 수 있도록 지원한다. When the image acquired through the front camera and the camera for recognition under the vehicle is displayed, at least one of the guideline for the full width and the guideline for the position of the vehicle wheel is displayed as an overlay on the image, so that the driver easily avoids the obstacle support you to do

상부 디스플레이에 전방 카메라 영상이 디스플레이되는 중, 노브에 대해 프레스가 이루어지면, 전방 카메라 영상 디스플레이가 종료된다. When the knob is pressed while the front camera image is being displayed on the upper display, the front camera image display is ended.

도 17을 참조하면, 노브를 이동시킴에 따라, 팝업 화면이 호출된다. Referring to FIG. 17 , as the knob is moved, a pop-up screen is called.

이 때, 호출 후 기설정 시간(예: 10초)동안 조작이 없을 경우, 팝업 화면이 사라지게 된다. At this time, if there is no operation for a preset time (eg, 10 seconds) after calling, the pop-up screen disappears.

팝업 화면에서 전방 카메라가 포커스되고, 노브가 프레스되면, 상부 디스플레이에 전방 카메라를 이용하여 획득한 영상이 표시된다. When the front camera is focused on the pop-up screen and the knob is pressed, the image acquired using the front camera is displayed on the upper display.

전술한 바와 같이, 노브의 앵글이 조정됨에 따라, 전방 카메라를 이용하여 획득한 영상의 표시 영역이 선택되거나, 전방 카메라의 촬영 각도가 조정된다. As described above, as the angle of the knob is adjusted, the display area of the image acquired using the front camera is selected or the photographing angle of the front camera is adjusted.

기설정 범위 이상으로 노브가 작동되면, 차량 하부 인식용 카메라를 통해 획득된 영상이 상부 디스플레이에 표시되며, 영상에는 차량 전폭 및 차량 바퀴 위치에 대한 가이드 정보 중 적어도 어느 하나가 오버레이로 표시된다. When the knob is operated beyond the preset range, an image acquired through the camera for lower part of the vehicle is displayed on the upper display, and at least one of guide information on the overall width of the vehicle and the position of the vehicle's wheels is displayed as an overlay on the image.

도 18 및 도 19는 본 발명의 실시예에 따른 서라운드 뷰 모니터링 화면 디스플레이를 도시한다. 18 and 19 show a surround view monitoring screen display according to an embodiment of the present invention.

운전자 모드에서, 하부 디스플레이는 위젯 정보를 표시하고, 상부 디스플레이에 SVM 화면이 표시된다. In the driver mode, the lower display displays widget information, and the upper display displays the SVM screen.

동승자 모드에서, 상부 디스플레이는 동승자의 휴대폰과 연동되고, 하부 디스플레이에 SVM 화면이 표시된다. In the passenger mode, the upper display is linked with the passenger's mobile phone, and the SVM screen is displayed on the lower display.

SVM 화면은 기어 R단 시에, 자동으로 상부 또는 하부 디스플레이에 표시된다. The SVM screen is automatically displayed on the upper or lower display when gear R is engaged.

SVM 화면에는 아래 [표 7]과 같이, 경고 문구 및 차량 탑뷰 이미지가 표시된다. On the SVM screen, as shown in [Table 7] below, a warning text and a vehicle top view image are displayed.

[표 7][Table 7]

Figure pat00007
Figure pat00007

도 18을 참조하면, SVM 화면 표시에 대한 요청이 수신되거나, R단이 들어감에 따라, SVM 화면이 글로벌 팝업 형태로 실행된다. Referring to FIG. 18 , when a request for displaying the SVM screen is received or the R terminal is entered, the SVM screen is executed in the form of a global pop-up.

R단이 해제되면, 상부 디스플레이는 기존 화면으로 복귀한다. When the R stage is released, the upper display returns to the existing screen.

동승자 모드에서, 하부 디스플레이를 통해 SVM 화면 표시에 대한 요청이 수신되거나, R단이 들어가면 하부 디스플레이에 SVM 화면이 표시된다. In the passenger mode, when a request for displaying the SVM screen is received through the lower display or the R stage is entered, the SVM screen is displayed on the lower display.

R단이 해제되거나, SVM 화면이 표시되는 하부 디스플레이의 전체 영역 중 어느 한 포인트에 터치 신호가 입력되면, 하부 디스플레이는 이전의 화면으로 복귀한다. When the R stage is released or a touch signal is inputted to any one point of the entire area of the lower display on which the SVM screen is displayed, the lower display returns to the previous screen.

종래 기술에 따르면, 제한된 AVN 디스플레이 영역에서만 내비게이션 정보를 표시하는 한계가 있다. According to the prior art, there is a limitation in displaying navigation information only in a limited AVN display area.

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, 복수의 디스플레이를 이용하여 상황에 따라 내비게이션을 제어하여, 운전자가 용이하게 길 안내 정보를 확인할 수 있도록 지원하는 것이 가능한 내비게이션 제어 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and it provides a navigation control device capable of supporting a driver to easily check route guidance information by controlling navigation according to a situation using a plurality of displays. There is a purpose.

도 20은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 내비게이션 제어 장치를 도시한다. 20 illustrates a navigation control apparatus using a plurality of displays according to an embodiment of the present invention.

본 발명의 실시예에 따른 복수의 디스플레이를 이용한 내비게이션 제어 장치는 내비게이션 요청 신호를 수신하는 입력부(310)와, 내비게이션 요청 신호가 수신됨에 따라, 복수의 디스플레이를 이용하여 내비게이션 정보를 표시하도록 제어하는 프로그램이 저장된 메모리(320) 및 프로그램을 실행시키는 프로세서(330)를 포함하고, 프로세서(330)는 칵핏에 배치되는 하부 디스플레이 및 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나를 이용하여 내비게이션 정보를 표시한다. A navigation control apparatus using a plurality of displays according to an embodiment of the present invention includes an input unit 310 for receiving a navigation request signal, and a program for controlling display of navigation information using a plurality of displays when the navigation request signal is received The stored memory 320 and a processor 330 for executing a program are included, and the processor 330 navigates using at least one of a lower display arranged in the cockpit and an upper display arranged above the lower display based on the lower display. Display information.

프로세서(330)는 하부 디스플레이 및 상부 디스플레이에 내비게이션 정보를 표시하는 경우, 하부 디스플레이 및 상부 디스플레이 중 어느 하나의 영역에서 내비게이션 어플리케이션을 조작하면, 나머지 하나의 영역에서는 검색, 메뉴 버튼을 노출시키지 않도록 제어한다. When the navigation information is displayed on the lower display and the upper display, the processor 330 controls not to expose the search and menu buttons in the other area when the navigation application is operated in any one area of the lower display and the upper display .

프로세서(330)는 팝업창 호출에 따른 응답 정보를 이용하여, 상부 디스플레이에 3D 주행 영상을 표시하거나, AR 주행 영상을 표시한다. The processor 330 displays a 3D driving image or an AR driving image on the upper display by using response information according to the pop-up window call.

프로세서(330)는 하부 디스플레이 및 상부 디스플레이에 내비게이션 정보를 표시하고 있는 경우, 동승자 모드로 변경되면, 상부 디스플레이를 동승자 컨텐츠 시청용 영역으로 변경시키고, 하부 디스플레이를 통해 내비게이션 정보의 표시를 유지한다. When navigation information is displayed on the lower display and the upper display, the processor 330 changes the upper display to the passenger content viewing area when the mode is changed to the passenger mode, and maintains the display of the navigation information through the lower display.

프로세서(330)는 하부 디스플레이의 화면 밖 영역에 내비게이션 위젯이 실행 중인 경우, 동승자 모드로 변경되면, 하부 디스플레이의 화면 내 영역으로 내비게이션 위젯을 이동시킨다. The processor 330 moves the navigation widget to the inner area of the screen of the lower display when the mode is changed to the passenger mode when the navigation widget is running in the area outside the screen of the lower display.

프로세서(330)는 목적지 설정에 있어서 3D 이미지 정보를 제공하고, 회전 기능을 이용한 목적지 확인 기능을 제공하여, 목적지 중 특정 포인트에 대한 경로 안내 설정을 지원한다.The processor 330 provides 3D image information in destination setting and provides a destination confirmation function using a rotation function to support route guidance setting for a specific point among destinations.

프로세서(330)는 동승자 모드에서 상부 디스플레이를 통해 내비게이션 어플리케이션이 실행되고, 목적지 정보 설정, 운전자에게 경로 안내 정보 전달 요청이 수신되면, 하부 디스플레이를 통해 경로 안내 정보를 제공하도록 제어한다. The processor 330 controls to provide route guidance information through the lower display when a navigation application is executed through the upper display in the passenger mode and a request for setting destination information and transmitting route guide information to the driver is received.

도 21은 본 발명의 실시예에 따른 주행 전 내비게이션 표시를 도시한다. 21 shows a navigation display before driving according to an embodiment of the present invention.

내비게이션 주행 전, 상부 디스플레이에는 지도 이미지가 표시되고, 터치 이벤트가 있을 경우 검색, 확대/축소, 메뉴 버튼이 표시된다. Before driving the navigation, a map image is displayed on the upper display, and when there is a touch event, search, zoom, and menu buttons are displayed.

하부 디스플레이에는 지도 이미지가 표시되고, 검색, 확대/축소, 메뉴 버튼이 항시 표시된다. The lower display shows the map image, and the search, zoom, and menu buttons are always visible.

도 21에 도시한 주행 전 내비게이션 표시의 구성 및 정의는 아래 [표 8]과 같다. The configuration and definition of the navigation display before driving shown in FIG. 21 is shown in [Table 8] below.

[표 8][Table 8]

Figure pat00008
Figure pat00008

도 22는 본 발명의 실시예에 따른 주행 중 내비게이션 표시를 도시한다. 22 illustrates a navigation display while driving according to an embodiment of the present invention.

주행 중, 상부 디스플레이에는 3D 주행 영상이 표시되고, 터치 이벤트 발생 시 검색, 확대/축소, 종료 버튼이 표시된다. During driving, a 3D driving image is displayed on the upper display, and when a touch event occurs, search, enlarge/reduce, and end buttons are displayed.

주행 중, 하부 디스플레이에는 2D 주행 영상이 표시되고, 검색, 확대/축소, 종료 버튼이 항시 표시된다. While driving, a 2D driving image is displayed on the lower display, and search, zoom, and end buttons are always displayed.

도 22에 도시한 주행 중 내비게이션 표시의 구성 및 정의는 아래 [표 9]와 같다. The configuration and definition of the navigation display during driving shown in FIG. 22 are as shown in [Table 9] below.

[표 9][Table 9]

Figure pat00009
Figure pat00009

도 23은 본 발명의 실시예에 따른 하부 디스플레이를 이용한 조작을 도시하고, 도 24는 본 발명의 실시예에 따른 상부 디스플레이를 이용한 조작을 도시한다. 23 shows an operation using a lower display according to an embodiment of the present invention, and FIG. 24 shows an operation using an upper display according to an embodiment of the present invention.

도 23을 참조하면, 하부 디스플레이에서 내비게이션 앱 조작 중일 경우, 상부 디스플레이에는 검색/메뉴 버튼을 표시하지 않는다. Referring to FIG. 23 , when the navigation app is being operated on the lower display, the search/menu button is not displayed on the upper display.

도 24를 참조하면, 상부 디스플레이에서 내비게이션 앱 조작 중일 경우, 하부 디스플레이에는 검색/메뉴 버튼을 표시하지 않는다. Referring to FIG. 24 , when the navigation app is being operated on the upper display, the search/menu button is not displayed on the lower display.

도 23 및 도 24에 도시한 내비게이션 위젯 화면의 구성 및 정의는 아래 [표 10]과 같다. The configuration and definition of the navigation widget screen shown in FIGS. 23 and 24 are shown in [Table 10] below.

[표 10][Table 10]

Figure pat00010
Figure pat00010

도 25는 본 발명의 실시예에 따른 상부 디스플레이를 이용한 내비게이션 설정을 도시한다. 25 illustrates a navigation setting using an upper display according to an embodiment of the present invention.

상부 디스플레이에 내비게이션 정보가 표시되는 상황에서, 목적지를 설정하면, 목적지에 대한 3D 지도 이미지가 표시된다. In a situation where navigation information is displayed on the upper display, if a destination is set, a 3D map image for the destination is displayed.

사용자는 3D 지도 이미지가 표시되는 상부 디스플레이에서, 건물에 대한 회전을 조작하여 3D 정보를 확인할 수 있으며, 확인 결과를 통해 동일한 목적지라고 하더라도 어느 포인트로 도달할 것인지를 설정하는 것이 가능하다(예: 백화점 정문 지하 주차장 입구, 백화점 후문 야외 주차장 입구 등에 대한 목적지 설정이 가능함). The user can check 3D information by manipulating the rotation of the building on the upper display where the 3D map image is displayed, and it is possible to set which point to reach even if it is the same destination through the check result (eg, a department store) It is possible to set destinations for the main entrance of the underground parking lot, the entrance of the outdoor parking lot at the back of the department store, etc.).

목적지 확인에 따라 경로 설정이 완료되면, 경로 미리보기 화면이 제공되는데, 목적지 명, 예상 소요시간/거리, 목적지 도착 시 예상 잔여 배터리, 경로 안내 시작 버튼, 이전 화면으로의 복귀 버튼 등이 상부 디스플레이에 표시된다. When the route setting is completed according to the destination confirmation, a route preview screen is provided. The destination name, estimated required time/distance, estimated remaining battery upon arrival at the destination, route guidance start button, and return button to the previous screen are displayed on the upper display. is displayed

경로 안내 시작 버튼이 눌려짐에 따라, 상부 디스플레이는 3D 경로 안내 화면을 표시하고, 해당 화면에서 종료 버튼이 눌려짐에 따라, 목적지 설정 화면으로 복귀하게 된다. As the route guidance start button is pressed, the upper display displays a 3D route guidance screen, and as the end button is pressed on the corresponding screen, it returns to the destination setting screen.

도 25에 도시한 내비게이션 위젯 화면의 구성 및 정의는 아래 [표 11]과 같다. The configuration and definition of the navigation widget screen shown in FIG. 25 are shown in [Table 11] below.

[표 11][Table 11]

Figure pat00011
Figure pat00011

도 26및 도 27은 본 발명의 실시예에 따른 내비게이션 실행 중 동승자 모드 변경에 따른 상황을 도시한다. 26 and 27 illustrate a situation according to a change of a passenger mode while navigation is executed according to an embodiment of the present invention.

도 26을 참조하면, 상부 디스플레이 및 하부 디스플레이에서 내비게이션이 실행 중인 상황에서, 동승자 모드로 변경되어 상부 디스플레이가 동승자의 컨텐츠 사용 용도로 활용되면, 상부 디스플레이의 내비게이션 안내가 종료되고, 하부 디스플레이를 통해 길 안내 정보가 제공된다. Referring to FIG. 26 , in a situation in which navigation is being performed on the upper display and the lower display, when the mode is changed to the passenger mode and the upper display is used for the passenger's content use, the navigation guidance of the upper display is terminated, and the navigation guide is displayed through the lower display. Guidance information is provided.

동승자 모드에서 운전자 모드로 복귀되는 경우, 상부 디스플레이는 기존에 실행하였던 내비게이션 화면 표시를 재개한다. When returning from the passenger mode to the driver mode, the upper display resumes the previously executed navigation screen display.

도 27을 참조하면, 상부 디스플레이에 내비게이션이 실행 중인 상황에서, 하부 디스플레이의 화면 밖 영역에 내비게이션 위젯이 실행 중이다. Referring to FIG. 27 , in a situation in which navigation is being executed on the upper display, a navigation widget is being executed in an area outside the screen of the lower display.

이 때, 동승자 모드로 변경되는 경우, 상부 디스플레이의 내비게이션 안내가 종료되고, 하부 디스플레이는 최 좌측으로 내비게이션 위젯을 이동시킨다. At this time, when changing to the passenger mode, the navigation guidance of the upper display is terminated, and the lower display moves the navigation widget to the leftmost side.

동승자 모드에서 운전자 모드로 복귀되는 경우, 상부 디스플레이는 기존에 실행하였던 내비게이션 화면 표시를 재개한다. When returning from the passenger mode to the driver mode, the upper display resumes the previously executed navigation screen display.

도 28은 본 발명의 실시예에 따른 내비게이션 미 실행 중 동승자 모드 변경에 따른 상황을 도시한다. 28 is a diagram illustrating a situation in which a passenger mode is changed while navigation is not executed according to an embodiment of the present invention.

상부 및 하부 디스플레이에서 내비게이션이 미실행 중인 경우, 동승자 모드로 변경되더라도 하부 디스플레이의 위젯 배치는 유지된다. When navigation is not executed in the upper and lower displays, the widget arrangement of the lower display is maintained even if the mode is changed to the passenger mode.

동승자 모드에서 운전자 모드로 복귀되는 경우, 상부 디스플레이는 기존에 실행하였던 화면(Wallpaper) 표시를 재개한다. When returning to the driver mode from the passenger mode, the upper display resumes the previously executed screen (Wallpaper) display.

도 29는 본 발명의 실시예에 따른 하부 디스플레이를 이용한 목적지 검색 과정을 도시한다. 29 illustrates a destination search process using a lower display according to an embodiment of the present invention.

상부 디스플레이에서 기본 화면이 표시되고, 하부 디스플레이에서 내비게이션을 상부 디스플레이로 드래그하게 되면, 상부 디스플레이에 내비게이션 정보가 표시된다. A basic screen is displayed on the upper display, and when a navigation device is dragged from the lower display to the upper display, navigation information is displayed on the upper display.

이 때, 상부 디스플레이의 영역에 터치를 입력하면, 검색, 확대/축소, 메뉴에 대한 정보가 표시되고, 메뉴 선택 후 1을 선택하게 되면, 기설정 기능 실행에 따라 목적지 주변의 3D 지도 이미지 정보를 제공한다. At this time, if you input a touch in the area of the upper display, information on search, enlargement/reduction, and menu is displayed. to provide.

핀치 인 및 아웃과, 패닝에 따라 상하 연동이 되지 않는다. Pinch in and out and up and down linkage do not work according to panning.

주행 시작 전 상부 디스플레이를 통해 목적지의 3D 지도 이미지 정보를 제공하므로, 운전자는 3D 지도 이미지 정보를 이용하여 원하는 포인트를 목적지로 등록할 수 있다. Since the 3D map image information of the destination is provided through the upper display before driving starts, the driver can register the desired point as the destination using the 3D map image information.

목적지 등록에 따라, 상부 디스플레이는 경로 정보를 표시하고, 경로 안내 시작 버튼이 눌려지게 되면, 상부 디스플레이는 3D 내비게이션 정보를 표시하고, 하부 디스플레이는 2D 내비게이션 정보를 표시한다. According to the destination registration, the upper display displays route information, and when the route guidance start button is pressed, the upper display displays 3D navigation information, and the lower display displays 2D navigation information.

도 30은 본 발명의 실시예에 따른 상부 디스플레이를 이용한 목적지 검색 과정을 도시한다. 30 illustrates a destination search process using an upper display according to an embodiment of the present invention.

상부 디스플레이에서 기본 화면이 표시되고, 하부 디스플레이에서 내비게이션을 상부 디스플레이로 드래그하게 되면, 상부 디스플레이에 내비게이션 정보가 표시된다. A basic screen is displayed on the upper display, and when a navigation device is dragged from the lower display to the upper display, navigation information is displayed on the upper display.

이 때, 상부 디스플레이의 영역에 터치를 입력하면, 검색, 확대/축소, 메뉴에 대한 정보가 표시되고, 메뉴 선택 후 1을 선택하게 되면, 기설정 기능 실행에 따라 목적지 주변의 3D 지도 이미지 정보를 제공한다. At this time, if you input a touch in the area of the upper display, information on search, enlargement/reduction, and menu is displayed. to provide.

주행 시작 전 상부 디스플레이를 통해 목적지의 3D 지도 이미지 정보를 제공하므로, 운전자는 3D 지도 이미지 정보를 이용하여 원하는 포인트를 목적지로 등록할 수 있다. Since the 3D map image information of the destination is provided through the upper display before driving starts, the driver can register the desired point as the destination using the 3D map image information.

핀치 인 및 아웃과, 패닝에 따라 상하 연동이 되지 않는다. Pinch in and out and up and down linkage do not work according to panning.

목적지 등록에 따라, 상부 디스플레이는 경로 정보를 표시하고, 경로 안내 시작 버튼이 눌려지게 되면, 상부 디스플레이는 3D 내비게이션 정보를 표시하고, 하부 디스플레이는 2D 내비게이션 정보를 표시한다. According to the destination registration, the upper display displays route information, and when the route guidance start button is pressed, the upper display displays 3D navigation information, and the lower display displays 2D navigation information.

도 31은 본 발명의 실시예에 따른 3D 내비게이션 및 AR 내비게이션 설정을 도시한다. 31 shows 3D navigation and AR navigation settings according to an embodiment of the present invention.

상부 또는 하부 디스플레이의 메뉴, 설정 버튼이 차례로 눌러지면, 내비게이션 세팅 창이 디스플레이되어, 3D 내비게이션 및 AR 내비게이션에 대한 선택을 수신한다. When the menu of the upper or lower display, the settings button is pressed in sequence, the navigation settings window is displayed to receive selections for 3D navigation and AR navigation.

도 31에는 3D 내비게이션 및 AR 내비게이션에 따른 주행 중 내비게이션 표시를 도시한다. 31 illustrates a navigation display while driving according to 3D navigation and AR navigation.

도 32는 본 발명의 실시예에 따른 동승자 모드에서의 내비게이션 제어를 도시한다. 32 illustrates navigation control in a passenger mode according to an embodiment of the present invention.

상부 디스플레이와 연동된 사용자 모바일 디바이스에서, 내비게이션 앱 실행이 선택되면, 상부 디스플레이의 화면에서 목적지에 대한 2D 이미지 정보, 목적지에 대한 3D 이미지 정보가 표시된다. In the user mobile device interworking with the upper display, when execution of the navigation app is selected, 2D image information about the destination and 3D image information about the destination are displayed on the screen of the upper display.

동승자는 상부 디스플레이의 화면에서 목적물로 표시된 곳을 회전시켜, 최종 목적지 장소에 대한 경로 안내를 요청한다. The passenger requests route guidance to the final destination by rotating the place marked as the target on the screen of the upper display.

동승자 모드에서 상부 디스플레이는 목적지까지의 경로 안내 정보를 표시하고, “”버튼을 표시한다. In passenger mode, the upper display displays route guidance information to the destination and displays the “” button.

사용자가 Toss 버튼을 누름에 따라, 경로 안내 정보를 운전자에게 전달할 것인지는 묻는 팝업창이 나타난다. As the user presses the Toss button, a pop-up window appears asking whether to deliver route guidance information to the driver.

사용자가 yes 버튼을 누름에 따라, 하부 디스플레이의 내비게이션 앱 2D 주행 영상에서 경로 안내 정보가 표시된다. As the user presses the yes button, route guidance information is displayed in the 2D driving image of the navigation app on the lower display.

종래 기술에 따르면, 단순히 차량 내 AVN을 이용하여 컨텐츠를 사용하는 것에 국한되는 한계가 있다. According to the prior art, there is a limit to simply using the content using the AVN in the vehicle.

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, AVN과 모바일 디바이스를 통해 상이한 미디어를 동시 재생하고, 음원 출력 장치를 선택하는 것이 가능하고, 복수 디스플레이를 통해 미디어를 동시 재생하며, 차량 스피커와 헤드레스트 스피커 간 음원 간섭을 방지하기 위해 사운드 버블을 형성하는 것이 가능한 복수의 디스플레이를 이용한 미디어 사운드 멀티커넥션 제어 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and it is possible to simultaneously play different media through AVN and a mobile device, select a sound source output device, play media simultaneously through multiple displays, and use the vehicle speaker and An object of the present invention is to provide a media sound multi-connection control device using a plurality of displays capable of forming a sound bubble in order to prevent sound source interference between headrest speakers.

도 33은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 미디어 사운드 멀티커넥션 제어 장치를 도시한다. 33 shows a media sound multi-connection control apparatus using a plurality of displays according to an embodiment of the present invention.

본 발명의 실시예에 따른 복수의 디스플레이를 이용한 미디어 사운드 멀티커넥션 제어 장치는 콘텐츠 실행 요청 신호를 수신하는 입력부(410)와, 콘텐츠 실행 요청 신호를 수신함에 따라, 복수의 디스플레이를 이용하여 미디어 및 사운드 멀티커넥션을 제어하는 프로그램이 저장된 메모리(420) 및 프로그램을 실행시키는 프로세서(430)를 포함하고, 프로세서(430)는 칵핏에 배치되는 하부 디스플레이 및 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나를 이용하여 콘텐츠 실행 요청 신호에 따른 플레이어 화면을 표시한다. The apparatus for controlling media sound multi-connection using a plurality of displays according to an embodiment of the present invention includes an input unit 410 for receiving a content execution request signal and, upon receiving the content execution request signal, media and sound using a plurality of displays It includes a memory 420 in which a program for controlling multi-connection is stored and a processor 430 for executing the program, wherein the processor 430 is at least one of a lower display arranged in the cockpit and an upper display arranged above the lower display based on the lower display. Either one is used to display the player screen according to the content execution request signal.

프로세서(430)는 사운드 패스 설정 신호를 이용하여 차량 내 스피커 및 헤드레스트 스피커로 음원 출력이 이루어지도록 제어한다. The processor 430 controls the sound source to be output to the in-vehicle speaker and the headrest speaker using the sound path setting signal.

프로세서(430)는 하부 디스플레이에서 미디어 애플리케이션을 상부 디스플레이로 이동시키는 요청에 대한 입력이 이루어지면, 상부 디스플레이에 플레이어 화면을 표시하고, 하부 디스플레이에 리스트 화면을 표시한다. When an input for a request for moving a media application from the lower display to the upper display is made, the processor 430 displays a player screen on the upper display and a list screen on the lower display.

프로세서(430)는 상부 디스플레이에서 상단 내리기 버튼이 터치되면, 하부 디스플레이로 플레이어 화면을 이동시키고, 이동 중 음원 재생을 유지하도록 제어한다.When the upper down button is touched on the upper display, the processor 430 moves the player screen to the lower display and controls to maintain sound source reproduction while moving.

프로세서(430)는 하부 디스플레이에서 전체 화면 영상 재생 버튼이 터치되면, 상부 디스플레이를 오프시키고 하부 디스플레이에서 전체 화면을 재생하도록 제어한다. When the full-screen image playback button is touched on the lower display, the processor 430 turns off the upper display and controls the lower display to play the full screen.

프로세서(430)는 하부 디스플레이에서 상부 디스플레이로 전체 화면을 이동시키도록 하는 명령이 입력되면, 상부 디스플레이에 전체 화면을 재생하도록 제어하고, 하부 디스플레이에 기존 위젯을 표시하며, 하부 디스플레이에 디스플레이 오프 버튼을 표시한다. When a command to move the entire screen from the lower display to the upper display is input, the processor 430 controls to reproduce the entire screen on the upper display, displays an existing widget on the lower display, and presses a display off button on the lower display indicate

프로세서(430)는 하부 디스플레이에 표시되는 디스플레이 오프 버튼이 터치되면, 하부 디스플레이를 오프시키고, 오프된 하부 디스플레이의 영역에 터치 신호가 인가되면, 상부 디스플레이를 오프시키고 하부 디스플레이에 전체 화면을 재생하도록 제어한다. When a display off button displayed on the lower display is touched, the processor 430 turns off the lower display, and when a touch signal is applied to an area of the lower display that is turned off, the processor 430 turns off the upper display and controls the entire screen to be reproduced on the lower display do.

프로세서(430)는 하부 디스플레이의 하단에 배치되는 노브가 조작되거나, 하부 디스플레이에 터치가 입력되는 경우, 하부 디스플레이에 기능 바를 표시하도록 제어한다. When a knob disposed at the bottom of the lower display is manipulated or a touch is input to the lower display, the processor 430 controls to display the function bar on the lower display.

프로세서(430)는 동승자 모드에서 하부 디스플레이와 상부 디스플레이에 상이한 컨텐츠가 재생되는 경우, 상부 디스플레이에서 재생되는 컨텐츠의 음원은 헤드레스트 스피커를 통해 출력하도록 제어하고, 하부 디스플레이에서 재생되는 컨텐츠의 음원은 차량 내 스피커를 통해 출력하도록 제어한다. When different content is played on the lower display and the upper display in the passenger mode, the processor 430 controls to output the sound source of the content reproduced on the upper display through the headrest speaker, and the sound source of the content reproduced on the lower display is the vehicle I control it to output through my speaker.

도 34는 본 발명의 실시예에 따른 운전자 모드 및 동승자 모드에서의 미디어 멀티 커넥션을 도시한다. 34 illustrates a media multi-connection in a driver mode and a passenger mode according to an embodiment of the present invention.

본 발명의 실시예에 따르면, 상부 디스플레이 및 하부 디스플레이에 USB 음악, 비디오 동시 재생이 가능하며, 같은 파일 재생은 불가하다. According to an embodiment of the present invention, USB music and video can be played simultaneously on the upper display and the lower display, but the same file cannot be played.

상부 디스플레이 또는 하부 디스플레이에 USB 음악, 비디오 재생과 동시에 스마트폰 블루투스 오디오, 비디오 캐스트 재생이 가능하다. It is possible to play USB music and video on the upper display or the lower display, and simultaneously play Bluetooth audio and video casts from a smartphone.

상부 디스플레이 및 하부 디스플레이에 스마트폰 블루투스 오디오, 비디오 캐스트 동시 재생이 가능하며, 같은 파일 재생은 불가하다. Smartphone Bluetooth audio and video cast can be played simultaneously on the upper display and lower display, but the same file cannot be played.

사용자로부터 하부 디스플레이의 사운드 패스(sound path) 설정 버튼을 통해, 차량 스피커 또는 헤드레스트 스피커로 음원 출력을 설정 입력을 수신한다. An input for setting a sound source output to a vehicle speaker or a headrest speaker is received from a user through a sound path setting button of the lower display.

사용자로부터 스마트폰의 사운드 패스(sound path) 설정 버튼을 통해, 차량 스피커 또는 헤드레스트 스피커로 음원 출력을 설정 입력을 수신한다. An input for setting a sound source output to a vehicle speaker or a headrest speaker is received from a user through a sound path setting button of the smartphone.

도 35는 본 발명의 실시예에 따른 블루투스 오디오 재생을 도시한다. 35 shows Bluetooth audio playback according to an embodiment of the present invention.

도 35는 하부 디스플레이에서 블루투스 오디오가 재생되는 경우와, 상부 디스플레이에서 블루투스 오디오가 재생되는 경우를 도시한다. 35 illustrates a case in which Bluetooth audio is reproduced on the lower display and a case where Bluetooth audio is reproduced on the upper display.

도 35에 도시한 블루투스 오디오 화면에서의 구성 및 기능은 아래 [표 12]에 정리한 바와 같다. The configuration and functions of the Bluetooth audio screen shown in FIG. 35 are summarized in [Table 12] below.

[표 12][Table 12]

Figure pat00012
Figure pat00012

도 36은 본 발명의 실시예에 따른 블루투스 오디오 리스트를 도시한다. 36 shows a Bluetooth audio list according to an embodiment of the present invention.

블루투스 오디오 리스트에는 이전 화면으로 복귀하는 버튼, 블루투스 연결된 디바이스의 정보를 표시하는 영역, 곡 정보 영역이 포함된다. The Bluetooth audio list includes a button to return to the previous screen, an area for displaying information of a Bluetooth-connected device, and a song information area.

사운드 패스 설정 버튼은 차량 내 스피커 또는 헤드레스트에 배치된 스피커로 사운드 패스를 설정하는 경우 사용된다. The sound path setting button is used when setting the sound path with the speaker in the vehicle or the speaker placed on the headrest.

도 36에 도시한 블루투스 오디오 리스트 화면에서의 구성 및 기능은 아래 [표 13]에 정리한 바와 같다. The configuration and functions of the Bluetooth audio list screen shown in FIG. 36 are summarized in [Table 13] below.

[표 13][Table 13]

Figure pat00013
Figure pat00013

도 37은 본 발명의 실시예에 따른 블루투스 오디오 재생 과정을 도시한다. 37 shows a Bluetooth audio playback process according to an embodiment of the present invention.

상부 디스플레이는 기본 화면이 표시되고, 하부 디스플레이에는 네비게이션 정보와 미디어 정보가 표시된다. The upper display displays a basic screen, and the lower display displays navigation information and media information.

하부 디스플레이에서 사운드 패스 설정 버튼을 누르면, 차량 내 스피커 또는 헤드레스트 스피커로 설정 변경이 가능하다. If you press the sound path setting button on the lower display, you can change the setting to in-vehicle speaker or headrest speaker.

하부 디스플레이에서 미디어 앱을 상부 디스플레이로 올리는 조작이 입력되면, 미디어 앱 플레이어가 상부 디스플레이에 표시되고, 하부 디스플레이에는 리스트 화면으로 변경된다. When an operation for raising the media app to the upper display is input from the lower display, the media app player is displayed on the upper display, and the lower display is changed to a list screen.

하부 디스플레이에서 다른 블루투스 연결 디바이스로 변경하면, 다른 블루투스 연결 디바이스의 리스트를 표시한다. When changing to another Bluetooth-connected device in the lower display, a list of other Bluetooth-connected devices is displayed.

상부 디스플레이에서 사운드 패스 설정 버튼을 누르면, 차량 내 스피커 또는 헤드레스트 스피커로 설정 변경이 가능하다. If you press the sound path setting button on the upper display, you can change the settings to in-vehicle speakers or headrest speakers.

상부 디스플레이에서 상단 내리기 버튼을 누르면, 하부 디스플레이로 미디어 앱 플레이어가 이동되고, 플레이어가 이동되는 중 음원 재생은 유지된다. If the upper down button is pressed on the upper display, the media app player is moved to the lower display, and sound source playback is maintained while the player is moving.

도 38은 본 발명의 실시예에 따른 USB 음악 재생을 도시한다. 38 shows USB music playback according to an embodiment of the present invention.

도 38은 상부 디스플레이에서 기본 화면이 표시되고, 하부 디스플레이에서 USB 음악이 재생되는 경우와, 상부 디스플레이에서 USB 음악이 재생되고, 하부 디스플레이에는 USB 음악 리스트를 표시하는 경우를 도시한다. 38 illustrates a case in which a basic screen is displayed on the upper display and USB music is played on the lower display, and a case where USB music is played on the upper display and a USB music list is displayed on the lower display.

도 38에 도시한 USB 음악 재생 화면에서의 구성 및 기능은 아래 [표 14]와 같다. The configuration and functions of the USB music playback screen shown in FIG. 38 are shown in [Table 14] below.

[표 14][Table 14]

Figure pat00014
Figure pat00014

도 39는 본 발명의 실시예에 따른 USB 음악 재생 리스트를 도시한다. 39 shows a USB music play list according to an embodiment of the present invention.

도 39에 도시한 USB 음악 재생 리스트 화면에서의 구성 및 기능은 아래 [표 15]에 정리한 바와 같다. The configuration and functions of the USB music play list screen shown in FIG. 39 are summarized in [Table 15] below.

[표 15][Table 15]

Figure pat00015
Figure pat00015

도 40은 본 발명의 실시예에 따른 USB 음악 재생 과정을 도시한다. 40 shows a USB music playback process according to an embodiment of the present invention.

상부 디스플레이는 기본 화면이 표시되고, 하부 디스플레이에는 네비게이션 정보와 미디어 정보가 표시된다. The upper display displays a basic screen, and the lower display displays navigation information and media information.

하부 디스플레이에서 사운드 패스 설정 버튼을 누르면, 차량 내 스피커 또는 헤드레스트 스피커로 설정 변경이 가능하다. If you press the sound path setting button on the lower display, you can change the setting to in-vehicle speaker or headrest speaker.

하부 디스플레이에서 미디어 앱을 상부 디스플레이로 올리는 조작이 입력되면, 미디어 앱 플레이어가 상부 디스플레이에 표시되고, 하부 디스플레이에는 리스트 화면으로 변경된다. When an operation for raising the media app to the upper display is input from the lower display, the media app player is displayed on the upper display, and the lower display is changed to a list screen.

상부 디스플레이에서 상단 내리기 버튼을 누르면, 하부 디스플레이로 미디어 앱 플레이어가 이동되고, 플레이어가 이동되는 중 음원 재생은 유지된다. If the upper down button is pressed on the upper display, the media app player is moved to the lower display, and sound source playback is maintained while the player is moving.

상부 디스플레이에서 사운드 패스 설정 버튼을 누르면, 차량 내 스피커 또는 헤드레스트 스피커로 설정 변경이 가능하다. If you press the sound path setting button on the upper display, you can change the settings to in-vehicle speakers or headrest speakers.

도 41은 본 발명의 실시예에 따른 USB 비디오 재생을 도시한다. 41 shows USB video playback according to an embodiment of the present invention.

도 41을 참조하면, 상부 디스플레이에 기본 화면이 표시되고, 하부 디스플레이에 비디오가 재생되는 경우와, 상부 디스플레이에 비디오가 재생되고, 하부 디스플레이에 비디오 관련 정보가 표시되는 경우를 도시한다. Referring to FIG. 41 , a case in which a basic screen is displayed on the upper display and a video is reproduced on the lower display, a case where a video is reproduced on the upper display and video related information is displayed on the lower display are illustrated.

도 41에 도시한 비디오 재생 화면에서의 구성 및 기능은 아래 [표 16]에 정리한 바와 같다. The configuration and functions of the video playback screen shown in FIG. 41 are summarized in [Table 16] below.

[표 16][Table 16]

Figure pat00016
Figure pat00016

도 42는 본 발명의 실시예에 따른 USB 비디오 재생 리스트를 도시한다. 42 shows a USB video play list according to an embodiment of the present invention.

도 42에 도시한 USB 비디오 재생 리스트의 구성 및 기능은 아래 [표 17]에 정리한 바와 같다. The configuration and functions of the USB video play list shown in FIG. 42 are summarized in [Table 17] below.

[표 17][Table 17]

Figure pat00017
Figure pat00017

도 43은 본 발명의 실시예에 따른 디스플레이간 동영상 이동을 도시한다. 43 illustrates movement of a moving picture between displays according to an embodiment of the present invention.

상부 디스플레이에 기본 화면이 표시되고, 하부 디스플레이에 네비게이션 정보와 미디어 정보가 표시되는 상황을 가정한다. It is assumed that a basic screen is displayed on the upper display and navigation information and media information are displayed on the lower display.

하부 디스플레이에서 풀 스크린 모드 버튼이 터치되면, 상부 디스플레이는 꺼지고, 하부 디스플레이에 전체 화면이 재싱된다. When the full screen mode button is touched on the lower display, the upper display is turned off, and the entire screen is displayed on the lower display.

하부 디스플레이에서 상부 디스플레이로 영상을 이동시키는 버튼이 터치되면, 상부 디스플레이에 전체 화면이 재생되고, 하부 디스플레이에는 네비게이션 정보와 미디어 정보가 표시된다. When a button for moving an image from the lower display to the upper display is touched, the entire screen is reproduced on the upper display, and navigation information and media information are displayed on the lower display.

하부 디스플레이의 미디어 정보 표시 영역에서 디스플레이 오프 버튼이 터치되면, 하부 디스플레이는 꺼지게 되고, 꺼진 하부 디스플레이 영역에 터치가 이루어지면, 상부 디스플레이가 꺼지고 하부 디스플레이에 전체 화면이 재생된다. When the display off button is touched in the media information display area of the lower display, the lower display is turned off. When a touch is made to the turned off lower display area, the upper display is turned off and the entire screen is played on the lower display.

도 44는 본 발명의 실시예에 따른 노브 조작 과정을 도시한다. 44 shows a knob operation process according to an embodiment of the present invention.

상부 디스플레이에 기본 화면이 표시되고, 하부 디스플레이에 네비게이션 정보와 미디어 정보가 표시되는 상황에서, 하부 디스플레이에서 풀 스크린 모드 버튼이 터치되면, 상부 디스플레이는 꺼지고, 하부 디스플레이에 전체 화면이 재싱된다. In a situation in which the main screen is displayed on the upper display and navigation information and media information are displayed on the lower display, when the full screen mode button is touched on the lower display, the upper display is turned off, and the entire screen is displayed on the lower display.

노브가 조작되거나 하부 디스플레이에 화면 터치가 이루어지면, 기능 바가 올라오며 하부 디스플레이에 표시된다. When the knob is manipulated or a screen touch is made on the lower display, the function bar is raised and displayed on the lower display.

도 45는 본 발명의 실시예에 따른 비디오 동시 재생 과정을 도시한다. 45 shows a video simultaneous playback process according to an embodiment of the present invention.

동승자 모드에서, 상부 디스플레이는 동승자의 모바일 디바이스와 연동되고, 하부 디스플레이는 네비게이션 정보와 미디어 정보가 표시된다. In the passenger mode, the upper display is linked with the passenger's mobile device, and the lower display displays navigation information and media information.

하부 디스플레이에 풀 스크린 모드 버튼이 터치되면, 하부 디스플레이는 전체 화면이 재생되고, 상부 디스플레이는 동승자의 모바일 디바이스와 연동되어, 동승자의 모바일 디바이스에서 선택된 컨텐츠를 재생한다. When the full-screen mode button is touched on the lower display, the entire screen is reproduced on the lower display, and the upper display is linked with the passenger's mobile device to reproduce selected content on the passenger's mobile device.

동승자 모드 시, 하부 디스플레이에서 재생되는 미디어 음원은 블루밍 사운드(차내 스피커)를 통해 출력되며, 상부 디스플레이에서 재생되는 미디어 음원은 헤드레스트 스피커를 통해 출력된다. In passenger mode, the media sound source played on the lower display is output through the blooming sound (in-car speaker), and the media sound source played on the upper display is output through the headrest speaker.

동승자 모드에서, 각 스피커는 운전자 및 동승자의 음원 간섭을 방지하기 위해, 사운드 버블을 형성한다. In the passenger mode, each speaker forms a sound bubble to prevent sound source interference from the driver and passenger.

도 46은 본 발명의 실시예에 따른 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치를 도시한다. 46 illustrates an apparatus for providing a mediation function using a plurality of displays according to an embodiment of the present invention.

본 발명의 실시예에 따른 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치는 메디테이션 기능 요청 신호를 수신하는 입력부(510)와, 메디테이션 기능 요청 신호를 수신함에 따라, 복수의 디스플레이를 이용하여 메디테이션 기능을 제공하는 프로그램이 저장된 메모리(520) 및 프로그램을 실행시키는 프로세서(530)를 포함하고, 프로세서(530)는 칵핏에 배치되는 하부 디스플레이 및 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이 중 적어도 어느 하나를 이용하고, 스피커와 무드 램프를 연동하여 메디테이션 기능을 제공한다. An apparatus for providing a meditation function using a plurality of displays according to an embodiment of the present invention includes an input unit 510 for receiving a meditation function request signal, and a meditation function providing a meditation function using a plurality of displays when the meditation function request signal is received. It includes a memory 520 in which the program is stored and a processor 530 that executes the program, and the processor 530 uses at least one of a lower display arranged in the cockpit and an upper display arranged at the upper part based on the lower display, and , provides a meditation function by linking the speaker and mood lamp.

프로세서(530)는 운전자 모드에서 하부 디스플레이를 오프시키고, 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어한다. The processor 530 turns off the lower display in the driver mode and controls to display the mediation app execution screen on the upper display.

프로세서(530)는 노브 조작 시, 노브 조작 방향에 따라 메디테이션 앱 실행 화면에서 이벤트 동작이 수행되도록 제어한다. When the knob is manipulated, the processor 530 controls an event operation to be performed on the mediation app execution screen according to the knob manipulation direction.

프로세서(530)는 동승자 모드에서 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어한다. The processor 530 controls to display a mediation app execution screen on the upper display in the passenger mode.

프로세서(530)는 상부 디스플레이에 메디테이션 멀티태스킹 화면을 표시하도록 제어하고, 앱 드로어 버튼 터치 및 메디테이션 앱 선택 시 메디테이션 썸네일 화면을 표시하도록 제어한다. The processor 530 controls to display the mediation multitasking screen on the upper display, and controls to display the mediation thumbnail screen when the app drawer button is touched and the mediation app is selected.

프로세서(530)는 상부 디스플레이에 표시되는 메디테이션 앱에 연동하는 음원을 동승자 헤드레스트 스피커를 통해 출력되도록 제어하고, 하부 디스플레이에서 실행 화면이 표시되는 미디어의 음원을 차량 내 스피커를 통해 출력되도록 제어한다.The processor 530 controls the sound source linked to the meditation app displayed on the upper display to be output through the passenger's headrest speaker, and controls the sound source of the media whose execution screen is displayed on the lower display to be output through the in-vehicle speaker.

프로세서(530)는 헤드레스트 스피커 및 차량 내 스피커가 사운드 버블을 형성하도록 제어한다. The processor 530 controls the headrest speaker and the in-vehicle speaker to form a sound bubble.

도 47은 본 발명의 실시예에 따른 운전자 모드 중 메디테이션 실행 화면을 도시한다. 47 illustrates a mediation execution screen in a driver mode according to an embodiment of the present invention.

본 발명의 실시예에 따르면, 상부 디스플레이에는 메디테이션 앱 실행 화면이 표시되고, 하부 디스플레이는 오프되며, 노브 디스플레이도 오프된다. According to an embodiment of the present invention, the mediation app execution screen is displayed on the upper display, the lower display is turned off, and the knob display is also turned off.

무드 램프와 블루밍 스피커는 메디테이션 앱과 연동되어, 컬러 및 사운드가 설정된다. The mood lamp and blooming speaker are linked with the Meditation app to set color and sound.

도 47에 도시한 실행 화면에서의 구성 및 정의는 아래 [표 18]에 기재한 바와 같다. The configuration and definition of the execution screen shown in FIG. 47 are as described in [Table 18] below.

[표 18][Table 18]

Figure pat00018
Figure pat00018

도 48은 본 발명의 실시예에 따른 동승자 모드 중 메디테이션 실행 화면을 도시한다. 48 illustrates a mediation execution screen in a passenger mode according to an embodiment of the present invention.

동승자 모드에서, 상부 디스플레이에는 메디테이션 앱이 실행되고, 하부 디스플레이는 일반 화면 동작으로 네비게이션 정보, 미디어 정보 등이 표시되며, 노브 디스플레이는 일반 동작이 수행된다. In the passenger mode, the Meditation app is executed on the upper display, navigation information and media information are displayed on the lower display as a normal screen operation, and the normal operation is performed on the knob display.

블루밍 스피커는 하부 디스플레이를 통해 표시되는 컨텐츠의 음원이 재생되고, 조수석 헤드레스트 스피커는 메디테이션 앱 사운드를 재생한다. The blooming speaker plays the sound source of the content displayed through the lower display, and the front passenger's headrest speaker plays the Meditation app sound.

도 48에 도시한 실행 화면에서의 구성 및 정의는 아래 [표 19]에 기재한 바와 같다. The configuration and definition of the execution screen shown in FIG. 48 are as described in [Table 19] below.

[표 19][Table 19]

Figure pat00019
Figure pat00019

도 49는 본 발명의 실시예에 따른 메디테이션 기능 제공 과정을 도시한다. 49 illustrates a process of providing a mediation function according to an embodiment of the present invention.

상부 디스플레이에 기본 화면이 표시되고, 하부 디스플레이에 메디테이션 기능이 선택된 것을 가정한다. It is assumed that the basic screen is displayed on the upper display and the mediation function is selected on the lower display.

메디테이션 앱이 실행됨에 따라, 영상 별 사운드 및 무드램프가 연동되며, 노브 조작 시, 랜덤 영역에서 노브 조작의 방향에 따라 터치/드래그에 대한 이벤트 동작이 수행된다. As the Meditation app is executed, the sound and mood lamp for each image are linked, and when a knob is operated, an event operation for touch/drag is performed in a random area according to the direction of knob manipulation.

하부 디스플레이 화면에 터치 신호가 인가되면, 종료 버튼이 표시되고, 종료 버튼이 터치되면, 상부 디스플레이에 기본 화면이 표시되고, 하부 디스플레이에 기존에 실행된 위젯들이 표시된다. When a touch signal is applied to the lower display screen, an end button is displayed. When the end button is touched, a basic screen is displayed on the upper display, and previously executed widgets are displayed on the lower display.

도 50은 본 발명의 실시예에 따른 동승자 모드 메디테이션 화면을 도시한다. 50 illustrates a passenger mode mediation screen according to an embodiment of the present invention.

동승자 모드에서, 상부 디스플레이에 표시되는 메디테이션 화면은 터치 시 이전으로 복귀하는 버튼, 타이틀을 표시하는 영역, 앱 드로어(APP drawer) 버튼, 메디테이션 썸네일 버튼, 메디테이션 아이콘을 표시한다. In passenger mode, the mediation screen displayed on the upper display displays a button to return to the previous one when touched, an area for displaying a title, an APP drawer button, a mediation thumbnail button, and a mediation icon.

도 50에 도시한 화면에서의 구성 및 정의는 아래 [표 20]에 기재한 바와 같다. The configuration and definition of the screen shown in FIG. 50 are as described in [Table 20] below.

[표 20][Table 20]

Figure pat00020
Figure pat00020

도 51은 본 발명의 실시예에 따른 동승자 모드에서의 메디테이션 기능 제공 과정을 도시한다. 51 illustrates a process of providing a meditation function in a passenger mode according to an embodiment of the present invention.

동승자 모드에서, 상부 디스플레이는 연동된 동승자의 모바일 디바이스의 정보를 표시한다. In the passenger mode, the upper display displays information of the associated passenger's mobile device.

메디테이션 앱이 실행되면, 도 50에 도시한 메디테이션 화면이 디스플레이된다. When the mediation app is executed, the mediation screen shown in FIG. 50 is displayed.

메디테이션 앱 실행에 따라, 조수석의 헤드레스트 스피커 및 무드 램프가 앱 실행에 연동되어 음원 및 무드등이 설정된다. According to the execution of the Meditation app, the headrest speaker and mood lamp in the passenger seat are linked to the app execution to set the sound source and mood lamp.

도 52는 본 발명의 실시예에 따른 동승자 모드 메디테이션 멀티태스킹 화면을 도시한다. 52 illustrates a passenger mode meditation multitasking screen according to an embodiment of the present invention.

동승자 모드 메디테이션 멀티태스킹 화면에서, 앱 드로어(app drawer) 버튼은 앱 드로어 오픈, 클로즈 버튼을 제공한다. On the passenger mode Meditation multitasking screen, the app drawer button provides an app drawer open and close button.

메디테이션 썸네일 버튼 터치 시, 메디테이션 전체 화면이 실행된다. When the Meditation thumbnail button is touched, the entire Meditation screen is executed.

도 53은 본 발명의 실시예에 따른 동승자 모드 메디테이션 기능 제공 과정을 도시한다. 53 illustrates a process of providing a passenger mode mediation function according to an embodiment of the present invention.

동승자 모드에서 상부 디스플레이에 앱이 실행 중인 경우, 앱 드로어 버튼 터치에 따라 네비, 미디어, 메디테이션 등의 앱이 보여지고, 메디테이션 앱 실행 및 메디테이션 썸네일 버튼 터치에 따라, 메디테이션 기능이 제공되고, 메디테이션 앱에 연동하여 조수석 헤드레스트 스피커로 음원이 재생되고, 무드 램프가 설정된다. When an app is running on the upper display in passenger mode, depending on the touch of the app drawer button, apps such as navigation, media, and meditation are shown, and depending on the launch of the Meditation app and the touch of the thumbnail button, the Meditation function is provided, and the Meditation app is displayed. In conjunction, the sound source is played through the front passenger's headrest speaker, and the mood lamp is set.

도 54는 본 발명의 실시예에 따른 동승자 모드 메디테이션 기능 제공 시 사운드 버블 형성을 도시한다. 54 illustrates the formation of a sound bubble when the passenger mode mediation function is provided according to an embodiment of the present invention.

본 발명의 실시예에 따르면, 동승자 모드에서 상부 디스플레이가 동승자의 모바일 디바이스와 연동되어 메디테이션 앱의 실행 화면을 표시하면, 조수석 헤드레스트 스피커는 메디테이션 앱의 실행에 따른 음원을 출력한다. According to an embodiment of the present invention, when the upper display is linked with the passenger's mobile device to display the execution screen of the Meditation App in the passenger mode, the front passenger's headrest speaker outputs a sound source according to the execution of the Meditation App.

하부 디스플레이에서 재생되는 미디어 음원은 블루밍 스피커를 통해 출력된다. The media sound source played on the lower display is output through the blooming speaker.

동승자 모드에서, 헤드레스트 스피커 및 블루밍 스피커는 동승자 및 운전자에게 제공되는 음원의 간섭을 방지하기 위해, 사운드 버블을 형성한다. In the passenger mode, the headrest speaker and the blooming speaker form a sound bubble to prevent interference of the sound source provided to the passenger and the driver.

종래 기술에 따르면, 차량 내 시스템과 모바일 디바이스를 연결하여, 모바일 디바이스에서 재생되는 미디어를 차량 내 시스템을 통해 시청할 수 있도록 제공하는 기술이 제안되었다. 차량 내 디스플레이가 다양한 양태로 제공됨에 따라, IVI 시스템과 모바일 디바이스 간의 미디어 캐스트 관련 기술이 필요한 실정이다. According to the prior art, a technology for connecting an in-vehicle system and a mobile device to provide media played on the mobile device to be viewed through the in-vehicle system has been proposed. As in-vehicle displays are provided in various aspects, there is a need for a technology related to media cast between the IVI system and the mobile device.

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, 모바일 디바이스에서 실행 중인 미디어를IVI 시스템에서 연속적으로 재생하고, 차량 내 스피커 또는 헤드레스트 스피커를 출력 장치로 선택할 수 있으며, 차량 내 스피커와 동승자 헤드레스트 스피커 간의 음원 간섭을 방지하는 것이 가능한 IVI 시스템과 모바일 디바이스의 미디어 캐스트 제어 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above-mentioned problems, and the media running on the mobile device can be continuously played in the IVI system, the in-vehicle speaker or the headrest speaker can be selected as an output device, and the in-vehicle speaker and the passenger head An object of the present invention is to provide an IVI system capable of preventing sound source interference between rest speakers and an apparatus for controlling a media cast of a mobile device.

도 55는 본 발명의 실시예에 따른 IVI 시스템과 모바일 디바이스의 미디어 캐스트 제어 장치를 도시한다. 55 shows an IVI system and a media cast control apparatus of a mobile device according to an embodiment of the present invention.

본 발명에 따른 IVI 시스템과 모바일 디바이스의 미디어 캐스트 제어 장치는 모바일 디바이스의 캐스트 요청을 수신하는 입력부(610)와, 캐스트 요청에 따라, 모바일 디바이스의 컨텐츠를 차량 내 디스플레이에서 재생하는 프로그램이 저장된 메모리(620) 및 프로그램을 실행시키는 프로세서(630)를 포함하고, 프로세서(630)는 칵핏에 배치되는 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이를 이용하여 캐스트 서비스를 제공하도록 제어한다. The IVI system and the apparatus for controlling media cast of a mobile device according to the present invention include an input unit 610 for receiving a cast request from a mobile device, and a memory ( 620) and a processor 630 that executes a program, and the processor 630 controls to provide a cast service using an upper display arranged on the basis of a lower display arranged in the cockpit.

프로세서(630)는 캐스트 요청에 따라 모바일 디바이스와 상부 디스플레이가 연동되면, 모바일 디바이스에 표시되는 컨트롤러 화면을 통해 입력되는 신호에 따라 컨텐츠 재생을 제어한다. When the mobile device and the upper display are linked according to a cast request, the processor 630 controls content reproduction according to a signal input through a controller screen displayed on the mobile device.

프로세서(630)는 사운드 패스 설정 버튼 입력에 따라 차량 내 스피커 또는 헤드레스트 스피커로 사운드 패스를 설정하도록 제어한다. The processor 630 controls to set a sound path to an in-vehicle speaker or a headrest speaker according to a sound path setting button input.

프로세서(630)는 캐스트 성공 시에 사운드 패스 설정 버튼을 표시하도록 제어한다. The processor 630 controls to display a sound path setting button upon successful casting.

프로세서(630)는 캐스트 종료 시 상부 디스플레이에 캐스트 이전의 화면을 표시하도록 제어한다. The processor 630 controls to display the screen before the cast on the upper display when the cast ends.

프로세서(630)는 동승자 모드이며 상부 디스플레이에 동승자 화면 앱이 실행 중인 경우, 캐스트 요청에 따라 해당 컨텐츠를 상부 디스플레이에 바로 실행시키도록 제어한다. When the passenger screen app is running in the passenger mode and the upper display is running, the processor 630 controls the corresponding content to be directly executed on the upper display according to the cast request.

도 56은 본 발명의 실시예에 따른 스마트폰 앱 홈 화면을 도시한다. 56 shows a smartphone app home screen according to an embodiment of the present invention.

본 발명의 실시예에 따른 스마트폰 앱 화면에는 타이틀 영역, 메뉴 버튼, 비디오 탭, 뮤직 탭, 썸네일, 멀미 저감 동작 버튼, 캐스팅 플래그, 미니 플레이어가 포함된다. The smartphone app screen according to an embodiment of the present invention includes a title area, a menu button, a video tab, a music tab, a thumbnail, a motion sickness reduction operation button, a casting flag, and a mini player.

멀미 저감 동작 버튼 터치 시, 멀미 저감을 위한 시각, 청각, 촉각적인 피드백 동작이 이루어진다. When the motion sickness reduction action button is touched, visual, auditory, and tactile feedback actions for motion sickness reduction are performed.

스마트폰 앱 화면의 구성 및 정의는 아래 [표 21]에 정리한 바와 같다. The composition and definition of the smartphone app screen are summarized in [Table 21] below.

[표 21][Table 21]

Figure pat00021
Figure pat00021

도 57은 본 발명의 실시예에 따른 스마트폰 앱 동영상 플레이어 화면을 도시한다. 57 shows a smartphone app video player screen according to an embodiment of the present invention.

스마트폰 앱 동영상 플레이어 화면에는 터치 시 이전 화면으로 복귀하는 버튼, 동영상 타이틀, 캐스트 버튼, 조작 버튼, 프로그레스 바가 포함되고, 모바일 디바이스의 하드웨어 볼륨 버튼 조작 시, 재생 중인 컨텐츠의 음량이 조절된다. The smartphone app video player screen includes a button that returns to the previous screen when touched, a video title, a cast button, an operation button, and a progress bar, and when the hardware volume button of the mobile device is operated, the volume of the content being played is adjusted.

캐스트 버튼 터치 시, 상부 디스플레이에 캐스트 기능을 통해 컨텐츠가 표시된다. When the cast button is touched, the contents are displayed through the cast function on the upper display.

스마트폰 앱 동영상 플레이어 화면의 구성 및 정의는 아래 [표 22]에 정리한 바와 같다. The configuration and definition of the smartphone app video player screen are summarized in [Table 22] below.

[표 22][Table 22]

Figure pat00022
Figure pat00022

도 58은 본 발명의 실시예에 따른 스마트폰 앱 뮤직 플레이어 화면을 도시한다. 58 shows a smartphone app music player screen according to an embodiment of the present invention.

스마트폰 앱 뮤직 플레이어 화면에는 터치 시 미니 플레이어로 최소화되는 최소화 버튼, 음원 썸네일 이미지, 컨텐츠 정보, 프로그레스 바, 조작 버튼, 볼륨 조작 바, 사운드 패스 설정 버튼, 캐스트 버튼이 포함된다. The smartphone app music player screen includes a minimize button that minimizes to a mini player when touched, a thumbnail image of a sound source, content information, a progress bar, a control button, a volume control bar, a sound path setting button, and a cast button.

캐스트 버튼 터치 시, 상부 디스플레이에 캐스트 기능을 통해 컨텐츠가 표시된다. When the cast button is touched, the contents are displayed through the cast function on the upper display.

사운드 패스 설정 버튼에서는 현재 설정된 사운드 패스(차량 내 스피커 또는 헤드레스트 스피커)를 표시하고, 버튼 터치 시, 사운드 패스 변경 팝업이 표시되며, 캐스트 시, 디폴트 사운드 패스는 헤드레스트 스피커가 된다. The sound path setting button displays the currently set sound path (in-vehicle speaker or headrest speaker), and when the button is touched, a sound path change pop-up is displayed, and when cast, the default sound path becomes the headrest speaker.

스마트폰 앱 뮤직 플레이어 화면의 구성 및 정의는 아래 [표 23]에 정리한 바와 같다. The composition and definition of the smartphone app music player screen are summarized in [Table 23] below.

[표 23][Table 23]

Figure pat00023
Figure pat00023

도 59는 본 발명의 실시예에 따른 스마트폰 앱 캐스트 시 제어기 화면을 도시한다. 59 shows a controller screen when casting a smartphone app according to an embodiment of the present invention.

스마트폰 앱 캐스트 시 제어기 화면에는 버튼 터치 시 미니플레이어로 최소화하는 버튼, 동영상 또는 음원 썸네일 이미지, 컨텐츠 정보, 프로그레스 바, 조작 버튼, 볼륨 조작 바, 사운드 패스 설정 버튼, 캐스트 버튼이 포함된다. When casting a smartphone app, the controller screen includes a button that minimizes to a mini-player when a button is touched, a thumbnail image of a video or sound source, content information, a progress bar, a control button, a volume control bar, a sound path setting button, and a cast button.

캐스트 버튼 터치 시, 상부 디스플레이에 캐스트 기능을 통해 컨텐츠가 표시된다. When the cast button is touched, the contents are displayed through the cast function on the upper display.

사운드 패스 설정 버튼에서는 현재 설정된 사운드 패스(차량 내 스피커 또는 헤드레스트 스피커)를 표시하고, 버튼 터치 시, 사운드 패스 변경 팝업이 표시되며, 캐스트 시, 디폴트 사운드 패스는 헤드레스트 스피커가 된다. The sound path setting button displays the currently set sound path (in-vehicle speaker or headrest speaker), and when the button is touched, a sound path change pop-up is displayed, and when cast, the default sound path becomes the headrest speaker.

스마트폰 앱 캐스트 시 제어기 화면의 구성 및 정의는 아래 [표 24]에 정리한 바와 같다. The configuration and definition of the controller screen when casting the smartphone app is summarized in [Table 24] below.

[표 24][Table 24]

Figure pat00024
Figure pat00024

도 60은 본 발명의 실시예에 따른 컨텐츠 위치 변경을 도시한다. 60 illustrates a content location change according to an embodiment of the present invention.

좌측 상단 버튼 터치에 따라, 모바일 디바이스와 차량으로 컨텐츠 검색 위치를 변경하는 것이 가능하다. According to the touch of the upper left button, it is possible to change the content search location to the mobile device and vehicle.

도 61은 본 발명의 실시예에 따른 비디오 캐스트 과정을 도시한다.61 illustrates a video cast process according to an embodiment of the present invention.

모바일 디바이스에서 선택한 비디오는 캐스트 요청에 따라 상부 디스플레이에 표시되며, 캐스트 시 컨트롤러 화면에는 최소화 버튼, 썸네일 이미지, 컨텐츠 정보, 프로그레스 바, 조작 버튼, 볼륨 조작 바, 사운드 패스 설정 버튼, 캐스트 버튼이 표시된다. The video selected from the mobile device is displayed on the upper display according to the cast request, and during casting, the minimize button, thumbnail image, content information, progress bar, operation button, volume control bar, sound path setting button, and cast button are displayed on the controller screen. do.

최소화 버튼 터치에 따라, 미디어 썸네일 파일이 비디오 탭에 표시되며, 현재 재생 중인 비디오의 정보는 최소화 화면에 표시된다. When the minimize button is touched, a media thumbnail file is displayed on the video tab, and information on the currently playing video is displayed on the minimized screen.

캐스트 버튼이 다시 터치되면, 연동이 종료되어, 상부 디스플레이는 캐스트 요청 이전에 표시되고 있던 이전 화면이 다시 표시된다. When the cast button is touched again, the interworking is terminated, and the previous screen displayed before the cast request is displayed again on the upper display.

캐스트 종료 시, 모바일 디바이스에서 비디오가 이어보기 방식으로 재생된다. 동승자 모드인 경우, 캐스트 종료에 따라, 상부 디스플레이는 동승자의 모바일 디바이스의 위젯 화면으로 복귀한다. At the end of the cast, the video is played continuously on the mobile device. In the case of the passenger mode, according to the end of the cast, the upper display returns to the widget screen of the passenger's mobile device.

하부 디스플레이에 로컬 동영상 재생이 가능하며, 동승자 모드에서 동승자 화면 앱 실행 중인 경우에도, 캐스트 버튼이 터치되면, 동영상 플레이가 바로 실행된다. Local video playback is possible on the lower display, and even when the passenger screen app is running in passenger mode, when the cast button is touched, video play is immediately executed.

도 62는 본 발명의 실시예에 따른 뮤직 캐스트 과정을 도시한다. 62 shows a music cast process according to an embodiment of the present invention.

모바일 디바이스 앱 홈 화면에서 뮤직 탭으로 이동함에 따라, 미디어 썸네일이 선택되면, 해당 뮤직이 재생된다. As you move to the Music tab on the home screen of the mobile device app, when a media thumbnail is selected, the corresponding music is played.

캐스트 버튼 터치 시, 상부 디스플레이에 캐스트 되며, 캐스트 성공 시 사운드 패스 설정 버튼이 표시된다. When the cast button is touched, it is cast on the upper display, and when the cast is successful, the sound path setting button is displayed.

최소화 버튼 터치에 따라, 현재 재생 중인 플레이어 화면은 최소화 화면으로 변경되어 표시되고, 앱 홈 화면이 표시된다. According to the touch of the minimize button, the currently playing player screen is changed to the minimized screen and displayed, and the app home screen is displayed.

종래 기술에 따르면, 운전자 상태를 모니터링하여 경고를 제공하고 있으나, 경고 제공 필요 기준이 세분화되어 있지 않은 한계가 있고, 운전자에게만 경고를 제공하는 데 국한되는 문제점이 있다. According to the prior art, although a warning is provided by monitoring the driver's condition, there is a limitation in that the criteria for providing a warning are not subdivided, and there is a problem in that the warning is only provided to the driver.

본 발명은 전술한 문제점을 해결하기 위해 제안된 것으로, 운전자 상태에 따라 경고 제공 필요 기준을 세분화하여, 경고 제공 필요 여부를 판단하고, 동승자에게 운전자 부주의 상태를 알리는 것이 가능한 운전자 상태에 따른 단계별 경고 제공 장치를 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and it is possible to subdivide the criteria for providing warning according to the driver's condition, to determine whether to provide a warning or not, and to inform the passenger of the driver's careless state. The purpose is to provide a device.

도 63은 본 발명의 실시예에 따른 운전자 상태에 따른 단계별 경고 제공 장치를 도시한다. 63 illustrates an apparatus for providing a warning step by step according to a driver's state according to an embodiment of the present invention.

본 발명에 따른 운전자 상태에 따른 단계별 경고 제공 장치는 운전자 상태 감지 결과를 수신하는 입력부(710)와, 운전자 상태 감지 결과를 이용하여, 경고 단계를 분류하고, 그에 따라 기설정된 경고를 제공하는 프로그램이 저장된 메모리(720) 및 프로그램을 실행시키는 프로세서(730)를 포함하고, 프로세서(730)는 경고 메시지 출력, 경고음 출력, 램프 점등을 이용하여 경고를 제공한다. A step-by-step warning providing device according to driver status according to the present invention includes an input unit 710 for receiving a driver status detection result, and a program for classifying warning steps using the driver status detection result and providing a preset warning accordingly. It includes a stored memory 720 and a processor 730 for executing a program, and the processor 730 provides a warning by outputting a warning message, outputting a warning sound, and lighting a lamp.

프로세서(730)는 칵핏에 배치되는 하부 디스플레이를 기준으로 상부에 배치되는 상부 디스플레이를 이용하여 경고 메시지를 출력하되, 동승자 모드에 따라 동승자 측으로 이동된 상부 디스플레이에 기설정된 경고 단계의 경우 경고 메시지를 출력하도록 제어한다. The processor 730 outputs a warning message by using the upper display disposed on the upper side based on the lower display disposed in the cockpit, but outputs a warning message in the case of a preset warning stage on the upper display moved to the passenger side according to the passenger mode control to do

프로세서(730)는 기설정된 경고 단계에 따라 동승자 헤드레스트 스피커에 경고음을 출력하도록 제어한다. The processor 730 controls to output a warning sound to the passenger's headrest speaker according to a preset warning step.

프로세서(730)는 운전자 상태 감지 결과를 이용하여 분류한 경고 단계에 따라, 기설정된 시간 동안 경고를 제공한다. The processor 730 provides a warning for a preset time according to the warning stage classified using the driver state detection result.

프로세서(730)는 1단계로서, 클러스터에 경고 메시지를 출력하고, 클러스터 엠비언트 램프를 점등시킨다. As a first step, the processor 730 outputs a warning message to the cluster and turns on the cluster ambient lamp.

프로세서(730)는 2단계로서, 인테리어 무드램프를 추가로 점등시키고, 경고음을 출력하도록 제어한다. As a second step, the processor 730 additionally turns on the interior mood lamp and controls to output a warning sound.

프로세서(730)는 3단계로서, 클러스터 엠비언트 램프와 상기 인테리어 무드램프의 색상을 변경시켜 표시하도록 제어하고, 경고음의 재생 속도를 빠르게 출력하도록 제어하며, 비상등을 점등시킨다. As a third step, the processor 730 controls to change and display the colors of the cluster ambient lamp and the interior mood lamp, controls to quickly output a reproduction speed of a warning sound, and turns on the emergency light.

도 64는 본 발명의 실시예에 따른 운전자 모드에서의 DSW 실행을 도시한다. 64 illustrates DSW execution in driver mode according to an embodiment of the present invention.

운전자 모드에서 전방 주시 태만, 피로, 졸음이 감지되는 경우, 클러스터에는 경고 팝업을 통해 경고 메시지를 제공한다. In driver mode, if forward-looking negligence, fatigue, or drowsiness is detected, a warning message is provided to the cluster through a warning pop-up.

클러스터 엠비언트 램프는 경고 단계에 따라, 상이한 컬러를 점멸한다. Cluster ambient lamps flash different colors, depending on the warning stage.

무드 램프는 경고 단계에 따라, 상이한 컬러를 점멸한다. The mood lamp flashes different colors depending on the warning level.

블루밍 사운드는 경고 단계에 따라, 상이한 경고음을 재생시킨다. Blooming sounds play different warning sounds according to the warning level.

비상등은 경고 단계에 따라, 점멸 여부가 결정된다. Depending on the warning level, the hazard light is determined whether to flash or not.

운전자 모드에서의 DSW 실행에서의 구성 및 정의는 아래 [표 25]에 정리한 바와 같다. The configuration and definition of DSW execution in driver mode are summarized in [Table 25] below.

[표 25][Table 25]

Figure pat00025
Figure pat00025

도 65는 본 발명의 실시예에 따른 동승자 모드에서의 DSW 실행을 도시한다. 65 illustrates DSW implementation in passenger mode according to an embodiment of the present invention.

동승자 모드에서 전방 주시 태만, 피로, 졸음이 감지되는 경우, 클러스터에는 경고 팝업을 통해 경고 메시지를 제공한다. In the case of forward gaze neglect, fatigue, or drowsiness in passenger mode, a warning message is provided to the cluster through a warning pop-up.

클러스터 엠비언트 램프는 경고 단계에 따라, 상이한 컬러를 점멸한다. Cluster ambient lamps flash different colors, depending on the warning stage.

무드 램프는 경고 단계에 따라, 상이한 컬러를 점멸한다. The mood lamp flashes different colors depending on the warning level.

블루밍 사운드는 경고 단계에 따라, 상이한 경고음을 재생시킨다. Blooming sounds play different warning sounds according to the warning level.

비상등은 경고 단계에 따라, 점멸 여부가 결정된다. Depending on the warning level, the hazard light is determined whether to flash or not.

상부 디스플레이는 동승자 모드에 따라 조수석 측으로 이동된 상태인데, 상부 디스플레이에 운전자의 상태 분류 결과 및 그에 따른 경고 메시지를 제공한다. The upper display is in a state of being moved to the passenger seat side according to the passenger mode, and a result of the driver's status classification and a warning message are provided on the upper display.

동승자 헤드레스트 스피커는 운전자 상태에 따른 경고 단계에 의해, 상이한 경고음을 출력한다. The passenger headrest speaker outputs different warning sounds according to the warning stage according to the driver's condition.

동승자 모드에서의 DSW 실행에서의 구성 및 정의는 아래 [표 26]에 정리한 바와 같다. The configuration and definition of DSW execution in passenger mode are summarized in [Table 26] below.

[표 26][Table 26]

Figure pat00026
Figure pat00026

도 66은 본 발명의 실시예에 따른 운전자 모드에서 단계별 경고 제공 과정을 도시한다. 66 illustrates a step-by-step warning providing process in a driver mode according to an embodiment of the present invention.

주행 중 운전자의 전방 주시 태만, 피로, 졸음이 감지되는 경우, 1단계 경고로서 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 점등한다. If the driver's negligence, fatigue, or drowsiness is detected while driving, a cluster pop-up message is displayed as a first-level warning and the cluster ambient lamp is turned on.

2단계 경고로서, 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 점등하며, 인테리어 무드램프를 점등하고, 차량 내 스피커를 이용하여 경고음을 재생한다. As a second-level warning, the cluster pop-up text is displayed, the cluster ambient lamp is turned on, the interior mood lamp is turned on, and a warning sound is played using the in-vehicle speaker.

3단계 경고로서, 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 2단계와 상이한 색깔(예: 붉은 색)로 점등하며, 인테리어 무드램프를 2단계와 상이한 색깔(예: 붉은 색)로 점등하고, 차량 내 스피커를 이용하여 2단계와 상이한 경고음(예: 주기가 보다 빠르게 재생되는 경고음)을 재생하고, 비상등을 점등시킨다. As a level 3 warning, cluster pop-up text is displayed, the cluster ambient lamp is turned on in a color different from that of level 2 (eg red), the interior mood lamp is turned on in a color different from that of level 2 (eg red), Using the in-vehicle speaker, a warning sound different from the second stage (eg, a warning sound with a faster cycle) is played, and the emergency lights are turned on.

도 67은 본 발명의 실시예에 따른 동승자 모드에서 단계별 경고 제공 과정을 도시한다. 67 illustrates a step-by-step warning providing process in a passenger mode according to an embodiment of the present invention.

주행 중 운전자의 전방 주시 태만, 피로, 졸음이 감지되는 경우, 1단계 경고로서 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 점등한다. If the driver's negligence, fatigue, or drowsiness is detected while driving, a cluster pop-up message is displayed as a first-level warning and the cluster ambient lamp is turned on.

2단계 경고로서, 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 점등하며, 인테리어 무드램프를 점등하고, 차량 내 스피커를 이용하여 경고음을 재생한다. 또한, 동승자 모드에 따라 동승자 측으로 이동된 상부 디스플레이를 이용하여, 경고 메시지를 제공한다. As a second-level warning, the cluster pop-up text is displayed, the cluster ambient lamp is turned on, the interior mood lamp is turned on, and a warning sound is played using the in-vehicle speaker. In addition, a warning message is provided using the upper display moved to the passenger side according to the passenger mode.

3단계 경고로서, 클러스터 팝업 문구를 표시하고, 클러스터 엠비언트 램프를 2단계와 상이한 색깔(예: 붉은 색)로 점등하며, 인테리어 무드램프를 2단계와 상이한 색깔(예: 붉은 색)로 점등하고, 차량 내 스피커를 이용하여 2단계와 상이한 경고음(예: 주기가 보다 빠르게 재생되는 경고음)을 재생하고, 비상등을 점등시킨다. 또한, 상부 디스플레이에 경고 메시지를 제공하고, 동승자 헤드레스트 스피커를 통해 경고음을 출력한다. As a level 3 warning, cluster pop-up text is displayed, the cluster ambient lamp is turned on in a color different from that of level 2 (eg red), the interior mood lamp is turned on in a color different from that of level 2 (eg red), Using the in-vehicle speaker, a warning sound different from the second stage (eg, a warning sound with a faster cycle) is played, and the emergency lights are turned on. In addition, a warning message is provided on the upper display and a warning sound is output through the passenger's headrest speaker.

한편, 본 발명의 실시예에 따르면, 컴퓨터 시스템에서 구현되거나, 또는 기록매체에 기록될 수 있다. 컴퓨터 시스템은 적어도 하나 이상의 프로세서와, 메모리와, 사용자 입력 장치와, 데이터 통신 버스와, 사용자 출력 장치와, 저장소를 포함할 수 있다. 전술한 각각의 구성 요소는 데이터 통신 버스를 통해 데이터 통신을 한다.Meanwhile, according to an embodiment of the present invention, it may be implemented in a computer system or recorded on a recording medium. The computer system may include at least one processor, a memory, a user input device, a data communication bus, a user output device, and storage. Each of the above-described components performs data communication through a data communication bus.

컴퓨터 시스템은 네트워크에 커플링된 네트워크 인터페이스를 더 포함할 수 있다. 프로세서는 중앙처리 장치(central processing unit (CPU))이거나, 혹은 메모리 및/또는 저장소에 저장된 명령어를 처리하는 반도체 장치일 수 있다. The computer system may further include a network interface coupled to the network. The processor may be a central processing unit (CPU) or a semiconductor device that processes instructions stored in a memory and/or storage.

메모리 및 저장소는 다양한 형태의 휘발성 혹은 비휘발성 저장매체를 포함할 수 있다. 예컨대, 메모리는 ROM 및 RAM을 포함할 수 있다.The memory and storage may include various types of volatile or non-volatile storage media. For example, memory may include ROM and RAM.

따라서, 본 발명의 실시예에 따른 방법은 컴퓨터에서 실행 가능한 방법으로 구현될 수 있다. 본 발명의 실시예에 따른 방법이 컴퓨터 장치에서 수행될 때, 컴퓨터로 판독 가능한 명령어들이 본 발명에 따른 방법을 수행할 수 있다.Accordingly, the method according to the embodiment of the present invention may be implemented as a computer-executable method. When the method according to the embodiment of the present invention is performed in a computer device, computer readable instructions may perform the method according to the present invention.

Claims (7)

메디테이션 기능 요청 신호를 수신하는 입력부;
상기 메디테이션 기능 요청 신호를 수신함에 따라, 복수의 디스플레이를 이용하여 메디테이션 기능을 제공하는 프로그램이 저장된 메모리; 및
상기 프로그램을 실행시키는 프로세서를 포함하고,
상기 프로세서는 칵핏에 배치되는 하부 디스플레이 및 상기 하부 디스플레이를 기준으로 상부에 배치되는 상기 상부 디스플레이 중 적어도 어느 하나를 이용하고, 스피커와 무드 램프를 연동하여 상기 메디테이션 기능을 제공하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
an input unit for receiving a mediation function request signal;
a memory storing a program for providing a meditation function using a plurality of displays in response to receiving the meditation function request signal; and
a processor for executing the program;
The processor uses at least one of a lower display disposed in the cockpit and an upper display disposed above the lower display based on the lower display, and provides the meditation function by linking a speaker and a mood lamp
An apparatus for providing a mediation function using a plurality of displays.
제1항에 있어서,
상기 프로세서는 운전자 모드에서 상기 하부 디스플레이를 오프시키고, 상기 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
The method of claim 1,
The processor turns off the lower display in the driver mode and controls to display a mediation app execution screen on the upper display
An apparatus for providing a mediation function using a plurality of displays.
제2항에 있어서,
상기 프로세서는 노브 조작 시, 노브 조작 방향에 따라 상기 메디테이션 앱 실행 화면에서 이벤트 동작이 수행되도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
3. The method of claim 2,
When the processor operates the knob, controlling the event operation to be performed on the execution screen of the meditation app according to the direction of the knob operation
An apparatus for providing a mediation function using a plurality of displays.
제1항에 있어서,
상기 프로세서는 동승자 모드에서 상기 상부 디스플레이에 메디테이션 앱 실행 화면을 표시하도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
The method of claim 1,
The processor controls to display a mediation app execution screen on the upper display in the passenger mode
An apparatus for providing a mediation function using a plurality of displays.
제4항에 있어서,
상기 프로세서는 상기 상부 디스플레이에 메디테이션 멀티태스킹 화면을 표시하도록 제어하고, 앱 드로어 버튼 터치 및 메디테이션 앱 선택 시 메디테이션 썸네일 화면을 표시하도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
5. The method of claim 4,
The processor controls to display a mediation multitasking screen on the upper display, and controls to display a mediation thumbnail screen when an app drawer button is touched and a mediation app is selected
An apparatus for providing a mediation function using a plurality of displays.
제4항에 있어서,
상기 프로세서는 상기 상부 디스플레이에 표시되는 메디테이션 앱에 연동하는 음원을 동승자 헤드레스트 스피커를 통해 출력되도록 제어하고, 상기 하부 디스플레이에서 실행 화면이 표시되는 미디어의 음원을 차량 내 스피커를 통해 출력되도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
5. The method of claim 4,
The processor controls the sound source linked to the meditation app displayed on the upper display to be output through the passenger's headrest speaker, and controls the sound source of the media for which the execution screen is displayed on the lower display to be output through the in-vehicle speaker
An apparatus for providing a mediation function using a plurality of displays.
제6항에 있어서,
상기 프로세서는 상기 헤드레스트 스피커 및 차량 내 스피커가 사운드 버블을 형성하도록 제어하는 것
인 복수의 디스플레이를 이용한 메디테이션 기능 제공 장치.
7. The method of claim 6,
The processor controls the headrest speaker and the in-vehicle speaker to form a sound bubble
An apparatus for providing a mediation function using a plurality of displays.
KR1020210011863A 2021-01-27 2021-01-27 Appararus for providing meditation using multiple displays KR20220108638A (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020210011863A KR20220108638A (en) 2021-01-27 2021-01-27 Appararus for providing meditation using multiple displays
EP22153690.7A EP4036757A1 (en) 2021-01-27 2022-01-27 Apparatus for searching using multiple displays
US17/586,362 US12019846B2 (en) 2021-01-27 2022-01-27 Apparatus for searching using multiple displays
CN202210103779.4A CN114801735A (en) 2021-01-27 2022-01-27 System for searching using multiple displays

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210011863A KR20220108638A (en) 2021-01-27 2021-01-27 Appararus for providing meditation using multiple displays

Publications (1)

Publication Number Publication Date
KR20220108638A true KR20220108638A (en) 2022-08-03

Family

ID=82847490

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210011863A KR20220108638A (en) 2021-01-27 2021-01-27 Appararus for providing meditation using multiple displays

Country Status (1)

Country Link
KR (1) KR20220108638A (en)

Similar Documents

Publication Publication Date Title
US11745585B2 (en) Vehicle infotainment apparatus using widget and operation method thereof
US10491733B2 (en) Privacy management
JP6033804B2 (en) In-vehicle device operation device
JP6181351B2 (en) In-vehicle information system, in-vehicle device, information terminal
US11372611B2 (en) Vehicular display control system and non-transitory computer readable medium storing vehicular display control program
JP5040901B2 (en) In-vehicle information device and in-vehicle information system
JP2002229702A (en) Automobile multimedia system having animation display device
US20210168438A1 (en) Methods, systems, and media for presenting caption information based on volume setting adjustments
WO2019124158A1 (en) Information processing device, information processing method, program, display system, and moving body
US12019846B2 (en) Apparatus for searching using multiple displays
US20130250097A1 (en) Method for displaying background screen in navigation device
JPWO2017068759A1 (en) In-vehicle display system and method for controlling the in-vehicle display system
KR20220108639A (en) Appararus for controlling media sound multi connection using multiple displays
JP6036548B2 (en) Video control device for vehicle
TWM502609U (en) On-board device
US20220024312A1 (en) Apparatus and method for controlling vehicle using rotation information of mobile terminal
KR20220108638A (en) Appararus for providing meditation using multiple displays
KR20220108641A (en) Apparatus for searching using multiple displays
KR20220108640A (en) Appararus for controlling navigation using multiple displays
KR20220108886A (en) Appararus for controlling forward camera image and surround view monitoring using multiple displays
KR20220108636A (en) Apparatus for providing step by step alarm accoding to driver state
KR20220108637A (en) Apparatus for controlling media cast between in vehicle infortainment system and mobile device
US20220242242A1 (en) Vehicle, mobile device, and control method therefor
US11941316B2 (en) Vehicle information display apparatus and method
US12139015B2 (en) Vehicle infotainment apparatus using widget and operation method thereof