KR20110090001A

KR20110090001A - 영상통화장치 및 그 방법

Info

Publication number: KR20110090001A
Application number: KR1020100009549A
Authority: KR
Inventors: 명인식
Original assignee: 삼성전자주식회사
Priority date: 2010-02-02
Filing date: 2010-02-02
Publication date: 2011-08-10

Abstract

영상통화장치 및 그 방법이 개시된다.
다자간의 영상회의시스템을 위한 영상통화장치는 영상화면과 컨텐츠를 표시하는 자료화면을 오버랩하여 표시할 수 있다. 이 때, 영상통화장치는 사용자의 상황을 고려하여 영상화면과 자료화면의 진한 정도를 실시간으로 조절하여 표시할 수 있다.

Description

영상통화장치 및 그 방법{Method and Apparatus for video conferencing}

기술분야는 영상통화장치 및 그 방법에 관한 것으로서, 영상과 컨텐츠를 오버랩하여 표시하며, 사용자의 상황을 고려하여 영상과 컨텐츠의 진한 정도를 실시간으로 조절하여 표시할 수 있는 영상통화장치 및 그 방법에 관한 것이다.

탈집중화(decentralization)와 세계화(globalization)에 의하여 원거리에 위치한 사람들 간의 커뮤니케이션 요구가 계속 증가하는 추세에 있다. 이러한 요구를 해결하기 위하여 최근 주목받고 있는 기술 중 하나가 비디오 컨퍼런싱이나 텔레프레즌스와 같은 화상회의이다. 그러나, 기존의 화상회의는 상대방의 모습을 최대한 고화질 및 고음질로 전송하는 것을 주타겟으로 할 뿐, 효율적인 업무를 위한 화면의 공유, 자료의 송수신에 있어서는 기존의 PC환경과 동일한 수준의 사용자 인터페이스와 기능을 제공하고 있다. 예를 들어, 기존의 비디오 컨퍼런싱은 상대방의 모습을 보여주는 비디오 화면과 회의 시 공유하는 자료를 위한 화면으로 분리된 화면을 사용한다. 따라서, 이러한 환경에서 사용자들은 비디오 화면과 자료 화면을 번갈아가면서 보아야 하므로, 시선이 분산되고 화자 자신도 자료의 특정 부분을 가리키는 구체적인 동작을 할 수 없어 회의의 몰입도가 저하된다.

일 측면에 있어서, 복수의 참가자들의 영상 통화를 위한 영상통화장치는, 복수의 참가자들이 공유하는 자료화면 및 상기 복수의 참가자들 중 화자와 관련된 영상화면을 생성하는 영상 처리부; 상기 복수의 참가자들의 상황을 분석하고, 분석 결과에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절하도록 상기 영상 처리부를 제어하는 제어부; 및 상기 진한 정도가 조절된 자료화면 또는 영상화면을 상기 복수의 참가자들의 표시패널로 전송하는 통신부를 포함할 수 있다.

상기 영상 처리부는 상기 자료화면 또는 상기 영상화면의 투명도를 조절하여 상기 진한 정도를 조절하거나, 상기 자료화면이 표시되는 레이어와 상기 영상화면이 표시되는 레이어의 순서를 변경하여 상기 진한 정도를 조절할 수 있다.

상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 제어부는 상기 선택된 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 영상 처리부는 상기 선택된 자료화면을 기준 속도보다 빠른 속도로 진하게 처리할 수 있다.

상기 선택된 자료화면의 일부가 선택해제되면, 상기 제어부는 상기 진하게 처리된 자료화면을 이전 상태로 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 복수의 참가자들의 발언 또는 대화에 대응하는 음향신호를 출력가능한 신호로 처리하는 음향 처리부를 더 포함하며, 상기 제어부는, 상기 복수의 참가자들의 발언 또는 대화가 유지되는 시간에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절하도록 상기 영상 처리부를 제어할 수 있다.

상기 제어부는, 설정된 시간 이상 상기 복수의 참가자들의 발언 또는 대화가 유지되면, 상기 영상화면을 상기 자료화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 제어부는, 설정된 시간 이상 상기 복수의 참가자들 사이에 침묵이 유지되면, 상기 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 제어부는 상기 복수의 참가자들의 움직임에 기초하여 상기 진한 정도를 제어할 수 있다.

상기 통신부는 촬영장치를 통해 상기 복수의 참가자들의 동영상을 수신하며, 상기 제어부는 상기 수신된 동영상을 분석하여 상기 복수의 참가자들 중 적어도 하나의 움직임이 기준값보다 크면, 상기 영상화면을 상기 자료화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 제어부는 상기 복수의 참가자들 중 적어도 하나의 움직임이 상기 기준값보다 작으면, 상기 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 제어부는 상기 선택된 자료화면의 일부를 확대하고, 상기 확대된 일부를 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어할 수 있다.

일 측면에 있어서, 복수의 참가자들의 영상 통화를 위한 영상통화방법은, 상기 복수의 참가자들의 상황을 분석하고, 분석 결과에 기초하여 상기 복수의 참가자들이 공유하는 자료화면 또는 상기 복수의 참가자들 중 화자와 관련된 영상화면의 진한 정도를 조절하는 단계; 및 상기 진한 정도가 조절된 자료화면 또는 영상화면을 생성하여 상기 복수의 참가자들의 표시패널로 전송하는 단계를 포함할 수 있다.

상기 조절하는 단계는, 상기 자료화면 또는 상기 영상화면의 투명도를 조절하여 상기 진한 정도를 조절하거나, 자료화면이 표시되는 레이어와 상기 영상화면이 표시되는 레이어의 순서를 변경하여 진한 정도를 조절할 수 있다.

상기 조절하는 단계는, 상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 선택된 자료화면을 상기 영상화면보다 진하게 조절할 수 있다.

상기 조절하는 단계는, 상기 선택된 자료화면의 일부가 선택해제되면, 상기 진하게 처리된 자료화면을 이전 상태의 진하기로 조절할 수 있다.

상기 조절하는 단계는, 상기 복수의 참가자들의 발언 또는 대화가 유지되는 시간에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절할 수 있다.

상기 조절하는 단계는, 상기 복수의 참가자들의 움직임에 기초하여 상기 진한 정도를 조절할 수 있다.

상기 조절하는 단계는, 상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 선택된 자료화면의 일부를 확대하고, 상기 확대된 일부를 상기 영상화면보다 진하게 조절할 수 있다.

영상통화장치 및 그 방법에 의하면, 화상회의 중에 별도의 화면이 아닌 영상 재생 화면에 공유하고자 하는 자료를 동시에 표시할 수 있으며, 이 때, 영상 재생 화면 또는 자료가 표시되는 화면의 진한 정도를 사용자의 상황에 따라 조절할 수 있다. 이로써, 급격히 확대되어 가고 있는 비디오 컨퍼런싱, 텔레프레즌스 환경에서 공유하고자 하는 자료와 비디오 영상을 한 화면에 효과적으로 표시하여 커뮤니케이션 몰입도를 크게 향상시키고 효율적으로 회의를 진행할 수 있다.

또한, 영상통화장치 및 그 방법에 따르면, 화상회의에 참여하는 참가자들의 상황(context)을 마이크로폰, 터치 스크린, 촬영장치 등을 통해 획득한 정보를 통해 분석하고, 분석결과를 기초로 자료화면에 집중하는지 또는 영상화면에 집중하는지를 판단하여 진하기 정도를 조절함으로써 자동으로 그리고 실시간으로 화면상태를 조절할 수 있다.

도 1 및 도 2는 영상통화장치가 적용되는 영상통화시스템의 예를 도시한 도면,
도 3 및 도 4는 복수의 참가자들의 영상 통화를 위한 영상통화장치의 예를 도시한 블록도,
도 5는 자료화면이 영상화면보다 뚜렷하게 표시된 경우를 보여주는 도면,
도 6은 영상화면이 자료화면보다 뚜렷하게 표시된 경우를 보여주는 도면,
도 7은 복수의 참가자들의 영상 통화를 위한 영상통화방법을 설명하기 위한 흐름도, 그리고,
도 8은 도 7의 730단계를 보다 자세히 설명하기 위한 흐름도이다.

이하, 첨부된 도면을 참조하여 상세하게 설명한다.

도 1 및 도 2는 영상통화장치가 적용되는 영상통화시스템의 예를 도시한 도면이다.

영상통화시스템은 복수의 참가자들 또는 복수의 그룹들의 영상 통화 서비스를 제공하는 시스템으로서, 도 1과 도 2는 두 그룹 간의 영상통화 서비스를 위한 시스템을 도시한다. T1과 T2는 영상통화 서비스에 참여하는 서로 다른 그룹의 참가자이다.

도 1을 참조하면, 영상통화장치(100)는 촬영장치(110)로부터 획득되는 참가자(T1)을 촬영한 동영상 데이터를 수신하여, 시청가능한 신호로 처리한 후 프로젝터(120)에게 전송한다. 프로젝터(120)는 수신된 동영상 데이터를 스크린(130)에 투영하여 표시하며, 스피커(미도시)를 통해 출력한다.

또한, 영상통화장치(100)는 촬영장치(140)로부터 획득되는 참가자(T2)을 촬영한 동영상 데이터를 수신하여, 시청가능한 신호로 처리한 후 프로젝터(150)에게 전송한다. 프로젝터(150)는 수신된 동영상 데이터를 스크린(160)에 투영하여 표시하며, 스피커(미도시)를 통해 출력한다. 스크린(130, 160)은 편광 필름(Polarizing Film)과 같은 투명 스크린일 수 있다.

도 2를 참조하면, 영상통화장치(400)는 각 그룹 별로 구비되어 있다. 도 2의 영상통화장치(200, 210), 촬영장치(110, 140), 프로젝터(120, 150)은 도 1과 동일하므로 상세한 설명은 생략한다. 제1영상통화장치(200)는 촬영장치(110)로부터 전송되는 참가자(T1)에 대한 동영상 데이터를 수신하여, 프로젝터(120)에게 전송한다. 제2영상통화장치(210)는 촬영장치(140)로부터 전송되는 참가자(T2)에 대한 동영상 데이터를 수신하여 프로젝터(150)에게 전송한다. 참가자들(T1, T2)이 공유하는 자료화면은 영상통화장치(200, 210)에서 프로젝터(120, 150)로 제공될 수 있다. 촬영장치(110, 140)는 구비된 마이크로폰(미도시)을 이용하여 참가자들(T1, T2)의 음향데이터를 수신할 수 있다.

도 1과 도 2의 스크린(130, 160)에 표시되는 자료화면 또는 참가자(T1, T2)의 영상화면은 참가자(T1, T2)의 상황에 따라 진하기가 조절되어 표시될 수 있다.

도 3은 복수의 참가자들의 영상 통화를 위한 영상통화장치의 예를 도시한 블록도이다.

도 3을 참조하면, 영상통화장치(300)는 영상 처리부(310), 제어부(320) 및 통신부(330)를 포함한다. 영상통화장치(300)는 장치(100, 200, 210) 중 하나일 수 있다.

영상 처리부(310)는 복수의 참가자들이 공유하는 자료화면, 복수의 참가자들 중 화자(예를 들어, T1)와 관련된 영상화면을 표시가능한 신호로 처리한다. 또한, 영상 처리부(420)는 화자(T1)가 속하지 않은 그룹 내 참가자들(T2)의 영상화면을 화자(T1)가 속한 그룹의 스크린(160)에 표시가능한 신호로 처리할 수 있다. 자료화면은 프로젝터(120, 150)를 통해 스크린(130, 160)에 표시될 수 있다. 이로써 복수의 참가자들은 동일한 자료화면을 공유하게 된다.

제어부(320)는 화자(T1)를 포함하는 복수의 참가자들의 상황 또는 회의 집중도를 분석하고, 분석 결과에 기초하여 자료화면 또는 영상화면의 진한 정도를 조절하도록 영상 처리부(420)를 제어한다. 자료화면 또는 영상화면의 진한 정도는 선명도와 투명도 중 하나를 의미할 수도 있다.

통신부(330)는 영상 처리부(420)에서 진한 정도가 조절된 자료화면 또는 영상화면을 상대방 참가자(T2)의 스크린(130)으로 전송할 수 있다. 또한, 통신부(430)는 제어부(440)의 제어에 의해, 화자(T1) 측의 스크린(160)으로 상대방 참가자(T2)를 촬영한 영상화면을 자료화면과 함께 전송한다.

도 4는 복수의 참가자들의 영상 통화를 위한 영상통화장치의 다른 예를 도시한 블록도이다.

도 4를 참조하면, 영상통화장치(400)는 음향 처리부(410), 영상 처리부(420), 통신부(430) 및 제어부(440)를 포함한다. 영상통화장치(400)는 장치(100, 200, 210) 중 하나일 수 있다.

촬영장치(110)가 화자(T1)을 촬영하여 획득한 음향 데이터는 통신부(430)를 통해 수신된다. 음향 처리부(410)는 수신된 음향 데이터를 스피커에서 출력가능한 형태로 처리(예를 들어, 증폭 후 잡음 제거)할 수 있다. 처리된 음향 데이터는 통신부(430) 및 프로젝터(120, 150)을 통해 상대방 참가자(T2)의 그룹과 화자(T1)의 그룹으로 제공된다.

영상 처리부(420)는 복수의 참가자들이 공유하는 자료화면 및 복수의 참가자들 중 화자(T1)와 관련된 영상화면을 표시가능한 신호로 처리할 수 있다. 또한, 영상 처리부(420)는 화자(T1)가 속하지 않은 그룹 내 참가자들(T2)의 영상화면을 신호처리할 수 있다.

화자(T1)와 관련된 영상화면은 촬영장치(110)가 화자(T1)을 촬영하여 획득한 영상으로서, 촬영장치(110) → 영상통화장치(400) → 프로젝터(120)를 경유하여 스크린(130)의 표시패널(131)에 표시된다. 화자(T1)가 속하지 않은 그룹 내 참가자들(T2)의 영상화면은 촬영장치(140)가 화자(T2)을 촬영하여 획득한 영상으로서, 촬영장치(140) → 영상통화장치(400) → 프로젝터(150)를 경유하여 표시패널(131)에 표시된다. 스크린(130)은 다양한 화면을 표시하는 표시패널(131)과 사용자의 터치 입력을 받는 터치 스크린부(132)를 포함한다.

참가자들(T1, T2)이 공유하는 자료화면은 영상통화장치(400) 내에 저장되어 있거나 또는 외부기기(예를 들어, 서버)로부터 전송될 수 있으며, 프로젝터(120, 150)를 통해 스크린(130, 160)에 표시되거나 스피커로 출력될 수 있다. 이로써 복수의 참가자들은 동일한 자료화면을 공유하게 된다.

제어부(440)는 화자(T1)를 포함하는 복수의 참가자들(T1, T2)의 상황을 분석하고, 분석 결과에 기초하여 자료화면 또는 영상화면의 진한 정도를 조절하도록 영상 처리부(420)를 제어한다. 참가자들(T1, T2)의 상황은 화자(T1)와 상대방 참가자(T2)의 화상통화 집중도일 수 있다. 제어부(440)는 참가자들(T1, T2)이 스크린(130, 160)에 표시된 자료화면에 집중하고 있는지 영상화면에 집중하고 있는지를 분석 및 판단하여, 자료화면 또는 영상화면의 진한 정도를 자동으로, 그리고, 실시간으로 조절할 수 있다.

영상 처리부(420)는 아래 두 방법 중 하나를 이용하여 자료화면 또는 영상화면의 진한 정도를 조절할 수 있다.

첫째, 영상 처리부(420)는 자료화면 또는 영상화면의 투명도를 조절하여 진한 정도를 조절할 수 있다. 예를 들어, 영상화면을 보다 진하고 뚜렷하게 표시하려는 경우, 영상 처리부(420)는 영상화면의 투명도를 낮게 하여 불투명에 가깝게 처리하거나, 자료화면의 투명도를 높게 하여 거의 투명하게 표시되도록 처리할 수 있다.

둘째, 영상 처리부(420)는 자료화면이 표시되는 레이어와 영상화면이 표시되는 레이어의 순서를 변경하여 진한 정도를 조절할 수 있다. 영상 처리부(420)는 영상화면을 보다 진하고 뚜렷하게 표시하려는 경우, 소프트웨어적으로 영상화면의 레이어가 스크린(130)의 앞에 표시되고, 자료화면의 레이어가 영상화면의 뒤에 표시되도록 처리할 수 있다.

[표 1]은 참가자들의 상황에 따른 영상화면의 진한 정도를 조절하기 위한 조건 및 그에 따른 진하기 조절의 일 예를 보여준다.

우선 순위	참가자의 상황(context)	조건	영상화면의 진하기(예: 투명도)
1	양측 참가자의 화면입력	A1)스크린을 터치하거나 마우스 등을 통해 자료화면의 일부 또는 전체 선택	영상화면을 빠르게 투명하게 처리(자료화면이 뚜렷하게 보이도록 함)
1	양측 참가자의 화면입력	A2)선택한 자료화면의 선택해제	영상화면을 원래 투명도로 복구
2	마이크를 통해 얻어지는 양측 참가자의 음성	A3)양측 참가자의 발언 또는 대화 연속적으로 이루어지는 시간이 일정 시간보다 긴 경우	영상화면을 점점 불투명하게 처리(영상화면이 뚜렷하게 보이도록 함)
2	마이크를 통해 얻어지는 양측 참가자의 음성	A4)양측 참가자의 침묵이 일정 시간을 초과하는 경우	영상화면을 점점 투명하게 처리(자료화면이 뚜렷하게 보이도록 함)
3	촬영장치를 통해 획득되는 참가자의 움직임	A5)움직임이 기준값보다 큰 경우	영상화면을 점점 불투명하게 처리(영상화면이 뚜렷하게 보이도록 함)
3	촬영장치를 통해 획득되는 참가자의 움직임	A6)움직임이 기준값보다 작은 경우	영상화면을 점점 투명하게 처리(자료화면이 뚜렷하게 보이도록 함)

[표 1]과 같은 테이블은 영상통화장치(400)에 저장될 수 있다. 제어부(440)는 [표 1]의 조건을 이용하여, 참가자의 상황에 따라 영상화면의 진한 정도를 조절하도록 영상 처리부(420)를 제어한다. [표 1]에서 우선순위는, 참가자의 상황이 예를 들어, 조건 A3와 A5가 동시에 발생하는 경우, 보다 높은 우선순위가 부여된 조건(예를 들어, A3) 에 따라 진하기를 조절하도록 하는데 사용된다.

[표 1]을 참조하면, 참가자들(T1, T2)의 스크린(130, 160)에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 이는 조건 A1에 해당함을 제어부(440)는 판단할 수 있다. 따라서, 제어부(440)는 선택된 자료화면이 영상화면보다 진하게 표시되도록 처리하도록 영상 처리부(420)를 제어할 수 있다. 조건 A1의 경우, 참가자들(T1, T2)이 자료화면에 더 집중하고 있는 것으로 판단할 수 있기 때문이다.

영상 처리부(420)는 선택된 자료화면의 전체 또는 자료화면의 일부를 기준 속도보다 빠른 속도로 진하게 표시되도록 처리할 수 있다. 기준 속도는 설정된 진하기를 조절하는 평균 처리 속도, 또는 디폴트 처리 속도일 수 있다. 사용자 인터페이스는 스크린(130, 160)의 터치 스크린부(132) 또는 마우스, 키보드 등의 기기일 수 있다.

이 때, 제어부(440)는 선택적으로(optional), 선택된 자료화면의 일부를 확대하고, 확대된 일부를 영상화면보다 진하게 표시되도록 처리하도록 영상 처리부(420)를 제어할 수 있다.

제어부(440)는, 선택된 자료화면의 전체 또는 일부가 선택해제되면, 이는 조건 A2에 해당하므로, 진하게 표시되도록 처리된 자료화면을 이전 상태로 복구처리하도록 영상 처리부(420)를 제어할 수 있다.

또한, 제어부(440)는 화자(T1)를 포함하는 참가자들(T1, T2)의 발언 또는 대화에 대응하는 음향신호를 출력가능한 신호로 처리하도록 음향 처리부(410)를 제어한다. 제어부(440)는 참가자들(T1, T2)의 발언 또는 대화가 유지되는 시간에 기초하여 자료화면 또는 영상화면의 진한 정도를 조절하도록 영상 처리부(420)를 제어할 수 있다.

예를 들어, 제어부(440)는 참가자들(T1, T2)의 발언 또는 대화가 설정된 시간(t1) 이상 유지되면, 이는 조건 A3에 해당하므로, 영상화면을 자료화면보다 진하게 표시되도록 처리하도록 영상 처리부(420)를 제어한다. 이로써, 화자(T1)의 모습이 보다 진하게 스크린(130)에 표시될 수 있다. 반면, 복수의 참가자들 사이에 침묵이 설정된 시간(t2) 이상 유지되면, 이는 조건 A4에 해당하므로, 제어부(440)는 자료화면을 영상화면보다 진하게 표시되도록 처리하도록 영상 처리부(420)를 제어할 수 있다.

또한, 제어부(440)는 참가자들(T1, T2)의 움직임에 기초하여 자료화면 또는 영상화면의 진한 정도를 제어할 수 있다. 예를 들어, 통신부(430)를 촬영장치(110, 140)를 통해 참가자들(T1, T2)의 동영상을 수신한다.

제어부(440)는 수신된 각 참가자(T1, T2)의 동영상을 분석하여 참가자들(T1, T2) 중 적어도 하나의 움직임을 판단하고, 판단된 움직임이 설정된 기준값보다 크면, 이는 조건 A5에 해당하므로, 영상화면을 자료화면보다 진하게 표시처리하도록 영상 처리부(420)를 제어한다. 반면, 참가자들(T1, T2) 중 적어도 하나의 움직임이 설정된 기준값보다 작으면, 이는 조건 A6에 해당하므로, 제어부(440)는 자료화면을 영상화면보다 진하게 처리하도록 영상 처리부(420)를 제어한다.

상술한 기준 속도, 기준값, 설정된 시간(t1, t2)는 영상통화장치(400)의 설계단계에서 설정된 값으로서, 사용자 또는 관리자에 의해 변경될 수 있다. 또한, 진한 정도를 실시간으로 조절하여 표시하는 모드의 활성화도 사용자 또는 관리자에 의해 선택될 수 있다.

통신부(430)는 상술한 바와 같이 영상 처리부(420)에서 진한 정도가 조절된 자료화면 또는 영상화면을 복수의 참가자들(T2)의 프로젝터(120)로 전송할 수 있다. 또한, 통신부(430)는 제어부(440)의 제어에 의해, 화자(T1) 측의 프로젝터(150)로 상대방 참가자(T2)를 촬영한 영상화면을 전송한다. 이로써, 스크린(130, 160)에는 각 프로젝터(120, 150)에 의해 영상화면과 자료화면이 동시에 오버랩되어 표시될 수 있다. 이 때, 각 스크린(130, 160)에는 참가자들(T1, T2)의 상황에 따라 영상화면이 자료화면보다 진하고 뚜렷하게 표시되거나, 또는, 자료화면이 영상화면보다 진하고 뚜렷하게 실시간으로 변경되어 표시될 수 있다.

도 5는 자료화면이 영상화면보다 뚜렷하게 표시된 경우를 보여주는 도면, 도 6은 영상화면이 자료화면보다 뚜렷하게 표시된 경우를 보여주는 도면이다. 상술한 바와 같이, 영상 처리부(420)는 영상화면 또는 자료화면 중 적어도 하나의 투명도를 조절하거나 또는 표시되는 순서를 조절하여 진한 정도를 조절할 수 있다.

도 7은 복수의 참가자들의 영상 통화를 위한 영상통화방법을 설명하기 위한 흐름도이다.

710단계에서, 제어부(440)는 자료화면과 영상화면이 스크린(130. 160)에 표시되도록 처리한다. 제어부(440)는 촬영장치(110, 140)를 통해 획득되는 상대방의 영상화면을 각각 프로젝터(120, 150)로 전송하며, 동일한 자료화면을 각 프로젝터(120, 150)으로 전송하여 스크린(130, 160)에 표시되도록 할 수 있다.

720단계에서, 제어부(440)는 참가자들(T1, T2)의 상황, 즉, 회의에 대한 집중도를 분석할 수 있다. 720단계에서, 참가자들(T1, T2)의 상황은 자료화면의 선택 여부, 참가자들(T1, T2)의 발언 또는 대화 유지 시간 또는 참가자들(T1, T2)의 움직임 정도, 그리고, [표 1]과 같은 조건 테이블을 기초로 하여 분석될 수 있다.

730단계에서, 화자(T1)를 포함한 참가자들(T1, T2) 중 적어도 하나의 자료화면에 대한 집중도가 큰 것으로 판단되면, 740단계에서, 제어부(440)는 자료화면이 영상화면보다 진하게 표시처리되도록 영상 처리부(420), 통신부(430) 및 프로젝터(120)를 제어할 수 있다.

반면, 730단계에서, 화자(T1)를 포함한 참가자들(T1, T2)의 영상화면에 대한 집중도가 큰 것으로 판단되면, 750단계에서, 제어부(440)는 영상화면이 자료화면보다 진하게 표시처리되도록 영상 처리부(420), 통신부(430) 및 프로젝터(120)를 제어할 수 있다.

도 8은 도 7의 730단계를 보다 자세히 설명하기 위한 흐름도이다.

800단계에서, 스크린(130, 160)에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 810단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 [표 1]의 조건 A1에 해당하는 것으로 판단할 수 있다. 따라서, 제어부(440)는 740단계를 실행한다.

반면, 820단계에서, 800단계에서 선택된 자료화면의 선택이 해제되면, 830단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 조건 A2에 해당하는 것으로 판단할 수 있다.

840단계에서, 제어부(440)는 진하게 표시되도록 처리된 자료화면을 이전 상태로 복구처리하도록 영상 처리부(420)를 제어할 수 있다.

또한, 850단계에서, 제어부(440)는 참가자들(T1, T2)의 발언 또는 대화가 설정된 시간(t1) 이상 지속되면, 860단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 조건 A3에 해당하는 것으로 판단한다. 따라서, 제어부(440)는 750단계를 실행한다.

반면, 850단계에서, 참가자들(T1, T2) 사이에 침묵이 설정된 시간(t2) 이상 유지되면, 870단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 조건 A4에 해당하는 것으로 판단한다. 따라서, 제어부(440)는 740단계를 실행한다.

또한, 880단계에서, 제어부(440)는 참가자들(T1, T2) 중 적어도 하나의 움직임이 설정된 기준값보다 크면, 890단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 조건 A5에 해당하는 것으로 판단한다. 따라서, 제어부(440)는 750단계를 실행한다.

반면, 880단계에서, 제어부(440)는 참가자들(T1, T2) 중 적어도 하나의 움직임이 설정된 기준값보다 작으면, 895단계에서, 제어부(440)는 참가자들(T1, T2)의 상황이 조건 A6에 해당하는 것으로 판단한다. 따라서, 제어부(440)는 740단계를 실행한다.

상술한 영상통화장치 및 영상통화방법의 예와 관련된 기술은 비디오 컨퍼런싱, 텔레프레즌스, Immersive communication 분야에 적용되어 영상과 콘텐츠를 함께 표시하되, 사용자의 상황을 고려하여 영상과 콘텐츠의 진한 정도를 실시간으로 조절하여 표시할 수 있다.

또한, 상술한 영상통화장치 및 영상통화방법은 PC의 비디오 채팅에도 적용할 수 있다. 예를 들어, PC 모니터의 바탕화면 위에 상대방의 비디오를 반투명하게 표시하고, 카메라와 마이크, 마우스 클릭을 통해 입력되는 정보를 통해 상대방의 비디오의 투명도를 조절하여 PC상의 비디오 채팅에서도 동일한 효과를 얻을 수 있다.　　

본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

400 : 영상통화장치 410 : 음향 처리부
420 : 영상 처리부 430 : 통신부
440 : 제어부

Claims

복수의 참가자들의 영상 통화를 위한 영상통화장치에 있어서,
상기 복수의 참가자들이 공유하는 자료화면 및 상기 복수의 참가자들 중 화자와 관련된 영상화면을 생성하는 영상 처리부;
상기 복수의 참가자들의 상황을 분석하고, 분석 결과에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절하도록 상기 영상 처리부를 제어하는 제어부; 및
상기 진한 정도가 조절된 자료화면 또는 영상화면을 상기 복수의 참가자들의 표시패널로 전송하는 통신부
를 포함하는 영상통화장치.
제1항에 있어서,
상기 영상 처리부는 상기 자료화면 또는 상기 영상화면의 투명도를 조절하여 상기 진한 정도를 조절하는 영상통화장치.
제1항에 있어서,
상기 영상 처리부는 상기 자료화면이 표시되는 레이어와 상기 영상화면이 표시되는 레이어의 순서를 변경하여 상기 진한 정도를 조절하는 영상통화장치.
제1항에 있어서,
상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 제어부는 상기 선택된 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제4항에 있어서,
상기 영상 처리부는 상기 선택된 자료화면을 기준 속도보다 빠른 속도로 진하게 처리하는 영상통화장치.
제4항 또는 제5항에 있어서,
상기 선택된 자료화면의 일부가 선택해제되면, 상기 제어부는 상기 진하게 처리된 자료화면을 이전 상태로 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제1항에 있어서,
상기 제어부는, 상기 복수의 참가자들의 발언 또는 대화가 유지되는 시간에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절하도록 상기 영상 처리부를 제어하는 영상통화장치.
제7항에 있어서,
상기 제어부는, 설정된 시간 이상 상기 복수의 참가자들의 발언 또는 대화가 유지되면, 상기 영상화면을 상기 자료화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제7항 또는 제8항에 있어서,
상기 제어부는, 설정된 시간 이상 상기 복수의 참가자들 사이에 침묵이 유지되면, 상기 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제1항에 있어서,
상기 제어부는 상기 복수의 참가자들의 움직임에 기초하여 상기 진한 정도를 제어하는 영상통화장치.
제10항에 있어서,
상기 통신부는 촬영장치를 통해 상기 복수의 참가자들의 동영상을 수신하며, 상기 제어부는 상기 수신된 동영상을 분석하여 상기 복수의 참가자들 중 적어도 하나의 움직임이 기준값보다 크면, 상기 영상화면을 상기 자료화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제10항에 있어서,
상기 제어부는 상기 복수의 참가자들 중 적어도 하나의 움직임이 상기 기준값보다 작으면, 상기 자료화면을 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
제1항에 있어서,
상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 제어부는 상기 선택된 자료화면의 일부를 확대하고, 상기 확대된 일부를 상기 영상화면보다 진하게 처리하도록 상기 영상 처리부를 제어하는 영상통화장치.
복수의 참가자들의 영상 통화를 위한 영상통화방법에 있어서,
상기 복수의 참가자들의 상황을 분석하고, 분석 결과에 기초하여 상기 복수의 참가자들이 공유하는 자료화면 또는 상기 복수의 참가자들 중 화자와 관련된 영상화면의 진한 정도를 조절하는 단계; 및
상기 진한 정도가 조절된 자료화면 또는 영상화면을 생성하여 상기 복수의 참가자들의 표시패널로 전송하는 단계
를 포함하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는, 상기 자료화면 또는 상기 영상화면의 투명도를 조절하여 상기 진한 정도를 조절하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는, 상기 자료화면이 표시되는 레이어와 상기 영상화면이 표시되는 레이어의 순서를 변경하여 상기 진한 정도를 조절하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는,
상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 선택된 자료화면을 상기 영상화면보다 진하게 조절하는 영상통화방법.
제17항에 있어서,
상기 조절하는 단계는,
상기 선택된 자료화면의 일부가 선택해제되면, 상기 진하게 처리된 자료화면을 이전 상태의 진하기로 조절하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는,
상기 복수의 참가자들의 발언 또는 대화가 유지되는 시간에 기초하여 상기 자료화면 또는 상기 영상화면의 진한 정도를 조절하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는,
상기 복수의 참가자들의 움직임에 기초하여 상기 진한 정도를 조절하는 영상통화방법.
제14항에 있어서,
상기 조절하는 단계는,
상기 복수의 참가자들의 표시패널에 표시된 자료화면 중 일부가 사용자 인터페이스에 의해 선택되면, 상기 선택된 자료화면의 일부를 확대하고, 상기 확대된 일부를 상기 영상화면보다 진하게 조절하는 영상통화방법.
제14항 내지 제21항 중 어느 한 항의 방법을 컴퓨터에서 실행하기 위한 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체.