SlideShare ist ein Scribd-Unternehmen logo
1 von 107
Downloaden Sie, um offline zu lesen
1/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<미래-상상, 현실이 되다>
Apple이 3년내 출시할 제품/서비스
차원용 소장/영어교육학/MBA/공학박사/미
래학자 (주)아스팩미래기술경영연구소
biblematrix@gmail.com, 010-5273-5763
2/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Hurdles of Current AR/VRI
Cloud->Edge AI(As Is) : A14 Bionic Chip(’20)II
Contents
Apple의 3D Avatar/Model(To Be)IV
3D UI/UX의 AR/VR for Mac/TV(To Be)V
3D UI/UX의 AR/VR for Car/EV/AV(To Be)VI
3D GUI/GUX의 OS/App(To Be)VII
3D GUI/GUX의 브라우저(Safari)(To Be)VIII
Cloud <-> Edge Services(To Be)VIV
Neural Engine(‘17) - A14 BC(‘20)III
ConclusionX
3/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Post Covid 19…
* Corona Blue(우울, 불안감, 외로움, 고립감)
* Untact
* Ontact(대리체험+타인과 공감) = Online + Contact
* 랜선투어 = GuideLive 의한 여행체험
* 홈트(Home+Training) = 스마트 홈트, LikeFit = 스마트폰+AI 운동선생님
* Amaze VR = 콘서트를 실내에서 구현하는 VR Immersive(몰입) Concert
* Azarlive = 1:1 무작위 연결 영상 메신저
* Onepeloton = Home Cycling(자전거 폐달 운동)+기타 운동
* Netflixparty = 친구들과 온라인으로 드라마-영화를 보면서 채팅
* Houseparty = 최대 8명이 즐길 수 있는 그룹 영상 통화
* Facebook = messenger rooms = 50명 화상 통화
* 재택, 원격, 화상회의 = Zoom, Google’s Meet, MS’s Teams, Facebook’s
messenger rooms, Apple’s facetime, Cisco’s Webex, Amazon’s Chime, Slack,
-> 궁극적으로 3D OS 베이스의 3D Avatar + 3D AR/VR로 가야 Sustainable 가능
I. Hurdles of Current AR/VR
4/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
기술내용 As Is To Be 핵심기술 비고
해상도 2k 4k 이상
고해상 패널, 고속영상
처리
스미트폰도 현재는 2k
시야각
70도(상하)-
100도(좌우)
120도(상하)-
160도(좌우)
렌즈/주변영역 처리 등
광학계
수평선 중앙에만 집중,
피로, 어지러움, 구토
무게 300 그램 100 그램 이하 See-Through 디스플레이
인간 뇌의 무게=1,300
그램, 지금의 HMD 는
거의 90% 이상이
See-Closed
체험형태
시각-
청각
중심
오감 융합/자극/
공감
증강-가상 촉/후/미각
생성
인간은 오감으로 인식+
공감+육감
인지부조화
인체부조화
어지럼증,
구토
부조화 해소
고속 및 고감도 트레킹
센서
Tunnel Effect or
Box Effect = Motion
Sickness, 피로, 어지러
움 -> 30분 이상 볼 수
없음
출처: 차원용, “3D OS/App/Browser 베이스의 3D AR/VR 등장 예고”(‘19.10.14), 한국정보화진흥원
Hurdles of current AR/VR devicesI. Hurdles of Current AR/VR
5/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Like Apple’s A11 Bionic(‘17), We do more..II. Cloud->Edge AI(As Is)
애플 A11 바이오닉(Apple A11 Bionic)는 애플이 설계한 64비트 시
스템 온 칩(SoC)이다. 아이폰 8, 아이폰 8 플러스, 아이폰X에는
TSMC 10나노 공정으로 제조된 A11 바이오닉 프로세서가 탑재되었
다.
애플의 최신 프로세서인 A11 바이오닉에는 뉴럴 엔진이 적용된 AI
칩셋이 장착됐다. 뉴럴 엔진은 초고속 프로세싱을 돕는 식스 코어
(Six Core) CPU와 쓰리 코어(3 Core) GPU로 설계되어 있으며, 실시
간 프로세싱을 위해 초당 최대 6천억 번의 작업을 수행한다.
이 엔진은 애플이 새롭게 선보이는 얼굴인식 기능인 페이스 ID를 사
용할 수 있게 돕고 추후 제작되는 증강현실 앱을 원활하게 쓸 수 있
도록 한다.
http://appleinsider.com/articles/17/09/23/inside-iphone-8-apples-a11-bionic-introduces-
5-new-custom-silicon-engines
https://ko.wikipedia.org/wiki/%EC%95%A0%ED%94%8C_A11
6/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Like Apple’s A14 Bionic(‘20), We do more..II. Cloud->Edge AI(As Is)
https://www.apple.com/iphone-xs/, https://www.apple.com/iphone-xs/a12-bionic/
The A11(’17)-A12(’18)-A13(‘19)-A14(‘20) Bionic, with our next-generation
Neural Engine, delivers incredible performance. It uses real-time machine learning
to transform the way you experience face ID, FaceTime with 32, photos, gaming,
augmented reality, and more.
4-core
GPUs
2-core
CPUs
4-core
CPUs
than A11
than A11
than A11
HDR([High Dynamic Range) - 디지털 영상에서 밝은 곳은 더 밝게,
어두운 곳은 더 어둡게 만들어 사람이 실제 눈으로 보는 것에 가깝
게 밝기의 범위(Dynamic Range)를 확장시키는 기술....
Working
together^
7/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
FR + MRIII. Neural Engine(‘17) - A14 BC(‘20)
<그림> Apple의 공개된 출원서(LOCKING AND UNLOCKING A MOBILE DEVICE USING FACIAL
RECOGNITION) 상의 Fig.1 & 2(20170076077, 16 Mar 2017). Image: USPTO. 2016년에 Apple은
이모티언트(Emotient)와 리얼페이스(RealFace)라는 두 개 기업을 인수. 지문인식과 함께 얼굴
인식이 차세대 대안으로 떠오를 수 있다는 것을 간파한 것. 특히 청구항 24번을 보면 하나 이상
의 프로세서가 등장하고 하나 이상의 센서가 등장하며 하나 이상의 이미지가 나타나지 않을 때
자동으로 잠근다고 기술하고 있는데, 이는 센서 융합 알고리즘.
8/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
FR + PR + MR + PR + 뉴럴 네트워크
<그림> Apple이 공개한 출원서(Presence Sensing) 상의 Fig.6(20170193282, 6 Jul 2017).
Image: USPTO. 특히 Apple은 카메라와 근접 센서 등 센서 융합(Sensor fusion) 알고리즘과 감
지(검출) 로직(detection logic)은 뉴럴 네트워크를 사용하는데, 벡터 머신(vector machines)과
알고리즘 베이스의 확률적 기계 학습을 지원하여 사람이 출현했는지를 결정하는데, 컴퓨터와
사람의 출현 거리인 한계거리(Threshold distance)를 정하여 이 한계거리 내에서 센서들이 인
식이 되면 컴퓨터를 자동적으로 켤 수 있다고 기술.
III. Neural Engine(‘17) - A14 BC(‘20)
9/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
트루뎁스(TrueDepth) 적외선 카메라
<그림> Apple(PrimeSense) 특허상(Scanning depth engine)의 Fig.1(20180120931, 3 May
2018). Image: USPTO. 장면(얼굴, 몸, 손, 사물, 배경 등)의 수많은 점들(spots)로 향하는 적외선
빛의 일련의 파동을 가진 빔을 방출하는 송신기(transmitter)가 있고, 그 다음 반사되어 오는 빛
을 수신하는 수신기(receiver)가 있음. 그 다음 프로세서가 수신기에서 출력한 데이터를 프로세
싱하여 장면을 3차원 맵으로 그려냄. 22가 바로 스캐닝 뎁스 엔진(Scanning Depth Engine). Z-
축은 깊이(3차원)를 X와 Y축은 XY 좌표(2차원).
Apple의 Face ID의 핵심은 트루뎁
스(TrueDepth) 적외선 카메라와
도트 프로젝터(Dot Projector)인데,
이는 Apple이 2013년 11월 17일
에 이스라엘 기업인 프라임센스
(PrimeSense)를 3억4천500만 달
러에 인수한 결과임.
III. Neural Engine(‘17) - A14 BC(‘20)
10/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
3차원 맵을 위한 도트 프로젝터(Dot Projector)
<그림> Apple(PrimeSense) 특허상(Scanning projectors and image capture modules for 3D mapping)
의 Fig.1(9,098,931, 4 Aug 2015). Image: USPTO. 20은 3D Mapping 시스템, 22는 3D Image Scanner,
30은 an illumination module, 32는 방사선 소스(radiation source)로 적외선 빔, 34는 스캐너로 빔을 받아
50의 스캐닝 미러로 투영. 35는 광학 조명(Illumination Optics)으로 빔을 36의 각도로 투영시켜 28 손 영
역의 스폿 패턴(a pattern of spots)을 생성. 38은 이미징 모듈로 28의 손에 투영된 스폿 패턴의 이미지들
을 42의 광학 객체(Objective Optics)를 통해 수집하고 디코딩. 40은 이미지 센서, 41은 2차원 매트릭스(X,
Y). 최종적으로 46의 프로세스가 이를 이용하여 3차원 맵 혹은 Depth map(XYZ)을 생성.
III. Neural Engine(‘17) - A14 BC(‘20)
11/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
3차원 맵을 위한 도트 프로젝터(Dot Projector)
<그림> Apple(PrimeSense) 특허상(Scanning projectors and image capture modules for 3D
mapping)의 Fig.1(9,098,931, 4 Aug 2015). Image: USPTO. 22는 매핑 디바이스(Mapping device)
혹은 3D 이미지 스캐너(3D Image Scanner), 92는 게이밍 콘솔(Gaming Console) 혹은 노트북
(컴퓨터). 94와 96은 게임 참여자. 22의 3D 이미지 스캐너는 94 사람과 98 배경(예컨대 벽 등)
의 다양한 점들의 100의 패턴들을 투영해, 장면의 참여자와 배경 사물들을 3D 맵(XYZ)으로 생
성.
III. Neural Engine(‘17) - A14 BC(‘20)
12/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘17년 6월 WWDC - A11 Bionic Neural Engine
<그림> 2017년 6월 Apple이 WWDC에서 공개한 A11 Bionic Neural Engine & Neural
Networks. Image: Apple’s WWDC 2017 Keynote - https://www.youtube.com/watch?v=oaqHdULqet0
2017년 9월에 출시한 아이폰 8•아이폰 8 플러스•아이폰 X
에는 A11 바이오닉이 탑재. 이는 애플이 설계한 64비트 시
스템온칩(SoC)의 ASIC로 대만 TSMC가 10나노 공정으로
제조. A11에는 머신러닝, 추론모델(inference model), 이
미지 인식과 모션 인식 등의 알고리즘인 뉴럴 엔진(Neural
Engine)이 적용. 뉴럴 엔진은 초고속 프로세싱을 돕는 듀
얼 코어(Dual Core) 설계로 되어 있으며, 실시간 프로세싱
을 위해 초당 최대 6천억 번의 작업(600 billion operations
per second)을 수행.
III. Neural Engine(‘17) - A14 BC(‘20)
13/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
EPO에 등록한 상표 - 뉴럴엔진(Neural Engine)
<그림> 유럽특허청에 등록한 상표 - 뉴럴엔진(Neural Engine). Image: Trademarkia –
Apple’s Neural Engine. https://www.trademarkia.com/ctm/neural-engine-017538513.htm
III. Neural Engine(‘17) - A14 BC(‘20)
14/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘17년 9월 - A11 Bionic Neural Engine
<그림> Apple의 아이폰 8/8 플러스/X에 탑재된 A11 Bionic Chip을 가능케 하는 구성 요소들. 적
외선 이미지를 인식해 점(도트 혹은 스폿) 패턴으로 읽어 이 데이터를 A11 Bionic Chip으로 보내
얼굴을 매치시키는 (1) 트루뎁스 적외선 카메라. (2) 어두운 곳에서도 얼굴을 인식하는 적외선 대
량 조명 장치. 그리고 (3) 얼굴의 3D 맵을 구축하기 위해 30,000 개 이상의 점(Dots)을 투영하는
도트 프로젝터(Dot Projector). Image: Apple https://www.apple.com/iphone-x/#face-id
III. Neural Engine(‘17) - A14 BC(‘20)
15/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 9월 - A12 Bionic Neural Engine
https://www.apple.com/iphone-xs/face-id/
The technology behind simplicity.
The innovative technologies in the
TrueDepth camera system work
together in real time to recognize
you in an instant.
III. Neural Engine(‘17) - A14 BC(‘20)
16/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 아이폰 8/8 플러스/X에 탑재된 A11 Bionic Chip을 가능케 하는 하드웨어 구성
요소들. 왼쪽부터 트루뎁스 적외선 카메라, 근접 센서, 적외선 대량 조명 장치, 주위(부변) 빛 센
서, 스피커, 마이크로폰, 700메가 픽셀 카메라, 도트 프로젝터. Image: Apple Insider(16 Sep
2017). http://www.patentlyapple.com/patently-apple/2017/09/apples-face-id-has-been-in-the-work-for-many-years-and-its-
debut-fulfills-many-in-depth-camera-patents.html, https://www.apple.com/iphone-x/#truedepth-camera
‘17년 9월 - A11 Bionic Neural EngineIII. Neural Engine(‘17) - A14 BC(‘20)
17/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 9월 - A12 Bionic Neural Engine
https://www.apple.com/apple-events/september-2018/
III. Neural Engine(‘17) - A14 BC(‘20)
18/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> 본인의 얼굴을 등록할 때 트루뎁스 적외선 카메라는 적외선 이미지를 인식해 점 패턴(dot
pattern)으로 읽어 이 데이터를 A11 Bionic Chip으로 보냄. 이 때 적외선 대량 조명 장치는 어두운 곳에
서도 얼굴의 이미지를 잘 인식하게 함. 그리고 도트 프로젝터는 이렇게 기 등록된 얼굴의 이미지들을
리얼 타임으로 매치 혹은 매핑시키기 위해 30,000 개 이상의 점(Dots)을 투영하고 인식 분석하여 페이
스 ID(잠금과 해제)의 기능을 하는 것임. Image: Apple. https://www.apple.com/iphone-x/#face-id
‘17년 9월 - Face IDIII. Neural Engine(‘17) - A14 BC(‘20)
19/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> 애플 iPhone X의 3D 애니모지(Animoji) 기능(12 Sep 2017). Image: Apple iPhone X –
https://www.apple.com/iphone-x/, https://www.apple.com/iphone-x/#truedepth-camera
동시에 도트 프로젝터는 50개 이상의 각기 다른 얼굴 근육의 움직임을 분석하여 사용자의 세밀한 표정
을 16개의 애니모티콘에 투영해 자신의 얼굴 표정을 기반으로 맞춤형 3D 이모티콘을 만들 수 있음. 50
개 얼굴 근육 움직임을 인식해 팬더곰, 여우, 외계인 등 캐릭터 얼굴에 그대로 반영. 이는 향후 새로운
형태(3D Avatar 등)의 커뮤니케이션 수단으로 활용될 것으로 기대되고 있으며, 사용자들은 수정/편집/
생성을 통해 다양한 3D 애니모지를 만들어, 1인 가구 시대의 생산성을 높이기 위해 동시에 5개 온라인
회의를 하는 경우, 내 개성과 목소리와 감정을 지닌 맞춤식 3D 애니모지나 3D 아바타를 보낼 수도 있
을 것임(이를 Face Meesage라 함).
‘17년 9월 - Animoji
Apple via Youtube - iPhone X — Animoji Yourself — Apple(27 Nov 2017).
https://www.youtube.com/watch?v=Kkq8a6AV3HM
III. Neural Engine(‘17) - A14 BC(‘20)
20/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 7월 - Animoji -> Memoji
https://www.apple.com/leadership/
III. Neural Engine(‘17) - A14 BC(‘20)
21/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 7월 - Animoji -> Memoji
서울신문-애플의 백인·남성우월주의?...경영진 ‘미모지’ 때문에 곤혹(18 Jul 2018)
http://seoul.co.kr/news/newsView.php?id=20180718500060
III. Neural Engine(‘17) - A14 BC(‘20)
22/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 7월 - Animoji -> Memoji
https://www.apple.com/leadership/
III. Neural Engine(‘17) - A14 BC(‘20)
23/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 9월 - Face ID & Memoji
https://www.apple.com/iphone-xs/a12-bionic/
III. Neural Engine(‘17) - A14 BC(‘20)
24/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘18년 가을 - FaceTime with 32
https://www.apple.com/ios/ios-12/
III. Neural Engine(‘17) - A14 BC(‘20)
25/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Bloom Berg - How Apple Built a Chip Powerhouse to Threaten Qualcomm
and Intel(29 Jan 2018)
https://www.bloomberg.com/graphics/2018-apple-custom-chips/
A11(‘17) Bionic Chip이 탄생하기 전까지의 여정III. Neural Engine(‘17) - A14 BC(‘20)
26/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
‘20.06.22 – Apple Silicon for Mac – PC까지 통합
‘20.06.22일 온라인으로 중계된 애플의 연례
개발자대회(WWDC)에서 ARM기반의 애플
이 설계한 ‘애플 실리콘’칩을 사용해 올말부
터 2년 내에 맥(Mac)을 만들겠다고 발표
애플이 WWDC에
서 소개한, Apple
Silicon과 애플 자
체설계 칩이 수행
하는 다양한 기능
들. 폰-피시 구조
같아져 효율 기대
(Cloud<->Edge).
Credit: Apple
III. Neural Engine(‘17) - A14 BC(‘20)
27/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Insights
○ 구글이 알파고(AlphaGo)라는 AI 컴퓨터 프로그램 덕분에 AI 기술의 선두주자로 알려져 있지만, 구글
의 단점은 클라우드 베이스의 AI이다(이를 Edge->Cloud AI라 함). 반면 Apple은 on-device의 AI 제품
을 개발하고 실제 제품에 적용하고 있다는 점에서 구글을 능가하고 있다. 왜냐하면 이제 블록체인 개념
의 Cloud->Edge가 도래하고 있기 때문이다.
○ 2017년에 Apple이 자체 개발하고 디자인한 ‘Neural Engine + 최초로 Apple이 디자인한 GPU(그 전
까지는 Imagination Technologies가 디자인) + M11 + Face ID + Touch ID를 통합한 A11 Bionic Chip
을 iPhone X에 탑재해 런칭했다. (1) 많은 기업들이 AI칩에 도전하고 있지만 이는 업계 최초로 Apple이
AI칩 분야의 선두주자임을 증명한 것이다. (2) 그 결과 칩의 주요 발전소(powerhouse)가 된 Apple은
어느 날인가 퀄컴(Qualcomm)과 인텔(Intel)과 삼성(Samsung)을 위협할 수도 있을 것이다.
○ Apple은 HAS(Hardware+AI+Software)라는 개념의 독자적으로 디자인하고 통합된 하드웨어와 독
자적인 뉴럴엔진의 A11 Bionic Chip과 독자적인 OS 플랫폼을 구축한 유일한 기업이다. 따라서 블록체
인의 To Be 모델인 퍼블릭(Public)과 프라이빗(Private)이 융합된 하이브리드(Hybrid) 블록체인을 도입
하고 서비스할 수 있는 유일한 기업이다. 그러므로 향후 Cloud<->Edge를 선도할 수 있을 것으로 전망
된다.
○ Apple과 Apple이 인수한 프라임센스의 특허를 분석한 결과, 앞으로 3년 이내에 Apple은 트루뎁스
카메라 기술과 도트 프로젝트 기술을 활용해 (1) 3D 애니모지(Animoji)를 18년 나만의 Memoji로 업데
이트하고 최종 3D Avatar/Model로 업그레이드하여 출시할 것으로 예측되고, (2) 다양한 콘텐츠(게임,
영화, 교육, IoT, IIoT, IoB 등)와 서비스(Mac, TV, 전기차(EV)/자율차(AV) 등) 중심의 3D UI/UX의
AR/VR로 확대 출시 될 것으로 예측되며, (3) Mac OS/iOS가 3D GUI의 OS/App/Safari로 업그레이드
될 것으로 예측된다. 이를 위해 다음부터는 관련 특허분석을 시도하여 증빙해보기로 한다.
III. Neural Engine(‘17) - A14 BC(‘20)
28/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
IV. Apple의 3D Avatar/Model(To Be) Avatars Reflecting User States
<그림> Apple 특허상(Avatars Reflecting User States)의 Fig.1(20170357417, 14 Dec 2017).
Image: USPTO.
29/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatars Reflecting User States)의 Fig.6A(20170357417, 14 Dec 2017).
Image: USPTO.
Avatars Reflecting User StatesIV. Apple의 3D Avatar/Model(To Be)
30/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatars Reflecting User States)의 Fig.6B(20170357417, 14 Dec 2017). Image:
USPTO. Curation. 648은 요소 픽커(Element picker)인데 특별한 요소들(Particular elements)인 face,
skin tone, eyes, nose, hair, shirt, hat, background, 기타)을 제공. 654는 조정 슬라이더(Adjusting
slider)로 656의 지시(indicator)를 오른쪽으로 밀면 확대되고, 왼쪽으로 밀면 축소. 674는 두 번째 요소
픽커로 액세서리/옷/모자/기타 주제를 입힐 수 있음. 또한 사용자는 Avatar Server에 자신의 사진을 업
로드하고 Apple의 Photo Booth의 Edit 기능을 통해 Avatar를 생성하고 큐레이션 할 수도 있음.
Avatars Reflecting User StatesIV. Apple의 3D Avatar/Model(To Be)
31/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar editing environment)의 Fig.1A/1D(9,576,400, 21 Feb 2017). Image:
USPTO. Fig.1A에서 106은 디폴트로 뜨는 블랭크 얼굴(blank face)의 아바타 혹은 사용자가 사전에 찍은
사진. 110의 카테고리 픽커(category picker)로부터 112의 ‘Eyes’ 카테고리를 선택하고 116의 요소 픽
커에는 120에 사용할 다양한 눈의 요소들이 있어 큐레이션. 114는 칼러 픽커(Color picker)로 색을 골
라 큐레이션. 요소들은 2D이나 3D Model로 렌더링할 수 있음.
Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
32/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar editing environment)의 Fig.2A/2B(9,576,400, 21 Feb 2017). Image:
USPTO. Fig.2A는 116의 요소 픽커를 터치하면 200처럼 요소 픽커가 9개의 그리드(gird)로 나타남. 이
경우 사용자는 110의 카테고리 픽커에서 112의 ‘Hat’ 카테고리를 선택한 경우임. 그리드 셀들은 3차원
효과를 내기 위해 빛과 그림자 등의 3차원 모델의 스냅샷을 포함할 수 있음. Fig.2B는 114의 칼러 픽커
를 터치하면 9개의 기본 색들이 그리드로 204와 같이 나타남. 사용자가 ‘Black’을 선택하면, Fig.2A의
200의 그리드에는 서로 다른 검은색의 모자들이 나타나 선택하여 큐레이션함.
Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
33/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar editing environment)의 Fig.6A/6B(9,576,400, 21 Feb 2017). Image:
USPTO. Animation도 할 수 있음.
Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
34/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Personalizing colors of user interfaces)의 Fig.2C/2G(9,542,038, 21 Feb 2017).
Image: USPTO. 앞의 특허가 칼러 픽커(Color picker)를 사용하여 원하는 색을 선택하여 아바타를 다양
하게 큐레이션했다면, 본 특허는 색을 칠할 수 있는 칼러 스킴(Color schemes)을 제공하는 사용자 인터
페이스를 제공.
Personalizing colors of user interfacesIV. Apple의 3D Avatar/Model(To Be)
35/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.6C~6D(20180091732, 29 Mar 2018).
iPhone에서 프로파일 사진, 즉 아바타를 만드는 방법. 모노그램을 사용 할 수도 있고 사진을 사용할 수
도 있음. 기존에 사진이 없다면 트루뎁스 카메라를 이용해 새로 찍을 수도 있음. Image: USPTO
Avatar creation and editing in iPhone
본 특허 출원서와 똑같은 날에 가출
원하고(62/399,241) 똑같은 날에 출
원하고(15/712683), 똑같은 날에 출
원서가 공개된 ‘아바타 데이터의 전
송 (Transmission of avatar data,
20180089880, 29 Mar 2018)’이라는
공개된 출원서를 보면 iPhone에서의
아바타의 데이터 전송을 다루고 있
다는 점에서 2018~2019년에 출시
될 것으로 예측됨.
IV. Apple의 3D Avatar/Model(To Be)
36/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.6E~6F(20180091732, 29 Mar 2018). iPhone
에서 제공되는 인터페이스를 통해 사진을 View Finder 내의 공간에 잘 위치하도록 조정함. 또는 트루뎁
스 카메라와 연결하는 인터페이스를 제공하여 밝은 곳의 원 안에 잘 맞추도록 함. 인터페이스는 머리를
좌우로 돌려 옆모습을 아바타로 사용하기도 함. Image: USPTO
Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
37/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.6K~6L(20180091732, 29 Mar 2018). iPhone
에서 제공되는 인터페이스를 통해 얼굴의 스킨 톤(skin-tone)을 조정함. 그 다음 고객화 머리, 옷, 기타
악세서리, 기타 기능을 제공하는 인터페이스를 통해 아바타를 큐레이션 함. Image: USPTO
Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
38/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.9C~9D(20180091732, 29 Mar 2018). 예를
들어 iPhone에서 제공되는 인터페이스를 통해 머리를 단장하는 모습임. Image: USPTO
Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
39/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.9G~9H(20180091732, 29 Mar 2018). 큐레
이션이 다 끝나면 ‘당신의 아바타가 준비되었다’는 메시지가 뜨고 혹은 Siri가 대답해주고 ‘당신의 아바
타를 친구들이 보게 될 것’이라는 메시지와 함께 언제나 아바타 앱을 통해 아바타를 수정할 수 있다는
메시지도 고 함께 보여줌. Image: USPTO
Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
40/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Avatar creation and editing)의 Fig.9G~9H(20180091732, 29 Mar 2018). 실제
iPhone의 iMessage를 이용해 친구와 메시지를 주고받는 모습임. 아래에는 감정이나 문맥을 인식해 그
에 해당하는 이모티콘, 애니모지, 다양한 아바타, 애니메이션, 장면의 그림이 나타나고 본인이 클릭하여
문자와 같이 보낼 수도 있고, 문자를 보내면 인공지능이 분석해 해당 그림을 자동으로 선택해 보낼 수도
있음. Image: USPTO
Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
41/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Three-dimensional user interface)의 Fig.1(8,166,421, 24 Apr
2012). Image: USPTO. 3D 센싱 디바이스(24)에는 트루뎁스 적외선 카메라가 있어 스폿(spot) 혹은 도
트(dots) 패턴을 읽어 냄. 그러면 컴퓨터(26)가 삼각측정법으로 사용자 몸 표면의 포인트들의 3D 좌표
를 프로세싱하여 3D map으로 생성하고 이를 제스처 3D UI로 사용하는 것임.
V. 3D UI/UX의 AR/VR for Mac/TV(To Be) Three-dimensional user interface
Apple의 Face ID의 핵심은 트루뎁
스(TrueDepth) 적외선 카메라와
도트 프로젝터(Dot Projector)인데,
이는 Apple이 2013년 11월 17일
에 이스라엘 기업인 프라임센스
(PrimeSense)를 3억4천500만 달
러에 인수한 결과임.
42/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Three-dimensional user interface)의 Fig.3(8,166,421, 24 Apr
2012). Image: USPTO.
Three-dimensional user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
43/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.1(9,377,865, 28 Jun
2016). Image: USPTO. 24는 3D 센싱 디바이스로, 사용자의 손이나(30) 머리(22)나 눈동자의 움직임을
포함한 장면을 감지하고 이미즈를 수집, 그러면 컴퓨터(26)가 수집한 이미지들을 프로세싱하여 3D
Map으로 생성하고 이를 줌인(확대)-줌아웃(축소) 제스처로 활용하여(Zoom Grid Interface), 28의 디스
플레이에 나타난 커서(42)를 움직여 38의 객체들을 제어.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
44/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.2(9,377,865, 28 Jun
2016). Image: USPTO. 각각의 Zoom Grid 표면은 몇 개의 상호작용 객체들인 38A~38N을 구성. 사용자
는 제스처 인터페이스(좌우로 손을 움직여)로 목록을 횡단하여(traverse) 객체들을 악세스하여 원하는
객체를 손으로 잡는 Grab Gesture로 선택.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
45/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.4A~4D(9,377,865, 28
Jun 2016). Image: USPTO. 원하는 객체를 손으로 잡는 Grab Gesture로 선택.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
46/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun
2016). Image: USPTO. 파일 폴더 제어. 사용자가 줌-인, 즉 잡아당기는 제스처(Pull gesture)를 하면 6개
의 파일들이 쭉 나타나고 Grab gesture로 하나를 선택해 파일을 불러낼 수 있음. 반대로 줌-아웃, 즉 미
는 제스쳐(Push gesture)를 하면 6개의 파일들이 포개져 왼쪽의 38파일로 들어감.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
47/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun
2016). Image: USPTO. Zoom Grid로 미디어 플레이어를 제어하는 그림. 38L의 ‘Born to be wild’를 재생
하면서 사용자는 Pull gesture로 90의 Zoom Grid인 92(Pause), 94(Stop), 96(Play), 98(Seek)을 제어.
100의 볼륨을 제어할 수 있는데, 102의 볼륨 슬라이더 아이콘을 손동작인 횡단, 즉 X-축을 따라 좌우로
손짓하여 제어.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
48/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun
2016). Image: USPTO. 3차원 줌(Zoom)-베이스의 UI로 키보드(120)를 제어. 사용자가 손을 X-Y 축으로
움직이면(Find gesture), 128의 키를 하이라이트로 띄워주고, X-Y축으로 손을 움직여 커서를 42의 ‘C’에
위치시키면 ‘C’의 사이즈가 커지고 손으로 잡는 Grab gesture로 ‘C’를 입력. 손을 X-Y 축에서 Z-축으로
손을 뒤로 당겨(pull hand back) Z-축 상의 키를 찾음. 반대로 Push gesture를 하면 ‘undo’가 됨.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
49/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.9A(9,836,201, 5 Dec
2017). Image: USPTO. Fig.1을 보면 앞서 소개한 특허(9,377,865)와 같은데, 단 다른 것은 42의 커서가
빠져있다는 것으로 보다 혁신적인 특허임.
Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
50/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의
Fig.1(20180059925, 1 Mar 2018). Image: USPTO.
Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
51/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의
Fig.2(20180059925, 1 Mar 2018). Image: USPTO. 시계 방향 -> 줌인(확대), 시계반대 방향-> 축소
Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
52/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의
Fig.3(20180059925, 1 Mar 2018). Image: USPTO. 수평 방향의 커서 제어. 손을 왼쪽-오른쪽-위-아래 움
직여 커서 제어
Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
53/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의
Fig.4(20180059925, 1 Mar 2018). Image: USPTO. 62의 심볼인 아크(arc, 아치)가 T9사(t9.com)의 T9
Text Input으로 나타난 경우인데, 아크 형태로 손을 움직이다가 76의 버튼을 손으로 잡는 제스처(Grab
gesture)로 선택. 124의 구면좌표계(spherical coordination system)의 원리를 이용해 122의 영역으로
움직인다는 것을 사전에 입력하고 감지.
Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
54/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.1(9,454,225, 27 Sep 2016).
Image: USPTO. 38의 동공(pupil), 39의 홍채(iris), 41의 각막(cornea)까지 24의 센싱 디바이스가 감지해
최종적으로 눈의 응시 방향을 감지해 3차원 맵으로 생성하고 이를 3차원 UI로 사용해 36의 객체들을
눈으로 제어.
Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
55/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.4(9,454,225, 27 Sep 2016).
Image: USPTO. 눈으로 숫자 키판(36A)을 이용해 패스워드를 입력. 92는 시선(line of sight)이고 94는 시
야각이며 36B는 시작 버튼. 시선을 숫자 키판에 집중하여 패스워드를 입력한 후 그 다음 시작 버튼을 응
시해 컴퓨터를 시작. 만약 정해진 시간에 눈의 움직임이 없으면 절전 모드로 전환.
Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
56/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.6A~6B(9,454,225, 27 Sep
2016). Image: USPTO.
Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
57/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Apple – Content Abstraction & UX for TV
Apple - Content abstraction presentation along a multidimensional path(8,296,677, 23 Oct 2012)
330 abstraction 은 310 메 뉴 의
Movie 의 요 약 임 . 또 는 330 은
Foreground(전경)가 되고, 332-
336 은 그 콘 텐 츠 의
Background(배경)가 될 수 있음.
이때 Foreground와 Background
는 multidimensional path 350
을 구성하게 되는데, 336은 그 콘
텐츠의 마지막 장면이 됨. 또는
330은 하이라이트된 Movie 310
의 Abstraction이 될 수 도 있음.
V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
58/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Apple – New 8 Navigational Bar for Apple TV
Apple - Video/Music User Interface(20110041060, 17 Feb 2011). New 8
Navigational Bar for Apple TV
현재보고 있는 iTV의 내용을 Navi Bar를
통하여 서치/공유하는 앱으로 보다 많은
Fun을 주기 위한 것임. Pause를 누르면
Navi Bar 가 나 타 남 . FIG. 2 의 222 는
Previous or Next scene, 223은 영화의
촬영 장소를 보여줌, 224는 영화의 오디오
트랙이나 노래를, 225는 SNS를 통해 Text
를 보내기(e.g, hey, what a touchdown -
did you see that!), 226은 서치, 227은 영
화를 촬영한 감독이나 배우, 228과 229는
최종 등급 심사에서 커트된 장면을 보여줌.
V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
59/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
AT&T - 제스쳐로 TV 제어
AT&T의 제스쳐로 TV 제어. AT&T - Electronic Device Control Based on
Gestures(20120124516, 17 May 2012 <- 12 Nov 2010) via USPTO.
2012년에 AT&T는 프라임센서
기술을 바탕으로 '제스쳐 베이
스 의 전 자 기 기 기 콘 트 롤
(20120124516)’이라는 특허를
등록했다. 이는 제스쳐 베이스
의 콘트롤러(controller)가 제
스쳐를 인식하는 카메라로부터
3D 이미지를 받아 TV 화면에
메뉴, 볼륨, 채널 등을 보내 나
타내고 이를 제스쳐로 제어하
는 것에 관한 기술.
V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
60/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Automatic Configuration of Self-Configurable Environments)의 Fig.2
& 3(20130197674, 1 Aug 2013). Image: USPTO.
VI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
Automatic Configuration of Self-
Configurable Environments
61/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의
Fig.1(20180079427, 22 Mar 2018). Image: USPTO. 승객이나 운전자가 응시와 제스처로 자율차의 경로
를 변경(trajectory changes)
Gesture Based Control of
Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
62/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의
Fig.2(20180079427, 22 Mar 2018). Image: USPTO. 자율차 환경을 구성하는 요소들. Interaction
management device(IMD)
Gesture Based Control of
Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
63/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의
Fig.3A(20180079427, 22 Mar 2018). Image: USPTO. 승객이나 운전자가 제스처로 자율차의 경로를 변경
(trajectory changes)
Gesture Based Control of
Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
64/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
< 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의
Fig.6(20180079427, 22 Mar 2018). Image: USPTO. 어느 곳을 둘러야 하는지를 결정하는 머신러닝이나
인공지공 알고리즘을 설명하는 그림
Gesture Based Control of
Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
65/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle
AR Display Using Stereographic Imagery)의
Fig.2(20180089899, 29 Mar 2018). Image:
USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
66/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의
Fig.3A(20180089899, 29 Mar 2018). Image: USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
67/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의
Fig.3B(20180089899, 29 Mar 2018). Image: USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
68/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의
Fig.3C(20180089899, 29 Mar 2018). Image: USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
69/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의
Fig.6(20180089899, 29 Mar 2018). Image: USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
70/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의
Fig.8(20180089899, 29 Mar 2018). Image: USPTO.
Adaptive Vehicle AR Display
Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
71/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.1(20180089900, 29 Mar 2018). Image:
USPTO. 리얼 환경에 투영되면 버추얼 콘텐츠(116)는 자동차 앞의 수 미터 거리에서 고정된 것처럼 보이
고, 버추얼 환경에 투영되면 승객 앞에 고정된 것처럼 보여, 멀미(motion sickness)를 일으키지 않음.
Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
72/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Augmented virtual display
<그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.2(20180089900, 29 Mar 2018). Image:
USPTO. 투영의 해상도나 질을 높이기 위해 208의 창문은 파장 가이드 기술 혹은 홀로그래픽 기술 등을
포함시킬 수 있음.
VI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
73/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.8(20180089900, 29 Mar 2018). Image:
USPTO. 자동차 안의 실제 물리적인 시스템과 버추얼 시스템이 융합해 승객에게 동조화 물리 효과
(Synchronized physical effects)를 제공(가속의 중력). 버추얼 콘텐츠의 내용에 따라 공조시스템이 동조화 작동
할 수 있고 오디오시스템도 동조화 배경 음악 등을 제공
Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
74/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.11B(20180089900, 29 Mar 2018).
Image: USPTO.
Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
75/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.3 & 4. Image: USPTO.
76/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.7. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
77/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.9. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
78/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.12. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
79/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.13. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
80/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.13. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
81/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.16A. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
82/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.16D~19B. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
83/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원
앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용
모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.21A~21B. Image: USPTO.
VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
84/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Object transitions
<그림> Apple 특허상(Object transitions)의 Fig.1(8,127,239, 28 Feb 2012). Image: USPTO. 이미지나 앱을 오픈 할 때
줌인(Zoom in, 확대), 줌아웃(Zoom out, 축소), 동작/제스처/음성/응시인식을 이용. 파일을 읽은 후에 Zoom out으로
원래의 포지션으로 되돌아가게 되는데, 이를 ‘Cross fading effect’라고 하고 Apple은 특허에 ‘Transition Effect’라 기
술하고 있음. Transition Engine은 용기, 화병, 담배, 펜, 자물쇠 등의 책상 주위의 물건들을 ’animated effect‘로 사용.
자물쇠를 애니메이션으로 불러와 잠그면 타인이 볼 수가 없다고 기술하고 있음.
VII. 3D GUI의 OS/App(To Be)
85/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.2(8,127,239, 28 Feb 2012). Image: USPTO. 사용자들
은 실제 리얼 환경에 있는 데스크탑 주위의 객체들의 이미지를 활용하여 다차원 데스크탑 환경을 꾸밀
수 있는데, 블루틴 보드에 앞정(thumbtack)으로 꽃은 Paper처럼 관리할 수 있음
Object transitionsVII. 3D GUI의 OS/App(To Be)
86/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.3A(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
87/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.3B(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
88/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.3C(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
89/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.3D(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
90/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.3E(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
91/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Object transitions)의 Fig.4(8,127,239, 28 Feb 2012). Image: USPTO.
Object transitionsVII. 3D GUI의 OS/App(To Be)
92/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
VIII. 3D GUI의 브라우저(Safari)(To Be) Grouping and browsing open windows
<그림> Apple 특허상(Grouping and browsing open windows)의 Fig.1A(9,069,577, 30 Jun
2015). Image: USPTO. 2D 데스크탑 공간에서 오픈 윈도우를 2차원으로 그룹핑하고 브라우징
하기.
93/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Grouping and browsing open windows)의 Fig.1B(9,069,577, 30 Jun
2015). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 그룹핑하고 브라우징
하기
VIII. 3D GUI의 브라우저(Safari)(To Be) Grouping and browsing open windows
94/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1B(8,910,072,
9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고
상호작용하기
Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
95/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1C(8,910,072,
9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고
상호작용하기
Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
96/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Browsing and interacting with open windows
<그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1D(8,910,072,
9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고
상호작용하기. Cluster.
VIII. 3D GUI의 브라우저(Safari)(To Be)
97/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
<그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1E(8,910,072,
9 Dec 2014). Image: USPTO. 클러스터 창들이 사용자의 기기 동작이나(좌우로 기울기 등)
GUI 입력에 의해 기울어져(tilted), 각 창의 내용을 확인할 수 있음. IOS7(iPhone 5S)부터 탑
재된 사파리가 이 기술을 이용
Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
98/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
BM for AppleVIV. Cloud <-> Edge Services(To Be)
개인 사무실학교/교
육
가정-거
실
자율차가정-부
엌
병원/
환자/
고령
자
Work ***** ***** ***** ** ** ** **
실시간
지원제어
Lear
n
**** ***** ***** **** ** ** **
Life ***** ***** ***** ***** ***** ***** *****
Play ***** ***** ***** ***** ** **** **
3D
GUI
AR/VR
iTune
AppStore
Apple iCloud
3D iOS/OS/App/Safari
Seamless N-Screen
between Radio and Local
Media
iCloud based Contents
Radio/TV Broadcast
System
iCloud
i-OS based SOA
Platform
iAd/Pay
iCloud Based Safe Deposit Box
1
4
5
7
전략적 어플(Photo Booth, iTunes, iBook, iMovie, Garage Band, iPen, iDrawing, AirPlay, Smart Grid,
etc)
2
6
8 8
9
Apple in the Sky with Diamond
iPhone iPad Mac PC iTV iKitchen iCar/EC iHealth iW/Robot3
차원용 박사, 김종석 박사, “스마트 미디어 개발 방향 및 그에 따른 서비스 개발 전략”, 13/Sep/2010-15/Oct/2018
WC/로봇
99/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Next Big ThingsVIV. Cloud <-> Edge Services(To Be)
天
地 人
생체인터넷
(IoB)
인간형 로봇
3D프린터/
DIY
서비스
디자인
Cloud
블록체인/
핀테크 O2O
Platform
Storage
가상현실증강현실
자율차
두뇌인터넷
(IoB)GPS &
Sensors
SNSs
Processors
Nets
빛=에너지
Smart
H/K
Until Now as there are :
생체에너지
Smart
City
드론
로봇
정밀의료
신약
미세
먼지
탄소
자원
IoT
인간(Bio)의 학문/ 술/디자인공간(Physical)의 학문/기술/디자인
시간(Digital/Cyber)의 학문/기술/디자인
크리스퍼/
클린미트
Smart
FoodSF/BM/SS
X-
ABNI+α,
SW,
BD->SD
Cloud<->Edge
-> Hybrid Block Chain
100/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Triple Camera(‘19)VIV. Cloud <-> Edge Services(To Be)
101/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Triple Camera(‘19)VIV. Cloud <-> Edge Services(To Be)
아이폰 11은 1200만 광
각, 1200만 초광각 듀얼
카메라로 구성. 아이폰 11
프로와 프로맥스는 여기
에 1200만 망원 카메라를
더해 트리플 카메라가 장
착.
102/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Quad Camera - TB(‘20)VIV. Cloud <-> Edge Services(To Be)
아이폰12 프로 렌더링. / 폰아레나 제공
증강현실(AR) 기능 고도(3D 센
싱, 3D 안면인식)화에 필요한 비
행시간거리측정(ToF, Time-of-
Flight) 카메라가 추가될 것으로
알려 졌음.
103/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
아이폰12 프로 시리즈 추정 이미지. [사진출처 = 폰아레나]
Quad Camera - TB(‘20)VIV. Cloud <-> Edge Services(To Be)
104/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Apple and Blockchain(16 Mar 2018)VIV. Cloud <-> Edge Services(To Be)
Apple - OBTAINING AND USING TIME INFORMATION
ON A SECURE ELEMENT(SE)(20170353320, December 7,
2017 <- August 24, 2017(15/686023) <- Feb 26,
2016(62300698) with 20 Claims & 19 Drawing Sheets)
http://appft.uspto.gov/netacgi/nph-
Parser?Sect1=PTO2&Sect2=HITOFF&u=%2Fnetahtml%2FPT
O%2Fsearch-
adv.html&r=1&p=1&f=G&l=50&d=PG01&S1=2017035332
0.PGNR.&OS=dn/20170353320&RS=DN/20170353320
According to the filing, Apple would use
multicheck architecture that incorporates
Public Key Infrastructure and blockchain
to verify the authenticity of timestamps
and protect secure elements (SE), such as
SIM cards or microSD cards that could
contain critical information.
Fool - Apple and Blockchain: Together at
Last?(16 Mar 2018)
https://www.fool.com/investing/2018/03/16/apple-and-
blockchain-together-at-last.aspx
Certification authority (CA)
105/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
Apple Blockchain: Apple Coin already started….VIV. Cloud <-> Edge Services(To Be)
2018 - Apple Coin Is The Name Of Advanced Technology Of Blockchain Which Linked
& Joint Venture In Future With Apple Inc. https://applecoin.live/,
www.appleblockchain.info, (’19) https://developer.apple.com/documentation/cryptokit
106/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
X. Conclusion
1. HAS Business Model or
2. O4O=Cloud <-> Edge Business Model
3. MV/R Comparison
Apple Amazon Google MS FB Samsung
‘19 Revenue(억$) 2,700 2,804 1,500 1,258 665 2,230
(240TW)
’20 Market V(억$)1) 15,330 13,430 10,160 14,890 6,156 2,966
(356W)
MV/R 5.67 4.78 6.77 11.83 9.25 1.33
1) As of 26 Jun 2020
X. Conclusion
107/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/
감사합니다^
Q&Abiblematrix@gmail.com, 010-85273-5763
강의 요청 섭외: 정유진 비서담당: 010-4381-8560

Weitere ähnliche Inhalte

Ähnlich wie 미래-상상 현실이 되다_5_Apple이 3년내 출시할 제품/서비스

Spiral 모델 기반 실무 AI 교육.pdf
Spiral 모델 기반 실무 AI 교육.pdfSpiral 모델 기반 실무 AI 교육.pdf
Spiral 모델 기반 실무 AI 교육.pdfMyungHoKim10
 
Youvegotidea company brief 2016 ver0.5(+hy)
Youvegotidea company brief 2016 ver0.5(+hy)Youvegotidea company brief 2016 ver0.5(+hy)
Youvegotidea company brief 2016 ver0.5(+hy)min woo Pak
 
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래DongYoung Kim
 
유니티 게임 그래픽스 아트 개발 사례 분석
유니티 게임 그래픽스 아트 개발 사례 분석유니티 게임 그래픽스 아트 개발 사례 분석
유니티 게임 그래픽스 아트 개발 사례 분석SangYun Yi
 
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들Doyoung Gwak
 
ARTIK 710 IoT class
ARTIK 710 IoT class ARTIK 710 IoT class
ARTIK 710 IoT class 정출 김
 
인공지능 방법론 - 딥러닝 이해하기
인공지능 방법론 - 딥러닝 이해하기인공지능 방법론 - 딥러닝 이해하기
인공지능 방법론 - 딥러닝 이해하기Byoung-Hee Kim
 
경정기 최종
경정기 최종경정기 최종
경정기 최종기주 공
 
ML.NET으로 해보는 AutoML
ML.NET으로 해보는 AutoMLML.NET으로 해보는 AutoML
ML.NET으로 해보는 AutoMLfermat39
 
2018 기술창업 트랜드 및 사업화전략_교통대
2018 기술창업 트랜드 및 사업화전략_교통대2018 기술창업 트랜드 및 사업화전략_교통대
2018 기술창업 트랜드 및 사업화전략_교통대BruceDong WinnersLab
 
Tiny ml study 20201031
Tiny ml study 20201031Tiny ml study 20201031
Tiny ml study 20201031ByoungHern Kim
 
피지컬 컴퓨팅 도구
피지컬 컴퓨팅 도구피지컬 컴퓨팅 도구
피지컬 컴퓨팅 도구Kisoon Eom
 
170314 인터랙티브 미디어 디자인 I
170314 인터랙티브 미디어 디자인 I170314 인터랙티브 미디어 디자인 I
170314 인터랙티브 미디어 디자인 I윤소 최
 
증강현실(Augmented Reality) 소개
증강현실(Augmented Reality) 소개증강현실(Augmented Reality) 소개
증강현실(Augmented Reality) 소개Kwang-sik An
 
증강현실 (Augmented Reality) 소개
증강현실 (Augmented Reality) 소개증강현실 (Augmented Reality) 소개
증강현실 (Augmented Reality) 소개KyungSeupByun
 
경정기 최종
경정기 최종경정기 최종
경정기 최종기주 공
 

Ähnlich wie 미래-상상 현실이 되다_5_Apple이 3년내 출시할 제품/서비스 (20)

Spiral 모델 기반 실무 AI 교육.pdf
Spiral 모델 기반 실무 AI 교육.pdfSpiral 모델 기반 실무 AI 교육.pdf
Spiral 모델 기반 실무 AI 교육.pdf
 
Youvegotidea company brief 2016 ver0.5(+hy)
Youvegotidea company brief 2016 ver0.5(+hy)Youvegotidea company brief 2016 ver0.5(+hy)
Youvegotidea company brief 2016 ver0.5(+hy)
 
증강현실(미니게이트)
증강현실(미니게이트)증강현실(미니게이트)
증강현실(미니게이트)
 
경정기
경정기경정기
경정기
 
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래
[UI Lab Open Seminar] VR/AR로 바라 본 가까운 미래
 
유니티 게임 그래픽스 아트 개발 사례 분석
유니티 게임 그래픽스 아트 개발 사례 분석유니티 게임 그래픽스 아트 개발 사례 분석
유니티 게임 그래픽스 아트 개발 사례 분석
 
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들
[Let's Swift 2019] iOS 앱에서 머신러닝이 해결 할 수 있는 문제들
 
ARTIK 710 IoT class
ARTIK 710 IoT class ARTIK 710 IoT class
ARTIK 710 IoT class
 
인공지능 방법론 - 딥러닝 이해하기
인공지능 방법론 - 딥러닝 이해하기인공지능 방법론 - 딥러닝 이해하기
인공지능 방법론 - 딥러닝 이해하기
 
경정기 최종
경정기 최종경정기 최종
경정기 최종
 
증강현실이 가져올 미래
증강현실이 가져올 미래증강현실이 가져올 미래
증강현실이 가져올 미래
 
Seri 증강현실
Seri 증강현실Seri 증강현실
Seri 증강현실
 
ML.NET으로 해보는 AutoML
ML.NET으로 해보는 AutoMLML.NET으로 해보는 AutoML
ML.NET으로 해보는 AutoML
 
2018 기술창업 트랜드 및 사업화전략_교통대
2018 기술창업 트랜드 및 사업화전략_교통대2018 기술창업 트랜드 및 사업화전략_교통대
2018 기술창업 트랜드 및 사업화전략_교통대
 
Tiny ml study 20201031
Tiny ml study 20201031Tiny ml study 20201031
Tiny ml study 20201031
 
피지컬 컴퓨팅 도구
피지컬 컴퓨팅 도구피지컬 컴퓨팅 도구
피지컬 컴퓨팅 도구
 
170314 인터랙티브 미디어 디자인 I
170314 인터랙티브 미디어 디자인 I170314 인터랙티브 미디어 디자인 I
170314 인터랙티브 미디어 디자인 I
 
증강현실(Augmented Reality) 소개
증강현실(Augmented Reality) 소개증강현실(Augmented Reality) 소개
증강현실(Augmented Reality) 소개
 
증강현실 (Augmented Reality) 소개
증강현실 (Augmented Reality) 소개증강현실 (Augmented Reality) 소개
증강현실 (Augmented Reality) 소개
 
경정기 최종
경정기 최종경정기 최종
경정기 최종
 

Mehr von wycha

Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...
 Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give... Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...
Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...wycha
 
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...wycha
 
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...wycha
 
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니wycha
 
차원용의 미래_12_유전자 가위(CRISPR/Cas)
차원용의 미래_12_유전자 가위(CRISPR/Cas)차원용의 미래_12_유전자 가위(CRISPR/Cas)
차원용의 미래_12_유전자 가위(CRISPR/Cas)wycha
 
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)wycha
 
차원용의 미래_10_두뇌인터넷(Internet of Brain)
차원용의 미래_10_두뇌인터넷(Internet of Brain)차원용의 미래_10_두뇌인터넷(Internet of Brain)
차원용의 미래_10_두뇌인터넷(Internet of Brain)wycha
 
미래-상상, 현실이 되다_8_아마존의 물류혁명
미래-상상, 현실이 되다_8_아마존의 물류혁명미래-상상, 현실이 되다_8_아마존의 물류혁명
미래-상상, 현실이 되다_8_아마존의 물류혁명wycha
 
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...wycha
 
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...wycha
 
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...wycha
 
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석wycha
 
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래wycha
 
Bible Matrix 6_27_Condition, status, and method of the resurrection and rapture
Bible Matrix 6_27_Condition, status, and method of the resurrection and raptureBible Matrix 6_27_Condition, status, and method of the resurrection and rapture
Bible Matrix 6_27_Condition, status, and method of the resurrection and rapturewycha
 
미래-상상 현실이 되다_4_블록체인의 현재와 미래
미래-상상 현실이 되다_4_블록체인의 현재와 미래미래-상상 현실이 되다_4_블록체인의 현재와 미래
미래-상상 현실이 되다_4_블록체인의 현재와 미래wycha
 
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...wycha
 
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...wycha
 
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...wycha
 
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceship
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceshipBible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceship
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceshipwycha
 
미래-상상 현실이 되다_2_인류 진화와 기술의 발달
미래-상상 현실이 되다_2_인류 진화와 기술의 발달미래-상상 현실이 되다_2_인류 진화와 기술의 발달
미래-상상 현실이 되다_2_인류 진화와 기술의 발달wycha
 

Mehr von wycha (20)

Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...
 Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give... Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...
Bible Matrix ⑦_36_Dragon is ancient serpent, devil, Satan, who made Eve give...
 
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...
Bible Matrix ⑦_16_Daniel 7:5, Second kingdom, Bear: Persian Empire(BC 550~BC ...
 
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...
Bible Matrix ⑦_3_Daniel 2:39, The second kingdom – Silver: Persian Empire(BC ...
 
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니
차원용의 미래_13_빛과 생명, 나는 빛으로 왔나니
 
차원용의 미래_12_유전자 가위(CRISPR/Cas)
차원용의 미래_12_유전자 가위(CRISPR/Cas)차원용의 미래_12_유전자 가위(CRISPR/Cas)
차원용의 미래_12_유전자 가위(CRISPR/Cas)
 
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)
차원용의 미래_11_생체인터넷/생체에너지(Internet of Biosignal/Bioenergy)
 
차원용의 미래_10_두뇌인터넷(Internet of Brain)
차원용의 미래_10_두뇌인터넷(Internet of Brain)차원용의 미래_10_두뇌인터넷(Internet of Brain)
차원용의 미래_10_두뇌인터넷(Internet of Brain)
 
미래-상상, 현실이 되다_8_아마존의 물류혁명
미래-상상, 현실이 되다_8_아마존의 물류혁명미래-상상, 현실이 되다_8_아마존의 물류혁명
미래-상상, 현실이 되다_8_아마존의 물류혁명
 
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...
Bible Matrix 6_59_Mayan calendar not ended on 21 Dec 2012 but lasting until 1...
 
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...
Bible Matrix 6_54_Sign of Capricorn(AD 4,260~6,419), New kingdom with its nat...
 
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...
Bible Matrix 6_52_At Aquarius, the heat/magma/water under the earth, the new ...
 
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석
미래-상상, 현실이 되다_7_구글 자율주행차 특허 분석
 
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래
미래-상상 현실이 되다_6_승객을 위한 자율주행차의 미래
 
Bible Matrix 6_27_Condition, status, and method of the resurrection and rapture
Bible Matrix 6_27_Condition, status, and method of the resurrection and raptureBible Matrix 6_27_Condition, status, and method of the resurrection and rapture
Bible Matrix 6_27_Condition, status, and method of the resurrection and rapture
 
미래-상상 현실이 되다_4_블록체인의 현재와 미래
미래-상상 현실이 되다_4_블록체인의 현재와 미래미래-상상 현실이 되다_4_블록체인의 현재와 미래
미래-상상 현실이 되다_4_블록체인의 현재와 미래
 
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...
Bible Matrix 6_12_ Jesus, transformed into a spiritual body, talked with Mose...
 
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...
Bible Matrix 6_9_Biblical chariots and white-red-black horses are small space...
 
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...
Bible Matrix 6_7_Lord God took Moses alive with a spacesuit to heaven by a sp...
 
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceship
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceshipBible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceship
Bible Matrix 6_6_God(Elohim) took Enoch to heaven by a spaceship
 
미래-상상 현실이 되다_2_인류 진화와 기술의 발달
미래-상상 현실이 되다_2_인류 진화와 기술의 발달미래-상상 현실이 되다_2_인류 진화와 기술의 발달
미래-상상 현실이 되다_2_인류 진화와 기술의 발달
 

미래-상상 현실이 되다_5_Apple이 3년내 출시할 제품/서비스

  • 1. 1/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <미래-상상, 현실이 되다> Apple이 3년내 출시할 제품/서비스 차원용 소장/영어교육학/MBA/공학박사/미 래학자 (주)아스팩미래기술경영연구소 biblematrix@gmail.com, 010-5273-5763
  • 2. 2/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Hurdles of Current AR/VRI Cloud->Edge AI(As Is) : A14 Bionic Chip(’20)II Contents Apple의 3D Avatar/Model(To Be)IV 3D UI/UX의 AR/VR for Mac/TV(To Be)V 3D UI/UX의 AR/VR for Car/EV/AV(To Be)VI 3D GUI/GUX의 OS/App(To Be)VII 3D GUI/GUX의 브라우저(Safari)(To Be)VIII Cloud <-> Edge Services(To Be)VIV Neural Engine(‘17) - A14 BC(‘20)III ConclusionX
  • 3. 3/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Post Covid 19… * Corona Blue(우울, 불안감, 외로움, 고립감) * Untact * Ontact(대리체험+타인과 공감) = Online + Contact * 랜선투어 = GuideLive 의한 여행체험 * 홈트(Home+Training) = 스마트 홈트, LikeFit = 스마트폰+AI 운동선생님 * Amaze VR = 콘서트를 실내에서 구현하는 VR Immersive(몰입) Concert * Azarlive = 1:1 무작위 연결 영상 메신저 * Onepeloton = Home Cycling(자전거 폐달 운동)+기타 운동 * Netflixparty = 친구들과 온라인으로 드라마-영화를 보면서 채팅 * Houseparty = 최대 8명이 즐길 수 있는 그룹 영상 통화 * Facebook = messenger rooms = 50명 화상 통화 * 재택, 원격, 화상회의 = Zoom, Google’s Meet, MS’s Teams, Facebook’s messenger rooms, Apple’s facetime, Cisco’s Webex, Amazon’s Chime, Slack, -> 궁극적으로 3D OS 베이스의 3D Avatar + 3D AR/VR로 가야 Sustainable 가능 I. Hurdles of Current AR/VR
  • 4. 4/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 기술내용 As Is To Be 핵심기술 비고 해상도 2k 4k 이상 고해상 패널, 고속영상 처리 스미트폰도 현재는 2k 시야각 70도(상하)- 100도(좌우) 120도(상하)- 160도(좌우) 렌즈/주변영역 처리 등 광학계 수평선 중앙에만 집중, 피로, 어지러움, 구토 무게 300 그램 100 그램 이하 See-Through 디스플레이 인간 뇌의 무게=1,300 그램, 지금의 HMD 는 거의 90% 이상이 See-Closed 체험형태 시각- 청각 중심 오감 융합/자극/ 공감 증강-가상 촉/후/미각 생성 인간은 오감으로 인식+ 공감+육감 인지부조화 인체부조화 어지럼증, 구토 부조화 해소 고속 및 고감도 트레킹 센서 Tunnel Effect or Box Effect = Motion Sickness, 피로, 어지러 움 -> 30분 이상 볼 수 없음 출처: 차원용, “3D OS/App/Browser 베이스의 3D AR/VR 등장 예고”(‘19.10.14), 한국정보화진흥원 Hurdles of current AR/VR devicesI. Hurdles of Current AR/VR
  • 5. 5/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Like Apple’s A11 Bionic(‘17), We do more..II. Cloud->Edge AI(As Is) 애플 A11 바이오닉(Apple A11 Bionic)는 애플이 설계한 64비트 시 스템 온 칩(SoC)이다. 아이폰 8, 아이폰 8 플러스, 아이폰X에는 TSMC 10나노 공정으로 제조된 A11 바이오닉 프로세서가 탑재되었 다. 애플의 최신 프로세서인 A11 바이오닉에는 뉴럴 엔진이 적용된 AI 칩셋이 장착됐다. 뉴럴 엔진은 초고속 프로세싱을 돕는 식스 코어 (Six Core) CPU와 쓰리 코어(3 Core) GPU로 설계되어 있으며, 실시 간 프로세싱을 위해 초당 최대 6천억 번의 작업을 수행한다. 이 엔진은 애플이 새롭게 선보이는 얼굴인식 기능인 페이스 ID를 사 용할 수 있게 돕고 추후 제작되는 증강현실 앱을 원활하게 쓸 수 있 도록 한다. http://appleinsider.com/articles/17/09/23/inside-iphone-8-apples-a11-bionic-introduces- 5-new-custom-silicon-engines https://ko.wikipedia.org/wiki/%EC%95%A0%ED%94%8C_A11
  • 6. 6/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Like Apple’s A14 Bionic(‘20), We do more..II. Cloud->Edge AI(As Is) https://www.apple.com/iphone-xs/, https://www.apple.com/iphone-xs/a12-bionic/ The A11(’17)-A12(’18)-A13(‘19)-A14(‘20) Bionic, with our next-generation Neural Engine, delivers incredible performance. It uses real-time machine learning to transform the way you experience face ID, FaceTime with 32, photos, gaming, augmented reality, and more. 4-core GPUs 2-core CPUs 4-core CPUs than A11 than A11 than A11 HDR([High Dynamic Range) - 디지털 영상에서 밝은 곳은 더 밝게, 어두운 곳은 더 어둡게 만들어 사람이 실제 눈으로 보는 것에 가깝 게 밝기의 범위(Dynamic Range)를 확장시키는 기술.... Working together^
  • 7. 7/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ FR + MRIII. Neural Engine(‘17) - A14 BC(‘20) <그림> Apple의 공개된 출원서(LOCKING AND UNLOCKING A MOBILE DEVICE USING FACIAL RECOGNITION) 상의 Fig.1 & 2(20170076077, 16 Mar 2017). Image: USPTO. 2016년에 Apple은 이모티언트(Emotient)와 리얼페이스(RealFace)라는 두 개 기업을 인수. 지문인식과 함께 얼굴 인식이 차세대 대안으로 떠오를 수 있다는 것을 간파한 것. 특히 청구항 24번을 보면 하나 이상 의 프로세서가 등장하고 하나 이상의 센서가 등장하며 하나 이상의 이미지가 나타나지 않을 때 자동으로 잠근다고 기술하고 있는데, 이는 센서 융합 알고리즘.
  • 8. 8/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ FR + PR + MR + PR + 뉴럴 네트워크 <그림> Apple이 공개한 출원서(Presence Sensing) 상의 Fig.6(20170193282, 6 Jul 2017). Image: USPTO. 특히 Apple은 카메라와 근접 센서 등 센서 융합(Sensor fusion) 알고리즘과 감 지(검출) 로직(detection logic)은 뉴럴 네트워크를 사용하는데, 벡터 머신(vector machines)과 알고리즘 베이스의 확률적 기계 학습을 지원하여 사람이 출현했는지를 결정하는데, 컴퓨터와 사람의 출현 거리인 한계거리(Threshold distance)를 정하여 이 한계거리 내에서 센서들이 인 식이 되면 컴퓨터를 자동적으로 켤 수 있다고 기술. III. Neural Engine(‘17) - A14 BC(‘20)
  • 9. 9/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 트루뎁스(TrueDepth) 적외선 카메라 <그림> Apple(PrimeSense) 특허상(Scanning depth engine)의 Fig.1(20180120931, 3 May 2018). Image: USPTO. 장면(얼굴, 몸, 손, 사물, 배경 등)의 수많은 점들(spots)로 향하는 적외선 빛의 일련의 파동을 가진 빔을 방출하는 송신기(transmitter)가 있고, 그 다음 반사되어 오는 빛 을 수신하는 수신기(receiver)가 있음. 그 다음 프로세서가 수신기에서 출력한 데이터를 프로세 싱하여 장면을 3차원 맵으로 그려냄. 22가 바로 스캐닝 뎁스 엔진(Scanning Depth Engine). Z- 축은 깊이(3차원)를 X와 Y축은 XY 좌표(2차원). Apple의 Face ID의 핵심은 트루뎁 스(TrueDepth) 적외선 카메라와 도트 프로젝터(Dot Projector)인데, 이는 Apple이 2013년 11월 17일 에 이스라엘 기업인 프라임센스 (PrimeSense)를 3억4천500만 달 러에 인수한 결과임. III. Neural Engine(‘17) - A14 BC(‘20)
  • 10. 10/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 3차원 맵을 위한 도트 프로젝터(Dot Projector) <그림> Apple(PrimeSense) 특허상(Scanning projectors and image capture modules for 3D mapping) 의 Fig.1(9,098,931, 4 Aug 2015). Image: USPTO. 20은 3D Mapping 시스템, 22는 3D Image Scanner, 30은 an illumination module, 32는 방사선 소스(radiation source)로 적외선 빔, 34는 스캐너로 빔을 받아 50의 스캐닝 미러로 투영. 35는 광학 조명(Illumination Optics)으로 빔을 36의 각도로 투영시켜 28 손 영 역의 스폿 패턴(a pattern of spots)을 생성. 38은 이미징 모듈로 28의 손에 투영된 스폿 패턴의 이미지들 을 42의 광학 객체(Objective Optics)를 통해 수집하고 디코딩. 40은 이미지 센서, 41은 2차원 매트릭스(X, Y). 최종적으로 46의 프로세스가 이를 이용하여 3차원 맵 혹은 Depth map(XYZ)을 생성. III. Neural Engine(‘17) - A14 BC(‘20)
  • 11. 11/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 3차원 맵을 위한 도트 프로젝터(Dot Projector) <그림> Apple(PrimeSense) 특허상(Scanning projectors and image capture modules for 3D mapping)의 Fig.1(9,098,931, 4 Aug 2015). Image: USPTO. 22는 매핑 디바이스(Mapping device) 혹은 3D 이미지 스캐너(3D Image Scanner), 92는 게이밍 콘솔(Gaming Console) 혹은 노트북 (컴퓨터). 94와 96은 게임 참여자. 22의 3D 이미지 스캐너는 94 사람과 98 배경(예컨대 벽 등) 의 다양한 점들의 100의 패턴들을 투영해, 장면의 참여자와 배경 사물들을 3D 맵(XYZ)으로 생 성. III. Neural Engine(‘17) - A14 BC(‘20)
  • 12. 12/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘17년 6월 WWDC - A11 Bionic Neural Engine <그림> 2017년 6월 Apple이 WWDC에서 공개한 A11 Bionic Neural Engine & Neural Networks. Image: Apple’s WWDC 2017 Keynote - https://www.youtube.com/watch?v=oaqHdULqet0 2017년 9월에 출시한 아이폰 8•아이폰 8 플러스•아이폰 X 에는 A11 바이오닉이 탑재. 이는 애플이 설계한 64비트 시 스템온칩(SoC)의 ASIC로 대만 TSMC가 10나노 공정으로 제조. A11에는 머신러닝, 추론모델(inference model), 이 미지 인식과 모션 인식 등의 알고리즘인 뉴럴 엔진(Neural Engine)이 적용. 뉴럴 엔진은 초고속 프로세싱을 돕는 듀 얼 코어(Dual Core) 설계로 되어 있으며, 실시간 프로세싱 을 위해 초당 최대 6천억 번의 작업(600 billion operations per second)을 수행. III. Neural Engine(‘17) - A14 BC(‘20)
  • 13. 13/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ EPO에 등록한 상표 - 뉴럴엔진(Neural Engine) <그림> 유럽특허청에 등록한 상표 - 뉴럴엔진(Neural Engine). Image: Trademarkia – Apple’s Neural Engine. https://www.trademarkia.com/ctm/neural-engine-017538513.htm III. Neural Engine(‘17) - A14 BC(‘20)
  • 14. 14/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘17년 9월 - A11 Bionic Neural Engine <그림> Apple의 아이폰 8/8 플러스/X에 탑재된 A11 Bionic Chip을 가능케 하는 구성 요소들. 적 외선 이미지를 인식해 점(도트 혹은 스폿) 패턴으로 읽어 이 데이터를 A11 Bionic Chip으로 보내 얼굴을 매치시키는 (1) 트루뎁스 적외선 카메라. (2) 어두운 곳에서도 얼굴을 인식하는 적외선 대 량 조명 장치. 그리고 (3) 얼굴의 3D 맵을 구축하기 위해 30,000 개 이상의 점(Dots)을 투영하는 도트 프로젝터(Dot Projector). Image: Apple https://www.apple.com/iphone-x/#face-id III. Neural Engine(‘17) - A14 BC(‘20)
  • 15. 15/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 9월 - A12 Bionic Neural Engine https://www.apple.com/iphone-xs/face-id/ The technology behind simplicity. The innovative technologies in the TrueDepth camera system work together in real time to recognize you in an instant. III. Neural Engine(‘17) - A14 BC(‘20)
  • 16. 16/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 아이폰 8/8 플러스/X에 탑재된 A11 Bionic Chip을 가능케 하는 하드웨어 구성 요소들. 왼쪽부터 트루뎁스 적외선 카메라, 근접 센서, 적외선 대량 조명 장치, 주위(부변) 빛 센 서, 스피커, 마이크로폰, 700메가 픽셀 카메라, 도트 프로젝터. Image: Apple Insider(16 Sep 2017). http://www.patentlyapple.com/patently-apple/2017/09/apples-face-id-has-been-in-the-work-for-many-years-and-its- debut-fulfills-many-in-depth-camera-patents.html, https://www.apple.com/iphone-x/#truedepth-camera ‘17년 9월 - A11 Bionic Neural EngineIII. Neural Engine(‘17) - A14 BC(‘20)
  • 17. 17/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 9월 - A12 Bionic Neural Engine https://www.apple.com/apple-events/september-2018/ III. Neural Engine(‘17) - A14 BC(‘20)
  • 18. 18/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> 본인의 얼굴을 등록할 때 트루뎁스 적외선 카메라는 적외선 이미지를 인식해 점 패턴(dot pattern)으로 읽어 이 데이터를 A11 Bionic Chip으로 보냄. 이 때 적외선 대량 조명 장치는 어두운 곳에 서도 얼굴의 이미지를 잘 인식하게 함. 그리고 도트 프로젝터는 이렇게 기 등록된 얼굴의 이미지들을 리얼 타임으로 매치 혹은 매핑시키기 위해 30,000 개 이상의 점(Dots)을 투영하고 인식 분석하여 페이 스 ID(잠금과 해제)의 기능을 하는 것임. Image: Apple. https://www.apple.com/iphone-x/#face-id ‘17년 9월 - Face IDIII. Neural Engine(‘17) - A14 BC(‘20)
  • 19. 19/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> 애플 iPhone X의 3D 애니모지(Animoji) 기능(12 Sep 2017). Image: Apple iPhone X – https://www.apple.com/iphone-x/, https://www.apple.com/iphone-x/#truedepth-camera 동시에 도트 프로젝터는 50개 이상의 각기 다른 얼굴 근육의 움직임을 분석하여 사용자의 세밀한 표정 을 16개의 애니모티콘에 투영해 자신의 얼굴 표정을 기반으로 맞춤형 3D 이모티콘을 만들 수 있음. 50 개 얼굴 근육 움직임을 인식해 팬더곰, 여우, 외계인 등 캐릭터 얼굴에 그대로 반영. 이는 향후 새로운 형태(3D Avatar 등)의 커뮤니케이션 수단으로 활용될 것으로 기대되고 있으며, 사용자들은 수정/편집/ 생성을 통해 다양한 3D 애니모지를 만들어, 1인 가구 시대의 생산성을 높이기 위해 동시에 5개 온라인 회의를 하는 경우, 내 개성과 목소리와 감정을 지닌 맞춤식 3D 애니모지나 3D 아바타를 보낼 수도 있 을 것임(이를 Face Meesage라 함). ‘17년 9월 - Animoji Apple via Youtube - iPhone X — Animoji Yourself — Apple(27 Nov 2017). https://www.youtube.com/watch?v=Kkq8a6AV3HM III. Neural Engine(‘17) - A14 BC(‘20)
  • 20. 20/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 7월 - Animoji -> Memoji https://www.apple.com/leadership/ III. Neural Engine(‘17) - A14 BC(‘20)
  • 21. 21/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 7월 - Animoji -> Memoji 서울신문-애플의 백인·남성우월주의?...경영진 ‘미모지’ 때문에 곤혹(18 Jul 2018) http://seoul.co.kr/news/newsView.php?id=20180718500060 III. Neural Engine(‘17) - A14 BC(‘20)
  • 22. 22/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 7월 - Animoji -> Memoji https://www.apple.com/leadership/ III. Neural Engine(‘17) - A14 BC(‘20)
  • 23. 23/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 9월 - Face ID & Memoji https://www.apple.com/iphone-xs/a12-bionic/ III. Neural Engine(‘17) - A14 BC(‘20)
  • 24. 24/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘18년 가을 - FaceTime with 32 https://www.apple.com/ios/ios-12/ III. Neural Engine(‘17) - A14 BC(‘20)
  • 25. 25/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Bloom Berg - How Apple Built a Chip Powerhouse to Threaten Qualcomm and Intel(29 Jan 2018) https://www.bloomberg.com/graphics/2018-apple-custom-chips/ A11(‘17) Bionic Chip이 탄생하기 전까지의 여정III. Neural Engine(‘17) - A14 BC(‘20)
  • 26. 26/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ ‘20.06.22 – Apple Silicon for Mac – PC까지 통합 ‘20.06.22일 온라인으로 중계된 애플의 연례 개발자대회(WWDC)에서 ARM기반의 애플 이 설계한 ‘애플 실리콘’칩을 사용해 올말부 터 2년 내에 맥(Mac)을 만들겠다고 발표 애플이 WWDC에 서 소개한, Apple Silicon과 애플 자 체설계 칩이 수행 하는 다양한 기능 들. 폰-피시 구조 같아져 효율 기대 (Cloud<->Edge). Credit: Apple III. Neural Engine(‘17) - A14 BC(‘20)
  • 27. 27/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Insights ○ 구글이 알파고(AlphaGo)라는 AI 컴퓨터 프로그램 덕분에 AI 기술의 선두주자로 알려져 있지만, 구글 의 단점은 클라우드 베이스의 AI이다(이를 Edge->Cloud AI라 함). 반면 Apple은 on-device의 AI 제품 을 개발하고 실제 제품에 적용하고 있다는 점에서 구글을 능가하고 있다. 왜냐하면 이제 블록체인 개념 의 Cloud->Edge가 도래하고 있기 때문이다. ○ 2017년에 Apple이 자체 개발하고 디자인한 ‘Neural Engine + 최초로 Apple이 디자인한 GPU(그 전 까지는 Imagination Technologies가 디자인) + M11 + Face ID + Touch ID를 통합한 A11 Bionic Chip 을 iPhone X에 탑재해 런칭했다. (1) 많은 기업들이 AI칩에 도전하고 있지만 이는 업계 최초로 Apple이 AI칩 분야의 선두주자임을 증명한 것이다. (2) 그 결과 칩의 주요 발전소(powerhouse)가 된 Apple은 어느 날인가 퀄컴(Qualcomm)과 인텔(Intel)과 삼성(Samsung)을 위협할 수도 있을 것이다. ○ Apple은 HAS(Hardware+AI+Software)라는 개념의 독자적으로 디자인하고 통합된 하드웨어와 독 자적인 뉴럴엔진의 A11 Bionic Chip과 독자적인 OS 플랫폼을 구축한 유일한 기업이다. 따라서 블록체 인의 To Be 모델인 퍼블릭(Public)과 프라이빗(Private)이 융합된 하이브리드(Hybrid) 블록체인을 도입 하고 서비스할 수 있는 유일한 기업이다. 그러므로 향후 Cloud<->Edge를 선도할 수 있을 것으로 전망 된다. ○ Apple과 Apple이 인수한 프라임센스의 특허를 분석한 결과, 앞으로 3년 이내에 Apple은 트루뎁스 카메라 기술과 도트 프로젝트 기술을 활용해 (1) 3D 애니모지(Animoji)를 18년 나만의 Memoji로 업데 이트하고 최종 3D Avatar/Model로 업그레이드하여 출시할 것으로 예측되고, (2) 다양한 콘텐츠(게임, 영화, 교육, IoT, IIoT, IoB 등)와 서비스(Mac, TV, 전기차(EV)/자율차(AV) 등) 중심의 3D UI/UX의 AR/VR로 확대 출시 될 것으로 예측되며, (3) Mac OS/iOS가 3D GUI의 OS/App/Safari로 업그레이드 될 것으로 예측된다. 이를 위해 다음부터는 관련 특허분석을 시도하여 증빙해보기로 한다. III. Neural Engine(‘17) - A14 BC(‘20)
  • 28. 28/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ IV. Apple의 3D Avatar/Model(To Be) Avatars Reflecting User States <그림> Apple 특허상(Avatars Reflecting User States)의 Fig.1(20170357417, 14 Dec 2017). Image: USPTO.
  • 29. 29/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatars Reflecting User States)의 Fig.6A(20170357417, 14 Dec 2017). Image: USPTO. Avatars Reflecting User StatesIV. Apple의 3D Avatar/Model(To Be)
  • 30. 30/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatars Reflecting User States)의 Fig.6B(20170357417, 14 Dec 2017). Image: USPTO. Curation. 648은 요소 픽커(Element picker)인데 특별한 요소들(Particular elements)인 face, skin tone, eyes, nose, hair, shirt, hat, background, 기타)을 제공. 654는 조정 슬라이더(Adjusting slider)로 656의 지시(indicator)를 오른쪽으로 밀면 확대되고, 왼쪽으로 밀면 축소. 674는 두 번째 요소 픽커로 액세서리/옷/모자/기타 주제를 입힐 수 있음. 또한 사용자는 Avatar Server에 자신의 사진을 업 로드하고 Apple의 Photo Booth의 Edit 기능을 통해 Avatar를 생성하고 큐레이션 할 수도 있음. Avatars Reflecting User StatesIV. Apple의 3D Avatar/Model(To Be)
  • 31. 31/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar editing environment)의 Fig.1A/1D(9,576,400, 21 Feb 2017). Image: USPTO. Fig.1A에서 106은 디폴트로 뜨는 블랭크 얼굴(blank face)의 아바타 혹은 사용자가 사전에 찍은 사진. 110의 카테고리 픽커(category picker)로부터 112의 ‘Eyes’ 카테고리를 선택하고 116의 요소 픽 커에는 120에 사용할 다양한 눈의 요소들이 있어 큐레이션. 114는 칼러 픽커(Color picker)로 색을 골 라 큐레이션. 요소들은 2D이나 3D Model로 렌더링할 수 있음. Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
  • 32. 32/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar editing environment)의 Fig.2A/2B(9,576,400, 21 Feb 2017). Image: USPTO. Fig.2A는 116의 요소 픽커를 터치하면 200처럼 요소 픽커가 9개의 그리드(gird)로 나타남. 이 경우 사용자는 110의 카테고리 픽커에서 112의 ‘Hat’ 카테고리를 선택한 경우임. 그리드 셀들은 3차원 효과를 내기 위해 빛과 그림자 등의 3차원 모델의 스냅샷을 포함할 수 있음. Fig.2B는 114의 칼러 픽커 를 터치하면 9개의 기본 색들이 그리드로 204와 같이 나타남. 사용자가 ‘Black’을 선택하면, Fig.2A의 200의 그리드에는 서로 다른 검은색의 모자들이 나타나 선택하여 큐레이션함. Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
  • 33. 33/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar editing environment)의 Fig.6A/6B(9,576,400, 21 Feb 2017). Image: USPTO. Animation도 할 수 있음. Avatar editing environmentIV. Apple의 3D Avatar/Model(To Be)
  • 34. 34/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Personalizing colors of user interfaces)의 Fig.2C/2G(9,542,038, 21 Feb 2017). Image: USPTO. 앞의 특허가 칼러 픽커(Color picker)를 사용하여 원하는 색을 선택하여 아바타를 다양 하게 큐레이션했다면, 본 특허는 색을 칠할 수 있는 칼러 스킴(Color schemes)을 제공하는 사용자 인터 페이스를 제공. Personalizing colors of user interfacesIV. Apple의 3D Avatar/Model(To Be)
  • 35. 35/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.6C~6D(20180091732, 29 Mar 2018). iPhone에서 프로파일 사진, 즉 아바타를 만드는 방법. 모노그램을 사용 할 수도 있고 사진을 사용할 수 도 있음. 기존에 사진이 없다면 트루뎁스 카메라를 이용해 새로 찍을 수도 있음. Image: USPTO Avatar creation and editing in iPhone 본 특허 출원서와 똑같은 날에 가출 원하고(62/399,241) 똑같은 날에 출 원하고(15/712683), 똑같은 날에 출 원서가 공개된 ‘아바타 데이터의 전 송 (Transmission of avatar data, 20180089880, 29 Mar 2018)’이라는 공개된 출원서를 보면 iPhone에서의 아바타의 데이터 전송을 다루고 있 다는 점에서 2018~2019년에 출시 될 것으로 예측됨. IV. Apple의 3D Avatar/Model(To Be)
  • 36. 36/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.6E~6F(20180091732, 29 Mar 2018). iPhone 에서 제공되는 인터페이스를 통해 사진을 View Finder 내의 공간에 잘 위치하도록 조정함. 또는 트루뎁 스 카메라와 연결하는 인터페이스를 제공하여 밝은 곳의 원 안에 잘 맞추도록 함. 인터페이스는 머리를 좌우로 돌려 옆모습을 아바타로 사용하기도 함. Image: USPTO Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
  • 37. 37/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.6K~6L(20180091732, 29 Mar 2018). iPhone 에서 제공되는 인터페이스를 통해 얼굴의 스킨 톤(skin-tone)을 조정함. 그 다음 고객화 머리, 옷, 기타 악세서리, 기타 기능을 제공하는 인터페이스를 통해 아바타를 큐레이션 함. Image: USPTO Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
  • 38. 38/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.9C~9D(20180091732, 29 Mar 2018). 예를 들어 iPhone에서 제공되는 인터페이스를 통해 머리를 단장하는 모습임. Image: USPTO Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
  • 39. 39/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.9G~9H(20180091732, 29 Mar 2018). 큐레 이션이 다 끝나면 ‘당신의 아바타가 준비되었다’는 메시지가 뜨고 혹은 Siri가 대답해주고 ‘당신의 아바 타를 친구들이 보게 될 것’이라는 메시지와 함께 언제나 아바타 앱을 통해 아바타를 수정할 수 있다는 메시지도 고 함께 보여줌. Image: USPTO Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
  • 40. 40/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Avatar creation and editing)의 Fig.9G~9H(20180091732, 29 Mar 2018). 실제 iPhone의 iMessage를 이용해 친구와 메시지를 주고받는 모습임. 아래에는 감정이나 문맥을 인식해 그 에 해당하는 이모티콘, 애니모지, 다양한 아바타, 애니메이션, 장면의 그림이 나타나고 본인이 클릭하여 문자와 같이 보낼 수도 있고, 문자를 보내면 인공지능이 분석해 해당 그림을 자동으로 선택해 보낼 수도 있음. Image: USPTO Avatar creation and editing in iPhoneIV. Apple의 3D Avatar/Model(To Be)
  • 41. 41/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Three-dimensional user interface)의 Fig.1(8,166,421, 24 Apr 2012). Image: USPTO. 3D 센싱 디바이스(24)에는 트루뎁스 적외선 카메라가 있어 스폿(spot) 혹은 도 트(dots) 패턴을 읽어 냄. 그러면 컴퓨터(26)가 삼각측정법으로 사용자 몸 표면의 포인트들의 3D 좌표 를 프로세싱하여 3D map으로 생성하고 이를 제스처 3D UI로 사용하는 것임. V. 3D UI/UX의 AR/VR for Mac/TV(To Be) Three-dimensional user interface Apple의 Face ID의 핵심은 트루뎁 스(TrueDepth) 적외선 카메라와 도트 프로젝터(Dot Projector)인데, 이는 Apple이 2013년 11월 17일 에 이스라엘 기업인 프라임센스 (PrimeSense)를 3억4천500만 달 러에 인수한 결과임.
  • 42. 42/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Three-dimensional user interface)의 Fig.3(8,166,421, 24 Apr 2012). Image: USPTO. Three-dimensional user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 43. 43/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.1(9,377,865, 28 Jun 2016). Image: USPTO. 24는 3D 센싱 디바이스로, 사용자의 손이나(30) 머리(22)나 눈동자의 움직임을 포함한 장면을 감지하고 이미즈를 수집, 그러면 컴퓨터(26)가 수집한 이미지들을 프로세싱하여 3D Map으로 생성하고 이를 줌인(확대)-줌아웃(축소) 제스처로 활용하여(Zoom Grid Interface), 28의 디스 플레이에 나타난 커서(42)를 움직여 38의 객체들을 제어. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 44. 44/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.2(9,377,865, 28 Jun 2016). Image: USPTO. 각각의 Zoom Grid 표면은 몇 개의 상호작용 객체들인 38A~38N을 구성. 사용자 는 제스처 인터페이스(좌우로 손을 움직여)로 목록을 횡단하여(traverse) 객체들을 악세스하여 원하는 객체를 손으로 잡는 Grab Gesture로 선택. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 45. 45/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.4A~4D(9,377,865, 28 Jun 2016). Image: USPTO. 원하는 객체를 손으로 잡는 Grab Gesture로 선택. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 46. 46/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun 2016). Image: USPTO. 파일 폴더 제어. 사용자가 줌-인, 즉 잡아당기는 제스처(Pull gesture)를 하면 6개 의 파일들이 쭉 나타나고 Grab gesture로 하나를 선택해 파일을 불러낼 수 있음. 반대로 줌-아웃, 즉 미 는 제스쳐(Push gesture)를 하면 6개의 파일들이 포개져 왼쪽의 38파일로 들어감. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 47. 47/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun 2016). Image: USPTO. Zoom Grid로 미디어 플레이어를 제어하는 그림. 38L의 ‘Born to be wild’를 재생 하면서 사용자는 Pull gesture로 90의 Zoom Grid인 92(Pause), 94(Stop), 96(Play), 98(Seek)을 제어. 100의 볼륨을 제어할 수 있는데, 102의 볼륨 슬라이더 아이콘을 손동작인 횡단, 즉 X-축을 따라 좌우로 손짓하여 제어. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 48. 48/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.5(9,377,865, 28 Jun 2016). Image: USPTO. 3차원 줌(Zoom)-베이스의 UI로 키보드(120)를 제어. 사용자가 손을 X-Y 축으로 움직이면(Find gesture), 128의 키를 하이라이트로 띄워주고, X-Y축으로 손을 움직여 커서를 42의 ‘C’에 위치시키면 ‘C’의 사이즈가 커지고 손으로 잡는 Grab gesture로 ‘C’를 입력. 손을 X-Y 축에서 Z-축으로 손을 뒤로 당겨(pull hand back) Z-축 상의 키를 찾음. 반대로 Push gesture를 하면 ‘undo’가 됨. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 49. 49/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Zoom-based gesture user interface)의 Fig.9A(9,836,201, 5 Dec 2017). Image: USPTO. Fig.1을 보면 앞서 소개한 특허(9,377,865)와 같은데, 단 다른 것은 42의 커서가 빠져있다는 것으로 보다 혁신적인 특허임. Zoom-based gesture user interfaceV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 50. 50/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의 Fig.1(20180059925, 1 Mar 2018). Image: USPTO. Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 51. 51/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의 Fig.2(20180059925, 1 Mar 2018). Image: USPTO. 시계 방향 -> 줌인(확대), 시계반대 방향-> 축소 Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 52. 52/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의 Fig.3(20180059925, 1 Mar 2018). Image: USPTO. 수평 방향의 커서 제어. 손을 왼쪽-오른쪽-위-아래 움 직여 커서 제어 Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 53. 53/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple(PrimeSense) 출 원 서 공 개 상 (Enhanced 3D interfacing for remote devices) 의 Fig.4(20180059925, 1 Mar 2018). Image: USPTO. 62의 심볼인 아크(arc, 아치)가 T9사(t9.com)의 T9 Text Input으로 나타난 경우인데, 아크 형태로 손을 움직이다가 76의 버튼을 손으로 잡는 제스처(Grab gesture)로 선택. 124의 구면좌표계(spherical coordination system)의 원리를 이용해 122의 영역으로 움직인다는 것을 사전에 입력하고 감지. Enhanced 3D interfacing for remote devicesV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 54. 54/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.1(9,454,225, 27 Sep 2016). Image: USPTO. 38의 동공(pupil), 39의 홍채(iris), 41의 각막(cornea)까지 24의 센싱 디바이스가 감지해 최종적으로 눈의 응시 방향을 감지해 3차원 맵으로 생성하고 이를 3차원 UI로 사용해 36의 객체들을 눈으로 제어. Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 55. 55/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.4(9,454,225, 27 Sep 2016). Image: USPTO. 눈으로 숫자 키판(36A)을 이용해 패스워드를 입력. 92는 시선(line of sight)이고 94는 시 야각이며 36B는 시작 버튼. 시선을 숫자 키판에 집중하여 패스워드를 입력한 후 그 다음 시작 버튼을 응 시해 컴퓨터를 시작. 만약 정해진 시간에 눈의 움직임이 없으면 절전 모드로 전환. Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 56. 56/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple(PrimeSense) 특허상(Gaze-Based Display Control)의 Fig.6A~6B(9,454,225, 27 Sep 2016). Image: USPTO. Gaze-Based Display ControlV. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 57. 57/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Apple – Content Abstraction & UX for TV Apple - Content abstraction presentation along a multidimensional path(8,296,677, 23 Oct 2012) 330 abstraction 은 310 메 뉴 의 Movie 의 요 약 임 . 또 는 330 은 Foreground(전경)가 되고, 332- 336 은 그 콘 텐 츠 의 Background(배경)가 될 수 있음. 이때 Foreground와 Background 는 multidimensional path 350 을 구성하게 되는데, 336은 그 콘 텐츠의 마지막 장면이 됨. 또는 330은 하이라이트된 Movie 310 의 Abstraction이 될 수 도 있음. V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 58. 58/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Apple – New 8 Navigational Bar for Apple TV Apple - Video/Music User Interface(20110041060, 17 Feb 2011). New 8 Navigational Bar for Apple TV 현재보고 있는 iTV의 내용을 Navi Bar를 통하여 서치/공유하는 앱으로 보다 많은 Fun을 주기 위한 것임. Pause를 누르면 Navi Bar 가 나 타 남 . FIG. 2 의 222 는 Previous or Next scene, 223은 영화의 촬영 장소를 보여줌, 224는 영화의 오디오 트랙이나 노래를, 225는 SNS를 통해 Text 를 보내기(e.g, hey, what a touchdown - did you see that!), 226은 서치, 227은 영 화를 촬영한 감독이나 배우, 228과 229는 최종 등급 심사에서 커트된 장면을 보여줌. V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 59. 59/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ AT&T - 제스쳐로 TV 제어 AT&T의 제스쳐로 TV 제어. AT&T - Electronic Device Control Based on Gestures(20120124516, 17 May 2012 <- 12 Nov 2010) via USPTO. 2012년에 AT&T는 프라임센서 기술을 바탕으로 '제스쳐 베이 스 의 전 자 기 기 기 콘 트 롤 (20120124516)’이라는 특허를 등록했다. 이는 제스쳐 베이스 의 콘트롤러(controller)가 제 스쳐를 인식하는 카메라로부터 3D 이미지를 받아 TV 화면에 메뉴, 볼륨, 채널 등을 보내 나 타내고 이를 제스쳐로 제어하 는 것에 관한 기술. V. 3D UI/UX의 AR/VR for Mac/TV(To Be)
  • 60. 60/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Automatic Configuration of Self-Configurable Environments)의 Fig.2 & 3(20130197674, 1 Aug 2013). Image: USPTO. VI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be) Automatic Configuration of Self- Configurable Environments
  • 61. 61/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의 Fig.1(20180079427, 22 Mar 2018). Image: USPTO. 승객이나 운전자가 응시와 제스처로 자율차의 경로 를 변경(trajectory changes) Gesture Based Control of Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 62. 62/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의 Fig.2(20180079427, 22 Mar 2018). Image: USPTO. 자율차 환경을 구성하는 요소들. Interaction management device(IMD) Gesture Based Control of Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 63. 63/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의 Fig.3A(20180079427, 22 Mar 2018). Image: USPTO. 승객이나 운전자가 제스처로 자율차의 경로를 변경 (trajectory changes) Gesture Based Control of Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 64. 64/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ < 그 림 > Apple 출 원 서 공 개 상 (Gesture Based Control of Autonomous Vehicles) 의 Fig.6(20180079427, 22 Mar 2018). Image: USPTO. 어느 곳을 둘러야 하는지를 결정하는 머신러닝이나 인공지공 알고리즘을 설명하는 그림 Gesture Based Control of Autonomous VehiclesVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 65. 65/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.2(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 66. 66/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.3A(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 67. 67/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.3B(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 68. 68/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.3C(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 69. 69/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.6(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 70. 70/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Adaptive Vehicle AR Display Using Stereographic Imagery)의 Fig.8(20180089899, 29 Mar 2018). Image: USPTO. Adaptive Vehicle AR Display Using Stereographic ImageryVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 71. 71/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.1(20180089900, 29 Mar 2018). Image: USPTO. 리얼 환경에 투영되면 버추얼 콘텐츠(116)는 자동차 앞의 수 미터 거리에서 고정된 것처럼 보이 고, 버추얼 환경에 투영되면 승객 앞에 고정된 것처럼 보여, 멀미(motion sickness)를 일으키지 않음. Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 72. 72/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Augmented virtual display <그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.2(20180089900, 29 Mar 2018). Image: USPTO. 투영의 해상도나 질을 높이기 위해 208의 창문은 파장 가이드 기술 혹은 홀로그래픽 기술 등을 포함시킬 수 있음. VI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 73. 73/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.8(20180089900, 29 Mar 2018). Image: USPTO. 자동차 안의 실제 물리적인 시스템과 버추얼 시스템이 융합해 승객에게 동조화 물리 효과 (Synchronized physical effects)를 제공(가속의 중력). 버추얼 콘텐츠의 내용에 따라 공조시스템이 동조화 작동 할 수 있고 오디오시스템도 동조화 배경 음악 등을 제공 Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 74. 74/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 출원서 공개상(Augmented virtual display)의 Fig.11B(20180089900, 29 Mar 2018). Image: USPTO. Augmented virtual displayVI. 3D UI/UX의 AR/VR for Car/EV/AV(To Be)
  • 75. 75/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델 <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.3 & 4. Image: USPTO.
  • 76. 76/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.7. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 77. 77/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.9. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 78. 78/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.12. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 79. 79/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.13. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 80. 80/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.13. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 81. 81/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.16A. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 82. 82/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.16D~19B. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 83. 83/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple의 '다차원 데스크탑(Multi-dimensional desktop)'(8,745,535, 3 Jun 2014)과 '멀티-차원 앱 환경(Multi-dimensional application environment)'(8,381,122, 19 Feb 2013)과 '시각화 및 상호작용 모델(Visualization and interaction models)'(8,473,859, 25 Jun 2013)의 Fig.21A~21B. Image: USPTO. VII. 3D GUI의 OS/App(To Be) 다차원 데스크탑 – 다차원 앱 – 시각화/상호작용 모델
  • 84. 84/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Object transitions <그림> Apple 특허상(Object transitions)의 Fig.1(8,127,239, 28 Feb 2012). Image: USPTO. 이미지나 앱을 오픈 할 때 줌인(Zoom in, 확대), 줌아웃(Zoom out, 축소), 동작/제스처/음성/응시인식을 이용. 파일을 읽은 후에 Zoom out으로 원래의 포지션으로 되돌아가게 되는데, 이를 ‘Cross fading effect’라고 하고 Apple은 특허에 ‘Transition Effect’라 기 술하고 있음. Transition Engine은 용기, 화병, 담배, 펜, 자물쇠 등의 책상 주위의 물건들을 ’animated effect‘로 사용. 자물쇠를 애니메이션으로 불러와 잠그면 타인이 볼 수가 없다고 기술하고 있음. VII. 3D GUI의 OS/App(To Be)
  • 85. 85/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.2(8,127,239, 28 Feb 2012). Image: USPTO. 사용자들 은 실제 리얼 환경에 있는 데스크탑 주위의 객체들의 이미지를 활용하여 다차원 데스크탑 환경을 꾸밀 수 있는데, 블루틴 보드에 앞정(thumbtack)으로 꽃은 Paper처럼 관리할 수 있음 Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 86. 86/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.3A(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 87. 87/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.3B(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 88. 88/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.3C(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 89. 89/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.3D(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 90. 90/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.3E(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 91. 91/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Object transitions)의 Fig.4(8,127,239, 28 Feb 2012). Image: USPTO. Object transitionsVII. 3D GUI의 OS/App(To Be)
  • 92. 92/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ VIII. 3D GUI의 브라우저(Safari)(To Be) Grouping and browsing open windows <그림> Apple 특허상(Grouping and browsing open windows)의 Fig.1A(9,069,577, 30 Jun 2015). Image: USPTO. 2D 데스크탑 공간에서 오픈 윈도우를 2차원으로 그룹핑하고 브라우징 하기.
  • 93. 93/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Grouping and browsing open windows)의 Fig.1B(9,069,577, 30 Jun 2015). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 그룹핑하고 브라우징 하기 VIII. 3D GUI의 브라우저(Safari)(To Be) Grouping and browsing open windows
  • 94. 94/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1B(8,910,072, 9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고 상호작용하기 Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
  • 95. 95/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1C(8,910,072, 9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고 상호작용하기 Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
  • 96. 96/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Browsing and interacting with open windows <그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1D(8,910,072, 9 Dec 2014). Image: USPTO. 3D 데스크탑 공간에서 오픈 윈도우를 3차원으로 브라우징하고 상호작용하기. Cluster. VIII. 3D GUI의 브라우저(Safari)(To Be)
  • 97. 97/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ <그림> Apple 특허상(Browsing and interacting with open windows)의 Fig.1E(8,910,072, 9 Dec 2014). Image: USPTO. 클러스터 창들이 사용자의 기기 동작이나(좌우로 기울기 등) GUI 입력에 의해 기울어져(tilted), 각 창의 내용을 확인할 수 있음. IOS7(iPhone 5S)부터 탑 재된 사파리가 이 기술을 이용 Browsing and interacting with open windowsVIII. 3D GUI의 브라우저(Safari)(To Be)
  • 98. 98/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ BM for AppleVIV. Cloud <-> Edge Services(To Be) 개인 사무실학교/교 육 가정-거 실 자율차가정-부 엌 병원/ 환자/ 고령 자 Work ***** ***** ***** ** ** ** ** 실시간 지원제어 Lear n **** ***** ***** **** ** ** ** Life ***** ***** ***** ***** ***** ***** ***** Play ***** ***** ***** ***** ** **** ** 3D GUI AR/VR iTune AppStore Apple iCloud 3D iOS/OS/App/Safari Seamless N-Screen between Radio and Local Media iCloud based Contents Radio/TV Broadcast System iCloud i-OS based SOA Platform iAd/Pay iCloud Based Safe Deposit Box 1 4 5 7 전략적 어플(Photo Booth, iTunes, iBook, iMovie, Garage Band, iPen, iDrawing, AirPlay, Smart Grid, etc) 2 6 8 8 9 Apple in the Sky with Diamond iPhone iPad Mac PC iTV iKitchen iCar/EC iHealth iW/Robot3 차원용 박사, 김종석 박사, “스마트 미디어 개발 방향 및 그에 따른 서비스 개발 전략”, 13/Sep/2010-15/Oct/2018 WC/로봇
  • 99. 99/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Next Big ThingsVIV. Cloud <-> Edge Services(To Be) 天 地 人 생체인터넷 (IoB) 인간형 로봇 3D프린터/ DIY 서비스 디자인 Cloud 블록체인/ 핀테크 O2O Platform Storage 가상현실증강현실 자율차 두뇌인터넷 (IoB)GPS & Sensors SNSs Processors Nets 빛=에너지 Smart H/K Until Now as there are : 생체에너지 Smart City 드론 로봇 정밀의료 신약 미세 먼지 탄소 자원 IoT 인간(Bio)의 학문/ 술/디자인공간(Physical)의 학문/기술/디자인 시간(Digital/Cyber)의 학문/기술/디자인 크리스퍼/ 클린미트 Smart FoodSF/BM/SS X- ABNI+α, SW, BD->SD Cloud<->Edge -> Hybrid Block Chain
  • 100. 100/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Triple Camera(‘19)VIV. Cloud <-> Edge Services(To Be)
  • 101. 101/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Triple Camera(‘19)VIV. Cloud <-> Edge Services(To Be) 아이폰 11은 1200만 광 각, 1200만 초광각 듀얼 카메라로 구성. 아이폰 11 프로와 프로맥스는 여기 에 1200만 망원 카메라를 더해 트리플 카메라가 장 착.
  • 102. 102/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Quad Camera - TB(‘20)VIV. Cloud <-> Edge Services(To Be) 아이폰12 프로 렌더링. / 폰아레나 제공 증강현실(AR) 기능 고도(3D 센 싱, 3D 안면인식)화에 필요한 비 행시간거리측정(ToF, Time-of- Flight) 카메라가 추가될 것으로 알려 졌음.
  • 103. 103/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 아이폰12 프로 시리즈 추정 이미지. [사진출처 = 폰아레나] Quad Camera - TB(‘20)VIV. Cloud <-> Edge Services(To Be)
  • 104. 104/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Apple and Blockchain(16 Mar 2018)VIV. Cloud <-> Edge Services(To Be) Apple - OBTAINING AND USING TIME INFORMATION ON A SECURE ELEMENT(SE)(20170353320, December 7, 2017 <- August 24, 2017(15/686023) <- Feb 26, 2016(62300698) with 20 Claims & 19 Drawing Sheets) http://appft.uspto.gov/netacgi/nph- Parser?Sect1=PTO2&Sect2=HITOFF&u=%2Fnetahtml%2FPT O%2Fsearch- adv.html&r=1&p=1&f=G&l=50&d=PG01&S1=2017035332 0.PGNR.&OS=dn/20170353320&RS=DN/20170353320 According to the filing, Apple would use multicheck architecture that incorporates Public Key Infrastructure and blockchain to verify the authenticity of timestamps and protect secure elements (SE), such as SIM cards or microSD cards that could contain critical information. Fool - Apple and Blockchain: Together at Last?(16 Mar 2018) https://www.fool.com/investing/2018/03/16/apple-and- blockchain-together-at-last.aspx Certification authority (CA)
  • 105. 105/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ Apple Blockchain: Apple Coin already started….VIV. Cloud <-> Edge Services(To Be) 2018 - Apple Coin Is The Name Of Advanced Technology Of Blockchain Which Linked & Joint Venture In Future With Apple Inc. https://applecoin.live/, www.appleblockchain.info, (’19) https://developer.apple.com/documentation/cryptokit
  • 106. 106/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ X. Conclusion 1. HAS Business Model or 2. O4O=Cloud <-> Edge Business Model 3. MV/R Comparison Apple Amazon Google MS FB Samsung ‘19 Revenue(억$) 2,700 2,804 1,500 1,258 665 2,230 (240TW) ’20 Market V(억$)1) 15,330 13,430 10,160 14,890 6,156 2,966 (356W) MV/R 5.67 4.78 6.77 11.83 9.25 1.33 1) As of 26 Jun 2020 X. Conclusion
  • 107. 107/107 Facebook.com/wonyongcha아스팩미래기술경영연구소(Since 1994) -http://aspect.or.kr/ 감사합니다^ Q&Abiblematrix@gmail.com, 010-85273-5763 강의 요청 섭외: 정유진 비서담당: 010-4381-8560