Unity APAC Industry Summit 2023

18 Jul 2024  Khlee  6 mins read.

Opening session

디지털 트윈의 현재와 유니티가 그리는 미래 비전

  • 실시간 3D를 다양한 산업에 적용하는 조작을 만들었음
  • 실시간 3D 기술이 핵심
  • 디지털 트윈은 프로세스의 가상화
  • 데이터를 한 곳으로 모아서 표현하는 것이 디지털 트윈
  • 라이브: 실시간 3D 기술이 들어와서 모든 프로세스를 라이브 프로세스로 엮어냄
  • 데이터를 하나로 모으는 것
  • 실시간 데이터이기 때문에 어떤 밸브가 고장났고 어떻게 고칠 수 있는지 알 수 있음

공간의 디지털을 통해 새로운 고객경험 만들기

  • 5G 상용화는 실시간 데이터를 더 많이 전송할 수 있게 됨
  • 메타버스: 여러 사람을 모이게 한다. 세상을 경험하는 새로운 방식을 제공
  • 유튜브: 업무용 메타버스, 메타슬랩 / 어린이용, 키즈토피아
  • Use case 1: 같은 공간에서 함께 일함
    • 오프라인 미팅은 수직적이고 경직되었는데 메타버스에서는 수평적인 분위기
    • 구성원과 같은 공간에 있어서 현실감이 있다
    • 메타슬랩은 하이브리드라 온라인 참여자도 소외감 없음
    • 아바타의 표정, 몸짓을 카메라를 통해 가상 아바타에 적용
  • Use case 3: AI 기술
    • 아이와 (영어로)대화할 수 있는 게임
    • 생성형 AI를 캐릭터에 접목해서 페르소나 형성
    • 영어학원에 설치해서 인기가 많음
  • Use case 4: 키즈토피아
    • 친구를 만나서 낚시체험, 공룡월드, 가고싶은 곳 가기, 관련 정보 얻기, 퀴즈 통해 보상 받기
    • 아바타 꾸미기
    • 알파세대는 온라인에서 친구들을 만나는걸 익숙해 함
    • 현장체험은 좋은 교육방식 - 가상 체험을 통해 해결 가능

유니티와 함께 지능형 제조 혁신을 가속화하는 메타팩토리

  • 유니티, HIMGICS 기술협약
  • 제조 혁신의 게임 체인저
  • 제조 공정이 복잡해짐 (니즈의 다양화)
  • 복잡성 증가에 실시간으로 유연하게 대응할 수 있는 메타팩토리
  • 메타팩토리 로드맵
    • 시각화와 분석, 모니터링
    • 시뮬레이션, 최적화: 가상환경과 시뮬레이터를 연결해서 생산 조건을 예측
    • 자동화: 데이터가 실시간으로 동기화되고 가상 환경에서 예측함
  • 메타팩토리: 데이터 주도적인 자율 생산
  • 이를 위해 3D 기술을 사용해서 가상으로 판단하고 예측
  • 이동식 로봇의 경로를 실시간으로 최적화

AI가 산업과 디지털 트윈에 미치는 영향과 그 의미

  • 유니티가 AI를 통해 크리에이터의 잠재성 발휘
  • 모든 것이 생성되는 과정에서 AI의 영향을 받을 것이다
  • Muse: 생성 단계를 위한 AI
    • 2D, 3D 에셋을 생성할 수 있음
  • Sentis: 런타임을 위한 AI
    • 모든 플랫폼에 적용 가능
    • 클라우드 지연 등의 문제에서 벗어날 수 있음
    • 실시간 AI를 통합할 수 있음

Unity XR and it’s possibilities

  • 사람은 원래 3D에 익숙하기 때문에 XR이 필요함
  • 사진, 동영상 (2D를 해석하는 과정 필요)
  • 현실 공간을 느끼고 상호작용할 수 있는 것: XR
  • Industry XR Solution
  • 손으로 폰을 들고 있어야 함 -> 과도기적인 현상 -> 미래에는 두 손이 자유로울 것
  • 멀미, 착용감, 폐쇄적(눈앞을 가리는)인 것을 해결해나가고 있음
  • 개발할 때의 장애물: 플랫폼별로 파편화되어 있지만 유니티가 해결해 줌

개발자라면 미리 알아야 할 Unity PolySpatial & visionOS

  • Vision Pro 단계들
  • 2D 앱: 눈과 손사용
  • 3D apps on 2D planes: TV를 3D 모드로 켜 놓고 안경을 쓰고 봄
  • 3D 물체가 2D 위에 증강이 됨
  • 공간 상에 컨텐츠를 띄우고 상호작용 가능
  • 마지막 단계: 물리적인 공간과 가상의 물체를 완전히 결합
  • 비전프로를 대상으로 유니티 빌드 할 수 있음 -> Xcode 및 에뮬레이터로 테스트 가능
  • MR: 폴리스페셜을 통해 아이트래킹 등 vision pro에서 제공하는 기능 사용 가능

  • 산업 Use case
  • 다수의 앱이 한꺼번에 실행될 수 있음
  • 자동차 산업: 디자인을 보면서 확인할 수 있음
  • 전세계 팀이 모델과 파트를 함께 보면서 함께 작업할 수 있음
  • 라이브로 색상을 바꿀 수 있음
  • 영업사원이 트랙터 판매할 때 특징점 및 작동방법 트레이닝 가능
  • 건물 공간에 있는 관들이 어떤 것인지 확인 가능
  • 협업의 예: 수술할 때 심장 모델을 띄워서 상의할 수 있음

Session 1 / 13:30 ~ 14:10

Track 2: 잘 나가는 회사의 요즘 오피스, LG U+ ‘Meta Slap’

  • 메타슬랩, 키즈토피아
  • 고객 경험 혁신
  • Web3: 3D로 세상을 보고 느낄 수 있는 것
  • 메타버스 추진계획
  • 사람의 뇌는 무엇을 보는지에 따라 다르게 반응함
  • 현재는 Trial & Error 하는 과정
  • 타겟을 좁히는 대신 사용성을 올리는 전략 -> 메타버스 성공
  • 액티비티+공간+아바타
  • 집중하는거 3가지
    • 현실 + 가상 상호작용
    • 기존 인터페이스가 익숙하면서도 혁신적인지
    • AI와 같이 확장되는 인프라와 융복합이 가능한지
  • 본인 웹캠 기반으로 제스쳐, 감정표현 가능
  • 캐릭터별로 AI로 페르소나를 정했음, 자유롭게 대화 가능
    • inworld 회사랑 같이 해서 가능했음
    • 멀티 페르소나 -> 10분이면 캐릭터를 만들 수 있음
  • 생성형 AI + 메타버스 결합

Session 2 / 14:20 ~ 15:00

Track 4: XR 개발의 필수품, XR Interaction Toolkit 2.3

  • 메타퀘스트 비전프로 등 XR 디바이스를 사용할 때 사용자가 상호작용을 쉽게 하게 해줄 수 있는 툴킷
  • 핸드제스쳐도 사용 가능 (모바일에서도 사용이 가능할지는 미지수)

Session 3 / 15:10 ~ 15:50

Track 3: 유니티를 활용한 선박 Virtual Platform 구축사례

  • 삼성중공업: 컨테이너선, LNG 선박, 해양플랜트 만드는 회사
  • 유니티를 사용하는 이유: 너무 커서 볼 수 없고 보여줄 수 없다.
  • 선박은 설계해야 하기 때문에 3D 모델링이 이미 있음
  • 그러나 캐드 모델에 있는 데이터는 엄청 많음 (용량 30기가, 50만 파트, 1억개 메쉬)
    • -> 픽시즈를 통해 게임 엔진으로 가져올 수 있음
  • 고객 홍보용으로 메타버스 월드에 만들었음
    • 공지, 홍보영상, 박물관, 투어가이드 (도슨트), 포토존 등등 컨텐츠 추가

Session 4 / 16:10 ~ 16:50

Track 3: 북미 공항의 미래를 선도하는 밴쿠버 국제공항 (YVR)의 디지털 트윈을 통한 경험 혁신

  • 디지털 트윈이 왜 혁신적인지?
  • 현실 세계와 동일한 외형을 가지고 행동하는 시스템, 에셋, 환경을 의미
  • 실제 제품이 겪을 수 있는 상황 문제 성능을 예측할 수 있게 함
    • 1단계 가상 트윈: 현실과 똑같은 물체를 가상으로 만드는 것
    • 2단계: 실시간으로 성능에 관한 인사이트를 제공
    • 3단계 예측형 트윈: 실시간 데이터를 본격적으로 확인. 미래 행동을 예측. 리스크를 대하는 접근법. 잠재적인 문제 대응
    • 4단계 규정적 트윈: 규범적인 분석과 권고안. 머신러닝을 활용 장비, 설비, 인간의 행동을 복제
    • 5단계 자동화 트윈: 여러 다양한 실시간 데이터를 학습해서 의사를 결정하고 문제를 해결
  • 4단계에 대해 말해줌 벤쿠버에 성공적으로 적용된 모델
  • 이용객이 줄어든 상황을 활용해서 공항을 개선 -> 트윈 개선
  • 위치 추적, 동선 분석 -> 성공적으로 위치 데이터를 트윈에 포함
  • 효율적인 경로 안내, 공한 운영
  • 디지털 트윈 플랫폼은 데이터 관리 플랫폼이다

  • 공항에 도움이 되는 4가지 측면
  • 운영 효율성 -> 매출 최적화 비용 절감
  • 신규 매출 창출, 공항에서의 광고
  • 탑승객 경험을 향상, 공항이 최종 목적지가 되도록 하는 것
  • 안전과 보안
  • CCTV, 외부 레이더 등의 데이터를 모은다.

Session 5 / 17:00 ~ 17:40

Track 3: 산업을 위한 워크플로우 완벽 개선 및 온보딩

  • Product Activation: 회사 보안 관련 문제로 유니티 실행이 원활하지 않을 때 지원해주는 팀
  • 픽시즈로 캐드 데이터를 유니티로 가져온 다음 마스를 이용해서 가상 오브젝트를 공간에 배치하고 증강하기
  • 하복: 수많은 오브젝트에 최적화된 물리엔진
  • 빌드서버: 유니티 인더스트리에는 빌드 서버 라이선스가 그냥 제공됨
  • AR Immersal: 정확도가 높음, 내비게이션 등등 기능이 있음

Session 6 / 17:50 ~ 18:30

Track 2: Unity HDRP를 이용한 고품질의 디지털 휴먼 제작기

  • Digital Human Package 2.0
    • 깃헙에 올라와 있음 (3개)
    • com.unity.demoteam.digital-human
      • hair
      • mesh-to-sdf -> 헤어 충돌 체크
  • 헤어는 안티엘리어싱 중요한데 HDRP에 라인 렌더링 기능 이용해서 헤어 표현할 수 있음
  • 헤어 바디 충돌 체크 - SDF를 사용함
  • 스캔 -> 로우데이터 가공 -> 마야에서 솜털이랑 디테일작업 -> 유니티에 적용
  • 페이셜캡쳐 방법 두가지: 지바 or 라이브캡쳐
  • 풀 바디 모션 캡쳐 + 라이브캡쳐 + 버츄얼카메라
  • AI 사용해서 대화 가능

메모

  • 유니티 로보틱스를 사용해서 하드웨어랑 상호작용 가능
    • ROS를 사용하는 듯 (TCP 통신)
  • AI를 통해 가상 캐릭터 부여 에셋 생성 등을 할 수 있음

khlee
khlee