본문으로 건너뛰기

DUAL LENS · SYSTEMS INTO EXPERIENCE

복잡한 기술을 작동하는 구조로 만들고, 그 구조를 사람이 느끼는 경험까지 연결합니다.

실시간 데이터 파이프라인부터 뇌파 기반 VR까지, 병목을 찾아 구조를 설계하고 기술이 작품과 사용자 경험으로 이어질 때까지 구현해 왔습니다. 구조를 설계하는 관점과 그 구조가 만드는 경험을 살피는 관점을 하나의 문제 해결 방식으로 연결합니다.

FROM STRUCTURE TO EXPERIENCE

문제를 해결한 구조와, 그 구조가 만든 경험

graphicsautomation 2023.03 - 2023.10

미디어 아트용 고부하 실시간 AI 이미지 처리 시스템

기술 총괄

프로젝트 자세히 보기

해결한 문제

미디어 아트 작품의 AI 가공 데이터를 Unity 콘텐츠에 실시간으로 연결하기 위해, 분산 데이터 처리 파이프라인을 설계·구축했습니다.

ENGINEER · STRUCTURE

병목을 찾아 실시간 처리 구조로 바꾸다

전송·획득·고부하 처리의 병목을 분리해 다루고, Node.js·Python·Unity를 하나의 실시간 흐름으로 연결했습니다.

구조를 만든 방법

  • 매초 60회 이미지 데이터 처리
  • Node.js · Python · Unity · WebSocket 사용
  • Python 멀티프로세싱으로 이미지 획득 지연 206ms → 13ms
  • 여러 Raspberry Pi 클러스터로 고부하 분산 처리

ARTIST · EXPERIENCE

처리된 데이터를 작품 경험까지 연결하다

기술 총괄로서 작가와 협업하며, 실시간 데이터 구조가 Unity 콘텐츠로 이어지는 제작 기반을 만들었습니다.

경험으로 연결한 방법

  • 기술 총괄로서 작가와 함께 작품 제작 프로젝트에 참여
  • AI 가공 데이터를 Unity 콘텐츠와 실시간 연동
핵심 결과
초당 60회의 이미지 데이터를 다루는 실시간 파이프라인과 Unity 연동 로직을 설계·구축했습니다.
문제 해결 방식
성능 개선을 별도의 기술 과제로 끝내지 않고, 데이터가 Unity 콘텐츠에 실시간으로 닿는 전체 제작 흐름까지 설계합니다.
수치 기준
13ms는 이미지 획득 지연 수치이며, AI 추론이나 전체 파이프라인 지연 수치는 아닙니다.
graphics 2021.05 - 2022.11

뇌파 데이터 활용 실시간 VR 콘텐츠 개발

기술 총괄 / 데이터 / 3D 그래픽

프로젝트 자세히 보기

해결한 문제

뇌파 신호를 VR의 시각·청각 변화로 실시간 연결하기 위해, 수집·전처리용 Brain API와 Unity 로직을 구축했습니다.

ENGINEER · STRUCTURE

뇌파 신호를 팀이 활용할 수 있는 구조로 바꾸다

뇌파 수집·전처리를 모듈화하고 집중·릴랙스 패턴 감지를 구현해, 내부 동작을 몰라도 활용할 수 있는 실시간 상호작용 기반을 만들었습니다.

구조를 만든 방법

  • 뇌파 데이터 수집·전처리용 자체 Brain API 설계·구현
  • Unity 기반 실시간 상호작용 핵심 로직 구축
  • 집중·릴랙스 뇌파 패턴 감지 구현
  • 팀원이 내부 동작을 몰라도 사용할 수 있는 모듈화

ARTIST · EXPERIENCE

몸의 신호를 감각적 상호작용으로 바꾸다

측정한 뇌파 신호를 VR의 시각·청각 효과와 실시간으로 연결해, 사용자의 뇌파에 직접 반응하는 경험을 구현했습니다.

경험으로 연결한 방법

  • 뇌파 신호에 따라 시각 효과가 실시간으로 변화
  • 뇌파 신호에 따라 청각 효과가 실시간으로 변화
핵심 결과
Brain API와 Unity 로직을 통해 뇌파 신호를 실시간 VR 시청각 변화에 연결했습니다.
문제 해결 방식
뇌파 수집·전처리를 API로 추상화해 팀의 개발 기반으로 만들고, 그 신호가 사용자가 보고 듣는 변화로 이어지도록 시스템 전체를 연결합니다.
구현 범위
뇌파 수집·전처리, 집중·릴랙스 패턴 감지, Unity 시청각 효과 연동까지 구현했습니다.

HOW I WORK

기술을 구현하는 데서 멈추지 않습니다.

복잡한 입력과 병목을 다룰 수 있는 구조를 만들고, 팀이 활용할 수 있게 정리하며, 그 결과가 실제 작품과 사용자 경험으로 이어지는지까지 살핍니다.

  1. 01

    복잡한 신호와 데이터의 병목을 찾아 실제로 작동하는 구조로 바꿉니다.

  2. 02

    서로 다른 기술과 런타임을 하나의 흐름으로 연결합니다.

  3. 03

    기술이 실제 감각과 상호작용으로 이어질 때까지 구현합니다.