Skip to main content
SISEON은 Sight-based Intelligent System Elevation Optimization Normalizer의 약자입니다. 사용자의 시선과 자세를 실시간으로 인식해 모니터의 높이, 거리, 각도를 자동으로 보정하는 AIoT / Robotics 시스템입니다.
SISEON logo

Overview

My role

  • Project Leader
  • Raspberry Pi 5 기반 ROS2 제어 노드 개발
  • OpenMANIPULATOR-X 하드웨어 통합 및 제어 흐름 구현
  • Jetson, Pi, 앱, 서버 간 UDP/MQTT/BLE 통신 흐름 통합

System architecture

SISEON은 Jetson, Raspberry Pi, EC2 서버, Flutter 앱이 연결되는 edge-cloud 시스템입니다.

Control modes

Auto

AI 추론 결과를 기반으로 모니터 위치를 자동 조절합니다.

Preset

사용자가 저장한 위치로 로봇팔을 이동합니다.

Manual

Flutter 앱의 조이스틱으로 수동 제어합니다.

Core stack

Performance targets

App and AI results

ai1

AI result 1

사용자 눈 위치와 자세 추론 결과입니다.
ai2

AI result 2

다양한 환경에서 자동 제어 입력을 생성했습니다.
auto

Auto mode

앱에서 자동 제어 상태를 확인합니다.
manual

Manual mode

조이스틱 기반 수동 제어를 제공합니다.

Presentation