CSI BRIDGE / 진행 중
CSI BRIDGE
눈에 보이지 않는 무선 신호를 언어로 설명할 수 있을까요? CSI BRIDGE는 Wi-Fi Channel State Information과 시각·언어 모델의 표현을 연결하는 연구 주제입니다. 추론 시 CSI만을 입력으로 받아 행동과 상황을 설명하는 방향을 탐구합니다.
CSI BRIDGE
왜 CSI-to-Caption인가
행동을 미리 정한 분류 이름으로만 구분하면 상황의 맥락을 충분히 전하기 어렵습니다. 무선 신호에 담긴 움직임의 변화를 자연어와 연결해, 무엇이 일어나는지 설명하는 방법을 연구합니다. CSI 역시 민감한 행동 정보를 포함할 수 있으므로 데이터 동의와 사용 범위를 함께 고려해야 합니다.
연구 목표
Wi-Fi CSI의 시간적 변화와 VLM의 의미 표현 사이의 관계를 학습하고, CSI-to-Caption에 필요한 표현과 평가 방법을 검토합니다. 환경이나 사람의 차이에 대한 일반화, 문장과 실제 행동의 일치 여부가 중요한 연구 과제입니다.
문제와 핵심 아이디어
정해진 행동 범주를 고르는 것을 넘어, 무선 신호를 상황에 대한 문장으로 연결하는 것이 과제입니다. 학습 단계의 Teacher VLM이 제공하는 의미 표현을 Student CSI 모델에 전달하는 방향을 탐구합니다.
데이터셋
사용 데이터셋, 수집 규모, 학습·평가 분할은 아직 공개하지 않았습니다. 대응하는 신호와 시각·언어 정보의 정렬, 참여자의 동의와 데이터 사용 범위를 함께 검토하는 단계입니다.
평가 방향
문장이 실제 행동과 일치하는지, 환경이나 사람이 달라져도 설명이 유지되는지를 살펴보려 합니다. 평가 지표와 비교 기준은 검토 중이며, 검증된 성능 수치나 실험 결과는 아직 공개하지 않았습니다.
MULTIMODAL REPRESENTATION ALIGNMENT
신호와 의미를 연결하는 연구 설계
아래는 탐구하는 방법의 개요입니다. 확정된 구현이나 검증된 성능을 의미하지 않습니다.
01 / Wi-Fi CSI
무선 채널의 진폭·위상 등 채널 상태 정보에서 사람의 움직임에 따른 변화를 살펴봅니다. 시간 정렬, 잡음, 환경 변화가 입력 표현에 미치는 영향을 검토합니다.
02 / Teacher VLM
학습 단계에서 대응하는 시각 정보와 언어를 해석하는 Teacher VLM의 표현을 활용하는 방향입니다. 신호에 의미를 연결하기 위한 교사 역할을 맡습니다.
03 / Representation Alignment
서로 다른 CSI 표현과 시각·언어 표현이 공통된 의미를 담도록 정렬하는 방법을 탐구합니다. 대응 데이터와 학습 목표의 설계가 핵심입니다.
04 / Student CSI Model
CSI 입력을 처리하는 Student 모델이 교사의 의미 표현을 학습하고, 추론 시 시각 입력 없이 행동과 상황을 언어로 설명하는 것을 목표로 합니다.
응용 가능성
실내 활동 이해, 사람과 공간의 상호작용, 로봇의 상황 인지 보조 등에 연결될 가능성을 검토합니다. 실제 환경에서의 신뢰성이나 의료·안전 분야의 적합성은 별도의 검증이 필요한 과제입니다.
현재 공개 범위
현재는 연구 주제와 접근 방향을 소개합니다. 데이터셋, 구현 세부 사항, 성능 수치와 비교 결과는 아직 이 사이트에 공개하지 않았습니다. 공개 가능한 연구 기록과 결과를 정리한 뒤 순차적으로 추가합니다.