혁신융합대학[무인판매대] 무인판매대 상품인식 AI 경진대회 최종 평가 안내(RTF 산정 기준 추가)
안녕하세요, 참가자 여러분.
무인판매대 상품인식 AI 경진대회 최종 평가 방식을 아래와 같이 안내드립니다. 참가팀에서는 평가 기준을 충분히 숙지하시어 남은 기간 동안 최종 결과물 준비에 참고하시기 바랍니다.
🏆 최종 평가 기준 (총점 100점)
1. 동영상 기반 재고 인식률 평가 (40점)
- 5대의 Multi-Camera로 촬영된 구매/반환(Event) 영상을 활용하여 변동된 재고 상품의 인식 정확도를 평가합니다.
- 참가자는 이벤트별 재고 정보를 CSV 형식의 텍스트 파일로 저장하여 제출해야 합니다.
제출 파일 포함 항목
- 품목명
- 이벤트 번호
- 구매/반환 여부
- 이벤트 발생 후 상품별 재고 수량
- 이벤트 발생 후 총 재고 금액
2. 상품 구매 이벤트 동영상 처리 속도 평가 (20점)
- 5대의 Multi-Camera로 촬영된 구매/반환 이벤트 영상을 입력으로 사용하여 최종 재고 변동 결과 CSV가 생성되기까지의 처리 시간을 평가합니다.
- 처리 속도는 RTF(Real-Time Factor)를 기준으로 산정합니다.
RTF 계산식
RTF = 전체 처리 시간 ÷ 이벤트 영상 길이
계산 예시
- 카메라 수: 5대
- 각 카메라 영상 길이: 60초
- 전체 처리 시간: 45초
RTF = 45 ÷ 60 = 0.75
📌 RTF 산정 기준
RTF 계산 시 분모는 5개 카메라 영상 길이의 합이 아니라 하나의 이벤트가 진행된 실제 영상 시간을 기준으로 계산합니다.
예를 들어,
- Cam1 ~ Cam5 영상 길이: 각각 60초
- 입력 영상 총 길이: 300초가 아님
- 이벤트 길이: 60초
따라서,
RTF = 전체 처리 시간 ÷ 60초
으로 계산됩니다.
처리 속도 점수 기준
- RTF ≤ 1 : 만점(20점)
- RTF > 1 : 초과 정도에 따라 감점
감점 기준은 최종 평가 시 제출된 전체 참가팀의 처리 속도 결과를 바탕으로 상대평가 방식으로 적용될 예정입니다.
3. 정성적 평가 및 발표 점수 (40점)
최종 발표를 통해 연구 과정 및 결과를 종합적으로 평가합니다.
주요 평가 항목
- AI 모델 구조 설계
- 데이터 증강(Data Augmentation) 기법
- Multi-Camera 활용 전략
- 문제 해결 과정
- 데이터 전처리 방법
- Occlusion 대응 기법
- 이벤트 분석 및 재고 추적 방법
- 실험 결과 및 성능 분석
- 기술적 완성도
- 창의성
- 발표 전달력
📅 향후 일정
최종 제출 방법 및 세부 일정은 추후 별도 공지를 통해 안내드릴 예정입니다.
참가팀 여러분의 열정과 노고에 감사드리며, 남은 기간 동안 최선을 다해 준비하여 좋은 결과를 얻으시길 바랍니다.
감사합니다.
무인판매대 상품인식 AI 경진대회 운영팀
