24.12.16 개인일지

To Do List

• 업무
  • L 과제 준비
    • SH 박사님, Survey Overview 진행 
      • https://yeonsoo98.tistory.com/14 
      • 12/13 : 주셨던 6개 자료중 2개 Overview (4개 남음)
      • 12/16 : 주셨던 6개 자료중 2개 Overview (2개 남음)
      • 12/17 : 2개 자료 Overview + Survey 논문 1개 정리
      • 12/18 : 구현 선정 및 테스트 시작 
    • LIG 과제 회의 
      • 12/17 오전 회의 준비
  • 개인 - Local Path Planing Algorithm Test Simulator
    • local_costmap_pkg & local_planner_pkg 구성
      • 알고리즘 dwa 진행
    • topic으로 goal을 줬을 때 움직이긴하나, 기존의 gazebo map을 잘 읽어오지 못함. 
      • map_server + amcl 노드 추가하여 map 생성 
      • map.yaml 파일 구성 / empty world 라서 
        • 다른 큰 gazebo 환경 불러오면 렉걸려서 작은 환경 찾아서 진행 목표
          
          • https://yeonsoo98.tistory.com/11

To Be Continue...

• H 과제 준비 - Object Detection + Tracking + ReID 기능 포함한 검출 시스템 구현 (대기)
  
  • detectron2 모델 선정 + BoT - SORT 
    • Object Detecion 성능은 괜찮음 - Human / ReID 자체 성능은 잘 안나옴 (pretrained pth 사용)
    • 튜닝 진행 (파라미터 값 파악하기)
      • 근본적으로 ID 카드 (회사 신분증을 어떻게 잘 검출할지가 핵심)
        • 해당 방법론에 대해서 고려하기 
        • 시스템은 대략적으로 구축 (킥오프 진행 이후 다시 고려)
          • Input Data -> Frame Extraction -> Objection Detection (Detectron2)
            -> Object Tracking & ReID (BoT SORT + Fast-ReID) -> Output 
        • Hugging Face 에서 Grounding SAM 테스트 / Lanyard 
          - https://yeonsoo98.tistory.com/13
          - https://huggingface.co/spaces/yizhangliu/Grounded-Segment-Anything
• Deep Learning + SLAM : droid slam & Deep Learning + Localization
  • 향후, 센서값, 이미지값, 음성 조합하여 모델 output을 로봇 action 의 input으로 입력 받아 진행하는 것도 고려
  • SLAM & Localization 실력이 어느정도, 향상 되었을 때 고려
  • 로봇 멀티 모달 (센서값, 텍스트, 이미지, 음성 등 다양한 데이터를 학습(input) ->  로봇의 action (output)
• 교육 프로젝트 준비
  • YH 박사님께 설명 및 간단한 인수인계 완료 - https://yeonsoo98.tistory.com/9
  • 소스코드 받아서 돌려보기 
• Simulationi + RL
  • GO 2 모델 Isaac GYM 시뮬레이션 -> train - play 실행 (완료) 

• 공부
  
  • 패스트 캠퍼스 강의 듣기