2D image를 학습한 CLIP-based model을 3D domain으로 전이시켜, unseen 3D object를 zero-shot으로 추론시킬 수 있을까?라는 질문에서 시작된, "PointCLIP"에 대한 논문입니다. [논문의 기여]CLIP을 확장하여 3D 포인트 클라우드 데이터를 처리할 수 있는 PointCLIP을 제안 - 2D pre-trained knowledge를 3D로 전이하여 multimodal zero-shot 탐지 방법 제시multi-view 간의 feature interaction을 활용하는 Inter-view adapter 제안 - few-shot fine tuning 성능 개선기존의 fully-trained 3D model의 성능을 높이기 위한 ensemble module 제..

2024년 10월 회고DONE1. 통신 서버 완성 / 모델 배포 데이터 송신 -> 모델 추론 -> 처리 결과를 요청자에게 회신하는 코드를 restAPI로 구현한 서버 셋팅을 완료했다. Flask 를 쓰는 것도 처음이었고 데이터 포맷까지 처음부터 내가 정해야 해서 신경쓸 게 많은 작업이었지만 진짜 통신이 되는 걸 확인하고 나니까 신기하기도 하고 엄청 뿌듯하기도 해서 개발 업무의 참맛(?)을 느낄 수 있었던 작업이었다.  로컬 머신에서 포트 포워딩, 도커 이미지 빌드, 프로세스 최적화 등 온갖 잡지식을 찾아보고 적용해 볼 수 있었던 작업이고 앞으로 고도화해야할 포인트들이 있지만 큰 흐름을 만들어내서 너무너무 뿌듯한 10월이다. 2. 오픈소스 컨트리뷰션 용어집 PR 1건, 문서 번역 완료 1건, 진행중 1건으..

2024년 9월 돌아보기DONE1. 업무 성과 리스트업 완료 9월에 했던 일들 중 두 번째로 어려운 일이었다. 회사를 엄청 오래 다닌 것도 아닌데 담당 업무 / 핵심 기여 항목 / 결과물을 정리하는 게 꽤 어려웠다. 가장 어려운 것은 내가 한 업무 및 기여에 대한 결과 자료인데, 회사의 데이터나 업무의 주요 내용이 포함되면 곤란하기 때문에 시각화 자료를 따로 만들기도 했다. 한 번 정리를 하고 나니 느낀 것은, 평소에 준비해 두는 것이 회사 내에서 분기 리뷰 및 성과 평가를 할 때도 도움이 될 것 같다는 점. 결국 연말 성과 평가도 내가 회사에 얼마나 구체적으로 이익을 가져다줬냐를 중심으로 검토하게 될 텐데, 모르는 사람이 보더라도 이해할 수 있도록 결과 정리를 최대한 정량적으로 하다 보니 내부용 문서보..

2024년 8월 회고DONE1. 연구과제 중간발표  8월 한 달을 연구과제에 갈아 넣어서 워크샵에서 연구 내용 발표까지 마쳤다. 데이터셋 전처리부터 모델 관련 실험까지 적용할 수 있는 경우의 수가 너무 많아서 시행착오가 많았다. 시행착오를 걸러낸 이후에도 실험 방향이 맞는지 고민이 많았지만 결과물을 정리하고 나니 묘한 해방감이 들더라(?) 워크샵 참석 전에 아이인위에서 들었던 "매니저에게 피드백을 요청하라"라는 조언을 듣고 미리 팀 리더에게 실험에 대해서 한 번 리뷰를 해주실 수 있는지 여쭤봤는데, 흔쾌히 오케이 해주셔서 물어보길 너무 잘했다는 기억도 남아있게 된 프로젝트였다.  중간발표를 하고 유관기관과 여러 얘기를 하면서 앞으로 할 일이 더 늘긴 했다..^^ 연초에 연구과제 같이 할 팀원들한테 가을에..

안녕하세요, 럼지입니다.  광복절일 뿐만 아니라 여름 시즌의 귀한 공휴일이라서 더 기쁜 15일 오후에 아이인위 오프라인 첫 행사, "Tech beyond Boundaries: 빅테크 취직부터 승진까지"에 가봤어요. 모두의연구소 캠퍼스 방문은 처음이었는데 시설이 굉장히 깔끔하고 좋았습니다. OpenAI에서 Technical staff로 일하고 있는 Adrian의 강연이 메인이었는데, 취직뿐만 아니라 이직에도 적용할 수 있는 요소들과 내가 지금 이 회사에서 어떤 발전을 해나가면 좋을지 생각해 보게 된 시간이었습니다.  강연 내용은 크게 "Getting a job"과 "Staying in the job"으로 나뉘었습니다.  "Getting a job"과 관련해 미국을 포함한 해외 취업 프로세스와 각 스텝마다 ..

2024년 7월 회고DONE1. 책 리뷰 - 커리어 스킬 두꺼운 만큼 읽는 것도 리뷰 쓰는 것도 오래 걸렸던 책 커리어 스킬 책 리뷰를 드디어 포스팅했다! 상반기에 팀 이동을 하면서 이것저것 불안함이 있었는데, 커리어에 대한 막연함을 어느정도 해소해주는 책이었다. 중간중간 다른 회사들의 테크 컨퍼런스 같은 영상을 보면서 다른 사람들은 커리어 발전을 위해 어떤 것을 하고 있는지 구경도 하고 불안한 것 자체가 무언가 이루려는 과정이라고 받아들일 수 있는 마음가짐도 얻었다. 심지어 한기용 님의 우아콘 영상에서는 "성장"에 집착하지 말아야한다는 말을 듣고 얻어맞은 듯한 기분이었다! 그 영상을 보고 커리어 스킬 책을 다시 읽으니까 의도가 무엇이었는지 짐작이 가서 나중에 한 번 더 읽어도 괜찮겠다 싶었던 책이다.3..

안녕하세요! 리서치 엔지니어 럼지입니다. 꽤나 오랜만에 책 리뷰를 하게 되었습니다✨ 책 제목은 커리어 스킬, 부제는 완벽한 개발자 인생 로드맵. 인덱스까지 무려 768쪽에 달하는 책이라 읽는데 오래 걸려서 리뷰도 조금 오래 걸렸다는 핑계를 대봅니다. 쓸 내용이 많으니 바로 리뷰 시작합니다! 외출했다가 시간이 애매하게 뜨면 보통 근처 서점에 가서 기술 서적들을 구경하게 되는데, 그중에서 문득 눈에 띈 게 이 책이었다. 블로그 포스팅이나 강연을 다니는 등을 보면 알 수 있겠지만 경력 개발에 대해 평소에도 많은 관심을 가지고 있었고, 특히 취업 준비를 하던 시절부터 "이공계"를 위한 취업 준비 방법은 누구 하나 구체적으로 알려주는 사람이 없는 것 같다는 생각이 항상 들었다.  커리어 입문하기,  (이직 준비를..

2024년 6월 회고DONE1. 넓고 얕은 데이터셋 탐구 연구과제 때문에 주행 관련 데이터셋을 열어보면서.. 소위 데이터 사이언티스트의 덕목이라는 노가다를 한 달이었다. gpt에 의존해 SQL 데이터도 열어보고, 심지어는 raw binary data를 직접 파싱 해서 디코딩하면서 거의 2주 동안 삽질도 많이 하느라 자기 전에 눈앞에 vsc가 떠다녔다 (오바임) 이것이 다양한 경험치를 쌓게 해주었으리라 믿는다.. 막상 데이터를 열어보고 나니 느낀 점은 1) 이렇게 만들기까지 얼마나 많은 리소스가 투입되었을지 상상이 어려울 정도의 규모였으며 2) 생각보다 불친절하다... 파일 안에 딸려있는 README나 documentation만으로는 단시간 내에 얻고 싶은 결과를 얻기는 힘들었다. (실력의 문제라고 하면 ..