분류 전체보기
-
생산성 없는 휴일의 중요성 이번주는 월, 금요일이 둘 다 휴일이라 좀 여유로운 느낌이었다. 원래는 퇴근하고 운동 혹은 스터디 따라잡기에 바빴는데, 휴일이 있으니까 도파민 도는 시간을 많이 보낼 수 있었다. 웹툰 보기라든가, 게임 혹은 원래 읽다가 그만둔 소설마저 읽기 등등.. 휴일이 끝나고 나니까 스스로 너무 퍼졌나? 싶은 생각도 들긴 하지만, 오히려 그동안 회사 끝나고 이것저것 하던 게 은근한 부담이었나 보다. 내 저녁 시간을 보내는 방법은 그대로인데, 낮시간에 슬슬 업무에 대한 부담감이 점점 올라오는 시기여서 그럴지도? 이어드림스쿨 마무리할 때쯤 오셨던 특강 연사분께서, 주니어로 일하면서 하루 공부 분량을 꾸준히 정해서 하는 것이 앞으로의 커리어에 큰 도움이 될 거라는 말을 해주신 게 기억이 났다. ..
[주간] 2023년 18주차 회고생산성 없는 휴일의 중요성 이번주는 월, 금요일이 둘 다 휴일이라 좀 여유로운 느낌이었다. 원래는 퇴근하고 운동 혹은 스터디 따라잡기에 바빴는데, 휴일이 있으니까 도파민 도는 시간을 많이 보낼 수 있었다. 웹툰 보기라든가, 게임 혹은 원래 읽다가 그만둔 소설마저 읽기 등등.. 휴일이 끝나고 나니까 스스로 너무 퍼졌나? 싶은 생각도 들긴 하지만, 오히려 그동안 회사 끝나고 이것저것 하던 게 은근한 부담이었나 보다. 내 저녁 시간을 보내는 방법은 그대로인데, 낮시간에 슬슬 업무에 대한 부담감이 점점 올라오는 시기여서 그럴지도? 이어드림스쿨 마무리할 때쯤 오셨던 특강 연사분께서, 주니어로 일하면서 하루 공부 분량을 꾸준히 정해서 하는 것이 앞으로의 커리어에 큰 도움이 될 거라는 말을 해주신 게 기억이 났다. ..
2023.05.07 -
보통 데이터 분야에서 일한다고 하면 데이터 분석가, 데이터 사이언스, 데이터 엔지니어 등의 직무를 떠올릴 수 있습니다. 요새는 더 다양하고 새로운 직무들이 생겨나는 중인 듯합니다. 이에 따라 데이터 분야로의 이직을 원하시는 분들, 데이터 분야에서 일하면서 커리어의 성장을 위해 공부해나가고 싶으신 분들을 위한 커뮤니티도 다양해졌는데요. 제가 참여하고 있는, 혹은 알고 있는 커뮤니티를 모아보았습니다. 꼭 데이터 분야 종사자가 아니더라도 유용한 스킬이나 배경지식을 얻을 수 있으니 관심 있는 분들께 적극적으로 추천드리고 싶어요! 가짜연구소 가짜연구소 가짜연구소는 머신러닝/데이터사이언스를 중심으로 모인 비영리 커뮤니티입니다. 성장의 앙상블이 만들어내는 울림을 통해 개인과 커뮤니티의 성장의 사이클을 함께 만들어나가..
데이터 사이언스 관련 볼만한 커뮤니티 모음보통 데이터 분야에서 일한다고 하면 데이터 분석가, 데이터 사이언스, 데이터 엔지니어 등의 직무를 떠올릴 수 있습니다. 요새는 더 다양하고 새로운 직무들이 생겨나는 중인 듯합니다. 이에 따라 데이터 분야로의 이직을 원하시는 분들, 데이터 분야에서 일하면서 커리어의 성장을 위해 공부해나가고 싶으신 분들을 위한 커뮤니티도 다양해졌는데요. 제가 참여하고 있는, 혹은 알고 있는 커뮤니티를 모아보았습니다. 꼭 데이터 분야 종사자가 아니더라도 유용한 스킬이나 배경지식을 얻을 수 있으니 관심 있는 분들께 적극적으로 추천드리고 싶어요! 가짜연구소 가짜연구소 가짜연구소는 머신러닝/데이터사이언스를 중심으로 모인 비영리 커뮤니티입니다. 성장의 앙상블이 만들어내는 울림을 통해 개인과 커뮤니티의 성장의 사이클을 함께 만들어나가..
2023.05.06 -
2023년 17주차 이번 주 시도: 도커, kubeflow, etc 이번주에는 드디어 도커에 대한 시도를 해볼 수 있게 되었다. 그동안 모델 학습을 시키면서 리눅스, ssh, CLI, cuda, GPU 설정 등등에 익숙해지느라 바빴다. 도커는 그저 편하다는 장점만 알고 나중에 써봐야지 했던 툴 중에 하나다. 팀 선배들이 이미 리눅스 서버에 구축해 놓은 환경도 있고, 요새 yolo 모델 위주로 실험을 하고 있기 때문에 나는 딱히 할 게 없고 이미지를 다운받아서 실행시키는 것만 하면 됐다. 서버를 열어보는 것 자체는 쉬웠다. 이번 주에 선정해 보는 (별 영향 없지만) 가장 큰 실수는 도커 내에 내가 원래 쓰던 모든 폴더 시스템을 마운트한 게 아닐까..? 도커를 끄고 나니까 그룹 권한이 모두 docker로 바..
[주간] 2023년 17주차 회고2023년 17주차 이번 주 시도: 도커, kubeflow, etc 이번주에는 드디어 도커에 대한 시도를 해볼 수 있게 되었다. 그동안 모델 학습을 시키면서 리눅스, ssh, CLI, cuda, GPU 설정 등등에 익숙해지느라 바빴다. 도커는 그저 편하다는 장점만 알고 나중에 써봐야지 했던 툴 중에 하나다. 팀 선배들이 이미 리눅스 서버에 구축해 놓은 환경도 있고, 요새 yolo 모델 위주로 실험을 하고 있기 때문에 나는 딱히 할 게 없고 이미지를 다운받아서 실행시키는 것만 하면 됐다. 서버를 열어보는 것 자체는 쉬웠다. 이번 주에 선정해 보는 (별 영향 없지만) 가장 큰 실수는 도커 내에 내가 원래 쓰던 모든 폴더 시스템을 마운트한 게 아닐까..? 도커를 끄고 나니까 그룹 권한이 모두 docker로 바..
2023.05.01 -
인공지능 분야에서 '좋은 데이터'를 얻기란 쉽지 않습니다. 수집과 labeling, 검수 과정에는 생각보다 많은 비용이 들어가기 때문입니다. 좋은 데이터를 만드는 데 걸리는 시간을 줄이기 위해, Data-centric AI: Real World Approaches 영상을 통해 data-centric AI는 무엇인지 알고 좋은 데이터를 얻기 위한 팁을 알아보려고 합니다. 요새 일하고 있는 프로젝트에 적용할만한 요소가 많을 것 같아 앤드류 응 교수님의 피치에 대해서만 정리해 보았습니다. The Data-centric AI movement 기존의 model-centric approach는 데이터셋을 다운로드해 데이터셋을 고정시키고 code를 수정하는 방식이었습니다. 공개되어 있는 오픈소스는 깃헙에서 pull받..
[Youtube] Andrew Ng 앤드류 응 교수 - Data-centric AI: Real World Approaches 리뷰인공지능 분야에서 '좋은 데이터'를 얻기란 쉽지 않습니다. 수집과 labeling, 검수 과정에는 생각보다 많은 비용이 들어가기 때문입니다. 좋은 데이터를 만드는 데 걸리는 시간을 줄이기 위해, Data-centric AI: Real World Approaches 영상을 통해 data-centric AI는 무엇인지 알고 좋은 데이터를 얻기 위한 팁을 알아보려고 합니다. 요새 일하고 있는 프로젝트에 적용할만한 요소가 많을 것 같아 앤드류 응 교수님의 피치에 대해서만 정리해 보았습니다. The Data-centric AI movement 기존의 model-centric approach는 데이터셋을 다운로드해 데이터셋을 고정시키고 code를 수정하는 방식이었습니다. 공개되어 있는 오픈소스는 깃헙에서 pull받..
2023.04.30 -
2023년 16주차 탑다운 vs 바텀업 둘 다 겪어보고 느낀 점 ❗️아직 사회생활 경력이 만 3년이 안 되는 사람의 개인적 의견입니다. 반박 시 님 말이 맞음 ❗️ 아직 한국의 많은 회사에서 중요한 의사결정과 그에 따른 업무들은 탑다운 방식으로 결정된다. 위에서 내린 결정이 실무진과 그 흐름을 같이 한다면 더할 나위 없이 좋겠지만, 보통은 반대다. 이걸 왜 내가 해?라고 생각해 본 적 없는 직장인은 아무도 없을걸. 이 일을 왜 해야 하는지 도저히 이해가 안 되면 시키니까 해야지, 돈 주니까 해야지 마인드로 '버텨낸다'. 그렇게 버티다가 참을 체력이 안되면 회사를 바꾸거나, 직업을 바꾼다. (나는 후자였다.) 요새 전 회사의 기사가 많이 보인다. 매출이 좋은 것도, 엄청난 신기술을 개발해 낸 것도 아니고 ..
[주간] 2023년 16주차 회고2023년 16주차 탑다운 vs 바텀업 둘 다 겪어보고 느낀 점 ❗️아직 사회생활 경력이 만 3년이 안 되는 사람의 개인적 의견입니다. 반박 시 님 말이 맞음 ❗️ 아직 한국의 많은 회사에서 중요한 의사결정과 그에 따른 업무들은 탑다운 방식으로 결정된다. 위에서 내린 결정이 실무진과 그 흐름을 같이 한다면 더할 나위 없이 좋겠지만, 보통은 반대다. 이걸 왜 내가 해?라고 생각해 본 적 없는 직장인은 아무도 없을걸. 이 일을 왜 해야 하는지 도저히 이해가 안 되면 시키니까 해야지, 돈 주니까 해야지 마인드로 '버텨낸다'. 그렇게 버티다가 참을 체력이 안되면 회사를 바꾸거나, 직업을 바꾼다. (나는 후자였다.) 요새 전 회사의 기사가 많이 보인다. 매출이 좋은 것도, 엄청난 신기술을 개발해 낸 것도 아니고 ..
2023.04.23 -
안녕하세요, 럼지입니다! 저는 취업 이후 사석에서 사람들을 만나러 갈 때 항상 명함을 챙겨가는 편인데요, 명함을 드리고 나면 데이터 사이언티스트가 무엇인지에 대한 질문을 많이 받습니다. 가족, 친구, 나아가 데이터 분야로의 이직을 원하시는 분들께 제가 어떤 일을 하는지 설명드리긴 하지만 용어가 생소하고 '딥러닝 모델'이라는 단어가 머릿속에서 구체화되기 어려운 만큼 구두 설명으로만 들어서는 잘 와닿지 않습니다. 그래서 (비전공자 현직자가) 정리해 보는 데이터 사이언티스트의 모든 것 - 직무 설명, 역량, 포트폴리오 구성에 대한 포스팅입니다. 데이터 사이언티스트란? - 직무 정의 및 설명 데이터 사이언티스트 직무를 한 문장으로 설명하자면, 빅데이터를 이용하여 문제를 해결하기 위해 머신러닝/딥러닝 모델을 활용..
데이터 사이언티스트 Data scientist 직무 설명, 역량, 포트폴리오안녕하세요, 럼지입니다! 저는 취업 이후 사석에서 사람들을 만나러 갈 때 항상 명함을 챙겨가는 편인데요, 명함을 드리고 나면 데이터 사이언티스트가 무엇인지에 대한 질문을 많이 받습니다. 가족, 친구, 나아가 데이터 분야로의 이직을 원하시는 분들께 제가 어떤 일을 하는지 설명드리긴 하지만 용어가 생소하고 '딥러닝 모델'이라는 단어가 머릿속에서 구체화되기 어려운 만큼 구두 설명으로만 들어서는 잘 와닿지 않습니다. 그래서 (비전공자 현직자가) 정리해 보는 데이터 사이언티스트의 모든 것 - 직무 설명, 역량, 포트폴리오 구성에 대한 포스팅입니다. 데이터 사이언티스트란? - 직무 정의 및 설명 데이터 사이언티스트 직무를 한 문장으로 설명하자면, 빅데이터를 이용하여 문제를 해결하기 위해 머신러닝/딥러닝 모델을 활용..
2023.04.22 -
2023년 15주차 사람과 일의 분리 일은 일이고 사람은 사람이다. 죄는 미워하되 사람은 미워하지 말라는 말은 성경에 나오던가? 어쨌든 나는 종교가 없지만 체력이 허락하는 한에서 일과 사람을 분리하려고 노력해 왔다. 이슈가 생겼을 때 순서를 짚어가며 도대체 누가 이런 사태가 되도록 만들었는지 찾아내는 것은 문제 해결이 아무런 도움도 되지 않기 때문이다. 내가 그것에 관해 어떻게 해야 하는지가 더 중요하지. 그 사이에 괜히 누구 때문에 라느니 어쩌다 이렇게 됐지 하는 부산물들을 머리에 끼워넣기 시작하면 스트레스의 원인 그 이상 그 이하도 되지 않는다. 설령 어느 한 사람 혹은 한 팀 때문에 생긴 문제임이 명확하더라도, 같은 회사 혹은 프로젝트에 속해있다면 나몰라라 할 수는 없는 일 아닌가.... 업무적으로..
[주간] 2023년 15주차 회고2023년 15주차 사람과 일의 분리 일은 일이고 사람은 사람이다. 죄는 미워하되 사람은 미워하지 말라는 말은 성경에 나오던가? 어쨌든 나는 종교가 없지만 체력이 허락하는 한에서 일과 사람을 분리하려고 노력해 왔다. 이슈가 생겼을 때 순서를 짚어가며 도대체 누가 이런 사태가 되도록 만들었는지 찾아내는 것은 문제 해결이 아무런 도움도 되지 않기 때문이다. 내가 그것에 관해 어떻게 해야 하는지가 더 중요하지. 그 사이에 괜히 누구 때문에 라느니 어쩌다 이렇게 됐지 하는 부산물들을 머리에 끼워넣기 시작하면 스트레스의 원인 그 이상 그 이하도 되지 않는다. 설령 어느 한 사람 혹은 한 팀 때문에 생긴 문제임이 명확하더라도, 같은 회사 혹은 프로젝트에 속해있다면 나몰라라 할 수는 없는 일 아닌가.... 업무적으로..
2023.04.16 -
원격 서버에서 모델을 테스트 겸 돌려보려다 발생한 에러입니다. pytorch와 CUDA가 충돌을 일으킨다고 합니다. 제가 이해가 안 되는 점은.. 지난주에는 멀쩡하게 잘만 되던 cuda가 오늘 말썽인 건지... 아마 이번 모델을 돌리기 전에 필요한 패키지들을 설치하는 중간에 pytorch가 재설치되는 과정에서 뭔가 꼬인 듯합니다. pytorch를 삭제하고 운영체제와 쓰려는 CUDA 버전에 맞추어 재설치하니까 해결이 되긴 했습니다. # 파이토치 uninstall conda uninstall pytorch # linux, cuda 11.8 설치 conda install pytorch torchvision torchaudio pytorch-cuda=11.8 -c pytorch -c nvidia 아래 홈페이지에..
[해결] CUDA capability sm_86 is not compatible with the current PyTorch installation.원격 서버에서 모델을 테스트 겸 돌려보려다 발생한 에러입니다. pytorch와 CUDA가 충돌을 일으킨다고 합니다. 제가 이해가 안 되는 점은.. 지난주에는 멀쩡하게 잘만 되던 cuda가 오늘 말썽인 건지... 아마 이번 모델을 돌리기 전에 필요한 패키지들을 설치하는 중간에 pytorch가 재설치되는 과정에서 뭔가 꼬인 듯합니다. pytorch를 삭제하고 운영체제와 쓰려는 CUDA 버전에 맞추어 재설치하니까 해결이 되긴 했습니다. # 파이토치 uninstall conda uninstall pytorch # linux, cuda 11.8 설치 conda install pytorch torchvision torchaudio pytorch-cuda=11.8 -c pytorch -c nvidia 아래 홈페이지에..
2023.04.16