애옹쓰

2개월 차가 되었을 때에는 프로젝트를 시작했다. 데이터 엔지니어링 관련 프로젝트 경험은 전무한 만큼 간단한 ETL 파이프라인을 만들기로 기획했다. 기존엔 2주안에 끝내는 것으로 기획했었지만 이론으로는 알고있지만 막상 사용하려 하니 추가로 드는 러닝커브 + 트러블 슈팅 + 예상치 못한 일정 + 게으름으로 인해 예상 기간보다 3배나 늘어나게 되었다. 작은 토이 프로젝트인 만큼 개발 과정중 엄청난 마일스톤은 없었고 크롤러 제작, 스토리지 구축, 변환 스크립트 + 중간중간 gitaction을 통한 cron job 자동화 순으로 진행했다. 한 가지 배운 것은 생각보다 데이터 엔지니어링은 우아하지 못하단 것이다. 새로운 기술이 계속 나오는 만큼(duckdb, prefect 등등..) 깔끔한 api와 깔끔하게 자동화..

결국 취업을 못한 상태로 마이스터고를 졸업한 24년의 1월의 나. 백수인 채로 혼자 공부하기는 힘들 거 같아 부트캠프 같은 거라도 들어야 하나 고민하고 있었다. 하지만 꼴에 욕심은 있어 국비나 안 좋다 하는 부트캠프는 신청하기 싫었다. 그래서 싸피, 우테코, 부스트캠프등을 봐보니 이미 기간도 끝나있고 내가 취업을 희망하는 분야인 데이터 엔지니어는 없었다. 이에 졸업하기 1개월 전쯤 친구가 알려준 에프랩이 생각나 더 찾아보니 그 희소한 데이터 엔지니어 분야도 있고 나름 후기도 괜찮아 보여 신청해 볼까? 하다가 가격을 보고 다시 고민하게 되었다. 결국 긴 고민 끝에 "비싼 값 해주겠지?..", "돈을 담보로 한다 치고 더 열심히 해보자" 등의 이유로 신청하게 되었다. 첫 한 달 동안은 멘토님께서 책만 미친 ..

원인.. 시작(원인)은 2024년 1월 16일 2시경.. 공부 중인데 갑자기 어디선가 자꾸 찌르는 소리가 들려 zep으로 화면을 옮겨보니... 반장님 : 도현님 발표자로 선정되셨어요! 나 : ??? 어쩌다가?.. 반장님 : 그냥 지목되셨어요! ㅎㅎ 나 : ???... 반장님 : 축하드려요 ㅎㅎ 나 : ㅜㅜㅜ 그렇게 갑작스럽게 미니컨퍼런스에서 발표를 하게 되었다.. 발표날은 다음 주 월요일... 시간이 많지는 않다.. 빠르게 발표 주제에 대해 고민해 봤다. 이중 가장 의견이 많기도 하고 개인적으로 다른 분들도 재밌게 들을 수 있는 주제인 CDC에 발표하고자 마음먹었다. 그렇게 3일 동안 CDC에 대해 빠르게 공부하고 하루동안 발표자료를 만들었다. 다른 분들에게 잘못된 정보를 드릴 수는 없는 만큼 다른 공부..