특화 프로젝트 3주차
개발
추석 연휴가 꿈처럼 지나갔다…. 분명 엄청 긴 휴일인데 순식간에 없어졌다. 돌려내 내 추석…. 추석동안 뭔가 많이 해보려고 계획 했었는데 원대한 꿈으로만 남았다. 🙄 특히 책 읽기는 시작은 했지만 필기하고 정리하면서 읽다보니 꽤 오래걸려서 한 챕터도 다 못 읽었다. 천천히 읽어도 되겠지…?(안 됨)
연휴가 지나면 개발하느라 바쁠 것 같아서 월요일에 팀원들이랑 저녁을 먹었는데, 이게 화근이 되었다. 나 빼고 둘 다 코로나 양성이라니…. 나 꽤나 강한 면역력을 가지게 됐을 수도? 다들 많이 아프지 말고 무난하게 지나갔음 한다. 백 엔드 둘이 아파서 홀로 남은 백 팀원이 이번주 꽤 고생했다. 👍
드디어 본격적으로 데이터 전처리를 시작했다. 다운로드 받은 데이터를 하나로 합치는데, 이 과정에서 모든 전처리와 DB에 바로 넣을 수 있도록 ERD와 동일한 구조로 넣어주기 위해 스키마도 신경써야 했다. 특히나 우리 데이터는 물가, 가격 정보라 시계열 특징이 강한데, 심지어 결측치도 많아서 처리하기가 까다로웠다. 아예 관측하지 않은 데이터도 많아서 어떻게 해야할까 하다가 결국 이전 날의 가격을 다음날에도 적용시키는 것이 최선이었다. 그리고 원래 파이썬으로 하는 데이터 전처리는 주로 날짜를 column로 추가했었는데, DB에 데이터를 넣기 위해서는 날짜 컬럼을 고정하고 row로 날짜마다 추가해주어야 했다.
데이터를 맡아서 하다보니 자연스럽게 ERD에도 신경을 써야했다. 백 엔드 팀원들과 대화도 많이 해야했고, 데이터 전처리를 하면서도 헷갈리는 부분이라던지, 어떤 식으로 데이터를 넣고 빼는지 공부해야했다. 아직 해야할 것이 많지만 그나마 전처리 과정 자체는 크게 어렵지 않아서 다행이었다. 간만에 Pandas를 만지다 보니 데이터 만지는 감각이 살아나고 있다. 그치 나 이런거 좋아했지 😏
협업
Git
데이터 작업을 하다보니 깃에 기여를 많이 못하고 있지만 최대한 1일 1커밋하기 위해 노력중이다. 다들 열심히 하고 있구나 🥺
Jira
여전히 새벽에도 자잘하게 내려가는 그래프…. 분명히 계단식 그래프여야 하는데… 그게 맞는데….
이번 프로젝트부터 싸피 관련 에픽도 설정해서 더 체계적으로 지라를 짤 수 있어서 좋다.
'TIL' 카테고리의 다른 글
| [스파르타코딩클럽] 엑셀보다 쉬운 SQL (0) | 2023.03.03 |
|---|---|
| 10월 1주차 회고 (2) | 2022.11.30 |
| 9월 2주차 회고 (1) | 2022.09.27 |
| 9월 1주차 회고 (2) | 2022.09.04 |
| 8월 3주차 회고 (2) | 2022.08.22 |
