데이터분석6기 73

[본캠프 74일차] 최종 프로젝트 준비

월요일에 이어서 계속 프로젝트를 위한 데이터를 수집하는 웹 크롤링 코드를 짜는 중이다. 월요일에 헤어지기 전에 데이터 수집을 위한 동적 웹 크롤링에서 필요한 동작들이 어떤 부분들이 있는지 함께 확인하고 헤어졌다. 그리고 오늘 오전에 만나서 혹시 쉬는 동안 각자 웹 크롤링 관련해서 얼마나 진척이 있었는지 얘길 나누다가 팀원 중 한 분의 코드를 틀로 잡고 추가적으로 더 필요한 부분들을 각자 역할을 나눠서 해당 부분의 코드를 추가적으로 짜오는 일을 주로 했다. 웹 크롤링에서 시간이 많이 들거라 생각했던 것보다 작업 속도가 꽤 나서 만약에 원하는 대로 코드만 잘 돌아간다면 중간발표회가 있기 전에 EDA까지 충분히 해볼 수 있을 것 같다. (아마도..?) 오늘 한 일은, 최종 프로젝트 준비데이터 수집을 위한 웹 ..

카테고리 없음 2025.06.04

[본캠프 69일차] Spark 공부

이번 주.. 집중력이 쉽지 않다. 그래도 이런 날도 있는 거지, 이런 날은 앉아서 버티는 것만으로도 만점, 이러면서 버텨본다(어제 푼 SQLD 모의고사 점수를 생각하면 발등을 불로 지지고 있는 상황인데도 자취를 찾을 수 없는 의욕). 그래도 노트북 앞에 앉아있으면 뭐라도 하고 그렇게 꾸준하게 시간을 쌓는 때도 있는 법이니까. 이런 와중에 오늘의 기쁜 소식 하나는 지난 실전 프로젝트의 결과물이 우수 프로젝트 선정에서 2위를 했다는 기쁜 소식👏👏 최종 프로젝트도 잘해야지! 오늘 한 일은, [프로덕트 데이터 분석] 2회차 수강하기[spark를 이용한 빅데이터 분석] 1주차 수강하기SQLD 시험 준비하기어제 푼 모의고사 오답 확인하기모의고사 1회분 풀기Spark 공부: [spark를 이용한 빅데이터 분석]..

[본캠프 68일차] 데이터 수집

오늘 최종 프로젝트 팀원 신청서를 제출했다. 흐아. 사실 기초 프로젝트가 끝날 무렵부터 막연히 '최종 프로젝트는 프로젝트를 하면서 만난 마음 맞는 사람들끼리 조를 꾸려서 하고 싶다'고 생각했고 심화 프로젝트를 할 때부터는 최종 프로젝트 팀을 어떻게 짜야 할지 고민이 항상 마음 한켠에 있었는데, 이번 달 초에 일찍이 좋은 분들이랑 팀을 꾸리게 돼서 너무 기쁘다. 진짜 잘해야지. 오늘 한 일은,데이터 수집 공부하기프로덕트 데이터분석 1회차 수강하기 데이터 수집 공부: 1~4회차 실습 과제 풀기주말 동안 착실히 휴식만을 취했다고 한다.. 얼른 실습 풀러 가자!1회차 - API를 활용한 데이터 수집[과제 1] 네이버 트렌드 API를 활용한 데이터 수집우선 검색어로 최근 갈까말까 고민 중인 '서울국제도서전'을 중..

[본캠프 67일차] QCC ⑥, 네트워킹 데이,

SQL 공부: 제6회 QCC 회고1. 각 성별 기준으로 시험 점수 상위 3명 조회하기각 성별 기준으로 시험 점수가 높은 상위 3명의 학생 성별, 이름과 점수를 반환하는 SQL 문을 작성하세요.결과는 성별(GENDER) 오름차순, 순위 오름차순으로 정렬하여 출력하세요.두 학생이 동점일 경우 나이가 많은 학생이 더 순위가 높습니다.-- 1번 문제의 제출한 쿼리WITH sm AS ( SELECT gender, name, score FROM students WHERE gender = 'M' ORDER BY score DESC, age DESC LIMIT 3), sf AS ( SELECT gender, name, score FROM stu..

[본캠프 66일차] 실전 프로젝트 발표

여러모로 고생이 많았던 이번 프로젝트가 무사히 잘 마무리됐다. 진짜 지난 월요일까지만 해도 '대체 어떻게 되려고...' 하고 걱정됐었는데 그래도 이번 프로젝트의 목표였던 대시보드 구현이 잘 나와서 기쁘다. 물론 결과가 미흡했어도 프로젝트를 하는 과정 속에서 배우는 점들도 많기야 하지만, 이왕이면 결과물이 잘 나오면 좋은데 잘 나와서 다행이다. 다들 고생한 보람이 있어서 좋다. 블로그에 보니까 내가 담당으로 작업했던 대시보드를 어떤 식으로 설계하고 어떻게 워크시트 작업을 하고 등 그런 기록이 없어서 프로젝트 기록도 추가하고, 이번 프로젝트를 개인적으로도 포트폴리오에 어떻게 정리해서 넣으면 좋을지 작업해서 갖고 있을 생각이다.

[본캠프 65일차] 부록: [chap 4] 실전 프로젝트③

분명히 대시보드 작업을 어제 마쳤다고 생각했는데, 끝나지 않는 수정.. 물론 오늘 이왕 피그마 좀 손에 익어가는 것 같아서 혼자서도 피그마로 이것저것 해볼 생각이었지만 이렇게 붙들고 있을 줄은 몰랐다. 그래도 대시보드를 구현하는 일은 바로바로 결과물이 눈에 보여서 그런지 재밌어서 계속 붙잡고 조금씩 수정하고, '최종본'이라고 다른 이름으로 저장하고, 또 다시 수정할 게 생기고, 수정하고, 또 다시 '최최종본'이 생기는 상황이 반복됐다.힘든데 재밌고 그렇다. 그래도 오늘 피피티 작업해주시는 분들이 피피티도 완성해주셔서 담당 튜터님께 프로젝트 발표에 대한 최종 점검을 받았는데 잘 준비했다고 들어서 한시름 놓았다. 다들 짱짱👍 ✅ 대시보드 수정하기어제 대시보드를 보다가 태블로 통합 문서에서 대시보드의 배..

[본캠프 64일차] 부록: [chap 4] 실전 프로젝트 준비②+ɑ

지난 주는 팀 프로젝트도 다사다난했고, 지난 토요일이 ADsP 시험이라 퇴실하고는 자격증 시험 공부하느라 여러모로 정신이 없었다. 그래서 무려 일주일만에 쓰는 TIL..! 실전 프로젝트 발표회가 있는 목요일이 점점 다가올수록 갈피를 쉬이 잡지 못했던 프로젝트도 어떻게든 정리가 되고 있다. 어제오늘은 대시보드를 취합하는 역할을 맡아서 나를 비롯한 팀원들의 태블로 파일을 하나로 합치는 일을 하며 대시보드를 디자인하는 일을 맡았다.여태까지는 바둑판 배열과 콘텐츠 균등 분배로 작업한 워크시트들을 적당히 배치하는 방식으로 대시보드를 구성했다면, 이제는 피그마로 대시보드 배경과 버튼 같은 대시보드의 여러 구성 요소들을 디자인하고, 태블로에서 워크시트들을 부동 기능으로 배치하는 작업을 하는 중이다. 이런 식으로 ..

[본캠프 56일차] 태블로 공부

끝나지 않는 공부, 끝나지 않는 개인과제, 끝나지 않는 프로젝트..개인 과제야, 그렇다치는데,, 내일부터 프로젝트 기간 시작이라니 믿기지 않는다 오늘 한 일은,태블로 공부[실습으로 배우는 태블로] 4주차 수강하기[태블로 라이브세션] 3회차 수강하기태블로 공부: [실습으로 배우는 태블로] 4주차 수강하기계산식 활용하기텍스트 테이블 테이블 구조화 형식에는 대표적으로 2가지가 있음: ①wide format table, ②long format table①wide format table : 옆으로 넓은 형태로 데이터가 쌓이는 형식데이터 분석을 할 경우 많이 사용하는 형태표를 비교하거나(상관 관계 분석 및 각 변수의 분포 비교 등) 그래프 시각화하기 용이함②long format table : 아래로 긴 형태로 데이..

[본캠프 55일차] 머신러닝 개인 과제, 태블로 공부

믿기지 않는다. 연휴 아껴 썼는데(?) 벌써 끝이라니. ...일어나서 할 일을 하자. 오늘 한 일은,태블로 공부[태블로 라이브세션] 2회차 수강하기[실습으로 배우는 태블로] 3주차 수강하기머신러닝 공부[머신러닝 개인 과제 - 해설 세션] 수강하기ADsP 공부ADsP 모의고사 오답 정리하기첫 번째 아티클 스터디하기 (누적은 26번째(11+4+5+5+1))머신러닝 공부: 머신러닝 개인 과제 정리하기오늘 10시까지 머신러닝 개인 과제를 제출해야 해서 어제 자기 전에 조금 풀고서 제출했다. 문제들이 크게 어려운 것은 없었고 오히려 지난 챕터의 내용들을 가볍게 되짚어 볼 수 있게끔 튜터님이 출제해주셔서 다시 복습할겸 블로그에도 해당 내용을 정리해두는 게 좋을 것 같았다. 문제는 필수 6문제, 도전 2문제로 총 ..

[본캠프 54일차] QCC ⑤, 태블로 공부

아 QCC 이렇게 못 볼 줄은 몰랐는데, 주말에 ADsP 공부도 해야 하는데 QCC 1회차부터 문제들 다시 풀어봐야 할 듯하다. 이번 QCC는 1번 문제를 제외하고는 문제를 잘 못 읽어서 놓친 조건들도 꽤 있어서 문제를 꼼꼼히 살펴야겠다고 반성했다. 오늘 한 일은,SQL 공부[QCC] 5회차 응시하기[QCC - 해설 세션] 수강하기[QCC] 5회차 오답노트 정리하기태블로 공부[실습으로 배우는 태블로] 2주차 수강하기SQL 공부: 5회차 QCC 회고 1. 전체 상담 건수 대비 분류되지 않은 상담 비율 구하기스파르타생명(주) 프로그램에서는 일부 상담이 정확한 카테고리로 분류되지 못하는 경우가 있습니다. category 컬럼의 값이 n/a 또는 NULL로 되어 있는 경우, 해당 상담을 '분류되지 않은 상담'으..