일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 |
- streamlit
- 크롤링
- 데이터분석
- pandas
- SQLD
- 전처리
- 팀프로젝트
- Python
- 기초통계
- data analyst
- cross join
- Chat GPT
- 프로젝트
- lambda
- 히트맵
- jd
- 머신러닝
- 군집화
- 태블로
- 최종 프로젝트
- 데이터 분석
- 클러스터링
- If
- GA4
- da
- SQL
- 기초프로젝트
- 시각화
- 서브쿼리
- 프롬프트 엔지니어링
- Today
- Total
목록전체 글 (328)
세조목
최종 프로젝트 주제 고민 & 크롤링 2024.03.18 - [데이터 분석 공부/TIL(Today I Learned)] - TIL(Today I Learned) 93일차(24.03.18) 2024.03.19 - [데이터 분석 공부/TIL(Today I Learned)] - TIL(Today I Learned) 94일차(24.03.19) 2024.03.20 - [데이터 분석 공부/TIL(Today I Learned)] - TIL(Today I Learned) 95일차(24.03.20)(feat. 크롤링) 2024.03.21 - [데이터 분석 공부/TIL(Today I Learned)] - TIL(Today I Learned) 96일차(24.03.21)(크롤링-selenium, PCA) 2024.03.22 -..
최종 프로젝트 2024.03.29 - [데이터 분석 공부/프로젝트] - 최종 프로젝트 4일차(24.03.29) 최종 프로젝트 4일차(24.03.29) 최종 프로젝트 4일차입니다. 금일은 어제에 이어 네이버 지도 리뷰 데이터 크롤링 코드 작성을 했습니다. 다행히 구글링을 통해 확인한 코드들을 조합하여 코드를 작성할 수 있었고, 결과값 확 eyeoftheworld1209.tistory.com 최종 프로젝트 4일차입니다. 다행히 리뷰를 수집할 수 있을 정도로 코드를 작성했습니다. 하지만 자잘한 오류들이 있어 차후 다시 수정해야하는데 자세한 내용은 위 포스팅에 정리해두었습니다.
최종 프로젝트 4일차입니다. 금일은 어제에 이어 네이버 지도 리뷰 데이터 크롤링 코드 작성을 했습니다. 다행히 구글링을 통해 확인한 코드들을 조합하여 코드를 작성할 수 있었고, 결과값 확인까지 했습니다. def switch_left(): ############## iframe으로 왼쪽 포커스 맞추기 ############## #driver.switch_to.parent_frame() driver.switch_to.default_content() iframe = driver.find_element(By.XPATH,'//*[@id="searchIframe"]') driver.switch_to.frame(iframe) def switch_right(): ############## iframe으로 오른쪽 포커스..
최종 프로젝트 2024.03.28 - [데이터 분석 공부/프로젝트] - 최종 프로젝트 3일차(24.03.28) 최종 프로젝트 3일차(24.03.28) 최종 프로젝트 3일차입니다. 어제에 이어 네이버 맵, 플레이스 크롤링을 시도하고 있습니다. 가게명을 클릭했을때 오른쪽에 표시되는 창에서 페이지 다운까지는 되는 것을 확인했는데 리뷰를 eyeoftheworld1209.tistory.com 최종 프로젝트 3일차로 어제에 이어 크롤링 작업 진행하고 있습니다. 자세한 내용은 위 포스팅에 정리해두었습니다.
최종 프로젝트 3일차입니다. 어제에 이어 네이버 맵, 플레이스 크롤링을 시도하고 있습니다. 가게명을 클릭했을때 오른쪽에 표시되는 창에서 페이지 다운까지는 되는 것을 확인했는데 리뷰를 클릭하고 text 부분만 뽑아내는 코드가 실행되지 않고 있습니다. 이것 가지고 10시부터 현재 21시까지 씨름하고있는데 조금씩 나아지고 있는것 같기는한데 그 정도가 크지 않아서 많이 답답합니다. 이번주까지는 어떻게해서든 크롤링 작업을 끝내야해서 마음이 다소 조급한데 일단 내일도 이어서 코드 수정 작업 진행할 예정입니다.
최종 프로젝트 2024.03.27 - [데이터 분석 공부/프로젝트] - 최종 프로젝트 2일차(24.03.27) 최종 프로젝트 2일차(24.03.27) 최종 프로젝트 2일차입니다. 금일은 저희가 어제 선정했던 프로젝트의 주제를 가지고서 어떻게 분석을 해볼지에 대한 이야기를 나눴습니다. 저희가 오늘 고민했던건 '과연 데이터셋을 어떻게 eyeoftheworld1209.tistory.com 최종 프로젝트 2일차였습니다. 어제 선정한 프로젝트 주제를 가지고서 어떻게 분석해볼 수 있을지에 대해 구체적으로 얘기나눴고, 각자 크롤링을 진행했습니다. 자세한 내용은 위 포스팅에 정리해두었습니다.
최종 프로젝트 2일차입니다. 금일은 저희가 어제 선정했던 프로젝트의 주제를 가지고서 어떻게 분석을 해볼지에 대한 이야기를 나눴습니다. 저희가 오늘 고민했던건 '과연 데이터셋을 어떻게 구성해야 클러스터링 모델을 적용시킬 수 있을까' 였습니다. 저희가 생각하고 있는 분석 방법은 리뷰 데이터 크롤링 긍/부정 분석 군집 분석 추천 이렇게 총 네가지인데요, 수집한 데이터들을 n개의 카테고리로 나누어서 데이터셋에 넣는게 맞다라고 생각했습니다. 이 때 위 이미지의 좌측 테이블과같이 특성별 컬럼을 만들어 줄 것인지, 우측 테이블처럼 가장 빈도수가 높은 특성 하나만을 특성 컬럼에 넣을 것인지 에 대해서 고민을 했습니다. 이게 무슨 말이냐 하면 만약 '이 집은 청결하고, 빵도 맛있고, 사장님도 친절한데, 직원들은 불친절해..
최종 프로젝트 최종 프로젝트 1일차입니다. https://sore-almandine-788.notion.site/5a5b8853dce844f6acabd342ae671c04?pvs=4 최종 프로젝트 이야기해보기 | Notion 주제 이야기 해보기 sore-almandine-788.notion.site 금일은 팀원들과 함께 어떠한 주제로 프로젝트를 진행할 것인지에 대해서 이야기 나눴습니다. 각자 주제 한 개씩 고민해와서 총 네가지의 주제를 가지고서 고민을 했는데요, 저희들끼리는 판단이 힘들어서 금일 캠프에 나오셨던 튜터님들 한 분 한 분께 어떠한 주제로 진행하는 것이 괜찮을지에 대해 의견을 여쭤봤습니다. 그래서 가장 많은 선택을 받은 주제로 프로젝트를 진행하기로 했습니다. 튜터님들마다 피드백이 차이가 있었는..
최종 프로젝트 금일은 최종 프로젝트 팀이 발표되는 날이었습니다. 희망하는 멤버들끼리 팀을 구성할 수 있게 해준다는 매니저님의 이야기를 들었던 터라 저와 사전캠프때 함께였던 나머지 세 명의 멤버들끼리 오늘 모여서 최종 프로젝트 주제에 대해서 이야기 나눠보았습니다. 기존에 얘기하고있던 '상권별 시장규모 성장성 예측' 주제의 경우 데이터의 양이 너무 부족하여 진행하기가 어려울 것이라고 판단했습니다. 오늘 이야기 나온 주제는 아래와 같습니다. 1. AI가 채용시장에 미친 영향과 앞으로의 전망 2. 유튜브 인급동 분석 3. 푸바오의 인기가 높아진 이유는? 푸바오 관련 비정형 데이터 수집 4. 청소년은 어떤 고민을 하고 있을까? 고민 해결해줄 수 있는 방안 고민(데이터 활용해서) - '문화체육체험프로그램 정보(문화..
최종 프로젝트 최종 프로젝트가 아직 시작되지는 않았습니다. 하지만 최종 프로젝트를 함께 진행할 가능성이 높은 멤버들과 함께 프로젝트의 주제 및 데이터셋에 대해서는 저번주부터 이야기를 나누고 있는데요, 저희가 현재 생각하고 있는 주제는 상권별 성장성 예측 모델링입니다. 어떠한 데이터셋을 활용하면 좋을지에 대해서 금주 월요일까지 팀원들과 얘기나눴고, 지금은 각자 개인 공부에 집중하고 있는데 저는 어제까지 크롤링 학습에 집중하다가 오늘은 데이터셋 구성에 대해서 고민을 좀 해봤습니다. 저희가 생각하고 있는 데이터들을 위와같은데요, 과연 이 데이터들로 머신러닝 모델링을 할 수 있을까가 걱정이었습니다. 나름대로 구상해본 데이터셋은 아래와 같은데 서울 소재 행정동 426개만을 가지고서는 모델링이 힘들수도 있다는 의견..