Day 41

TIL 019 데이터 분석 부트캠프 41일차 일일 취업 특강 채용 공고 분석 공기업 공기업 커뮤니티 공채 자소설닷컴, 잡알리오 회사 정보 금융/대기업 (상장사) 커뮤니티 공채 자소설닷컴, 사람인, 캐치 회사 정보 https://dart.fss.or.kr/ 네이버 뉴스 스타트업 채용 공고 : 원티드, 로켓펀치, 점핏(개발자) 회사 정보 투자 : https://thevc.kr/ 대표 이력, 언제 만들어진 회사? 회사 공식 홈페이지 https://www.hwahae.co.kr/ 블로그 (Notion, 웹 형태) 기술/문화 등을 알아볼 수 있다. http://blog.hwahae.co.kr/ 회사 관련 뉴스 플래텀 : https://platum.kr/ 벤처스퀘어 : https://www.venturesquare..

• format_list_bulleted TIL
• · 2022. 2. 18.
• textsms

Day 41

TIL 019 데이터 분석 부트캠프 41일차 일일 취업 특강 채용 공고 분석 **공기업** 공기업 커뮤니티 공채 자소설닷컴, 잡알리오 회사 정보 **금융/대기업 (상장사)** 커뮤니티 공채 자소설닷컴, 사람인, 캐치 회사 정보 https://dart.fss.or.kr/ 네이버 뉴스 **스타트업** 채용 공고 : 원티드, 로켓펀치, 점핏(개발자) 회사 정보 투자 : https://thevc.kr/ 대표 이력, 언제 만들어진 회사? 회사 공식 홈페이지 https://www.hwahae.co.kr/ 블로그 (Notion, 웹 형태) 기술/문화 등을 알아볼 수 있다. http://blog.hwahae.co.kr/ 회사 관련 뉴스 플래텀 : https://platum.kr/ 벤처스퀘어 : https://www.v..

• format_list_bulleted TIL
• · 2022. 2. 15.
• textsms

Day 40

TIL 018 데이터 분석 부트캠프 40일차 추천시스템 구현 팀 프로젝트 발표 발표시간이 짧아 아쉬웠다. 코드를 하나하나 정말 열심히 짰는데 결과물만 PT에서 보여지니 허무하기도... 결과물에만 관심이 있기 떄문에 오히려 발표를 잘하는 것과 주제를 잘 선정하는 것이 더 중요하다는 느낌 동료 수강생 평가에서 우리 조가 2등을 기록했다!! 뿌듯 팀 프로젝트 후기 개인적인 공부도 필요하지만 팀 프로젝트에서 얻는 것이 생각보다 많았다. 의사소통의 기술이 좀 더 필요하고 협업 툴 (notion, slack, github) 등을 이용하는 것이 효욜적인 협업이 된다는 것을 느낌 팀원들의 구성과 역량도 중요하다. 각자 강점이 있으면 프로젝트의 부담이 훨씬 줄어드는 것 같다. 의외로 분석 자체보다 코드를 짜고 아웃풋이 ..

• format_list_bulleted TIL
• · 2022. 2. 14.
• textsms

Day 39

TIL 015 데이터 분석 부트캠프 39일차 추천시스템 구현 팀 프로젝트 크롤링 코드 작성 크롤링 자동화 코드 완성 및 배포 → 약 400권, 18만건 리뷰 수집 완료 크롤링 데이터 합치기 → merge, concat 머신러닝을 위한 전처리 추천시스템 구현 CBF - 초기 성능이 굉장히 떨어짐 : 극복! 도서별 키워드가 굉장히 많고 세부적이라 중복되는 키워드가 많지 않음 → 영화의 장르와 달리 중첩되지 않는다 키워드를 보다 상위 개념으로 다시 라벨링하는 작업 가능 책별 카테고리 (소설, 에세이 등) 를 키워드에 추가하는 방식을 선택 키워드가 중첩되는 책들은 성능이 매우 우수 (EX : 베이커리, 한국소설) CF : 성능 우수함 리뷰 및 평점 데이터가 18만건이라 비교적 잘 나오는듯 평점 데이터의 분포가 ..

• format_list_bulleted TIL
• · 2022. 2. 14.
• textsms

Day 38

TIL 014 데이터 분석 부트캠프 38일차 추천 시스템 구현 팀 프로젝트 크롤링 코드 개발 페이지를 클릭해서 리뷰를 수집해야 하므로 selenium 이용 반응형 javascript 이슈!!! : 리뷰페이지에 가야 klova 리뷰가 활성화됨 → '회원리뷰' 클릭하게 만들기! # 회원리뷰 클릭 : 그래야 clova 회원리뷰 목록이 나옴 driver.find_element_by_css_selector('#review').click() time.sleep(2) 반복되는 코드들은 함수로 작성할 수 있는 능력이 생겼다 발전!!! → 전처리 과정을 함수로 처리 알고리즘을 스스로 구성하기 : 가장 뿌듯한 부분!! 리뷰 페이지 수가 10개 이하가 되는 경우 css selector의 주소 중..

• format_list_bulleted TIL
• · 2022. 2. 14.
• textsms

Day 37

TIL 013 데이터 분석 부트캠프 37일차 1. 파이썬 추천 패키지 suprise 추천 알고리즘 클래스 SVD : 행렬 분해를 통한 잠재 요인 협업 필터링 (MF) KNNBasic : 최근접 이웃 협업 필터링 BaselineOnly : 사용자 Bias와 아이탱 Bise 감안한 SGD 베이스라인 알고리즘 (예측 평점 등) 내장 데이터셋 (ml-100k)을 이용한 실습 : CF 글로우 픽 데이터를 이용한 실제 프로젝트 연습 : CF 2. 추천 시스템 구축 팀 프로젝트 Brainstorming metacritic 크롤링 해서 닌텐도 스위치 타이틀 추천 교보문고 베스트셀러 크롤링 후 추천시스템과 비교 (키워드 픽 유용) 디퓨저, 향수 추천? 키워드 찾을 수 있을까... 라벨링 어려움 Tripadvisor : ..

• format_list_bulleted TIL
• · 2022. 2. 14.
• textsms

python 구글 번역 api 참고

https://blockdmask.tistory.com/540 [python] 파이썬 구글 번역 api 사용하기 (최신버전) 안녕하세요. BlockDMask입니다. 오늘은 파이썬에서 구글 번역 api인 googletrans를 사용하는 방법에 대해서 이야기해보려 합니다. 1. 구글 번역 api 설치 2. 구글 번역 api 예제와 설명 3. google translat blockdmask.tistory.com

• format_list_bulleted Archive
• · 2022. 2. 14.
• textsms

About.

Github : https://github.com/jaydatumEmail : Jay3108@naver.com jaydatum - OverviewData analyst / scientist. jaydatum has 11 repositories available. Follow their code on GitHub.github.comEducationSungKyunKwan UniversityMar 2011 ~ Aug 2022B.S StatisticsMulticampus  Data analyst boot campDec 2021 ~ May 2022PYTHON, SQL, ML,DL course Club ActivitySungkyunkwan Financial Engineering study club FRJul 20..

• format_list_bulleted About.
• · 2022. 2. 13.
• textsms

selenium wait 참고

https://pythondocs.net/selenium/%EC%85%80%EB%A0%88%EB%8B%88%EC%9B%80-wait-%EA%B0%9C%EB%85%90-%EC%9D%B4%ED%95%B4%ED%95%98%EA%B8%B0-implicitly-wait-vs-explicitly-wait/ 셀레니움 wait 개념 이해하기 (implicitly wait VS explicitly wait) - 뻥뚫리는 파이썬 코드 모음 이 문서는 셀레니움 wait 에 관한 implicitly wait 와 explicitly wait 에 대해서 다루고 있습니다. 셀레니움 사용법 전반에 대해서 알아보시려면 셀레니움 크롤러 기본 사용법을 확인하시기 바랍니다. 목 pythondocs.net

• format_list_bulleted Archive
• · 2022. 2. 10.
• textsms

[pandas] dataframe 행 추가/제거

pandas dataframe 행 추가 1. append() 2. loc() pandas 라이브러리에서 dataframe 자료형에 행을 추가하는 방법을 정리한다. 예제의 자료는 전 국민의 데이터인 kaggle 타이타닉 데이터셋의 train에서 몇 가지 컬럼만 가져와 사용하였다. import pandas as pd df = pd.read_csv('./dataset/data_titanic/train.csv') df = df[['PassengerId', 'Survived','Name','Sex']] df 1. append() appned() 메서드는 데이터프레임에 행을 추가하는 대표적인 방법이다. 새롭게 추하가는 자료의 형태는 시리즈나 딕셔너리, 데이터프레임 모두 사용 가능하다. 우선은 딕셔너리 형태의 새로운..

• format_list_bulleted Data Science/python
• · 2022. 2. 9.
• textsms