Review
[원티드 프리온보딩 데이터 분석 챌린지] Week 1-1 EDA로 분석가 공고 파헤치기 과제
✔️기업이 저연차의 데이터 분석가에게 요구하는 자격요건, 우대사항은 무엇일까? 원티드 프리온보딩 데이터 분석 챌린지에서 채용공고 데이터를 진행한 프로젝트입니다. 주제 : 데이터분석가 직무의 저연차 대상 공고의 주요업무, 자격요건, 우대사항 분석을 통해 데이터 분석가가 되기 위해 갖춰야 할 부분을 알아보자. 데이터 출처 : 원티드 내 '데이터 분석가' 직무 채용공고(원티드 제공) 사용한 툴 : Python, Google Bigquery, Google Colab 1. 문제 상황 및 분석 가설 설정 ✅ 문제 상황 1. 데이터분석가, 데이터 사이언티스트, 데이터 애널리스트, 데이터 엔지니어 등 데이터 관련 직무는 엄청 많잖아..그 중 '데이터 분석가'는 뭘 하는 사람일까? 2. 기업에서 저연차의 데이터 분석가에..
[원티드 프리온보딩 데이터 분석 챌린지] Week 1-1 EDA로 분석가 공고 파헤치기
1. Bigquery 연결하기 2. 데이터 전처리 1. jd를 SPLIT함수로 3가지 칼럼만 추출해 활용해보자 - jd(job description) : 회사소개, 주요업무, 자격요건, 우대사항, 혜택 및 복지 - SPLIT(칼럼, '쪼갤 기준이 될 단어')[safe_offset(0)] (0 : 기준 단어 앞까지 자르기 / 1 : 기준 단어 뒤부터 자르기) 2. GENERATE_ARRAY함수를 활용해 ARRAY를 만들자 - annual_from(최소 연차), annual_to(최대 연차)만으로는 그 사이 연차까지 알 수가 없다. - GENERATE_ARRAY(annual_from, annual_to, 1) SELECT position_id , position , SPLIT(SPLIT(jd, '주요업무')..
[Numble Challenge] 실제 기업 데이터 기반 프라이싱 전략 세우기 챌린지
넘블 챌린지란? 넘블은 IT 기획자, 디자이너, 개발자를 위한 챌린지 커뮤니티이다. 내가 참여했던 챌린지는 소수의 팀원들과 함께 사내 데이터를 분석한 내용을 보고서 형식으로 제출하고 현직에서 종사하고 계시는 분으로부터 심사 및 피드백을 받을 수 있는 활동이었다. 꽤 많은 챌린지가 진행 중이었고, 내가 참여했던 챌린지에 대해서는 데이터 기반 프라이싱 전략 가이드라인을 통해서 더 자세히 볼 수 있다. 참여하게 된 계기는? 나는 앞서 회고했던 프로젝트를 보다시피 사내 데이터를 직접 만져보고 싶어서 기업과 직접 컨택하여 사내 데이터를 분석해보았다. 데잇걸즈를 기획하고 주관한 서울시여성가족재단에서 스페이스 살림(공유 오피스)를 운영하는데 그 곳에 입주해 있는 기업(주로 스타트업)과 연결해주어 우리는 사내 데이터를..
[데잇걸즈 6기] Team DD_첫째 주 회고
드디어 데잇걸즈 6기에서 데모데이를 위한 최종 프로젝트 팀을 꾸리기 시작했다. 게임, 중고마켓, 빵, 맛집, 채용공고, 이커머스 등 다양한 주제들이 나왔다. 나는 이커머스 쪽에 관심이 있어 그쪽 관련 주제를 가진 팀에 합류하려고 하였으나, 생각보다 외부, 공공 데이터로는 이커머스 데이터를 얻을 수 있는 것이 많지 않았다. 그때 마침, 한 분이 자기도 이커머스 쪽을 하고 싶긴한데 사내 데이터라 접근하기 어려우면 데이터 드리븐 역량에 대한 니즈가 있는 기업과 협업을 하면 되는거 아니냐, 자기가 기획안을 다 작성해놓았다.라며 자신감이 넘치는 태도로 기획안을 보여주셨다. 바로 콜..ㅋ 그렇게 Team DD가 되었고, 대부분 외부 데이터를 크롤링하는 다른 팀들과는 다르게 우리 팀이 처음부터 해야할 일은 협업할 기..
[스크래핑] Message: 'chromedriver.exe' executable needs to be in PATH. Please see https://chromedriver.chromium.org/home 오류 해결하기
홈페이지에 있는 내용을 스크래핑하기 위해 selenium을 사용하는데.. 먼저 필요한 라이브러리를 불러오고 from selenium import webdriver from bs4 import BeautifulSoup import pandas as pd from tqdm import tqdm import time 공동소송을 진행하는 기업 홈페이지에서 공동소송 프로젝트와 날짜, 해당 공동소송을 진행한 변호사 이름을 긁어오기 위한 코드를 작성하고 실행을 하면 tmp_list=[] driver=webdriver.Chrome('chromedriver.exe') error_cnt=0 for i in tqdm(range(0, 142)): url='https://prj.angrypeople.co.kr/progress/..
[스크래핑] 네이버 스마트스토어 리뷰 스크래핑
기존에 구글에서 서치해서 찾아볼 수 있는 스마트스토어 리뷰 스크래핑 코드에서 일부 수정한 코드입니다. 데모데이 프로젝트를 위해 바늘이야기 네이버 스마트 스토어에 등록되어 있는 제품들의 리뷰를 스크래핑해 텍스트 분석을 해보려고 합니다. 1. 사용할 라이브러리 불러오기 from selenium import webdriver from selenium.webdriver.chrome.service import Service as ChromeService from selenium.webdriver.chrome.options import Options from webdriver_manager.chrome import ChromeDriverManager from selenium.webdriver.common.by im..
일일 회고 작성법
나는 지금까지 공부나 팀프로젝트를 하면서 배운 내용에 대해 복습하고 정리하기에만 급급했지, 회고 같은 것은 생각해보지도 않았다. 그러다보니 내가 한 일에 대해서만 기억이 나고(그마저도 띄엄띄엄), 내가 어떤 점을 기여했고 그를 통해 배운 점은 무엇인지, 어떤 목표를 가지고 어떤 행동을 했는지, 개선해야할 부분은 어떤 점이 있었는지 생각해 볼 시간조차 주지 않았다는 생각이 컸다. 바쁘다는 핑계로 잘 실행하지 못했던 회고를 이번 최종 프로젝트를 진행해보면서 작성해볼 예정이다. 💡 그래서 회고를 어떻게 하면 좋을까? 서치를 해보았고, 해당 브런치 글을 토대로 정리한 내용을 회고 형식으로 작성해보려고 한다. [1] 사실(Fact) : 어떠한 일들이 있었는지 데잇걸즈를 하면서 블로그에 각자 회고를 정리하는 사람들..
-
이전
- 1
-
다음
