웹 스크래핑이란?

내가 아는 것은 필요한 정보들을 선택해서 가져올 수 있고

 

사용자가 설정을 통해 매시간마다 정보들이 업데이트되는 것인 줄 알았으나...

 

웹상의 데이터를 추출하는 것은 맞지만 정보들이 업데이트 되는 것은 아니었다

 

다운로드한 게임이 업데이트되려면 새로 무언가가 설치되어야 하는 것과 같은 느낌?

 

일단! 데이터추출 한다

 

니꼬쌤은 indeed와 stackoverflow의 사이트에서 파이썬과 관련된 직장을 스크래핑하려 한다

 

순서는 이렇다

 

1. 웹사이트 가져오기

 

2. 페이지 인덱스를 수로 만들기 

 

3. 찾을 요소들 찾기(제목,작성자,이름,등등 알고자하는 내용)

 

4. 요소들을 리스트화 하기

 

5. CSV파일로 저장 

 

6. 스프레드시트에서 불러오기

 

다음에 계속...

 

 

+ Recent posts