분류 전체보기27 [웹크롤링]Python으로 잡코리아 채용 공고 크롤링하기 🕸️ Python으로 잡코리아 채용 공고 크롤링하기 🕸️BeautifulSoup 라이브러리를 활용한 웹 크롤링은 HTML에서 데이터를 추출하는 가장 일반적인 방법 중 하나입니다. 이 글에서는 잡코리아(Job Korea) 채용 정보를 크롤링하면서 HTML 구조, 주요 태그, CSS 선택자, BeautifulSoup 메서드 차이점 등 기초부터 심화된 내용까지 다뤄보겠습니다.📌 웹 크롤링 개념과 HTML 구조1. 웹 크롤링이란?웹 크롤링은 프로그램이 웹페이지의 데이터를 자동으로 읽고 필요한 정보를 추출하는 작업입니다. 이 작업은 HTML을 분석해 데이터를 가져오는 방식으로 이루어집니다.2. HTML 구조 이해하기HTML은 웹페이지를 구성하는 언어로, 태그()를 사용해 데이터를 구조화합니다. 태그는 계층적.. 2025. 1. 15. SQL 개발자(SQLD), 데이터분석 준전문가(ADsP) 합격 후기 나와 같은 상황이 있는 사람이 있을까싶어 블로그에 합격 후기를 작성해봅니다. 비전공자이지만 공부를 해서 데이터 분야로 이직을 결심을 하고 데이터분석 관련 코드 부트캠프를 6개월간 배우고 포트폴리오와 함께 취업준비를 해보았지만 아쉽게도 서류조차 합격하지 못하였기에 빈 공백기간을 채우기위해 자격증이라도 서둘러서 따야겠다고 생각했다. 대표적으로 SQLD, ADsP 두개의 2개의 자격증이 지원모집에서 가장 자주 보이는 자격증이기에 취득을 하였습니다. 저는 이해가 조금이라도 가지 않으면 단순 암기 되지않는 답답한 두뇌라 공부하는데 어려움이 있었습니다 ㅠ자격증을 준비하는 분들은 너무 너무 부담가지지 마시고 여유가지면서 공부하시길 바랍니다. 이전 54회 SQLD 자격 시험에서는 58점이라는 점수로 떨어진 경험이.. 2024. 12. 17. [빅데이터분석기사] - Chapter2. 데이터 분석 계획 - 01. 분석 방안 수립 - 빅데이터 분석을 위한 방안을 수립하고 세부적인 작업을 계획.- 분석 과제 도출 방법으로 상향식 접근 방법과 하향식 접근 방식의 차이점을 확인하며 공부- 빅데이터 분석 방법론의 각 단계와 작업들을 설명할 수 있어야 함.- 데이터 확보 방안 및 프로젝트 관리를 위한 요소들을 학습 01. 분석 방안 수립01. 데이터 분석데이터 분석은 대용량의 데이터 집합으로 부터 유용한 데이터를 찾고 결과를 예측하기 위해 목적에 따라 분석기술과 방법론을 기반으로 정형 • 비정형 대용량 데이터를 구축, 탐색, 분석하고 시각화를 수행하는 업무 * 데이터 분석 : 인사이트를 발굴하고 이를 공유하는 의사결정을 지원하는 것을 목표로 데이터를 정의, 수집, 변환, 모델링, 시각화 하는 과정 1) 데이터 분석의 현황- 대다수 기업들은.. 2024. 9. 16. [빅데이터분석기사] - Chapter1. 빅데이터의 이해 - 3 04. 개인정보 개요1) 개인정보의 정의와 판단 기준① 개인정보의 정의- 살아 있는 개인에 관한 정보로서 개인을 알아볼 수 있는 정보이다.② 개인정보 판단기준- 생존하는 개인에 관한 정보 / 정보의 내용 형태 등은 제한 없음 / 개인을 알아 볼 수 있는 정보 - 다른 정보와 쉽게 결합하여 개인을 알아볼 수 있는 정보도 포함 2) 개인정보의 이전① 개인정보의 처리 위탁 - 개인정보를 제공하는 자의 업무 처리와 이익을 위하는 경우② 개인 정보의 제3자 제공 - 개인정보를 제공받는 자의 업무처리와 이익을 위하는 경우 3) 개인정보의 보호① 개인정보 보호 조치② 빅데이터 개인정보 보호③ 개인정보 보호를 위한 고려사항 4) 개인정보보호 관련 법률 05. 개인정보 법 • 제도1) 개인정보보호법① 개인정보보호법의.. 2024. 9. 10. [빅데이터분석기사] 챕터 1. 빅데이터의 이해 - 2 [빅데이터 기술 및 제도] 1. 빅데이터 플랫폼빅데이터 플랫폼은 빅데이터 수집부터 저장, 처리, 분석 등 전 과정을 통합적으로 제공하여 그 기술들을 잘 사용할 수 있도록 준비된 환경이다. * 빅데이터 플랫폼빅데이터를 분석 또는 활용하는데 필요한 필수적인 것으로, 빅데이터 기술읠 집합체 1) 빅데이터 플랫폼의 등장배경① 비즈니스 요구사항 변터 기술 및 제도] 빅데이터 플랫폼은 빅데이터 수집부터 저장, 처리, 분석 등 전 과정을 통합적으로 제공하여 그 기술들을 잘 사용할 수 있도록 준비된 환경이다. * 빅데이터 플랫폼 빅데이터를 분석 또는 활용하는데 필요한 필수적인 것으로, 빅데이터 기술읠 집합체 1) 빅데이터 플랫폼의 등장배경① 비즈니스 요구사항 변화② 데이터 규모와 처리 복잡도 증가③ 데이터 구조.. 2024. 9. 6. [빅데이터분석기사] 챕터 1. 빅데이터의 이해 01. 데이터와 정보- 데이터는 1646년 영국 문헌에 처음 등장 데이터 정의 : 데이터는 추론과 추정의 근거를 이루는 사실. / 현실 세계에서 관찰하거나 측정하여 수집한 사실 데이터 특징 :단순한 객체로도 가치가 있으며 다른 객체와의 상호관계 속에서 더 큰 가치를 갖는다.객관적 사실이라는 존재적 특성을 갖는다.추론, 추정, 예측, 전망을 위한 근거로써 당위적 틍성을 갖는다. 데이터의 구분- 정량적 데이터 정의: 수치로 표현되어 측정 가능하고 계산할 수 있는 데이터를 말합니다. 특징: 객관적으로 비교 및 분석이 용이합니다. 통계적 방법을 통해 정확한 결과 도출이 가능합니다. 예시: 매출액, 온도, 나이, 키, 무게 등 - 정성적 데이터 정의: 수치화하기 어려운 질적인 특성이나 속성을 나타내는 데이터를 .. 2024. 9. 3. 이전 1 2 3 4 5 다음
