본문 바로가기

WEBD/Python

[BS4] BeautifulSoup4 크롤링 사용법 정리
WEBD/Python 2022. 1. 20. [BS4] BeautifulSoup4 크롤링 사용법 정리 공식 싸이트에 들어가면 이런 일러스트가 있다 공식 사이트 : https://www.crummy.com/software/BeautifulSoup/bs4/doc/ 한글 번역 : https://www.crummy.com/software/BeautifulSoup/bs4/doc.ko/ 1. 라이브러리 설치 터미널에 아래 명령어를 입력하여 라이브러리를 설치합니다. $ pip install beautifulsoup4 이런식으로 설치됨 2. 라이브러리 로딩 및 홈페이지 접속 설치 후 라이브러리를 불러온다. 그리고 접속하고 싶은 주소를 version_url에 넣어서, 해당 홈페이지의 내용을 불러온다. 코드 설명 한글은 url로 인식하지 못하기 때문에 urllib.parse.quote(value) 로 유니코드로 변환 '웹..
[Python3][크롤링] bs4 BeautifulSoup 활용법 + find & findAll 사용 예시
WEBD/Python 2022. 1. 20. [Python3][크롤링] bs4 BeautifulSoup 활용법 + find & findAll 사용 예시 [ 작업 환경 ] Python3.8 1. 필요 패키지 설치 및 import, 선언 방법 pip install beautifulsoup4 pip install lxml from bs4 import BeautifulSoup beautifulsoup4만을 설치할 경우 아래와 같이 선언하여 사용할 수 있고 추가설치가 필요없는 대신 속도가 빠르진 않고 적당한 수준입니다. bsObject = BeautifulSoup(html, "html.parser") lxml을 설치하여 아래와 같이 선언하여 사용시 속도가 매우 빠르므로 아래와 같이 사용하는 것을 권장합니다. bsObject = BeautifulSoup(html, "lxml") 2. 웹크롤링 샘플 : find 활용 from urllib.request import ..

티스토리툴바