bs4를 이용한 웹 크롤링 (파싱)

html은 requests 모듈을 이용해서 가져오면되고,

그다음에 원하는 데이터만을 뽑아내야 하는데,

크롬 개발자 도구와 CSS의 selector를 이용하면 개꿀빨 수 있다.

아래와 같이 말이다.

import requests
from bs4 import BeautifulSoup

url = 'https://bluebottlecoffee.com/store/coffee'

r = requests.get(url)
page = r.text.encode('utf8')

soup = BeautifulSoup(page, 'html.parser')

my_products = soup.select(
    '#heap-product-card > div.dn.df-s.flex-col.grid-col-1.transitional-silver-shadow > div.flex-1-0 > div.tc.ph10 >
)

for x in my_products:
    print x.text