🚕
크롤링으로 만드는 데이터베이스
/
💡
일정 및 회의록
/
💡
5차 회의(오후 4시)
/
크롤링 예제 사이트
크롤링 예제 사이트
크롤링 예제 사이트
제목
정적/동적
/robots.txt
URL
비고
하이마트
정적크롤링
동적크롤링
O
https://www.e-himart.co.kr/app/display/showDisplayShop?originReferrer=himartindex&utm_source=google&utm_medium=PC_SA&utm_campaign=google_sa&utm_content=google_sa_!1&fromShop=google_sa_!1&gclid=CjwKCAjwvdajBhBEEiwAeMh1U-kYAMSrwBmx7GoqtJMZ3LGsExGt7I2naYBmJ2Dmx9oQNson3jxXQRoCE-UQAvD_BwE
예스24, 교보문고, 알라딘
정적크롤링
O
http://www.yes24.com/main/default.aspx?ysmchn=ggl&ysmcpm=google-sponsor&ysmtac=ppc&ysmtrm=%EC%98%88%EC%8A%A424&pid=123487&cosemkid=go14913756274107498&gclid=CjwKCAjwvdajBhBEEiwAeMh1U5SUVp-eXWaYiH5aenynGadSu5nkrMiGhiY4ONWGJ1lbdgitWTcH0xoCR2QQAvD_BwE
예스24 링크만 넣어둠
공공 데이터 포털
정적크롤링
O
https://www.data.go.kr/
IMDb
정적크롤링
O
https://www.imdb.com/
뉴스 API - title만 가능
정적크롤링
O
http://openapi.yonhapnews.co.kr/
KOTRA 해외시장 뉴스
정적크롤링
동적크롤링
O
https://dream.kotra.or.kr/kotranews/index.do
전자랜드
동적크롤링
정적크롤링
O
https://www.etlandmall.co.kr/pc/main/index.do
금융용어사전
정적크롤링
?
https://fine.fss.or.kr/fine/fnctip/fncDicary/list.do?menuNo=900021&pageIndex=1
망고 플레이트
정적크롤링
?
https://www.mangoplate.com/
나라장터 국가종합전자조달
정적크롤링
?
https://www.g2b.go.kr/index.jsp?isMobile=N
식품안전나라
정적크롤링
?
http://www.foodsafetykorea.go.kr/