쇼핑 DB 구축하기(2) 크롤링한 정보를 자동으로 분석하기
안녕하세요. 이번주와 다음주에는 쇼핑 DB 구축하는 방법에 대해 연구하고 있습니다. 우선, 다나와를 크롤링하는 걸 나름 완성했습니다. 다나와에서 내가 원하는 카테고리의 제품, 예를들면 제습기에 대한 부분을 크롤링해서 1~10위까지의 상품의 상세 스펙을 크롤링해서 구글시트에 정리하는 겁니다. 위의 이미지처럼 제품명, 가격, 제조사, 등록년월 및 제품의 스펙(제습기라면 제습면적, 일일제습량, 물통용량 등)을 가져오는데까진 성공! 이렇게 불러오는 정보를 시트에 저장까지는 했는데, 이제 이걸 어떻게 DB화 시킬것인지, 지속적으로 업데이트해서 정보로 만들것인지도 연구해야겠지만, 중요한건 이 불러온 정보를 어떻게 구글시트의 Query 기능을 활용해서 쉽게 데이터를 불러올지 고민이어서, 오늘은 크롤링한 정보를 최대한..
2020. 5. 19.