본 저장소는 필요한 카드 상품 정보, 혜택 데이터, 실적 기준을 수집하는 Python 기반의 크롤링/파싱 모듈입니다.
웹상의 비정형 데이터를 수집 및 가공하여 메인 앱 서비스가 사용자에게 정확한 정보를 제공할 수 있도록 지원합니다.
| Category | Stack |
|---|---|
| Language |
|
| Crawling |
|
| Version Control |
|
웹에서 비정형 데이터를 수집하여 정형 데이터로 변환 후, 데이터베이스의 각 엔티티에 저장하는 프로세스입니다.
우리 프로젝트는 원활한 협업을 위해 아래와 같은 규칙을 따릅니다.
이 프로젝트는 Python 가상환경 사용을 권장합니다.
# Windows
python -m venv crawling
.\crawling\Scripts\activate
# Mac/Linux
python3 -m venv crawling
source crawling/bin/activatepip install -r requirements.txt
![]() 백현빈 |
![]() 이해인 |

