행궁동 데이터 엔지니어

반응형

오늘은 서버에 버스도착정보 수집 설정을 완료했습니다.

 

설정 정보 

- 수집 데이터 항목 : 버스 도착정보 데이터(도착까지 남은 시간과, 잔여좌석 수 포함)

- 수집 버스 정보 : 수원에서 잠실로 이동하는 1007번 버스 (정차하는 정류장 74개 중 29개)

- 수집 시간 : 매일 04:40 ~ 09:00, 8분 간격으로 수집

- 사용 API(REST) : https://www.data.go.kr/dataset/15000175/openapi.do

- 서버 : AWS EC2 Ubuntu 18.04.3 LTS

- 수집 코드 : Python 3.7

- 수집 설정 방법 : Crontab

 

오늘 수집 테스트까지 완료하려고 했는데, API 일일 트래픽 1,000회가 초과해서 테스트는 못해보네요.

내일 수집된 데이터 확인하고 이상 없으면 다음 주부터는 데이터베이스 설치 및 연동 작업 진행하겠습니다.

 

버스도착정보 데이터 수집 진행 사항

수집 데이터와 서버 설정한 것 일부 

수집데이터 포맷
Crontab 설정 내역

반응형

이 글을 공유합시다

facebook twitter kakaoTalk kakaostory naver band