행궁동 데이터 엔지니어

반응형

오늘은 버스도착정보를 CSV 파일로 저장하는 코드를 작성했습니다.

 

지금까지 진행한 결과는 아래와 같습니다.

  1. 공공데이터포털 버스도착정보 수집 API 사용 신청
  2. 데이터를 수집할 서버 구축(AWS EC2 사용)
  3. 수집할 버스도착정보 데이터 정의(수집할 버스 번호, 수집 시간, 수집 간격 등 결정)
  4. 버스도착정보 데이터 확인(XML 포맷 확인 후 파싱 테스트 완료)
  5. 버스도착정보 저장 테스트

이제 해야하는건 CSV로 저장하는 포맷을 다듬고, AWS 서버에서 자동 수집되도록 설정하는 것입니다.

아마도 내일 중으로 완료되고 월요일부터는 버스도착정보를 수집할 수 있을 것 같습니다.

상세 코드는 다음에 리뷰하겠습니다.

 

수집 후 CSV 형태로 저장한 버스도착정보 데이터 모습, 저장 포맷 다듬기 필요!
CSV 파일로 저장하기 전 확인한 데이터 모습

반응형

이 글을 공유합시다

facebook twitter kakaoTalk kakaostory naver band