기상정보 자동 스크래핑 코드 진행중3


기상정보 자동 스크래핑 코드 진행중3

스크래핑 초본의 월부분 코드와 저장된 csv 파일 내용, 시간이 반복되면서 하단부 print()로 인해 불필요한 공백이 삽입되었습니다. 출력창에만 공백으로 구분을 하고 csv 저장시엔 내용만 들어가도록 변경합니다. 13년 1월 1일, 매시각마다 온도 정보를 긁어와 저장된 것을 볼 수 있습니다. 하지만 하루가 지나가고 일 단위 날짜가 넘어가면서 에러가 발생했는데 1월 31에서 에러가 발생했습니다. 이유는 하루 기준 지정 변수인 h가 24가 될때까지 24번을 반복 실행해야 하는데 22:50까지만 기상 데이터가 있고 23:50가 있기 때문에 에러가 발생한 것이었습니다. 마지막 날짜에 대한 결측치를 처리했지만 곧바로 에러가 발생했는데 2월 1일 데이터의 경우에는 데이터의 시작이 5:50 이기 때문이었습니다. 결측치 데이터를 처리할 수는 있었지만 중간에 빈 데이터가 너무 많고, 이후 사이트 접속을 하면 6개, 4개의 데이터 밖에 표시되지 않는 경우가 계속 발생해서 스크래핑 대상 사이트를 바꾸...


#데이터 #데이터수집 #셀레니움 #스크래핑 #웹개발 #자동화 #크롤링 #파이썬

원문링크 : 기상정보 자동 스크래핑 코드 진행중3