[Project/4th] 법정동, 좌표값 데이터 DB에 저장하기(2)

 지난 포스팅에서 법정동 엑셀 데이터를 파이썬으로 가공하여 DB에 저장하는 과정에 대해 썼다. 이번 포스팅에서는 법정동의 좌표값(위도, 경도)를 저장하는 과정에 대해 쓰고자 한다!

 

 

 

 

 

1. 법정동 코드와 동이름 저장하기 -> 지난 포스팅

2. 법정동의 좌표값(위도, 경도) 저장하기 -> 현재 포스팅

 

 

 

 

 

 

 

 

 

 

 먼저 후기를 말하자면, 법정동 정보 데이터를 가공해 저장하는 것보다 좌표값을 얻어 저장하는 과정이 훨씬 어려웠다. 법정동 데이터처럼 자료가 엑셀로 존재하는 것이 아니었기 때문에 어떻게 데이터를 가져올지 정말 많이 찾아보고 고민을 해야 됐었다.

 

 

여러 시행착오 끝에 결국 내가 원하는 방식으로 데이터를 저장할 수 있었다!

 

법정동 별 좌표값 저장 결과

 

 

 한동안 자바 스프링으로만 개발하다가 오랜만에 파이썬으로 데이터를 다루니 재미있기도 하다.

 구글링해도 자세한 구현 과정을 얻기 어려웠기 때문에 누군가에게 도움이 되었으면 좋겠다!

 

 

 

 

 

 

 

 

 

 

법정동 좌표 데이터 수집하기

---

 결론적으로 말하자면, 공공데이터 포털, 행정안전부, 구글링.. 등 정말 많이 찾아봤지만 각 법정동의 좌표(위도, 경도)만 나온 데이터를 엑셀과 같은 파일로 얻을 수 없었다. 그래서 다른 방법을 생각해봐야 했다.

 

 

 

 구글링을 통해 법정동/행정동의 중심 좌표를 계산하거나 얻을 수 있다는 방법을 알게 되었다. 가능한 방법은 크게 2가지이다.

 

1) 폴리곤(행정 경계 좌표값) 데이터를 이용해 중심 좌표를 계산

2) 지도에서 행정 중심지의 좌표 검색하여 얻기

 

 

 

 

 

방법1) 폴리곤(행정 경계 좌표값) 데이터를 이용해 중심 좌표를 계산

 구글링해서 나온 블로그 게시글인 '[Python] 전국 행정구역별(법정동) 개수와 경계/중심 좌표 데이터 - GeoPandas' 을 참고했다. 행정구역 별 경계 값을 폴리곤으로 저장한 데이터에서 중점을 구하는 방식이다.

 

 결론적으로 말하자면, 이 방법을 선택하지 않았다.

 

 

 폴리곤 데이터가 담긴 dbf(데이터베이스 파일)이나 shp(GIS 데이터 파일)을 다뤄야 하는데 열기 힘들고, 엑셀로 변환하더라도 인코딩 문제인지 Mac에서 깨진다.. 그리고 폴리곤 데이터에서 중점 구하고 좌표로 변환하는 것을 파이썬(GeoPandas)로 구현해야 해서 다른 방법을 생각해보게 되었다.

 

 

 

 

 

방법2) 지도에서 행정 중심지의 좌표 검색하여 얻기

 카카오맵이나 네이버맵과 같은 지도 API를 사용하여 좌표값을 얻을 수 있다. 지도에서 법정동을 검색하면, 주로 그 동네의 주민센터나 법정동 경계의 중심 지점이 나온다.  

 

 

 

 해당 법정동의 좌표값은 주소를 좌표로 변환하는 기능을 사용하여 가져올 수 있다. 구글링을 통해 파이썬으로 카카오맵에서 주소를 좌표로 변환하는 코드를 찾을 수 있었고, 이 방법이 현재로서는 가장 구현하기 쉬울 것 같아서 선택하게 되었다.

 

 

 

 

 

 

 

 

 

 

카카오맵으로 좌표 데이터 얻기

---

1) 파이썬 패키지 설치하기

pip3 install requests

(*주의 : 맥에서는 pip 말고, pip3라고 명시를 해줘야 실행이 된다.)

 

• requests : HTTP 요청을 처리하기 위해 사용되는 모듈

카카오맵 API를 사용하기 위해서는 HTTP 요청을 보내야 하는데, 이를 처리하기 위한 파이썬 모듈을 따로 설치해줘야 한다.

 

 

 

 

2) API와 통신해 주소를 좌표값으로 변환하기

lat, lng = convert_address_to_coordinates(sido + ' ' + sigungu + ' ' + eubmyeondong)

 

 

 처음에 주소를 읍면동만으로 검색하도록 했다가 ArrayIndexOutOfBound 에러가 났다. 시군구는 다른데, 읍면동이 중복되는 경우가 있어서 검색 결과가 어려 개가 되었기 때문이다. 그래서 '시도+시군구+읍면동'을 다 합친 풀네임으로 검색하도록 했다.

 

 

 

• 주소를 넣으면 위도와 경도를 반환하는 함수

def convert_address_to_coordinates(address):
    KAKAO_REST_API_KEY = '발급받은 API KEY'

    url = 'https://dapi.kakao.com/v2/local/search/address.json?query=' + address
    header = {'Authorization': 'KakaoAK ' + KAKAO_REST_API_KEY}

    r = requests.get(url, headers=header)

    if r.status_code == 200:
        lng = float(r.json()["documents"][0]["address"]['x'])
        lat = float(r.json()["documents"][0]["address"]['y'])
    else:
        return None
    
    return lat, lng

 

 

 

 

 

3) 좌표 데이터 얻어온 결과

 

 

 콘솔창에 찍으면 이렇게 나온다. API 통신을 통해 데이터를 검색해 얻는 것이다보니 시간이 꽤 걸린다. 3000개가 넘는 법정동 데이터의 모든 좌표값을 구하는데 3분이 넘는 시간이 걸렀다.

 

 

 

 

 

4) DB에 저장하기

 

DB 테이블 구조

 

 

lat, lng = convert_address_to_coordinates(sido + ' ' + sigungu + ' ' + eubmyeondong)

mydict[fullCode] = [fullCode, sido, sigungu, eubmyeondong, lat, lng]

 

 

def insert_into_mysql():
    conn = pymysql.connect(host='호스트 주소', user='계정명', password='비밀번호', db='DB명', charset='utf8')
    curs = conn.cursor()

    for key in mydict:
        arr = mydict[key]
        sql = "INSERT INTO address VALUES(\"%s\", \"%s\", \"%s\", \"%s\", \"%s\", \"%s\");"\
            % (arr[0], arr[1], arr[2], arr[3], arr[4], arr[5])
        curs.execute(sql)

    conn.commit()
    conn.close()

 

 

 

 

 

5) DB에 저장 결과