티스토리

cactusroom

검색하기

블로그 홈

cactusroom

ryuhyun.tistory.com/m

GIS/데이터 연구

구독자: 7

방명록 방문하기

주요 글 목록

[숫자 유형] 정수 integer, 실수(소수점) float 정수(integer) : 소수점이 없는 숫자. 0, 1, ... 실수(float) : 소수점이 있는 숫자 0.0, 0.1.... print(type()) 함수로 1은 int로, 1.1은 float로 저장됨을 확인할 수 있다. 공감수 0 댓글수 0 2023. 2. 12.
[엑셀] 텍스트 나누기 번호 0 사라질때, E 표시 제거하기, 열 형식 지정 아래와 같이 '이름, 번호' 정보가 있다. 콤마를 기준으로 텍스트 나누기를 해서 이름과 번호를 각자 다른 컬럼에 입력하려고 한다. 데이터 - 텍스트 나누기 로 들어가서 쉼표를 기준으로 텍스트를 나눴더니, 번호가 텍스트 형태가 아니라 숫자로 지정되어 아래처럼 앞의 0이 사라지고 E+ 형태로 표현된다. 이럴 때는, 텍스트 마법사 창의 3단계에서, 각 열의 데이터 서식을 지정할 수 있다. 번호 열의 형식이 '일반'으로 자동 선택되어 있는데, 이걸 아래처럼 '텍스트' 로 변경한다. 번호가 앞의 0이 제거되지 않은 채로 성공적으로 텍스트로 변환되었다. * 참고 : 엑셀 번호 복붙할 때 앞에 0 사라질 때 https://ryuhyun.tistory.com/33 [엑셀] 여러 개의 숫자 앞에 0 붙이기, 번호 앞에 .. 공감수 1 댓글수 0 2023. 1. 3.
[엑셀] 빈칸인데 빈칸이 아닌 것처럼 인식될 때(공백 셀 ISBLANK 결과 FALSE) 해결법 아래 글처럼 ISBLANK 함수를 활용해 빈칸(빈 셀)일 경우 다른 셀의 값으로 채우려고 했는데, 분명히 빈칸인데 빈칸이 아닌 것으로 인식된다.. https://ryuhyun.tistory.com/41?category=1035446 [엑셀] 컬럼에 공백이 있을 경우 다른 셀의 값으로 채우기(IF(ISBLANK)) 모든 행에 주소 정보를 입력하고 싶은데 아래와 같이 원본 데이터에 정보들이 중간중간 비어있는 경우, 다른 셀의 값을 빈 칸에 대신 채워넣고 싶을 때는 IF 함수와 ISBLANK 함수를 합성해서 사용 ryuhyun.tistory.com ISBLANK 함수를 통해서 확인해보니, 공백 셀인 경우 TRUE가 반환되어야 하는데 FALSE가 반환된다. 빈 셀이 아닌 것으로 인식되고 있다. 각 빈칸을 선택해.. 공감수 12 댓글수 0 2022. 11. 1.
[엑셀] 중복값 체크, 필터링 하기(IF, COUNTIF 함수 활용) 다음과 같이 번호가 중복된 셀을 체크하고자 할 때에, 단순히 시각적으로 확인하려면 해당 컬럼 선택 후 "조건부서식 - 셀 강조 규칙 - 중복값" 을 누르면 된다. 하지만, 선택된 행 또는 선택되지 않은 행만 필터링해서 보고자 하는 경우, 별도의 컬럼에 정보 입력이 필요하다. 선택된 컬럼에서 중복값일 경우, 특정 값을 출력하도록 하면 필터링이 가능할 것이다.(IF) - > IF(중복값이 있는 경우의 조건식, 조건식 참일 경우의 출력값, 거짓일 경우의 출력값) 중복값일 경우는, 해당 값이 그 컬럼에서 2개 이상인 경우이다.(COUNTIF) -> COUNTIF(중복값을 체크할 범위,중복값)>1 위의 조건에 따라서, 중복값이 있는 경우는 O, 중복값이 없는 경우는 X 를 출력하고자 한다면 아래와 같은 함수식을 .. 공감수 4 댓글수 0 2022. 10. 31.
윈도우 10 사진앱, 스토어(ms 스토어) 오류(안열림,업데이트 안됨) 기본 사진앱이 먹통이라.. 찾아보니 윈도우 스토어에서 업데이트 하래서 윈도우 스토어를 클릭해보니 아무리 눌러도 아예 반응이 없는것이다... 사진앱도 마찬가지. 검색 결과 아래 글을 참고하여 https://answers.microsoft.com/ko-kr/windows/forum/windows_10-windows_store/%EC%8A%A4%ED%86%A0%EC%96%B4/a599f373-6f79-4703-a1b2-1a5400841f62 리디렉션 중 login.microsoftonline.com 일단 스토어 실행 오류 확인을 위해 스토어 캐시 초기화를 시도해 보았다. 1. 윈도우 검색창에서 'wsreset' 을 검색하고, 관리자 권한으로 실행 검은 창에 뭔가 돌아가는 듯 싶어서 기다려보았더니 아래처럼 에러.. 공감수 2 댓글수 0 2022. 9. 27.
[파이썬] 현재 폴더 확인(os.getcwd), 폴더 변경(os.chdir), 폴더내 파일 목록 출력(os.listdir) 일단 먼저 'import os' 로 os 모듈을 불러온다. import os 1. 현재 위치를 확인하는 명령어는 os.getcwd() 2. 폴더를 변경하는 명령어는 os.chdir() : CMD 명령 프롬프트와 마찬가지로 상위 폴더로 이동할 때는 ../ 상위의 다른 폴더로 이동할 때는 ../(폴더명) 하위 폴더로 이동할 때는 /(폴더명) 3. 폴더 내 파일 목록을 확인하는 명령어는 os.listdir() D드라이브로 변경하는 방법은 아래. https://ryuhyun.tistory.com/87 사용자 > (사용자 이름) " 폴더로 지정되어 있다. 상위 폴더로 이동하는게 불가능하기 때문에, D드라이브 등 하" data-og-host="ryuhyun.tistory.com" data-og-source-url=.. 공감수 0 댓글수 0 2022. 8. 29.
파이썬 주피터 노트북 D드라이브에서 실행하기(아나콘다 프롬프트 이용) 주피터 노트북 바로가기 클릭으로 실행하면, 일반적으로 기본 폴더가 "C드라이브 > 사용자 > (사용자 이름) " 폴더로 지정되어 있다. 상위 폴더로 이동하는게 불가능하기 때문에, D드라이브 등 하드디스크를 변경할 경우에는 주피터 실행 이전에 변경해야 한다. 기본 실행 폴더를 아예 변경하는 것 말고, 일시적으로 그때그때 D드라이브에서 실행하고자 하는 경우에는 '아나콘다 프롬프트(Anaconda prompt)' 에서 주피터 노트북을 실행한다. 윈도우 검색창에 검색해서 실행한다. 아래 글에서 cmd 창에서 D드라이브로 변경하는 방법을 소개한 바 있는데, https://ryuhyun.tistory.com/85 윈도우 명령 프롬프트(CMD) 에서 파일 관리하기(CMD 명령어) ArcGIS, QGIS 등 GIS 프.. 공감수 0 댓글수 0 2022. 8. 24.
파이썬 아나콘다 에러 failed with initial frozen solve. retrying with flexible solve conda 를 통해서 패키지를 설치하려고 할 때(conda install ~~) 다음과 같은 에러가 발생할 경우 failed with initial frozen solve. retrying with flexible solve conda 업데이트를 통해서 해결할 수 있다. 명령 프롬프트(cmd) 창에서 아래처럼 입력해서 conda 업데이트를 진행한다. *윈도우 CMD, 아나콘다 프롬프트 전부 우클릭해서 '관리자 권한' 으로 실행해야 한다. conda update --all 내 경우에는 geopandas를 설치하려고 한다. https://geopandas.org/en/stable/getting_started/install.html Installation — GeoPandas 0.11.0+0.g1977b50... 공감수 0 댓글수 0 2022. 8. 24.
윈도우 명령 프롬프트(CMD) 에서 파일 관리하기(CMD 명령어) ArcGIS, QGIS 등 GIS 프로그램의 shp 파일에는 shp 확장자 외에도 shx, dbf 등.. 동일한 비슷한 이름의 파일이 많을 경우, 특정 파일만을 이동시키거나 삭제시키거나 할 때에 일일이 선택해야 한다면 너무 번거롭다. 윈도우 CMD 창에서 간단한 명령어로 파일을 이동, 수정, 삭제할 수 있다. 먼저 CMD 창은 윈도우 검색에서 열 수 있다. cmd 검색해서 명령 프롬프트를 실행한다. 1. 폴더 이동 명령어 cd 작업할 폴더를 이동할 때는 cd 폴더경로(C:\~~) 라고 입력하거나 상위 폴더로 이동할 때에는 상위 몇 번째 어느 폴더로 이동하는지에 따라서 다음과 같이 한꺼번에 입력할 수 있다. 상위 폴더로는 cd .. 그 위의 폴더로는 cd ../../ 그 위의 폴더에 있는 다른 폴더로 이동.. 공감수 5 댓글수 0 2022. 8. 9.
[파이썬] 다중 for 문에서 특정 조건 출력하기(if else) 생략하기(pass)(특정 년월일 선택,생략하기) 먼저 range 함수와 for 문을 통해 년월일을 출력하는 방법을 소개했다. https://ryuhyun.tistory.com/83 [파이썬] for 문으로 년월일 출력해보기(다중 for문), range() 로 숫자 리스트 만들기 1부터 100까지 숫자를 리스트 형태로 만들고 싶은 경우 list=[1,2,3 ...] 이런식으로 일일히 입력하지 않고 range 함수를 통해서 숫자 리스트를 만들 수 있다. 1부터 10까지 숫자 리스트를 만들려고 하는 ryuhyun.tistory.com 이어서, 특정 년도, 월, 일을 선택하거나, 제외하기 위해 if else 문을 활용해보려고 한다. 2020~2022년 전체의 년, 월, 일을 나열하는 for 문을 다시 가져오자. years=range(2020,2023) mon.. 공감수 0 댓글수 0 2022. 8. 2.
[파이썬] for 문으로 년월일 출력해보기(다중 for문), range() 로 숫자 리스트 만들기 1부터 100까지 숫자를 리스트 형태로 만들고 싶은 경우 list=[1,2,3 ...] 이런식으로 일일히 입력하지 않고 range 함수를 통해서 숫자 리스트를 만들 수 있다. 1부터 10까지 숫자 리스트를 만들려고 하는 경우는 range(1,11)라고 적으면 된다. *파이썬에서는 범위의 마지막 숫자보다 하나 더 큰 값을 지정해야 해당 값이 포함된다. 해당 리스트를 확인하고 싶을 경우는, 아래처럼 range를 list 안에 넣은 형태로 출력해야 한다. 이제 for 문을 이용해서 년월일을 출력해 보자. 년도(years)는 2020년부터 2022년, -> range(2020,2023) 월(months)은 1월부터 12월, -> range(1,13) 일(days)은 1일부터 31로 해보자. -> range(1,.. 공감수 0 댓글수 0 2022. 8. 1.
[파이썬] 파일 읽을때 인코딩 에러 'cp949' codec can't decode byte 0x80 in position 7: illegal multibyte sequence 파이썬에서 txt, csv 등 읽어들이려고 할 때 아래와 같은 에러가 발생했다. 'cp949' codec can't decode byte 0x80 in position 7: illegal multibyte sequence 먼저번의 이 에러와 마찬가지로 한글 인코딩 과정에서 발생한 에러로 보인다. https://ryuhyun.tistory.com/74 [파이썬] 판다스 csv 불러올때 인코딩 에러('utf-8' codec can't decode ) csv 파일을 파이썬 판다스로 불러오려고 아래와 같이 입력하였다. df=pd.read_csv('경로/파일명.csv') df 그랬더니 아래와 같이 에러 메시지가 출력되었다. UnicodeDecodeError: 'utf-8' codec can't decode byt.. 공감수 4 댓글수 0 2022. 7. 26.
[엑셀] 내림 함수 ROUNDDOWN으로 나이를 연령대로 표현하기 아래 글에서 출생년도 정보로 나이를 계산하는 방법을 소개했는데 https://ryuhyun.tistory.com/80 [엑셀] DATEDIF 로 두 날짜의 차이(년,월,일) 구하기, 생년월일로 나이 계산하기 아래 글에서는 단순 일수 차이는 셀 빼기로 구하는 방법을 소개했다. https://ryuhyun.tistory.com/54 [엑셀] 날짜 소요일수 구하기, 일 수 계산, 엑셀 날짜 빼기 두 날짜 간의 소요일수를 구하려면, 그 ryuhyun.tistory.com 나이를 연령대로 변환하기 위해서는 '내림' 이 필요하다. 19살이면 10대, 28살이면 20대 이런 식으로 표현되어야 하므로 내림을 활용한다. 엑셀에서는 ROUNDDOWN 함수로 내림 할 수 있다. * 올림은 ROUNDUP, 반올림은 ROUND.. 공감수 2 댓글수 0 2022. 7. 6.
[엑셀] DATEDIF 로 두 날짜의 차이(년,월,일) 구하기, 생년월일로 나이 계산하기 아래 글에서는 단순 일수 차이는 셀 빼기로 구하는 방법을 소개했다. https://ryuhyun.tistory.com/54 [엑셀] 날짜 소요일수 구하기, 일 수 계산, 엑셀 날짜 빼기 두 날짜 간의 소요일수를 구하려면, 그 두 날짜 셀이 전부 년월일 형태 '날짜' 형식을 갖추고 있어야 한다. 날짜 형식의 셀로 변환하는 함수는 DATE로 소개했다. DATE(년,월,일) 값을 입력 ryuhyun.tistory.com 출생년도를 알 경우, 나이로 일괄로 변환하고자 할 경우에는 두 날짜의 차이를 구하는 DATEDIF 함수를 활용할 수 있다. DATEDIF 함수의 인수는 다음 3가지다. DATEDIF(시작일, 종료일, 표현단위(년, 월, 일)) - 시작일, 종료일은 yyyy-mm-dd 의 입력 형식을 가지며 -.. 공감수 1 댓글수 0 2022. 7. 5.
[엑셀] VLOOKUP 함수로 일치하는 정보 매칭하기(행정동 코드 예시) 행정동으로 이루어진 원본 자료에서, 행정동 코드를 매칭시키려고 한다. 아래의 예시는 인천시의 행정동이다. 작전1동 작전서운동 간석4동 간석2동 이 행정동들에 맞는 행정코드를 매칭하려고 한다. 행정구역 코드는 통계청에서 제공하고 있고, 구글에 검색하면 쉽게 다운로드 할 수 있다. 다운로드 받은 파일을 열어보면 지역별 행정구역 코드를 알 수 있다. 행정구역은 계속해서 변경되므로 매칭하려는 파일의 시기를 정확히 해야 한다. 이제 VLOOKUP을 활용해서 행정동에 코드를 매칭시켜보자. 1. 매칭할 셀은 '행정동' 이고, 2. 매칭할 자료는 행정동과 행정구역 코드가 있는 정보이며, 3. 자료에서 가져오려고 하는 셀은 행정구역 코드이고, 4. 정확히 일치하는 것을 가져오려고 한다. 위의 4가지가 VLOOKUP 함수.. 공감수 0 댓글수 0 2022. 6. 23.
[엑셀] 출생년도 정보로 연령대별 인원 집계하기(COUNTIFS 함수) 어떤 명단의 출생년도 정보가 있을 때, 해당 명단의 연령대별 인원을 알고싶을 경우에는 엑셀의 COUNTIFS 를 활용한다. 연령대를 특정하려면, 출생년도의 숫자가 크고 작음을 조건으로 걸면 된다. 이전에 COUNTIF 함수로 특정 조건을 만족하는 셀의 개수를 집계한 적 있는데, 연령대는 2개의 조건을 걸어야 하므로 COUNTIFS 함수를 활용한다. https://ryuhyun.tistory.com/25?category=1035446 [엑셀] 특정 조건을 만족하는 셀의 수 자동 집계하기(COUNTIF) COUNT 함수는 범위 내 셀의 개수를 세는 함수이고, 특정 조건을 만족하는 셀의 개수를 세는 엑셀 함수로는 COUNTIF 가 있다. 기본적으로 집계하고자 하는 범위와 집계 조건을 입력받는다. 예시로 아 r.. 공감수 3 댓글수 0 2022. 6. 22.
[파이썬] 텍스트(txt) 파일 내 특정 문자 바꾸고 csv로 저장하기(.replace()) 행정구역 shp 다운로드 사이트로 소개한 적 있는 통계청 SGIS 에서 제공하는 집계구별 통계 파일을 다뤄볼 것이다. https://ryuhyun.tistory.com/43 [행정구역 경계] 행정동 shp 다운로드 방법(통계청 SGIS) 행정구역 경계는 통계청에서 매년 발표하고 있다. 신청해서 다운로드 가능하다. 통계청 SGIS 홈페이지(sgis.kostat.go.kr) 에 방문해 보자. https://sgis.kostat.go.kr/contents/shortcut/shortcut_05.jsp 자료제.. ryuhyun.tistory.com SGIS에서는 행정구역 경계 뿐 아니라 집계구경계와 집계구경계 기준의 통계파일도 제공한다. 인구총조사 결과를 집계구 번호에 맞게 제공하고 있는데, 원본 데이터는 txt.. 공감수 0 댓글수 0 2022. 6. 8.
[파이썬] 파이썬 연결자 콤마(,)와 더하기(플러스)(+)의 차이 파이썬 코드를 작성하다 보면, 콤마와 +가 각각 다른 상황에 쓰인다. 정확한 차이를 이해하기 위해 정리해 보려고 한다. 위의 예시에서 보면 a, b 문자열을 콤마로 연결했을 때는 띄어쓰기 되지만, 플러스로 연결했을 때는 붙여서 출력된다. 1, 2 를 콤마로 연결하면 1, 2 각자의 값이 출력되지만, 플러스로 연결하면 합산하여 출력된다. 즉, 콤마로 연결한 값들은, 각 값들 개별로 전달된다. 플러스로 연결한 값들은, 합산하여 하나의 값으로 전달된다. 문자(str)과 숫자(int) 를 혼합하여 연결해 보자. '올해는 2022년 입니다' 문장을 아래처럼 나눠서 연결하려고 한다. '올해는', '년 입니다' 는 문자(str), 2022 는 숫자(int) 이다. 콤마로 연결한 경우 각 값이 개별 값으로 전달되어 출.. 공감수 1 댓글수 0 2022. 6. 8.
[엑셀] 번호 하이픈(-) 삭제시,찾기 바꾸기 할때 0 지워짐(SUBSTITUTE 함수 활용) 아래처럼 중간에 하이픈이 있는 번호 정보에서 하이픈을 찾기 바꾸기로 바로 바꾸려고 하는 경우, 텍스트로 저장된 숫자가 아니라 숫자로 변환된다. 찾기 바꾸기에서 셀 내용을 바꾸면, 자동으로 숫자 유형의 셀로 인식된다. 이럴땐 엑셀 substitute 함수를 활용할 수 있다. 변환할 셀 선택하고 변환할 문자들을 "" 따옴표 안에 입력하면 된다. SUBSTITUTE(변환하고 싶은 셀,"변환하고 싶은 문자","변환할 문자") 변환하고 싶은 문자는 하이픈이므로 "-", 변환할 문자는 그냥 아무것도 없게 하고 싶으므로 "" 로 입력. 위와 같이 하이픈이 성공적으로 제거되었다. 함수식이 지워진 결과값만을 다른 셀에 복사 하고 싶으면 붙여넣어진 셀이 선택된 상태에서 우클릭, '값 붙여넣기' 에서 값만 붙여넣으면 된다. 공감수 0 댓글수 0 2022. 5. 23.
[파이썬] 판다스 csv 불러올때 인코딩 에러('utf-8' codec can't decode ) csv 파일을 파이썬 판다스로 불러오려고 아래와 같이 입력하였다. df=pd.read_csv('경로/파일명.csv') df 그랬더니 아래와 같이 에러 메시지가 출력되었다. UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc1 in position 48: invalid start byte utf-8 관련인 것으로 보아 인코딩 문제인 것으로 보인다. 다른 한글 인코딩 방식인 'cp949', 'euc-kr' 등 인코딩 방식을 지정해보자. 나는 'cp949' 를 선택했다. df=pd.read_csv('경로/파일명.csv',encoding='CP949') df 한글 인코딩 옵션 추가 후, 에러 없이 정상적으로 출력되는 것을 확인했다. 공감수 0 댓글수 0 2022. 5. 13.
[엑셀] 날짜 형식으로 변환하기(TEXT 함수, yyyy-mm-dd) 이전 글에서 날짜 형식으로 변환을 위해 마지막 문자를 제거하는 것까지 진행하였다. https://ryuhyun.tistory.com/71 [엑셀] 엑셀에서의 IF ELSE 구문(다중 IF 함수) 코딩을 하다 보면, 조건문 if 이하 외의 다른 경우에 대해서는 else 이하로 작성하는데, 엑셀에서는 if else로 따로 구분하지 않는다. 엑셀에서의 입력 형식은 IF(조건문,참인경우,거짓인경우) 로, el ryuhyun.tistory.com 엑셀에서 yyyy-mm-dd 의 일괄된 날짜 형식으로 변환하기 위해서는 TEXT 함수를 활용할 수 있다. 년월일 형태의 숫자가 표현되어 있는 셀을 대상으로 아래와 같이 입력하면 된다. TEXT(해당셀,"yyyy-mm-dd") 공감수 1 댓글수 0 2022. 5. 11.
[엑셀] 엑셀에서의 IF ELSE 구문(다중 IF 함수) 코딩을 하다 보면, 조건문 if 이하 외의 다른 경우에 대해서는 else 이하로 작성하는데, 엑셀에서는 if else로 따로 구분하지 않는다. 엑셀에서의 입력 형식은 IF(조건문,참인경우,거짓인경우) 로, else 에 해당하는 구문을 '거짓인 경우' 로 입력받는다. 아래와 같이 날짜 형식이 여러가지로 중구난방인 날짜 컬럼을 정렬하고 싶다.. 살펴보니, 년월일 제일 마지막에 "/" 가 있거나 "|" 가 있는 등 또다른 문자가 있는 경우 날짜로 인식되지 못한다. 제일 마지막 문자를 구분하여 각 경우에 따라 일괄로 날짜를 정렬하고 싶다. 마지막 문자를 경우에 따라 구분하기 위해 다중 IF 함수를 활용하려고 한다. 마지막, 처음 문자를 추출하는 RIGHT, LEFT 함수 관련 글은 아래 게시글 참고 https:.. 공감수 1 댓글수 0 2022. 5. 10.
[엑셀] 끝에서부터 n번째 글자 지우기,마지막 글자 지우기,첫 글자 지우기(LEFT,RIGHT, LEN 함수) 아래 글에서 RIGHT, LEFT, MID 함수를 통해 셀의 특정 번째 값을 추출하는 방법을 소개한 바 있는데, https://ryuhyun.tistory.com/52?category=1035446 [엑셀] 셀 텍스트 왼쪽으로부터, 오른쪽으로부터, 중간에서 일부 추출하기(LEFT, RIGHT, MID 함수) 엑셀에서 각 셀의 값을 위치 인덱싱을 통해 추출하는 방법이다. LEFT 함수는 셀의 왼쪽 끝으로부터 세고, RIGHT 함수는 오른쪽 끝으로부터, MID 함수는 중간부터 센다. LEFT, RIGHT 함수는 양 끝으로부 ryuhyun.tistory.com 추출한 글자를 제거하는 방법에도 활용할 수 있다. 특정 셀의 끝(왼쪽)에서부터 n번째 글자를 지우기 위해서는, 특정 셀에 있는 글자 수를 먼저 센 다음.. 공감수 10 댓글수 0 2022. 5. 10.
구글 애드센스 핀코드 도착 우편함에 엽서같은게 꽂혀 있길래 확인해 보니 구글 애드센스에서 핀코드를 보냈다. 설마 실물 우편으로 오려나 하고 반신반의했는데, 진짜로 실물 우편으로 왔다.. 보낸곳 주소가 말레이시아로 되어 있어서 외국에서 온 문서라는 생각에 왠지 설렌다 ㅎㅎㅎㅎㅎ 절취선을 따라서 문서를 자르면, 핀번호가 있는데 핀번호는 애드센스 출금을 위한 본인확인을 위해 필요하다. 구글 애드센스 계정에 로그인해서 본인확인을 완료해주면 된다. 과정은 단순하다. 블로그 열심히 하자..ㅎㅎㅎ 출금하는 날까지!! 되도록이면 빨리.... 공감수 0 댓글수 0 2022. 5. 9.
[파이썬] 뷰티풀수프bs4 - html 태그 삭제하기(.decompose()) bs4를 이용한 웹페이지 크롤링 중 특정 태그 이하의 내용을 삭제하고 싶을 때는 decompose() 를 활용할 수 있다. url 을 불러오고, soup 로 파싱한다. import requests from bs4 import BeautifulSoup url="불러오고자 하는 url" req = requests.get(url) soup = BeautifulSoup(req.text, "lxml") 파싱 후 지우고 싶은 태그를 find를 통해서 찾아낸다. soup.find("태그", attrs={"하위태그":"하위태그상세"}) 지우고 싶은 태그를 찾아서 확인한 후, .decompose() 하면 바로 soup 에서 해당 태그가 삭제된다. soup.find("태그", attrs={"하위태그":"하위태그상세"})... 공감수 1 댓글수 0 2022. 4. 25.
[파이썬] module 'html5lib.treebuilders' has no attribute '_base' 에러 해결 from bs4 import BeautifulSoup 뷰티풀수프 import 했을 뿐인데.. 아래처럼 전에 안 나오던 에러가 뜬다. module 'html5lib.treebuilders' has no attribute '_base' _html5lib.py 파일에서 에러가 나는 것으로 보이는데.. 예전에 한번 이 에러로 인해서 _html5lib.py 파일 내에 있는 모든 "base" 를 "_base" 로 변경한 기억이 있는데 소용 없었나 보다. 구글링 해보니, bs4를 업그레이드 해보라고 해서 cmd 창을 켜고 아래와 같이 입력했다. pip install --upgrade beautifulsoup4 이렇게 입력하니 업그레이드가 진행되고, beautifulsoup4-4.11.1 버전으로 업그레이드 되었다. .. 공감수 2 댓글수 1 2022. 4. 25.
[QGIS] shp파일 좌표 확인하고 변환하기, OTF(on the fly) 기능 QGIS 에서는 OTF(온더플라이) 기능을 지원하는데, OTF 란 좌표체계가 서로 다른 파일들을 같은 좌표상에 있는 것처럼 표현하는 기능이다. 좌표가 서로 다른 파일 두 개를 올려보자. (인천 경계 파일과 배경지도로 Daum street map을 활용했다.(TMS for Korea 플러그인 활용)) 웹 - TMS for Korea 에서 다음지도 street map을 불러와 보자. *TMS for Korea 는 '플러그인' 에서 검색해서 다운로드, 다운로드 후 상단 '웹' 메뉴에서 확인 가능) 다음 지도의 좌표정보는 EPSG 5181 임을 오른쪽 하단에서 확인할 수 있다. (EPSG 5181 (Korea 2000 / Central Belt) - GRS80, TM중부) 여기에 인천 경계 파일을 올려보자. O.. 공감수 1 댓글수 2 2022. 4. 21.
[파이썬] 대용량 텍스트 파일(txt) 에서 원하는 정보 추출하기 https://ryuhyun.tistory.com/64 건축행정데이터(세움터) - 전국 건축물대장 표제부 다운받고 확인하기 세움터는 국토교통부 녹색건축과의 건축행정시스템으로, 건축인허가 현황과 건축물대장 자료를 제공하고 있다. 건축데이터 민간개방 시스템에서 월 단위로 대용량 원시데이터를 제공한다. 건 ryuhyun.tistory.com 건축데이터 민간개방 시스템에서 다운받은 전국 표제부 데이터가 2기가가 넘는 관계로.. 메모장에서 열리지 않는다. 하지만 여기서 특정 조건에 해당하는 표제부 정보를 추출하고자 할 때 파이썬을 활용할 수 있다. 나는 전국 표제부 데이터에서 서울시의 표제부 정보만을 추출하고자 한다. 파이썬에 원본 txt 파일을 'r' 로 불러오고, (f 변수로 불러옴) 결과 파일을 저장할 tx.. 공감수 3 댓글수 0 2022. 4. 12.
[파이썬] 텍스트 파일(txt) 읽고 쓰기(readline) 텍스트 파일이 대용량이거나 해서 메모장에서 열리지 않는 경우가 있다. 그럴 때 파일 내용의 일부를 파이썬에서 확인해보는 방법이 있다. 파이썬에서 텍스트 파일을 읽으려면 일단 먼저 open 을 이용해서 파일을 연다. 건축물 표제부 데이터를 "sample.txt" 라는 파일로 임의로 저장했고, 이 파일을 f 변수에 저장해서 열어보려고 한다. 파일을 읽을 때는 'r' 을 인자로 추가한다. f=open('sample.txt','r') 파일이 읽어진 것을 주피터 노트북 내에서 확인할 때는 readline, readlines 를 활용할 수 있다. readline은 첫 줄만 읽고, readllines는 모든 줄을 읽는다. 아래와 같이 입력해서 f 변수에서 라인을 읽어낸다. f.readline() 텍스트 파일에 쓸 때.. 공감수 1 댓글수 0 2022. 4. 12.
건축행정데이터(세움터) - 전국 건축물대장 표제부 다운받고 확인하기 세움터는 국토교통부 녹색건축과의 건축행정시스템으로, 건축인허가 현황과 건축물대장 자료를 제공하고 있다. 건축데이터 민간개방 시스템에서 월 단위로 대용량 원시데이터를 제공한다. 건축행정시스템 세움터에서는 각종 민원을 처리하고, 개별 데이터를 조회할 수 있다. https://cloud.eais.go.kr/ 건축행정시스템 세움터 cloud.eais.go.kr 원시 형태의 전체 데이터는 '건축데이터 민간개방 시스템' 에서 확인할 수 있다. https://open.eais.go.kr/main/main.do 건축데이터 민간개방 시스템에서는 전체 표제부 데이터, 층별개요, 전유공용면적, 주택가격, 소유자구분정보 등 월단위 전체 원시자료를 다운받을 수 있다. 해당 시스템에서는 국토부 및 지자체 세움터로부터 원시데이터와.. 공감수 1 댓글수 0 2022. 4. 12.

반응형

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.