본문 바로가기

반응형

프로그래밍

(23)
Selenium 으로 티스토리 자동 로그인 | Selenium 자동 로그인 구상 작년에 티스토리의 로그인 과정이 카카오계정을 사용하는 것으로 통합되었다. 통합 후 파이썬으로 개발하여 기존에 사용하던 자동로그인 코드가 더이상 유효하지 않은 코드가 되었다. (아래 링크 참조) 티스토리 API Access token 자동 발급 받기 업데이트 ※ 아래 내용은 티스토리의 카카오계정 통합으로 인해 자동 로그인 사용이 불가능 해져 수동으로 발급 받아야 합니다. (2021. 4. 14) | 발급 프로세스 변경 Implicit 방식에서 Authentication Code 방식으로 strangeronpaleblue.com 하지만 최근 Selenium을 이용해서 개발하는 과정에서 API사용이 아닌 브라우저 동작을 자동화 하면 유효한 로그인 세션을 얻을 수 있지 않을..
티스토리 API Access token 자동 발급 받기 업데이트 ※ 티스토리 자동 로그인 게시물 업데이트 내용 - Selenium 사용 (2022. 01. 06) Selenium 으로 티스토리 자동 로그인 | Selenium 자동 로그인 구상 작년에 티스토리의 로그인 과정이 카카오계정을 사용하는 것으로 통합되었다. 통합 후 파이썬으로 개발하여 기존에 사용하던 자동로그인 코드가 더이상 유효하지 않 strangeronpaleblue.com ※ 아래 내용은 티스토리의 카카오계정 통합으로 인해 자동 로그인 사용이 불가능 해져 수동으로 발급 받아야 합니다. (2021. 4. 14) | 발급 프로세스 변경 Implicit 방식에서 Authentication Code 방식으로 얼마전 예전에 작성했던 "파이썬 로그인 세션 유지하기 & 티스토리 API Access token 자동 발..
IP address / Domain / URL 구분하기 with 파이썬 | IP / Domain / URL 통신로그 분석을 하다보면 IP / 도메인 / URL 을 접하게 된다. 실생활에 빗대어 표현하자면 IP는 ㅁㅁ시 OO구 XX길 99 정도로 표현되는 주소이고 도메인은 건물이름, URL은 동 / 호수 정도라고 생각하면 좋을 것 같다. 보통 7 Layer 장비에 수집된 로그를 보다보면 위 세가지 유형의 접속기록이 모두 있어 구분해야 할 필요가 가끔있다. 가장 먼저 생각나는 것은 정규식으로 구분하는 방법이 있지만 도메인이나 URL의 형식에 따라고 오탐할 가능성이 있기 때문에 파이썬에서 제공하는 라이브러리를 사용하여 자동으로 구분하는 코드를 작성했다. | 코드작성 먼저 ipaddress 와 urllib.parse를 import 해준다. import ipaddress import..
파이썬 로그인 세션 유지하기 & 티스토리 API Access token 자동 발급 ※ 카카오 연동 로그인 변경 후 아래 방법 사용(세션 유지는 본 게시물 참조) Selenium 으로 티스토리 자동 로그인 | Selenium 자동 로그인 구상 작년에 티스토리의 로그인 과정이 카카오계정을 사용하는 것으로 통합되었다. 통합 후 파이썬으로 개발하여 기존에 사용하던 자동로그인 코드가 더이상 유효하지 않 strangeronpaleblue.com ※ API Access Token 발급 방식이 변경되어 아래 게시글에 새로 작성하였습니다. 티스토리 API Access token 자동 발급 받기 업데이트 | 발급 프로세스 변경 Implicit 방식에서 Authentication Code 방식으로 얼마전 예전에 작성했던 "파이썬 로그인 세션 유지하기 & 티스토리 API Access token 자동 발급"..
파이썬으로 홈택스 사업자등록상태조회 프로그램 만들기 기업에 대해서 궁금할 때 홈택스에서 사업자등록번호를 이용해 사업자등록상태조회를 이용하게 된다. 사업자등록상태조회에서는 위의 그림과 같이 사업자의 과세유형(일반/간이)등과 사업자상태(계속/휴업/폐업) 상태를 조회 할 수 있다. 하지만 요청당 5초 제한이 걸려있고 여러개의 사업자 등록번호를 조회해야 할때 일일히 입력하면 시간이 오래 걸리는 부분이 있어 이를 자동화 했다. 통신분석 통신구간을 분석하기 위해 웹브라우저의 개발자도구를 사용하여 요청하는 URL과 Request Data를 확인해 보았다. 사업자 등록번호는 삼성전자의 사업자등록번호를 사용해 조회를 했다. POST 방식으로 통신을 하는것과 wqAction.do 로 확인되는 요청 URL, 인자값들이 확인되었다. Request Payload에는 내가 조회했..
파이썬에서의 쉘 or 시스템 명령어 사용 (CMD / BASH...) 파이썬으로 프로그래밍을 하다보면 Windows 의 CMD나 Linux의 Bash 처럼 Shell 명령어를 사용해야 하는 경우가 있다. 쉘 스크립트를 따로 만들어 실행하는 방법도 있지만 파이썬 내부에서 처리를 하는게 관리 측면에서 간편할 것 같다. 파이썬에서 시스템 명령어를 사용하는 방법들을 아래와 같다. os.system() 가장 보편적으로 사용되는 방법이다. 이름에서 짐작하겠지만 C언어에 systeml() 함수와 동일한 역할은 한다. import os import subprocess os.system('echo Hello SYSTEM') 실제 파이썬 코드에서는 위 명령어를 사용하면 'Hello SYSTEM' 이란 문구가 출력되는걸 확인 할 수 있다. 예제의 경우에는 주피터 노트북을 사용해 진행했기 때문..
파이썬으로 첨부파일이 있는 gmail 보내기 업무중에 만든 뉴스센싱 결과를 메일로 보내기 위해 파이썬 코드를 작성하였다. 단순 뉴스 수집을 위한 코드 였기 때문에 내부 메일 서버를 사용하지 않고 외부에 별도의 gmail 계정을 만들어 해당 계정으로 보내도록 만들었다. 간단하게 코드의 중요 부분들을 설명하자면 먼저 gmail의 smtp 서버 설정과 사용할 계정으로 로그인을 해줘야 한다. 구글의 경우 SMTP 서비스로 587번 포트를 이용하고 있다. 계정 로그인의 경우 패스워드 유출 위험이 있으므로 별도의 앱비밀번호를 만들어 넣는것을 추천한다. 앱 비밀번호 발급은 아래 포스팅을 참고하면 된다. 구글 앱 비밀번호 발급받기 구글 앱 비밀번호 발급의 필요성 파이썬 등의 프로그래밍 언어를 이용해 메일 송수신 모듈을 구현해야 할 경우가 있다. 주로 SMTP를 ..
네이버 검색 API를 이용한 코로나, 부동산 뉴스 검색 - with Python 네이버에서는 검색 API를 제공하여 일 25,000건 한도로 검색엔진에 등록된 다음 데이터를 조회 할 수 있다. 네이버 검색 결과 컨텐츠 웹 서비스 또는 모바일 앱에 네이버 웹문서/블로그/뉴스/책/영화/카페글/지식iN/쇼핑/이미지/백과사전/전문자료 분야에 대한 검색 결과 지역 검색 ‘OO역 맛집’, ‘OO동 술집’과 같은 검색 결과를 보여주고 싶을 때 사용하며, 네이버 지역 서비스에 등록된 각 지역별 업체 및 상호 검색 결과 검색 부가 기능 검색 부가 기능으로 특정 검색어에 대해 성인검색어 여부를 알려주는 기능과 검색창에 입력된 오타를 바로 잡아주는 오타변환 기능 제공 위에서 지원하는 기능 중 검색 결과 컨텐츠의 뉴스 검색 기능을 사용하여 파이썬으로 코로나, 부동산 관련 뉴스를 검색해주는 프로그램을 만들..

반응형