[Python] Redis 데이터베이스를 접속해서 사용하는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 Redis 데이터베이스를 접속해서 사용하는 방법에 대한 글입니다. Redis 데이터베이스는 RDB 종류가 아닌 NoSQL 종류의 Key-Value타입의 데이터베이스입니다. 간단하게 공유 메모리 데이터베이스입니다. 이전 글에서 Linux 환경에서 설치 및 사용하는 방법에 대해 설명한 적 있습니다. 링크 - [CentOS] Redis 데이터베이스 설치와 명령어 사용법 그럼 Redis 데이터베이스를 Python에서 사용해 보도록 하겠습니다. 먼저 Python에서 Redis 데이터베이스를 사용하기 위해서는 Redis 라이브러리를 설치해야 합니다. pip3 install redis 저는 이미 설치가 되어 있어서 설치되어있다고 표시가 되네요.. 설치가 되지 않으신 ..

Development note/Python 2022. 2. 21. 18:22

[Python] Hash 암호화 md5와 바이너리 구조체 base64를 다루는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 Hash 암호화 md5와 바이너리 구조체 base64를 다루는 방법에 대한 글입니다. md5 프로그램을 다루다 보면 데이터를 암호화해서 다루어 할 때가 많이 있습니다. 대표적인게 패스워드가 있겠습니다.이 패스워드는 노출이 되면 안되는 것으로 데이터 베이스를 관리하는 개발자의 경우도 그 값을 확인해서는 안됩니다. 그러기 위해서는 복호화가 불가능한 데이터를 다루어야 하는데 그것이 md5입니다.Python으로도 웹 환경을 만들 수 있으니 필요하지만 그것보다 Python은 미들 웨어의 성격으로도 많이 사용되니 프로그램 간에 송수신할 때 사용할 수도 있습니다. # 해쉬 모듈 import hashlib; # 문자 입력 text = 'nowonbun'; # utf8형..

Development note/Python 2020. 4. 2. 17:38

[Python] 웹소켓을 이용해서 웹 페이지에서 파일 업로드하는 방법

안녕하세요. 명월입니다. 이 글은 Python의 웹 소켓을 이용해서 웹 페이지에서 파일 업로드하는 방법에 대한 글입니다. 예전에 제가 작성한 글 중에 ajax를 이용해서 파일 업로드하는 방법에 대한 글이 있습니다. 링크 - [Jquery] ajax를 이용해 파일 업로드하는 방법 그 내용의 원래 목적은 업로드 할 파일이 대용량일 경우, form submit을 이용해서 서버에 업로드를 할 때 여러가지 제한 사항에 걸려서 ajax로 파일을 나누어 전송하는 방법에 대해 설명하고 있습니다. 업로드를 해야할 파일이 1기가나 2기가 정도의 큰 파일를 업로드를 하려고 하면 server 측의 request buffer max size도 재설정을 해야합니다.그 때 버퍼 사이즈가 너무 크게 설정되면 전체적인 웹 성능에 영향..

Development note/Python 2020. 3. 27. 18:57

[Python] wsgi를 이용해서 apache에 웹 서버를 구축하는 방법

안녕하세요. 명월입니다. 이 글은 Python의 wsgi를 이용해서 apache에 웹 서버를 구축하는 방법에 대한 글입니다. wsgi란 파이썬에서는 웹 서버가 필요없이 http.server나 bottle 모듈, Flask 모듈을 사용하면 웹 서버를 구축할 수 있습니다. 그러나 bottle 모듈이나 Flask 모듈은 아무래도 컴파일된 web server도 아니고 웹 서버만을 위한 모듈이 아니기 때문에 성능이나 보안에 취약할 수가 있습니다. 그래서 apache 웹 서버라는 강력한 웹 서버에 게이트웨이 인터페이스(Web Server Gateway Interface)를 만들어 python을 웹 서버에서 동작할 수 있게끔 만드는 모듈입니다. 예전에 제가 CGI를 통해서 apache에 python을 기동한 적이 있..

Development note/Python 2020. 2. 21. 09:00

[Python] FTP에 접속하여 파일 다운로드, 업로드하는 방법(ftplib)

안녕하세요. 명월입니다. 이 글은 Python에서 FTP에 접속하여 파일 다운로드, 업로드하는 방법(ftplib)에 대한 글입니다. 이전에 제가 Window환경에서 FTP Server를 만드는 방법에 대하 소개한 적이 있습니다. 링크 - [CentOS] FTP 설정, vsftpd 설정 링크 - [Window] FTP 서버를 구축하는 방법 FTP 프로토콜을 이전 만큼은 아니지만, 여러가지 파일 전송 프로토콜로써 아직 사용하는 곳이 있기에 소개하겠습니다. C#으로 FTP 클라이언트를 설명했었는데 비슷한 흐름으로 작성하겠습니다. 링크 - [C#] FTP에 접속해서 파일 다운로드, 업로드하는 방법 # FTP 모듈 from ftplib import FTP # os 모듈(디렉토리를 다루기 위해) import os ..

Development note/Python 2020. 2. 19. 09:00

[Python] 웹 서버를 구축하는 방법(bottle 모듈)

안녕하세요. 명월입니다. 이 글은 Python에서 웹 서버를 구축하는 방법(bottle 모듈)에 대한 글입니다. 제가 이전에 Python으로 웹 서버를 구축하는 방법에 대해 소개한 적이 있습니다.링크 - [Python] 웹 서버를 기동하는 방법(http.server) Python에서는 http.server의 경우는 단순히 socket 서버를 열고 브라우저에서 접속하면 요청 해더 처리(request)와 그것에 대한 응답 코드(response)가 전부입니다.그러니깐 url의 요청 페이지 별로 처리하거나 html 파일을 읽어서 응답하는 등의 처리가 없기 때문에 전부 구현해야 합니다. 정확히 이야기 하면 http.server의 경우는 단순한 http 서버를 열기 위한 모듈이라면 bottle은 http.serve..

Development note/Python 2020. 2. 17. 09:00

[Python] Html 및 XML에서 데이터를 가져오는 모듈(Beautiful Soup)

안녕하세요. 명월입니다. 이 글은 Python에서 Html 및 XML에서 데이터를 가져오는 모듈(Beautiful Soup)에 대한 설명입니다. 이전에 제가 requests(http connector) 와 xml를 다루는 글을 작성한 적이 있습니다. 링크 - [Python] IO - XML 다루기 링크 - [Python] HttpConnection(requests 모듈)로 웹 서버에 접속하는 방법 requests 모듈의 경우는 http 프로토콜을 이용해서 웹에 접속하고 데이터를 가져오는 (html 파일) 역할을 하는 모듈입니다만, html 파일을 파싱해서 데이터를 추출하는 기능은 없습니다. 또 XML를 다루는 lxml의 경우는 정확히는 xml를 데이터를 파싱해서 가져오기는 하지만 html 파싱을 하는 것..

Development note/Python 2020. 2. 12. 09:00

[Python] byte 타입을 다루는 방법(bytearray, struct 모듈)

안녕하세요. 명월입니다. 이 글은 Python에서 byte 타입을 다루는 방법(bytearray, struct 모듈)에 대한 글입니다. 먼저 byte타입을 다루기 위해서 byte를 이해할 필요가 있습니다.프로그램에서 byte란 간단하게 8bit로 이루어진 byte단위입니다. 1bit는 2진 데이터의 하나이므로 8bit는 2^8승, 즉 십진수로 0(0x00)부터 255(0xFF)까지의 값을 나타낼 수 있습니다.참고로 데이터 타입의 char의 값은 ~128 ~ 127이고 byte는 0 ~ 255를 나타내므로 unsigned char와 byte는 같습니다.ascii코드의 값은 char로 나타냅니다만, 프로그램에서 음수의 값은 필요가 없기 때문에 0~127까지 있고 여기에는 영문 문자가 몇몇의 특수기호를 나타낼..

Development note/Python 2020. 2. 6. 23:03

[Python] Selenium 라이브러리 (자동 웹 테스팅, 스크래핑)

안녕하세요. 명월입니다. 이 글은 Python에서 Selenium 라이브러리에 대한 글입니다. 먼저 Selenium이란, 웹 브라이져의 드라이버에 접속하여 제어를 할 수 있게 하는 라이브러리로 보통 웹 테스팅이나 스크래핑 영역에서 자주 사용합니다.쉽게 말해서, Python의 스크립트로 우리가 자주 쓰는 크롬 브라우져를 제어하는 것으로 특정 버튼을 자동으로 클릭하거나 이동하고 수집하여 웹 테스트나 스크래핑으로 활용할 수 있습니다. 예전에 C#으로 스크래핑에 관한 설명한 적이 있습니다.링크 - [C#] Gecko 라이브러리 (웹 스크래핑)여기서 사용한 Gecko라이브러리와 차이점은 Gecko 라이브러리는 브라우저 객체를 가져와서 Form 컨트럴에 붙히거나 사용하는 것으로 실제 브라우저를 제어하는 것이 아니고..

Development note/Python 2020. 2. 5. 09:00

[Python] 메일(smtplib)을 보내는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 메일(smtplib)을 보내는 방법에 대한 글입니다. 우리가 프로그램을 작성하면 메일 발송에 관한 프로그램 작성도 꽤 많을 꺼라고 생각됩니다. 웹 서비스 중에서는 회원 가입 인증 여부나 패스워드 재 설정, 찾기 등의 기능이 있고, 여러가지 기능 옵션의 알람 기능으로도 많이 사용됩니다.웹 서비스 뿐아니라 로컬 프로그램으로는 대량 광고 메일(spam)도 있겠고, 주기적인 알람 기능등도 있을 수 있습니다. 그래서 어떤 프로그램 언어라도 이 메일 전송 라이브러리는 꼭 있는 것 같습니다.링크 - [PHP] PHPMailer 라이브러리를 이용해서 메일 발송하는 방법링크 - [C#] System.Net.Mail을 이용하여 메일 보내기링크 - [Java] Mail 발송..

Development note/Python 2020. 1. 31. 09:00

[Python] HttpConnection(requests 모듈)로 웹 서버에 접속하는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 HttpConnection(requests 모듈)로 웹 서버에 접속하는 방법에 대한 글입니다. 예전에 java나 C#에서 HttpConnection을 이용해서 웹 서버에 접속하는 방법에 대해 설명한 적이 있습니다.링크 - [Java] HttpUrlConnection을 이용해서 웹 페이지를 가져오기 웹서버와 브라우져의 통신은 요청과 응답 구조로 되어 있습니다. 요청은 호스트 주소 포함해서 페이지를 요청하는 것이고, 응답은 요청에 대한 응답 메시지(해더)와 html를 브라우져로 보내주는 것입니다.브라우져에서 javascript가 실행되고 CSS style에 맞추어서 화면이 보여지는 것은 브라우져의 랜더링 역할일 뿐이지 서버와 브라우져간에 통신은 String(..

Development note/Python 2020. 1. 30. 09:00

[Python] Excel(openpyxl)를 다루는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 Excel(openpyxl)를 다루는 방법에 대한 글입니다. 사무 업무를 하는 사람은 엑셀을 빼 놓을 수가 없네요. 그래서 그런지 Excel 라이브러리는 어떤 프로그램 언어에서도 항상 있는 것 같습니다.Java와 C#에서는 Apache 재단에서 제공하는 POI라이브러리가 있는데 Python에서는 자체적으로 라이브러리가 있습니다. 링크 - https://openpyxl.readthedocs.io/en/stable/usage.html 먼저 Excel 파일을 생성해서 만드는 방법에 대해 설명하겠습니다. # 날짜 형식 모듈 import datetime # 엑셀을 사용하기 위한 모듈 from openpyxl import Workbook # 엑셀 Workbook 생..

Development note/Python 2020. 1. 29. 09:00

[Python] 파일 압축, 해제(zipfile)하는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 파일 압축, 해제(zipfile)하는 방법에 관한 글입니다. 프로그래밍을 다루면 압축 파일을 상당히 자주 봅니다. 압축의 이점은 크게 데이터의 사이즈를 줄여주는 것도 있고, 그에 비해 일반 파일시스템(IO)처럼 파일 관리가 가능하면서 실제 물리적으로는 하나의 파일로 되어 있기 때문입니다.Python에서 zip파일을 다루는 모듈은 zipfile입니다.link - https://docs.python.org/3/library/zipfile.html # zipfile 모듈 import zipfile; import os; # 압축 파일을 생성할 파일의 절대 경로. with zipfile.ZipFile('d:\\archive.zip', 'w') as myZip: #..

Development note/Python 2020. 1. 27. 09:00

[Python] Apache cgi에서 python을 사용하는 방법

안녕하세요. 명월입니다. 이 글은 Apache cgi에서 python을 사용하는 방법에 대한 글입니다. 예전에 제가 python에서 웹 서버(http.server)에 대해 구축하는 방법을 설명했습니다.링크 - [Python] 웹 서버를 기동하는 방법(http.server) 그러나 저도 실제로 http.server로 웹 서버를 구축해 본 경험은 없습니다. 사실 http.server로 서비스를 구축한다고 하면 http.server가 제대로 운영이 될까하는 의문도 많고, 좋은 웹 API가 많은데 굳이 python으로 웹 서버를 구축할 필요성을 느끼지 못해서 그렇습니다.웹 API 플렛폼을 PHP로 설정하고 사용할 경우 보통 apache로 구축을 하게 됩니다. PHP 언어도 개인적으로 훌륭한 웹 스크립트 언어이고..

Development note/Python 2020. 1. 21. 09:00

[Python] 웹 서버를 기동하는 방법(http.server)

안녕하세요. 명월입니다. 이 글은 Python에서 웹 서버를 기동하는 방법(http.server)에 대한 설명입니다. 저의 경우는 Python을 로컬 스크립트로 활용을 많이 하는 편이기 때문에 Python으로 웹 서버를 구축하는 경우는 거의 없습니다. 웹 프레임워크 django가 있기 때문에 http.server로 웹서버를 만들지 않을 것입니다.개인적인 생각입니다만 보통 많은 개발자들이 Python만 다루는 사람은 많이 없을 것입니다. 자기가 메인으로 다루는 언어 java나 C# 혹은 PHP를 다루면서 부족한 부분(?)이나 개발의 편의성을 위해 python을 다루는 사람이 대부분이기 때문에 python으로 웹 서버를 만들 일은 거의 없을 것입니다.java나 C#의 경우에 python과 같이 사용해서 co..

Development note/Python 2020. 1. 20. 00:34

[Python] Websocket을 사용하는 방법

안녕하세요. 명월입니다. 이 글은 Python에서 Websocket을 사용하는 방법에 대한 글입니다. Websocket은 웹 브라우져에서 javascript로 TCP 동기 통신을 위한 통신 프로토콜입니다. 제가 이전에 Java로 websocket을 구현한 적이 있는데 참고하시면 이해하기 편하실 것입니다. 링크 - [Java] 웹 소켓 (WebSocket) 이런 웹 소켓을 C#에서는 signalR을 사용하고 Java에서는 표준 Websocket을 사용합니다.(SignalR이라고 웹소켓을 사용하지 않는 것은 아니고 MVC Framework에 맞게 표준 websocket에서 여러 기능을 추가한 것입니다.) 그런데 저의 경우는 Python에서 왜 웹 소켓을 사용할까 하는 것에 PHP에서는 웹소켓을 구현하기가 힘..

Development note/Python 2020. 1. 19. 09:00

[Python] Python과 Java에서의 소켓 통신

안녕하세요. 명월입니다. 이 글은 Python과 Java와의 소켓 통신입니다. 이전에 Python과 C#과의 소켓 통신에 대해 설명했었습니다. 링크 - [Python] Python과 C#에서의 소켓 통신 그럼 뭐 Java와도 Socket 통신에 대해 작성해야하지 않나 싶어서 작성합니다. 저의 경우는 Java는 거의 100의 99는 톰켓을 이용한 웹 프로젝트입니다. 그런데 톰켓으로 작성하니 웹 프로젝트이기는 합니다만, 내부에서 Thread하나 만들어서 소켓 서버를 두고 안드로이드나 IOS의 소켓 서버던가 각종 어플케이션 서버(게임 등등)를 개발하기도 합니다. 그니깐 내부 주요 프로그램 흐름은 소켓 서버입니다만 그 소켓 서버를 제어하기 위한 프로그램은 웹 서비스로 개발합니다. 그러므로 Java에서도 소켓을 ..

Development note/Python 2020. 1. 17. 09:00

[Python] Python과 C#에서의 소켓 통신

안녕하세요. 명월입니다. 이 글은 Python과 C#에서의 소켓 통신에 대한 글입니다. 사람마다 프로그램을 사용하는 방법이나 용도에서는 차이가 있습니다만, 저의 경우는 주력 언어는 java와 C#이고 그 외에 개발 보조 도구로 python을 사용하고 있습니다.그 뜻은 C#의 프로젝트가 있고 CS(Client Server)프로그램을 만들 때, 보통은 Client나 Server의 한쪽을 맡아서 개발을 하게 됩니다. (뭐 프로젝트 크기에 따라 양쪽을 둘다 맡는 경우도 있죠..)만약 제가 Client를 만든다고 하면 분명 Server와 Client의 통신 부분을 작성해야 하는 부분이 있습니다. 이 통신 부분은 HttpConnection을 이용할 수도 있고 Soap통신을 할 수도 있습니다.그러나 가장 보편적으로 ..

Development note/Python 2020. 1. 15. 09:00

[Python] IO - INI 다루기

안녕하세요. 명월입니다. 이 글은 Python에서 Ini(환경 설정 파일)을 다루는 방법에 대한 글입니다. 제가 예전에 Python에서 파일을 다루는 방법에 대해 설명한 적이 있습니다.링크 - [Python] IO (파일 입출력) 예전에 CSV와 XML, JSON 다루는 방법에 대해 설명한 적이 있습니다. Json을 다루는 것과는 관련성이 적으니 따로 링크는 생략하고 아래의 카테고리 관련 글로 확인해 주시기 바랍니다. INI는 Initialization 설정 파일이라고 해서 흔히 확장자가 ini로 이루어져 있습니다. 그러나 꼭 ini는 아니고 conf나 cfg로 사용하는 경우도 있습니다.INI 설정은 크게 섹션과 key 값으로 이루어져 있고 주석은 특이하게 세미 콜론(;)을 사용하는 설정 파일입니다. P..

Development note/Python 2019. 12. 27. 09:00

[Python] IO - JSON 다루기

안녕하세요. 명월입니다. 이 글은 Python에서 Json을 다루는 방법에 대한 글입니다. 제가 예전에 Python에서 파일을 다루는 방법에 대해 설명한 적이 있습니다.링크 - [Python] IO (파일 입출력)예전에 CSV와 XML 다루는 방법에 대해 설명한 적이 있습니다. Json을 다루는 것과는 관련성이 적으니 따로 링크는 생략하고 아래의 카테고리 관련 글로 확인해 주시기 바랍니다. 최근에 프로그램의 데이터를 주고 받는 형식으로 JSON 방식을 매우 많이 사용합니다. JSON이 뭐냐면 Javascript object notation의 약어로 한국 말로는 Javascript 데이터 표기법입니다.즉, Javascript에서 데이터를 Json 형식으로 다루고 있는데, 이게 같은 스크립트 언어이여서 그런..

Development note/Python 2019. 12. 26. 09:00

[Python] IO - XML 다루기

안녕하세요. 명월입니다. 이 글은 Python에서 XML를 다루는 방법에 대한 글입니다. 제가 예전에 Python에서 파일을 다루는 방법에 대해 설명한 적이 있습니다.링크 - [Python] IO (파일 입출력)csv에 대해서 설명한 적도 있는데 이 글과 관련성은 적으니 링크는 생략하겠습니다. 하단의 카테고리 관련 글로 찾아볼 수 있습니다. 최근에는 xml를 잘 사용하지 않는 데 불과 10년 전만 해도 프로그램 파라미터나 환경설정, 데이터를 기술하기 위한 마크업으로 자주 사용했습니다.xml이 구조가 항상 태그가 열고 닫는 구조이고 각 태그에 속성(어트리뷰트)를 넣을 수 있는 구조이기 때문에 데이터를 표현하기엔 정말 좋은 구조입니다.예를 들면 일반 컴파일 언어의 클래스를 데이터로 나타낸다고 하면, 최상단의..

Development note/Python 2019. 12. 25. 09:00

[Python] IO - CSV 다루기

안녕하세요. 명월입니다. 이 글은 Python에서 CSV를 다루는 방법에 대한 글입니다. 제가 예전에 Python에서 파일을 다루는 방법에 대해 설명한 적이 있습니다. 링크 - [Python] IO (파일 입출력) Python은 로컬에서 자주 사용하는 스크립트 언어이다 보니 이런 파일 다루는 라이브러리가 잘 되어 있는 것 같습니다. 다른 언어도 지원을 안하는 건 아닌데.. 개인적으로는 Python이 로컬에서 데이터 만드는 게 편하지 않나 싶습니다. # csv 모듈을 import한다. import csv; # 리스트형 데이터이다.(안에 튜플로 설정했지만, 리스트형 타입도 상관없다. data = [('Tester','1'),('Who','2'),('Tom','3')]; # 파일을 연다. (여기서 내부에서 w..

Development note/Python 2019. 12. 24. 09:00