* Windows 10 Pro
1.
: 하기의 URL을 통해 python 내려받기
> https://www.python.org/downloads/
2.
: python-3.7.1 실행 후 다음과 같이 설정 후 Install Now 클릭
3.
4.
: 경로 길이 제한을 해제하기 위해 Disable path length limit를 클릭
5.
: 설치 완료 메세지가 출력되면 Close 버튼 클릭하여 마무리
6.
7.
: 고급 탭 클릭 후 하단의 환경 변수(N)... 버튼 클릭
8.
: Admin에 대한 사용자 변수(U) 목록 중 Path를 찾아 편집 버튼 클릭, 여기서 Admin은 User Name 이므로 환경마다 다를 수 있음
9.
: 다음과 같이 Python37-3 관련 2개의 환경 변수가 설정되어 있는 것을 확인 가능
10.
11.
: python 버전 정보 확인, 여기서 옵션 V는 대문자
다음과 같은 에러 발생 시
1 2 3 4 5 6 7 8 9 10 11 | --------------------------------------------------------------------------- NameError Traceback (most recent call last) <ipython-input-54-9b9440005e62> in <module>() 35 36 ---> 37 for i in xrange(num_vectors): 38 if np.random.random() > 0.5: 39 x_values.append(np.random.normal(0.4, 0.7)) NameError: name 'xrange' is not defined | cs |
파이썬 2.x 에서 3.x 로 변경되면서 range 로 변경되었음.
OS : Windows 10
Py: 2.7.15
1.
: https://www.python.org/downloads/
2.
3.
4.
5.
6.
7.
환경 변수 설정
8.
9.
10.
* 편집 전에 python27의 경로를 확인
11.
12.
13.
1 2 3 | C:\Users\Admin>python --version Python 2.7.15 | cs |
사이썬(Cython)
: 컴퓨터의 실제 하드웨어에 가까울수록 처리해야 할 데이터의 타입을 아는 것이 중요하다. 컴퓨터 입장에서는 1 + 1과 1.00 + 1.00은 다르다. 전자는 정수들로 이뤄져 있지만, 후자는 부동소수점수이다. 정수를 계산할 때와 부동소수점수를 계산할 때, 계산이 CPU의 서로 다른 부분에서 이뤄진다. 파이썬에서는 사용하려는 데이터의 타입을 명시할 필요가 없이 파이썬 컴파일러가 타입을 유추한다. 하지만 데이터 타입 추론은 느린 연산이므로 파이썬의 속도를 떨어뜨리는 데에 한몫한다. 사이썬에서는 프로그램을 개발하는 프로그래머가 데이터 타입을 반드시 지정하도록 함으로써 이 문제를 해결했다. 컴파일러가 이 정보를 갖고 있으면 훨씬 빠르게 동작할 수 있다.
넘엑스퍼(Numexpr)
: 인메모리 패키지에 NumPy가 있다면 빅데이터 패키지의 핵심에는 Numexpr가 있다. Numexpr는 NumPy의 숫자 표현식 평가이지만, 원래의 NumPy보다 몇 배나 빠르다. 표현식을 재작성하고 내부의 JIT(just-in-time) 컴파일러를 사용함으로써 높은 성능을 낸다.
넘바(Numba)
: Numba는 코드를 실행 직전에 컴파일하는 JIT 컴파일 기법을 이용해 속도를 향상시킨다. 고수준 코드를 작성하면서도 C 코드처럼 빠른 속도를 얻을 수 있다. Numba의 사용법은 직관적이다.
비칼즈(Bcolz)
: Bcolz는 NumPy를 사용할 때 일어날 수 있는 메모리 부족 문제를 극복하도록 돕는다. Bcolz는 최적화된 압축 형태의 배열에 저장해 작업할 수 있다. 데이터를 슬림하게 만들뿐 아니라 후면에서 Numexpr를 사용해 bcolz 배열을 가지고 계산을 수행할 때 필요한 계산을 줄인다.
블레이즈(Blaze)
: '파이썬 다운 방식'으로 데이터베이스 후단부(back-end)를 다루고 싶다면 Blaze가 제격이다. 파이썬 코드를 SQL로 번역해줄 뿐만 아니라 관계형 데이터베이스 외에도 CSV나 스파크와 같은 것을 다룰 수도 있다. Blaze를 사용함으로써 여러 데이터베이스와 데이터 라이브러리를 일관적인 방식으로 다룰 수 있다. Blaze는 지금도 개발되고 있어서 모든 기능이 구현되지는 않았다.
테아노(Theano)
: 테아노는 그래픽 처리 장치를 가지고 직접 작업할 수 있게 해주고 , 수식을 단순화하며, 훌륭한 JIT 컴파일러를 내장하고 있다. 그러한 바탕 위에서 유용한 고등 수학 개념인 텐서를 다루는 훌륭한 라이브러리다.
다스크(Dask)
: Dask는 계산의 흐름을 최적화하고 효율적으로 수행시킨다. 계산을 분배할 수도 있다.
출처: 파이썬으로 배우는 데이터 과학 입문과 실습 소규모 데이터셋 처리부터 빅데이터 처리, 머신러닝, 시각화까지
아래와 같은 에러 발생 시
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 | # pip install --upgrade pyodbc Collecting pyodbc Using cached pyodbc-4.0.22.tar.gz Building wheels for collected packages: pyodbc Running setup.py bdist_wheel for pyodbc ... error Complete output from command /usr/bin/python3 -u -c "import setuptools, tokenize;__file__='/tmp/pip-build-uy211_p4/pyodbc/setup.py';f=getattr(tokenize, 'open', open)(__file__);code=f.read().replace('\r\n', '\n');f.close();exec(compile(code, __file__, 'exec'))" bdist_wheel -d /tmp/tmpun36g10hpip-wheel- --python-tag cp34: running bdist_wheel running build running build_ext building 'pyodbc' extension creating build creating build/temp.linux-x86_64-3.4 creating build/temp.linux-x86_64-3.4/src x86_64-linux-gnu-gcc -pthread -DNDEBUG -g -fwrapv -O2 -Wall -Wstrict-prototypes -g -fstack-protector --param=ssp-buffer-size=4 -Wformat -Werror=format-security -D_FORTIFY_SOURCE=2 -fPIC -DPYODBC_VERSION=4.0.22 -I/usr/include/python3.4m -c src/errors.cpp -o build/temp.linux-x86_64-3.4/src/errors.o -Wno-write-strings cc1plus: warning: command line option ‘-Wstrict-prototypes’ is valid for C/ObjC but not for C++ [enabled by default] In file included from src/errors.cpp:2:0: src/pyodbc.h:56:17: fatal error: sql.h: No such file or directory #include <sql.h> ^ compilation terminated. error: command 'x86_64-linux-gnu-gcc' failed with exit status 1 ---------------------------------------- Failed building wheel for pyodbc Running setup.py clean for pyodbc Failed to build pyodbc Installing collected packages: pyodbc Running setup.py install for pyodbc ... error Complete output from command /usr/bin/python3 -u -c "import setuptools, tokenize;__file__='/tmp/pip-build-uy211_p4/pyodbc/setup.py';f=getattr(tokenize, 'open', open)(__file__);code=f.read().replace('\r\n', '\n');f.close();exec(compile(code, __file__, 'exec'))" install --record /tmp/pip-2segjg5z-record/install-record.txt --single-version-externally-managed --compile: running install running build running build_ext building 'pyodbc' extension creating build creating build/temp.linux-x86_64-3.4 creating build/temp.linux-x86_64-3.4/src x86_64-linux-gnu-gcc -pthread -DNDEBUG -g -fwrapv -O2 -Wall -Wstrict-prototypes -g -fstack-protector --param=ssp-buffer-size=4 -Wformat -Werror=format-security -D_FORTIFY_SOURCE=2 -fPIC -DPYODBC_VERSION=4.0.22 -I/usr/include/python3.4m -c src/errors.cpp -o build/temp.linux-x86_64-3.4/src/errors.o -Wno-write-strings cc1plus: warning: command line option ‘-Wstrict-prototypes’ is valid for C/ObjC but not for C++ [enabled by default] In file included from src/errors.cpp:2:0: src/pyodbc.h:56:17: fatal error: sql.h: No such file or directory #include <sql.h> ^ compilation terminated. error: command 'x86_64-linux-gnu-gcc' failed with exit status 1 ---------------------------------------- Command "/usr/bin/python3 -u -c "import setuptools, tokenize;__file__='/tmp/pip-build-uy211_p4/pyodbc/setup.py';f=getattr(tokenize, 'open', open)(__file__);code=f.read().replace('\r\n', '\n');f.close();exec(compile(code, __file__, 'exec'))" install --record /tmp/pip-2segjg5z-record/install-record.txt --single-version-externally-managed --compile" failed with error code 1 in /tmp/pip-build-uy211_p4/pyodbc/ | cs |
의존성과 관련하여 다른 프로그램을 사전 설치할 필요가 있습니다.
1. python-pip 를 설치합니다.
: apt-get install unixodbc-dev
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 | # apt-get install unixodbc-dev Reading package lists... Done Building dependency tree Reading state information... Done The following extra packages will be installed: libltdl-dev libodbc1 libtool odbcinst odbcinst1debian2 unixodbc Suggested packages: libtool-doc libmyodbc odbc-postgresql tdsodbc unixodbc-bin gcj-jdk The following NEW packages will be installed: libltdl-dev libodbc1 libtool odbcinst odbcinst1debian2 unixodbc unixodbc-dev 0 upgraded, 7 newly installed, 0 to remove and 2 not upgraded. Need to get 804 kB of archives. After this operation, 5,198 kB of additional disk space will be used. Do you want to continue? [Y/n] Y Get:1 http://archive.ubuntu.com/ubuntu/ trusty/main libodbc1 amd64 2.2.14p2-5ubuntu5 [175 kB] Get:2 http://archive.ubuntu.com/ubuntu/ trusty/main odbcinst amd64 2.2.14p2-5ubuntu5 [12.6 kB] Get:3 http://archive.ubuntu.com/ubuntu/ trusty/main odbcinst1debian2 amd64 2.2.14p2-5ubuntu5 [40.6 kB] Get:4 http://archive.ubuntu.com/ubuntu/ trusty/main libltdl-dev amd64 2.4.2-1.7ubuntu1 [157 kB] Get:5 http://archive.ubuntu.com/ubuntu/ trusty/main libtool amd64 2.4.2-1.7ubuntu1 [188 kB] Get:6 http://archive.ubuntu.com/ubuntu/ trusty/main unixodbc amd64 2.2.14p2-5ubuntu5 [19.8 kB] Get:7 http://archive.ubuntu.com/ubuntu/ trusty/main unixodbc-dev amd64 2.2.14p2-5ubuntu5 [211 kB] Fetched 804 kB in 4s (188 kB/s) Selecting previously unselected package libodbc1:amd64. (Reading database ... 55073 files and directories currently installed.) Preparing to unpack .../libodbc1_2.2.14p2-5ubuntu5_amd64.deb ... Unpacking libodbc1:amd64 (2.2.14p2-5ubuntu5) ... Selecting previously unselected package odbcinst. Preparing to unpack .../odbcinst_2.2.14p2-5ubuntu5_amd64.deb ... Unpacking odbcinst (2.2.14p2-5ubuntu5) ... Selecting previously unselected package odbcinst1debian2:amd64. Preparing to unpack .../odbcinst1debian2_2.2.14p2-5ubuntu5_amd64.deb ... Unpacking odbcinst1debian2:amd64 (2.2.14p2-5ubuntu5) ... Selecting previously unselected package libltdl-dev:amd64. Preparing to unpack .../libltdl-dev_2.4.2-1.7ubuntu1_amd64.deb ... Unpacking libltdl-dev:amd64 (2.4.2-1.7ubuntu1) ... Selecting previously unselected package libtool. Preparing to unpack .../libtool_2.4.2-1.7ubuntu1_amd64.deb ... Unpacking libtool (2.4.2-1.7ubuntu1) ... Selecting previously unselected package unixodbc. Preparing to unpack .../unixodbc_2.2.14p2-5ubuntu5_amd64.deb ... Unpacking unixodbc (2.2.14p2-5ubuntu5) ... Selecting previously unselected package unixodbc-dev. Preparing to unpack .../unixodbc-dev_2.2.14p2-5ubuntu5_amd64.deb ... Unpacking unixodbc-dev (2.2.14p2-5ubuntu5) ... Processing triggers for man-db (2.6.7.1-1ubuntu1) ... Setting up libodbc1:amd64 (2.2.14p2-5ubuntu5) ... Setting up libltdl-dev:amd64 (2.4.2-1.7ubuntu1) ... Setting up libtool (2.4.2-1.7ubuntu1) ... Setting up odbcinst1debian2:amd64 (2.2.14p2-5ubuntu5) ... Setting up unixodbc (2.2.14p2-5ubuntu5) ... Setting up unixodbc-dev (2.2.14p2-5ubuntu5) ... Setting up odbcinst (2.2.14p2-5ubuntu5) ... Processing triggers for libc-bin (2.19-0ubuntu6.6) ... | cs |
2. python-pip 를 설치합니다.
: apt-get install python-pip
1 2 3 4 5 6 7 | # apt-get install python-pip Reading package lists... Done Building dependency tree Reading state information... Done python-pip is already the newest version. 0 upgraded, 0 newly installed, 0 to remove and 2 not upgraded. | cs |
3. 다시 pyodbc 설치를 진행합니다.
: pip install pyodbc
1 2 3 4 5 6 7 8 9 10 | # pip install pyodbc Collecting pyodbc Using cached pyodbc-4.0.22.tar.gz Building wheels for collected packages: pyodbc Running setup.py bdist_wheel for pyodbc ... done Stored in directory: /root/.cache/pip/wheels/4f/ca/76/a2d9249e460278808e73f834a0312bb9747bb5b8800670cf80 Successfully built pyodbc Installing collected packages: pyodbc Successfully installed pyodbc-4.0.22 | cs |
| python-3.7.1 설치 및 환경 구축 (0) | 2018.10.21 |
|---|---|
| [에러] name 'xrange' is not defined (0) | 2018.07.23 |
| windows 10 python 2.7.15 설치 (0) | 2018.07.03 |
| 파이썬에서 사용할 수 있는 도구 (0) | 2018.07.02 |
| Python 으로 MySQL 에 접속 (0) | 2017.11.27 |
1. 실행 창에서 cmd 창을 실행합니다.
* 실행 창 단축키는 "Ctrl + R" 와 같습니다.
2. cmd 창에서 다음과 같이 "pip install PyMySQL" 을 실행합니다.
1 2 3 4 5 6 7 | C:\Users\Admin>pip install PyMySQL Collecting PyMySQL Downloading PyMySQL-0.7.11-py2.py3-none-any.whl (78kB) 100% |████████████████████████████████| 81kB 428kB/s Installing collected packages: PyMySQL Successfully installed PyMySQL-0.7.11 | cs |
3. python 에 접속합니다.
1 2 3 4 | C:\Users\Admin>python Python 3.6.2 (v3.6.2:5fd33b5, Jul 8 2017, 04:14:34) [MSC v.1900 32 bit (Intel)] on win32 Type "help", "copyright", "credits" or "license" for more information. | cs |
4. pip install 을 통해 설치한 pymsql 을 import 합니다.
1 2 | >>> import pymysql | cs |
5. 접속 정보를 다음과 같이 입력하여 접속을 시도합니다.
1 2 | >>> conn = pymysql.connect(host='192.168.11.123', port=3306, user='test', password='test', db='board', charset='utf8') | cs |
* port 와 같은 경우 기본 포트 3306 일 경우에 생략 가능합니다.
6. 연결이 성공하였을 경우 아래와 같이 커서를 설정합니다.
1 2 | >>> curs = conn.cursor() | cs |
7. 간단한 질의문을 변수에 저장합니다.
1 2 | >>> sql = "select * from board_pro" | cs |
8. 질의문이 담긴 변수를 커서의 실행 메소드에 매개 변수로 전달합니다. 다음 라인에 바로 건수가 출력됩니다.
1 2 3 | >>> curs.execute(sql) 7 | cs |
9. 커서로부터 모든 행을 가져와서 rows 변수에 저장합니다.
1 2 | >>> rows = curs.fetchall() | cs |
10. rows 변수에 담긴 값들을 출력합니다.
1 2 3 | >>> print(rows) ((4, 'test first', 'test first', 'test first', datetime.datetime(2017, 11, 6, 2, 27, 23), 0), (5, 'test second', 'test second', 'test second', datetime.datetime(2017, 11, 6, 2, 27, 33), 0), (6, 'test third', 'test third', 'test third', datetime.datetime(2017, 11, 6, 2, 27, 41), 0), (7, 'test fourth', 'test fourth', 'test fourth', datetime.datetime(2017, 11, 6, 2, 28, 12), 0), (8, '??? ??', '??? ?????', '??', datetime.datetime(2017, 11, 9, 8, 10, 58), 12), (9, '??? ', '???', '??? ??', datetime.datetime(2017, 11, 9, 8, 13, 53), 1), (10, '??? ? ???....', '?? ??', 'test', datetime.datetime(2017, 11, 9, 8, 45, 38), 5)) | cs |
* 참고로 데이터베이스에서 조회한 결과는 다음과 같습니다.
11. 연결을 끊고 작업을 마무리합니다.
1 2 | >>> conn.close() | cs |