일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | ||||
4 | 5 | 6 | 7 | 8 | 9 | 10 |
11 | 12 | 13 | 14 | 15 | 16 | 17 |
18 | 19 | 20 | 21 | 22 | 23 | 24 |
25 | 26 | 27 | 28 | 29 | 30 | 31 |
- BigData
- HIVE
- 프로그래머스
- pyspark
- Trino
- Spark
- Data Engineering
- 용인맛집
- 자바
- apache iceberg
- 개발
- bigdata engineer
- bigdata engineering
- 코테
- 여행
- 코딩테스트
- 코엑스맛집
- java
- Data Engineer
- 영어
- 백준
- hadoop
- 코딩
- 코엑스
- 맛집
- 알고리즘
- Iceberg
- 삼성역맛집
- Kafka
- Apache Kafka
- Today
- Total
목록데이터 엔지니어링 정복/Python (27)
지구정복
pip는 파이썬으로 작성된 패키지 라이브러리들을 관리해주는 시스템이다. 만약 yum이 안될 경우 업데이트를 해준다. [root@localhost ~]# yum update [root@localhost ~]# yum install epel-release//pip를 설치하려면 epel저장소를 활성화 시켜야한다. [root@localhost ~]# yum install python3-pip //pip3 설치 [root@localhost ~]# rpm -qa | grep -i python3-pip python3-pip-9.0.3-7.el7_7.noarch [root@localhost ~]# pip3 -V pip 9.0.3 from /usr/lib/python3.6/site-packages (python 3.6)

1. 파이썬에서 웹서버 사용 더보기 cmd에서 아래 명령어 입력 그리고 웹브라우저에서 localhost:8080을 검색하면 서버안에 디렉터리들이 보인다. 서버를 조작하는 라이브러리는 SimpleHTTPRequestHandler BaseHTTPRequestHandler 이다. 서버실행하기 from http.server import HTTPServer, SimpleHTTPRequestHandler httpd = HTTPServer( ('127.0.0.1', 8080), SimpleHTTPRequestHandler ) print( '서버시작' ) httpd.serve_forever() print( '서버종료' ) 서버시작 http://localhost:8080 을 브라우저에 입력하면 아래와 같이 pydev의 ..

1. requests 사용 더보기 cmd에서 아래와 같이 경로를 변경한 뒤 pip install 시킨다. 페이지 상태값 출력하기 200이 나오면 성공이고 404가 나오면 페이지가 없다는 것이다. import requests url = 'https://www.daum.net' rep = requests.get(url) #페이지 요청값이 출력 print( rep ) 특정 url의 html 텍스트 가져오기 이때 자동적으로 디코딩이 돼서 가져온다. import requests url = 'https://www.daum.net' rep = requests.get(url) #페이지 요청값이 출력 print( rep.status_code ) #페이지 html출력 print( rep.text ) #헤더값만 출력 pri..

1. 파이썬을 이용하여 데이터베이스 조작 더보기 1. sqlite3 사용 sqlite3 모듈은 파이썬 표준 라이브러리로 SQLite에 대한 인터페이스를 제공한다. 이를 이용하면 따로 데이터베이스 모듈을 사용하지 않고 쉽게 이용할 수 있다. sqlite3.connect( 파일 경로 ) 의 뜻은 파일경로에 데이터베이스를 생성한다는 의미이다. test라는 데이터베이스를 만들고 phonebook이란 테이블을 만들어보자. import sqlite3 conn = sqlite3.connect( 'test.db' ) cursor = conn.cursor() cursor.execute( 'create table phonebook( name text, phonenum text )' ) cursor.execute( "ins..