반응형
Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | ||||
4 | 5 | 6 | 7 | 8 | 9 | 10 |
11 | 12 | 13 | 14 | 15 | 16 | 17 |
18 | 19 | 20 | 21 | 22 | 23 | 24 |
25 | 26 | 27 | 28 | 29 | 30 | 31 |
Tags
- apache iceberg
- Data Engineering
- 알고리즘
- 자바
- bigdata engineering
- bigdata engineer
- 코테
- HIVE
- 코엑스
- java
- 프로그래머스
- 코딩테스트
- 삼성역맛집
- 맛집
- Iceberg
- Trino
- 백준
- Spark
- 여행
- Kafka
- 코엑스맛집
- 코딩
- BigData
- Data Engineer
- 용인맛집
- 개발
- pyspark
- hadoop
- Apache Kafka
- 영어
Archives
- Today
- Total
728x90
반응형
목록2025/05/20 (1)
지구정복
[FastAPI] FastAPI로 PySpark 사용하기
1. 설치https://wikidocs.net/book/8531위 참고 책을 참고하면 가상환경에 FastAPI사용하는데 가상환경을 사용하면 스파크 사용시 가상환경 파이썬을 배포해줘야하니 일단 편의상 가상환경을 사용하지 않고 바로 서버에 설치하고 사용해본다. 먼저 Fastapi와 uvicorn 파이썬 패키지를 웹서버 띄울 서버에 설치해준다.여기선 gn001서버에 설치한다. FastAPI는 비동기 처리를 지원하여 높은 성능을 제공하고, 타입 검사 및 자동화된 API 문서 생성을 통해 개발자가 빠르게 효율적인 RESTful API를 구축할 수 있도록 돕습니다. Uvicorn은 경량의 웹 서버로, FastAPI와 같은 비동기 웹 프레임워크에서 높은 성능의 API를 실행하고 배포할 수 있도록 해줍니다. 추후에 s..
데이터 엔지니어링 정복/Python
2025. 5. 20. 16:40
반응형