반응형

전체 글 167

웹 아키텍처16 - 파이썬으로 배포할 때 알고있어야 하는 Gunicorn(WSGI)

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. 비슷한 차트 검색기  비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com 챗GPT : Flask는 그렇게 막 배포하면 안 돼 저는 웹 프로젝트에 Flask를 사용하고 있습니다. Flask는 간단한 웹 사이트, 혹은 간단한 API 서버를 만드는 데에 특화되어있는 Python Web Framework입니다. 하지만 실제 production 환경에서 Flask 애플리케이션을 배포할 때는, Flask의 개발 서버를 사용하는 것이 아니라, ..

웹 아키텍쳐 2024.02.17

코딩대회와 장학금으로 1245만원 획득! 모든것이 완벽했던 2023년 회고

웹프로젝트 링크 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com  2023년 돌아보기벌써 2023년이 끝나갑니다. 시간이 참 빠른 것 같습니다. 특히 웹 프로젝트를 진행한 2023년 하반기는 눈 녹듯이 녹아버렸네요. 연말에는 블로그를 운영하는 개발자라면 '회고'를 빼먹으면 섭섭하죠. 2023년을 시작하기 전에 세웠던 계획들과 목표들이 있었습니다. 운이 좋게도 모두 이룰 수 있었는데요. 어떤 것들이었는지 하나하나 정리해 보겠습니다.   1. 코딩테스트와 알고리즘 대회 수상제 학교는 IT전공 3학년 학생들을 대상으로 실시하는 코딩테스트가 있습니다. 정확히 말하자면 이 장학금은 NHN에서 숭실대학교 학생들 중 ..

잡담 2024.02.17

7. Redis(레디스)의 유용한 기능 - 도커 컨테이너간 정보공유

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com최근 핫한 Redis전 최신 기술/개발 동향과 효율적인 AI활용을 위해 최신 소식들을 자주 찾아봅니다. 그런데 최근에는 Redis가 자주 들려오더군요. 개발자분들이 말씀하시는 걸 들어보니 Redis가 아키텍처에 자주 등장하는 것을 보았습니다. 또한 이번학기에 DB수업을 수강할 때, 교수님께서 DB 인기 랭킹을 보여주셨는데 거기에..

프로젝트 2024.02.17

6. 파이썬 메모리 관련 주의할 점과 matplotlib 메모리누수 문제

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com   파이썬 알아서 메모리관리 해준다며.. 파이썬 메모리 주의할 점파이썬과 자바는 C와 달리 free()로 메모리 해제를 하지 않아도 자동으로 가비지컬렉터가 메모리해제를 해준다고 알고 있습니다. 하지만 함수가 길어지거나 불필요한 변수들을 신경 쓰지 않고 있으면 자신도 모르는 사이 불필요한 메모리가 계속 쌓이는 경우가 있습니다. ..

프로젝트 2024.02.17

프로젝트 - 5. 데이터 파이프라인, 데이터베이스 구조 정리

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com 모든 것을 자동화해 보자 데이터 흐름  1. 종목 리스트 업데이트맨 처음에는 코스피와 코스닥(미국은 NYSE와 NASDAQ)의 최신 종목 리스트를 불러와 기존 데이터베이스에 있는 종목 리스트와 비교하고 달라진 부분이 있으면 업데이트합니다.code : 종목코드name : 종목명ranking : 시가총액 순위valid : 해당 종..

프로젝트 2024.02.17

비슷한 차트 탐색 프로젝트 - 4. AWS를 사용해서 배포해보자

2023년 9월의 이야기입니다. 제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com   무서운 AWS미지의 세계AWS 역시 Docker에 이어 완전히 새로운 도전입니다. 게다가 이전에 공부한 적도 없고 그냥 클라우드 서비스정도로밖에 알지 못했습니다. 미지의 요소들이 많아 과연 배포가 가능할까 싶더군요. 얼마 전에 유튜브에서 AWS와 관련해 무언가를 잘못했다가 몇천만 원의 과금이..

프로젝트 2024.02.17

비슷한 차트 탐색 프로젝트 - 3. 프로젝트를 Docker로 구성해보자

2023년 9월의 이야기입니다. 제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ similar chart finder내 종목의 차트는 상승하는 차트일까요?3.35.36.208   도커가 그렇게 좋다며? 나도 사용해 보자일단 공부부터도커는 저의 새로운 도전이었습니다. 저는 8월에 도커에 대해 조금 공부했었습니다. 가상화를 프로세스단위로 할 수 있다는 것과, 이미지로 특정 환경을 캡처해 놓을 수 있다는 것 정도를 배웠을 뿐입니다. 실제로 도커를 사용하려면 공부가 꽤 필요했죠. 도커 명령어 실습이 잘 정리된 블로그 글을 보며 ..

프로젝트 2024.02.17

비슷한 차트 탐색 프로젝트 - 2. Flask, Django, Spring 어떤걸 쓸까?

2023년 9월의 이야기입니다. 제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ similar chart finder내 종목의 차트는 상승하는 차트일까요?3.35.36.208 어떤 프레임워크를 사용할까?사용자에게 응답 결과를 보여주기 위해서는 서버가 필요합니다. 서버를 개발하기 위해서는 웹 애플리케이션 프레임워크를 사용해야 합니다. 제 프로젝트에 적용을 고려한 프레임워크는 Flask, Django, Spring 3가지가 있었습니다. 각자 장단점이 뭐고 저에게 어떤 것이 적합할지 조사해 보았습니다. 우선 제 프로젝트의 아키..

프로젝트 2024.02.17

비슷한 차트 탐색 프로젝트 - 1. 시간을 줄이기 위한 여러 실험과 테스트

2023년 9월 중순 이야기입니다. 제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ similar chart finder 내 종목의 차트는 상승하는 차트일까요? 3.35.36.208 전 종목 탐색으로 인해 응답시간이 너무 길다 앞선 포스팅에서 사용자가 '삼성전자'의 32거래일치 차트와 비슷한 과거 차트를 찾아달라고 요청하면 요청 한 번에 최소 4억 번 이상의 연산이 필요하고, 2GB 이상의 메모리가 필요하다고 했습니다. 부가적인 로직들도 고려하면 이보다 훨씬 시간과 자원을 많이 소모할 것입니다. 1초에 2천만 번 정도의 ..

프로젝트 2024.02.17

비슷한 차트 탐색 프로젝트 개요 - 처음에 막막했던 부분들(23.12.21)

https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com  구현 가능할까..? 이 프로젝트가 진짜 가능할까..?'나는 이런 웹사이트를 만들어보고 싶어', '나는 이런 앱을 만들어보는 게 꿈이야' 등 개발자들은 이런 생각을 해보지 않은 사람은 드물 것입니다. 그런데 실제로 구현까지 이어지기는 매우 어렵죠. 실제로 구현이 가능한 건지도 불투명할 것 같네요. 일단 저도 '비슷한 차트를 탐색하는 웹사이트를 한번 만들어보자'로 결정했습니다. 그런데 처음에 이 프로젝트가 진짜 가능한지, 가능하더라도 비용이 얼마나 들지 감도 잡히지 않았습니다. 당시의 저는 AWS, Dock..

프로젝트 2024.02.17
반응형