반응형

파이썬 11

프로젝트30. Airflow? 뭔가 내 서비스에 잘 맞을 것 같은데?

비슷한 차트 검색기 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com   서비스는 완성했지만..저는 '비슷한 차트 검색기 - 주가 예측' 서비스를 개발하고 운영하고 있습니다. 서비스는 현재 원활하게 돌아가고 있지만, 비용 절감과 유지보수성 향상을 위해 더 나은 기술이나 아키텍처가 없을지 계속 고민 중입니다. 그러던 중, 데이터 엔지니어링과 관련된 도구들을 탐구하면서 Apache Airflow라는 도구를 알게 되었습니다. Airflow는 배치 작업 및 데이터 파이프라인 자동화에 최적화된 도구라고 하여 제 서비스에도 적합할 것 같았습니다. 현재 주기적으로 배치 작업을 수행하는 구조이기 때문에 이를 좀 더 효율적..

프로젝트 2024.09.12

프로젝트28. 정확도 60%↑? 모두가 4달동안 보는 앞에서 주가 예측 성공!

비슷한 차트 검색기 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com  주가 예측 검증 스토리 예측 성공? 아직은 이르다4~5달 전인 2024년 3월, 프로젝트 23. 또 하나의 희망, 비슷한 차트들을 활용한 주가예측 검증 Start 포스팅을 작성했습니다. 이 포스팅에서 언급했듯이 저는 비슷한 차트들로 주가 예측이 가능할지 검증하였습니다. 검증 초기에는 2012~2022년의 비슷한 차트 데이터로 2023년(1년 치)의 주가를 예측하도록 했습니다. 전 종목의 하루치 비슷한 차트 추출은 약 3시간이 걸리기 때문에 1년 치 과거 데이터 검증에 약 2달이 소요되었습니다. 그렇게 로컬 환경에서 검증해 본 결과, 확실..

프로젝트 2024.07.17

예고생의 IT대학 도전기8 - C++ 프로그래밍 (객체지향은 C++ < JAVA 아냐?)

사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 비슷한 차트 검색기 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com 예고생의 IT대학 도전기 개요 20살까지 중학교 수학도 모르던 예고생의 IT대학 도전기 Start! (과목별 정리)사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 웹프로젝트 링크 비슷한 차트 검색기 전 종목의 최근 10년간similarchart.com  고급프로그래밍 및 실습 (C++)2학년 1학기 전공선택과목인 고급프로그..

예고생의 IT대학 도전기5 - C 프로그래밍 및 실습 (포인터가 그렇게 어렵다며?)

사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 비슷한 차트 검색기  비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com https://dodo4723.tistory.com/142 20살까지 중학교 수학도 모르던 예고생의 IT대학 도전기 Start! (과목별 정리)사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 웹프로젝트 링크 비슷한 차트 검색기 전 종목의 최근 10년간similarchart.com   프로그래밍 및 실습 (C)1학년 2학기..

예고생의 IT대학 도전기3 - Python 프로그래밍 및 실습 (A+? 희망이 보인다)

사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 비슷한 차트 검색기  비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com https://dodo4723.tistory.com/142 20살까지 중학교 수학도 모르던 예고생의 IT대학 도전기 Start! (과목별 정리)사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 웹프로젝트 링크 비슷한 차트 검색기 전 종목의 최근 10년간similarchart.com   프로그래밍 및 실습(Python)1학년..

웹 프로젝트11. 클린코드고 뭐고 일단 돌아가게 만들자? 괜찮으려나..

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. 비슷한 차트 검색기 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com 일단 돌아가게 만들고 보자? 이래도 되는 건가 싶다..저는 9월부터 본격적으로 웹 프로젝트를 시작했습니다. 정말 백지상태부터 시작했습니다. 첫 시작은 구글 코랩의 주피터 노트북 파일에서 시작했습니다. 일단 라이브러리로 주가 데이터를 불러오는 것과 매우 시간과 메모리 측면에서 비효율적인 코드부터 시작하여 점점 살을 붙여나가기 시작했죠. 하지만 4달정도가 지나 프로..

프로젝트 2024.02.17

웹 아키텍처16 - 파이썬으로 배포할 때 알고있어야 하는 Gunicorn(WSGI)

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(5년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. 비슷한 차트 검색기  비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com 챗GPT : Flask는 그렇게 막 배포하면 안 돼 저는 웹 프로젝트에 Flask를 사용하고 있습니다. Flask는 간단한 웹 사이트, 혹은 간단한 API 서버를 만드는 데에 특화되어있는 Python Web Framework입니다. 하지만 실제 production 환경에서 Flask 애플리케이션을 배포할 때는, Flask의 개발 서버를 사용하는 것이 아니라, ..

웹 아키텍쳐 2024.02.17

6. 파이썬 메모리 관련 주의할 점과 matplotlib 메모리누수 문제

제 프로젝트는 사용자가 특정 차트를 고르면, 코스피 코스닥 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개 정도를 골라 사용자에게 보여주는 것이 목표입니다. https://www.similarchart.com/ 비슷한 차트 검색기전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요?www.similarchart.com   파이썬 알아서 메모리관리 해준다며.. 파이썬 메모리 주의할 점파이썬과 자바는 C와 달리 free()로 메모리 해제를 하지 않아도 자동으로 가비지컬렉터가 메모리해제를 해준다고 알고 있습니다. 하지만 함수가 길어지거나 불필요한 변수들을 신경 쓰지 않고 있으면 자신도 모르는 사이 불필요한 메모리가 계속 쌓이는 경우가 있습니다. ..

프로젝트 2024.02.17

깃허브 확실하게 짚고 넘어가기(fetch, branch, merge, conflict)(23.2.6)

사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 웹프로젝트 링크 비슷한 차트 검색기 전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요? www.similarchart.com 저는 매일 백준 문제 하나를 풀어 깃허브에 커밋하는 저와의 약속이 있습니다. 그래서 매일 깃허브를 사용하긴 합니다만 커밋 외의 기능들은 두리뭉실하게 알고 있어 머릿속을 정리하기 위해 깃과 관련된 책 한 권을 읽었습니다. 대부분의 내용은 제가 알고있던 것이 맞았습니다. 하지만, 제가 애매하게 알고 있던 부분을 확실하게 정리하고 넘어갈까 합니다. 대표적으로 2가지입니다. 1. git fetch 원격 저장소의 정..

깃허브 2024.02.15

세그먼트 트리 - 백준 2042 (22.8.5)

사용자가 특정 차트를 고르면, 전 종목의 과거(10년) 차트들을 모두 탐색하여 가장 유사한 차트 10개를 골라 사용자에게 보여줍니다. 웹프로젝트 링크 비슷한 차트 검색기 전 종목의 최근 10년간 모든 차트를 탐색합니다. 내 종목의 차트는 과연 상승하는 차트일까요? www.similarchart.com 세그먼트 트리란 세그먼트 트리(Segment Tree)는 여러 개의 데이터가 존재할 때 특정 구간의 합(최솟값, 최댓값, 곱 등)을 구하는 데 사용하는 자료구조이다. 특정 구간의 합을 미리 구해둔 후, 요청이 있을 때 이미 구한 합을 활용하여 답을 구하는 것이다. 트리 종류 중에 하나로 이진트리의 형태이며, 특정 구간의 합을 빠르게(O(logN)) 구할 수 있다. 세그먼트 트리 구성 구간 합을 구한 이진 트..

자료구조 2024.02.13
반응형