ML6 postgres db 기반 airflow 배치 작업 FastAPI 만들기 요즘 백엔드 작업을 하면서 자꾸 배치작업 관련 Task 가 주어지면서 아.. 안 할 수 없겠다 느낌이 들었습니다. Java와 다른 아키텍처에서 고통을 받고 있고 현업의 파이썬 코드는 생각보다 날 것 그 자체.. OpenSoruce가 양반이었나 생각이 들 정도로 어지럽습니다. 하여간 Airflow 서버가 안 떠있어서 그냥 나 혼자 DAG 관련 실습 공부 겸 정리해 보았습니다.Airflow란 무엇일까요?Airflow는 복잡한 데이터 파이프라인을 정의하고, 실행하며, 모니터링할 수 있는 강력한 도구입니다. 마치 레고 블록을 쌓듯이, 다양한 작업들을 연결하여 하나의 워크플로우를 만들 수 있죠. 이 워크플로우는 특정 시간에 자동으로 실행되도록 설정할 수 있으며, 작업의 진행 상황을 실시간으로 모니터링할 수 있습.. 2025. 1. 15. Entropy 는 무엇인가? Entropy : 정보를 표현하는데 필요한 최소 평균 자원량 (코딩을 잘한것) 하트와 뻐큐중에 뭐가 더 엔트로피가 높을까? 하트가 높다 Cross Entropy : 동일하게 정보를 표현한다.비효율적인 것 (코딩을 못한것) KL 다이버전스 : Entropy - Cross entorpy + 양수가 되는것 2024. 3. 6. (머신러닝) Soft Max 기법 사실 이미 wx 만보고도 답은 정해져있다. 일반적으로 선형분류 모형의 경우 '일대다' 방식 위 예제처럼 선형경계선 찾고 -> 확률적 예측한다 -> 일단 양수로 변환 후 0~1 사이 확률값으로 변환 오차가 1이나 1이넘는 경우가 있기 때문에 실제 값은 1,0,0 0,1,0 0,0,1이 되어야한다 2022. 11. 9. (머신러닝) 로지스틱 리그레션 정리 2022. 11. 9. 이전 1 2 다음
