2eelogan 님의 블로그

# Django 이번 시간에는 정규화 이후 Feature단계에 관련하여 학습하였다. 정규화된 데이터를 분석이나 AI가 바로 활용할 수 있도록 데이터를 가공하는 단계라고 이해하였는데, 여기서 Medallion Architecture의 개념을 배우게 되었다. * Medallion Architecture란 data lake에서 데이터를 원본 → 정제 → 활용 가능한 형태로 가공해나가는 설계 방식이다. Bronze(raw데이터) → Silver(정제·표준화) → Gold(분석·AI 활용 계층) 과정에서 데이터가 신뢰하고 사용할 수 있는 상태인지 검사하는 품질 규칙(데이터 품질)에 관해서 학습하였다.주요 기준은 다음과 같다.완전성 (Completeness)필수값이 빠지지 않았는유효성 (Validity)값이..

# Django Django(D는 묵음으로 "장고"라고 읽는다)는 Python으로 웹사이트나 웹 서비스를 만들기 위한 웹 프레임워크이다.Django는 DB, 로그인, 관리자, 보안, 폼 등 웹 서비스에 필요한 기능을 많이 갖추고 있어 개발 속도가 빠르고,Query문을 작성하지 않고도 Python 코드로 DB를 다룰 수 있는 강력한 ORM이 존재한다. 이번 주는 Django의 Model-View-Template 구조를 이용해 데이터를 웹 Dashboard로 시각화하는 방법을 연습하였다.각 Layer 별 역할은 다음과 같다.model- DB 구조와 데이터를 다루고 Python 코드와 DB 사이를 연결해주는 역할- ORM을 통한 DB 조작View- 요청을 받아 필요한 작업을 하고 처리하는 Python 로직..

# MongoDB MongoDB를 지난번 MySQL과 동일하게 AWS EC2를 통하여 접근하는 방법에 대하여 학습하였다.수업 과정에서는 EC2 public ip를 통하여 접근하였지만, 수업 이후 복습 시간에는 루프벡 ip (127.0.0.1)를 포함해EC2의 private ip를 이용하여 MongoDB bastion을 통해 접속하는 방법으로 연습해보았다. 먼저 만들어진 MongoDB bastion에 세가지 보안규칙을 적용해준다.인바운드 규칙유형프로토콜포트 범위소스ssh-sgSSHTCP22CustomIP(0.0.0.0)Mongodb-sgCustom TCPTCP27017CustomIP(0.0.0.0)default모든 트래픽모든 프로토콜모든 포트자기 자신의 default 보안 그룹 이후 MongoDB ba..

# AWS 이번에는 VPC를 리전과 망 분리, 인터넷 및 NAT 게이트웨이, 라우팅 테이블로 경로를 지정해 서브넷을 연결하는 학습을 하였다. 먼저 VPC를 만들고, 외부 접속 허용 여부에 따라 공개된 public 영역과 보안 private 영역을 분리하여 서브넷을 만들어준다.이때 장애 발생 시에도 서비스를 계속 운영할 수 있도록 가용 영역(Availability Zone)을 설정한다. 이후 인터넷 게이트웨이를 생성하고 VPC와 연결 해준 뒤, NAT 게이트웨이를 생성한다.이때 주의할 점은 NAT 게이트웨이를 생성할 서브넷을 반드시 public으로 설정하여야 한다는 것이다.NAT 게이트웨이는 private 서브넷의 EC2가 인터넷으로 나갈 수 있도록 중계하는 역할을 하므로,인터넷 게이트웨이와 연결되어..

1. 서론 26년 7월이 지나가고 8월이 시작되었다. 이번주는 Python 기초를 마치고 Linux, AWS,그리고 차주에 배우게될 MySQL과 MongoDB 등 데이터 파이프라인에 대한 기초역량을 습득하게 될 중요한 전환점이었다. 이번주는 컨디션이 생각보다 좋지 못해서 보다 열심히 개인공부를 하지 못했다는 아쉬움이 들었지만, 새로운 것들과 개념을 배우는설렘반 기대반으로 가득한 한주였다. 이제 정말 "실질적"이고 "실무적" 인것들을 알아가는 느낌이었다. 공부하면서 깨달은 건 몇년 전 이 많은 지식에 대한 결핍이 생겼을 때 구글링으로 어떻게 하나하나 습득했을까 .. 였다.현재 LLM이 대부분 대체하고 있는 과거의 "원하는 정보 습득" 이라는 행위는 제한사항이 많았겠구나 생각이 들었다.물론 얻고자 하는 정보..

1. 서론 엔코아 수강생으로 교육을 받은 지도 벌써 2주라는 시간이 흘렀다. 파이썬의 기초와 교육 내 적용되는 툴과 기초개념에 대한 강의가 주를 이뤘던 1주차에 비해, 기초지식을 응용하는 법에 대한 기초(?)를 2주차에서 배워나갔다. 파이썬을 처음 접하는 수강생이라면 많이 어려워한다는 "객체지향 프로그래밍", 속성과 메서드를 함께 다루는 class와 널리 대중적으로 사용하는 numpy, pandas, matplotlib, request 등 라이브러리와 모듈, Git과 Github 사용법 및 기초, 네트워크에 대한 이해와 BeautifulSoup를 활용한 크롤링까지 다양한 개념의 강의를 들으면서 이해하려고 노력하고, 탄탄한 기초를 위해 열심히 노력했다. 캠퍼스 내 도서관에서 IT 5분 잡학사전이라는 책도 ..

1 . 서론 정신없는 일주일이었다. 7월 13일에 개강하여 약4일간의 수업이후, 1주차에 느낀점과 임시로 설정한 나만의 방향성,추후 앞으로 어떻게 성장하고 싶은지 주차별로 나만의 생각들을 간단하게 정리하고자 블로그를 개설하였다.필력이 좋지만은 않지만 이것 또한 시간이 지나며 발전해나가리라 믿어 의심치 않는다. 나는 과학 프로그램 시청하는 것을 좋아한다. 말 그대로 "시청"하는 것만 좋아했다. 관련 전문지식이 없다보니궁금증 해소를 위해 관련 논문을 살펴본다거나 저널을 읽는 등 고도로 심취해있지는 않지만,나는 정말로 시청하는 것을 좋아했다. 유튜브나 뉴스, 기타 플랫폼에서 접한 과학 매체는 매번 나의 시각적 흥미를 자극했고, 한 분야를 깊게 파고들어 해당 분야의 발전에기여하시는 교수님들이나 전문가분들이 정말..