본문 바로가기

전체 글

아키텍처 Architecture/Cloud Architecture 2024. 10. 21. Cloud Native Korea Community Day 2024 1. 컨퍼런스 소개- 일시 : 2024년 9월 24일(화) 10시 ~ 18시- 장소 : 백범김구기념관- 주최 : 쿠버네티스 코리아 그룹 페이스북 사용자 모임인 쿠버네티스 코리아 그룹에서 주최하는 컨퍼런스이다.CNCF, 국내외 기업의 후원으로 백범김구기념관이라는 큰 공간이 가득찼다. (컨퍼런스 전 주최측 예상 인원 800명)입장권은 얼리버드 기준 일반 5만원, 학생 3만원에 판매됐다. 오전은 주최측과 후원 기업의 전체 세션이 있었고, 오후에는 3개의 다른 공간에서 약 30분씩 다른 종류의 세션이 병렬로 진행됐다.각 세션은 클라우드 네이티브로 구현한 각 기업의 자사 서비스 소개 또는 서비스 개선 사례에 대한 발표였다.컨퍼런스의 초기 이름이 k8s korea community day 였기에, 참석했던 모든 세..
아키텍처 Architecture/Cloud Architecture 2024. 6. 8. [Ansible] 2. playbook을 이용해 WAS-DB 한 번에 띄우기 * 참고 - 로컬 환경에서 ansible 설치 https://subbak2.tistory.com/206 * 사전 준비사항 : python, docker, ansible 설치 1. 설계ansible 실습을 위해 아래와 같은 환경을 생각했다. playbook 을 통해 WAS, DB의 환경을 작성하고 docker container로 구동.그러기 위해 2가지 파일을 준비했다.1) inventory - playbook 의 실행 환경에 대한 설정파일 /etc/ansible/hosts로 해도 되지만 따로 작성했다2) playbook - 실제 수행할 액션 기록 + 참고용으로 playbook과 동일한 docker compose yaml 파일을 작성해봤다3) docker_compose.yml - playbook과 동일한 ..
아키텍처 Architecture/Cloud Architecture 2024. 6. 8. [Ansible] 1. Mac 로컬에서 환경 구성하기 1. 왜 Ansible인가- IT 인프라의 배포, 관리, 설정, 오케스트레이션 자동화 도구- 특징 : agentless(SSH기반), yaml 기반 간편 배포, 멱등성- 사용 예시 : 전체 서버에 미들웨어 설치 구성, 패키지 업데이트, 모니터링 설정, 보안 패치, 계정 추가 등 업무를 할수록 표준, 자동화에 대한 고민이 커진다.어제 가장 효율적이었던 최선의 방법이, 오늘 돌아보니 기술부채가 되어있을 수 있다.수십 대의 서버에 이미 잡아놓은 표준을 수작업으로 개선하는게 아니라, 한 번에 처리할 수 있다.yaml로 작성한 playbook으로 구성원 모두에게 표준을 쉽게 공유할 수 있다.  2. 환경 구성 - 구성한 환경 : 애플 실리콘 (M1 Max)# 1) pip를 이용한 설치$ pip install an..
데이터 사이언스 DataScience/Data Base 데이터베이스 2024. 5. 31. [Oracle] DDL 중 발생하는 ORA-00054 해결 ORA-00054 자원이 사용 중이고 NOWAIT가 지정되어 획득되었거나 시간종료가 만료됨                     resource busy and acquire with NOWAIT specified or timeout expired 1. 원인ALTER와 같은 DDL을 수행했을때 마주칠 수 있는 에러이다.다른 트랜잭션이 DML 등으로 자원을 잡고 있거나, DDL이 겹칠 경우 발생한다. 일반적으로 DDL이 겹치는 경우는 거의 없을 것 같다.DBA가 동일 오브젝트에 여러개의 세션에서 동시에 DDL을 수행할 확률은 적기 때문이다.2. 해결방법테이블, 인덱스에 장시간 Lock이 잡혀있다면 session을 kill 하거나 그 시간대를 피해서 DDL을 하는게 좋지만, 온라인 트랜잭션이 충분히 많은 오브..
데이터 사이언스 DataScience/Data Base 데이터베이스 2024. 5. 24. [Oracle] 존재하지 않는 Object에 대해 Synonym을 만들 수 있다 1. Synonym (동의어)Oracle DBMS는 Synonym을 통해 다양한 user가 동일한 object를 바라보고 사용할 수 있게 해준다. 예를 들어 권한 분리를 위해 아래와 같이 5종류의 계정을 생성했다고 할때 SVC  :  서비스의 모든 OBJECT를 소유하는 owner 계정SVCONL : 서비스의 ONLINE 프로그램에서 접속해 사용하는 계정SVCBAT : 서비스의 BATCH 프로그램에서 접속해 사용하는 계정SVCSEL : 서비스의 SELECT 권한만 부여한 계정SVCDML : 서비스의 DML 권한을 부여한 계정 SVC.TABLE1 을 SYNONYM으로 아래 DDL을 통해 SYNONYM을 생성한다면 CREATE PUBLIC SYNONYM TABLE1 FOR SVC.TABLE1;모든 계정에서 ..
아키텍처 Architecture/Cloud Architecture 2024. 4. 2. [Openstack] 1. 구성 및 특징 0. 클라우드와 Openstack 개인적으로 생각하는 클라우드와 관련된 가장 인상적인 얘기는 블랙 프라이데이의 서버 부하를 감당하기 위해 많은 서버를 구매한 Amazon이 평소에 남는 서버를 활용하기 위해 클라우드 사업을 시작하면서 AWS를 탄생시켰다는 얘기다. Amazon의 CTO가 클라우드 컴퓨팅 사업은 E-Commerce와 별개로 독자적으로 기획했다고 밝혔으나 링크 (출처 : quora) 많은 사람들이 이 이야기를 하는 이유는 클라우드 컴퓨팅의 장점과 특성을 이해하는데 도움이 되기 때문이라고 생각한다. 이 클라우드 컴퓨팅을 개발자 개인이 이해하고 학습하는데는 역시 오픈소스 만한게 없다고 생각한다. IaaS 형태의 대표적인 오픈소스로 Openstack이 있으며 각 기업의 기술 블로그와 보도자료 등을 ..
아키텍처 Architecture/Software Architecture 2024. 2. 18. 책임연쇄패턴을 통한 로그 파싱 (chain-of-responsibility pattern) 1. 다양한 형태의 로그를 파싱할때 온프레미스, SCP, AWS, Azure, GCP 등 다양한 인프라에서 시스템을 운영하는 경우, 하나의 대시보드에서 주요 로그와 metric을 확인하기위해 로그 파싱을 위한 별도의 어플리케이션이 필요하다. 기존에 시스템의 규모가 크지 않을때는 shell 파일, 또는 단일 java 파일로 rule based 로직을 통해 충분히 필터링 후 DB에 데이터를 넣을 수 있었지만, 사용하는 WAS, DB의 종류가 다양해지면서 log의 파싱이 점차 복잡해졌다. 향후 확장성과 코드의 가독성을 고려해 디자인패턴을 도입해 개선하기로 했고 찾아보던 중 책임 연쇄 패턴 (Chain of Responsibility Pattern)을 발견했다. https://ko.wikipedia.org/wi..
데이터 사이언스 DataScience/Deep Learning 딥러닝 2024. 2. 8. GPT와 함께하는 주가 예측 - 1 (python, prophet) ChatGPT를 결제해 매월 구독료를 내고 있는데 본전은 뽑아야지 않겠나라는 생각으로 주가 예측 코드를 짜보기로 했다. 당연히 실제로 주가를 예측하고 크게 수익을 얻겠다라는 기대가 있는건 아니고 시계열 예측 라이브러리 몇가지를 사용해보고 튜닝해보겠다는 생각으로 GPT에게 질문을 던졌다. 프롬프트를 입력할때마다 GPT는 이런 경고 멘트는 잊지 않고 날려준다. 주의해야 할 점은 이 코드가 실제 주가 예측의 정확성을 보장하지 않으며, 투자 결정을 위한 직접적인 권고로 사용되어서는 안 된다는 것입니다. 주가 예측은 매우 복잡하며, 다양한 외부 요인에 의해 영향을 받습니다. 따라서 이 예측 모델은 시작점으로 사용하고, 다양한 데이터 소스와 분석 방법을 함께 고려하는 것이 중요합니다. 5번 정도의 질문을 거치며 M..

티스토리툴바