본문 바로가기

데이터 사이언스 DataScience

데이터 사이언스 DataScience/Data Base 데이터베이스 2023. 3. 23. [Oracle] DROP TABLE PURGE 시점 확인하기 * 1줄요약 : audit_file_dest 파라미터 확인 후, 해당 위치의 dump 파일을 통해 확인 1. 완전한 삭제 purge DROP TABLE PURGE 실수는 결코 마주하고 싶지 않은 실수이다. 휴지통(recyclebin)으로 Table을 이동시키는 DROP TABLE 명령어와 달리, PURGE 옵션은 Table을 완전 삭제하게 된다. 메뉴얼에도 분명히 명시되어 있다. You cannot roll back a DROP TABLE statement with the PURGE clause, nor can you recover the table if you have dropped it with the PURGE clause. * DROP TABLE 메뉴얼 : https://docs.oracle.co..
데이터 사이언스 DataScience/Deep Learning 딥러닝 2023. 1. 31. [ChatGPT] 알고리즘 문제 풀어달라고 했을때 반응은? (knapsack problem in Java) * ChatGPT ChatGPT가 뜨겁다. 워낙 유명해졌으니 자세한 설명은 생략하고 한 마디로 요약하면 현 시점 가장 핫한 대화형 인공지능이다. 뜨겁다 뜨겁다 말만 듣다가 아래 영상을 보고 급 궁금해져서 알고리즘 문제를 풀어달라고 해봤다. https://youtu.be/qRtUDKf6mM4 * 배낭문제(knapsack problem) - ChatGPT( https://chat.openai.com/ )에 접속해서 DP(Dynamic Programming)의 유명한 문제 중 하나인 배낭 문제의 java 코드를 달라고 했더니 함수를 분리하고, 예제를 만든 다음에 출력하고, 간단한 설명까지 해줬다. 할 말을 잃게 만들었다. 위의 뉴스 영상처럼 ChatGPT가 Google을 위협하는 검색엔진이 될수도 있겠다는 생..
데이터 사이언스 DataScience/Deep Learning 딥러닝 2022. 10. 26. [Stable Diffusion] AI가 그린 그림. 내 컴퓨터에서 돌려보기 1. AI가 그린 그림 9월부터 인터넷 상에 "AI가 그린 그림"이라는 키워드가 떠올랐다. 게시글들을 보면 사람이 그린게 아닌가 싶을 정도로 이전에 비해 훨씬 정교하고 아름다운 작품들이 많이 나온다. 개인적으로 느낀 특징은 1) 색채와 빛의 표현(반사, 굴절)이 이전보다 자연스러워졌다. 2) 특정 작가의 화풍을 잘 구현한다. (반 고흐 스타일의 그림, 디즈니 스타일의 그림 등) 3) 디테일은 아직 조금 부족해보인다. (사람의 손가락이 8개라든가, 젓가락질 등 특정 동작이 잘 구현 안 된다든가) 2. Stable Diffusion 아무튼 이런 키워드가 떠오른 가장 큰 이유를 게시글 몇개를 찾아보며 거슬러보니 Stable Diffusion에서 시작된 것 같다. https://github.com/CompVis..
데이터 사이언스 DataScience/Data Base 데이터베이스 2022. 10. 6. [Oracle] 온프레미스에서 AWS 마이그레이션 1. 준비 IT서비스의 클라우드 전환은 피할 수 없는 흐름이다. 2027년까지 클라우드 마이그레이션 시장 규모는 연 평균 약 28.9%의 성장이 전망된다. [CLOUD MIGRATION MARKET - GROWTH, TRENDS, COVID-19 IMPACT, AND FORECASTS (2022 - 2027)] https://www.mordorintelligence.com/industry-reports/cloud-migration-services-market 경영자는 빠른 확장성과 고가용성을 가지면서도 비용을 아낄 수 있고, 세계 어느지역에서도 자신의 의도가 수시로 반영될 수 있는 IT서비스를 원한다. 즉, CSP 업체의 강력한 인프라 위에서 서비스를 제공하고 싶어한다. WAS는 인스턴스의 개수를 늘렸을때 L4 또..
데이터 사이언스 DataScience/Data Base 데이터베이스 2022. 10. 4. [Oracle] Profile을 통한 계정관리 1. 필요성 개인정보를 관리하는 DB의 경우 계정 정책을 통한 데이터 관리가 필요한 경우가 있다. 회사의 개인정보취급 방침에 의한것일 수도 있고 방송통신위원회의 개인정보 취급 가이드라인에 의한 것일수도 있고 https://kcc.go.kr/user.do?mode=view&page=A02030700&dc=K02030500&boardId=1099&cp=1&boardSeq=47488 금융위원회 개인정보보호 가이드라인에 의한 것일수도 있고 https://www.fsc.go.kr/po010106/72612?srchCtgry=6&curPage=41&srchKey=&srchText=&srchBeginDt=&srchEndDt= 개인정보와 상관없이 랜섬웨어나 DDoS 공격을 방어하기 위한 것일수도 있다. 아무튼 계정의 ..
데이터 사이언스 DataScience/Data Base 데이터베이스 2022. 8. 3. [Oracle] AWR DUMP 백업하기, HTML로 추출하기 1. AWR DUMP 백업 1) SYSDBA로 SQLPLUS 접속 sqlplus / as sysdba 2) Oracle 디렉토리 생성 CREATE DIRECTORY 디렉토리이름 AS '경로'; -- Ex> CREATE DIRECTORY DIR_AWR_DUMP AS '/syswork/awr/dump'; 3) db_id, snap id 범위 확인 /* ① dbid */ SELECT DBID FROM V$DATABASE; /* ② snap_id - 2022년 7월 29일 14시 ~ 14시 59분 59초 데이터 예시*/ SELECT MIN(SNAP_ID) /* START SNAP_ID */ , MAX(SNAP_ID) /* ENS SNAP_ID */ FROM DBA_HIST_SNAPSHOT WHERE END_IN..
데이터 사이언스 DataScience/Data Base 데이터베이스 2022. 7. 27. [Oracle] 테이블스페이스 READ ONLY, READ WRITE 1. READ ONLY 옵션의 필요성 * 테이블스페이스 옵션을 READ ONLY으로 할 경우 DML 중 SELECT(조회)만 가능 1) 데이터의 변경이 없는 경우(Ex> log 테이블 등) → READ ONLY로 변경시 성능의 개선, BCV 백업시 해당 테이블스페이스 제외 가능 2) 데이터가 변경되면 안되는 경우, 일관성을 유지하고 싶은 경우 Ex> 데이터 마이그레이션(이행) 상황, MDM 등 기준 데이터 유지하는 경우 2. 테이블스페이스를 READ ONLY 할 수 있는 조건 1) TABLESPACE에 ACTIVE 트랜잭션이 없어야 한다. 2) TABLESPACE에 ACTIVE ROLLBACK SEGMENT가 없어야 한다. 3) TABLESPACE에 ONLINE BACKUP이 없어야 한다. 4) SYST..
데이터 사이언스 DataScience/Data Base 데이터베이스 2022. 6. 21. [Oracle] MGA 이슈 → 19버전은 19.8 이후 버전 사용 권장 1. 메모리 영역 종류 - SGA (System Global Area) : 모든 프로세서가 공유하는 영역 - PGA (Private Global Area) : 공유가 안 되는 Private 영역 - MGA (Managed Global Area) : process들 사이에서 자동적으로 관리되는 Memory 공유 영역. Parallel Hash Join 등 병렬 프로세서에서 주로 사용. 2. MGA Issue - 19.8 이후 버전에서 대부분 버그 fix 됐으나 이전 버전에서 버그 간헐적 발생 - MGA 사용여부는 V$PGASTAT이나 ls -atl /dev/shm/ora*MGA*.dat 으로 확인 가능 → v$pgastat에는 없으나, ls -atl /dev/shm/ora*MGA*.dat 으로 조회되면 M..

티스토리툴바