본문 바로가기

데이터 사이언스 DataScience

데이터 사이언스 DataScience/Data Base 데이터베이스 2024. 5. 31. [Oracle] DDL 중 발생하는 ORA-00054 해결 ORA-00054 자원이 사용 중이고 NOWAIT가 지정되어 획득되었거나 시간종료가 만료됨                     resource busy and acquire with NOWAIT specified or timeout expired 1. 원인ALTER와 같은 DDL을 수행했을때 마주칠 수 있는 에러이다.다른 트랜잭션이 DML 등으로 자원을 잡고 있거나, DDL이 겹칠 경우 발생한다. 일반적으로 DDL이 겹치는 경우는 거의 없을 것 같다.DBA가 동일 오브젝트에 여러개의 세션에서 동시에 DDL을 수행할 확률은 적기 때문이다.2. 해결방법테이블, 인덱스에 장시간 Lock이 잡혀있다면 session을 kill 하거나 그 시간대를 피해서 DDL을 하는게 좋지만, 온라인 트랜잭션이 충분히 많은 오브..
데이터 사이언스 DataScience/Data Base 데이터베이스 2024. 5. 24. [Oracle] 존재하지 않는 Object에 대해 Synonym을 만들 수 있다 1. Synonym (동의어)Oracle DBMS는 Synonym을 통해 다양한 user가 동일한 object를 바라보고 사용할 수 있게 해준다. 예를 들어 권한 분리를 위해 아래와 같이 5종류의 계정을 생성했다고 할때 SVC  :  서비스의 모든 OBJECT를 소유하는 owner 계정SVCONL : 서비스의 ONLINE 프로그램에서 접속해 사용하는 계정SVCBAT : 서비스의 BATCH 프로그램에서 접속해 사용하는 계정SVCSEL : 서비스의 SELECT 권한만 부여한 계정SVCDML : 서비스의 DML 권한을 부여한 계정 SVC.TABLE1 을 SYNONYM으로 아래 DDL을 통해 SYNONYM을 생성한다면 CREATE PUBLIC SYNONYM TABLE1 FOR SVC.TABLE1;모든 계정에서 ..
데이터 사이언스 DataScience/Deep Learning 딥러닝 2024. 2. 8. GPT와 함께하는 주가 예측 - 1 (python, prophet) ChatGPT를 결제해 매월 구독료를 내고 있는데 본전은 뽑아야지 않겠나라는 생각으로 주가 예측 코드를 짜보기로 했다. 당연히 실제로 주가를 예측하고 크게 수익을 얻겠다라는 기대가 있는건 아니고 시계열 예측 라이브러리 몇가지를 사용해보고 튜닝해보겠다는 생각으로 GPT에게 질문을 던졌다. 프롬프트를 입력할때마다 GPT는 이런 경고 멘트는 잊지 않고 날려준다. 주의해야 할 점은 이 코드가 실제 주가 예측의 정확성을 보장하지 않으며, 투자 결정을 위한 직접적인 권고로 사용되어서는 안 된다는 것입니다. 주가 예측은 매우 복잡하며, 다양한 외부 요인에 의해 영향을 받습니다. 따라서 이 예측 모델은 시작점으로 사용하고, 다양한 데이터 소스와 분석 방법을 함께 고려하는 것이 중요합니다. 5번 정도의 질문을 거치며 M..
데이터 사이언스 DataScience/Deep Learning 딥러닝 2023. 12. 12. [TensorFlow] 애플 실리콘 vs Nvidia GPU 성능 비교 Udemy 강의와 회사 스터디를 통해 조금씩 딥러닝 코드를 돌려보고 있는데, 궁금증이 생겼다. - 애플 실리콘 노트북과 Nvidia 그래픽카드를 탑재한 데스크톱 중, 어떤 환경에서 Tensorflow 코드가 더 빨리 실행될 것인가? - 그 차이는 얼마나 될 것인가? 유튜브 영상과 구글링 결과를 통해 답은 어느정도 알 수 있었다. 하지만 백문이 불여일타. 백번 듣는 것 보단 한 번 해보는게 좋을 것 같아서 Mac OS, Windows OS 간 다른 실행환경을 설정하고 테스트 해보는 과정을 거쳤다. * 결론부터 - 자체테스트 결과 > Nvidia GPU 데스크톱 환경이 3.5배 정도 빨랐다 - 다른 사람 테스트 결과> 스펙과 모델에 따라 Nvidia GPU가 2~4배 빨랐다. 출처 : https://wand..
데이터 사이언스 DataScience/Data Base 데이터베이스 2023. 11. 29. [Oracle] 기존 패스워드로 ALTER 회사의 정보보호 정책이나, 공공기관으로터 보안감사를 받는 경우 등의 이유로 계정에 Profile 을 적용하는 일은 흔히 있다. 예시 : https://subbak2.tistory.com/123 [Oracle] Profile을 통한 계정관리 1. 필요성 개인정보를 관리하는 DB의 경우 계정 정책을 통한 데이터 관리가 필요한 경우가 있다. 회사의 개인정보취급 방침에 의한것일 수도 있고 방송통신위원회의 개인정보 취급 가이드라인에 subbak2.com Profile parameter 중 PASSWORD_GRACE_TIME 을 사용하게 되면 일정 기간이 지난 후, 계정의 패스워드가 만료된다. 적절한 변경을 하게되면 문제 없지만 WAS와 연결해 사용하는 계정은 password 변경에 맞춰 프로그램을 재배포해야하는 ..
데이터 사이언스 DataScience/Data Base 데이터베이스 2023. 5. 4. [Oracle] SYS.SYS_HUB DB LINK 1. 용도 SYS_HUB의 용도는 read only 인스턴스에서 수행된 DML 을 read write 인스턴스로 라우팅해주는 역할이다. 따라서, read only / read write 인스턴스를 따로 운영하는 환경이 아니면 불필요하고 DROP하더라도 영향도가 없다. 개인적인 생각으로 read only / write 인스턴스를 분리해서 사용하는 경우라면, Oracle DBMS보다는 MariaDB, PostgreSQL 등 오픈소스 DBMS를 사용하며 read replica를 scaling 하는게 낫다고 생각한다. 오라클의 장점인 RAC 구성을 활용해 Multi write 인스턴스로 구성된 경우라면 보안감사 때 이슈가 발생할 수 있으므로 삭제하는게 나을 것 같다. 2. DROP 하는 방법 1) Read Wr..
데이터 사이언스 DataScience/Data Base 데이터베이스 2023. 5. 3. [Oracle] 계층형 쿼리 Hierarchical Queries 1. 개인적으로 좋아하진 않는다 DBA 입장에서 계층형 쿼리를 선호하지 않는다. 그 이유는 1) 데이터가 잘못 될 경우, 순환 참조 (무한 loop) 문제가 발생할 수 있다 2) 힌트 적용이 잘 안 되고, Plan이 의도하지 않는대로 풀릴 수 있다. 3) 최초 개발자가 아닌 경우 비즈니스 로직을 이해하기 어렵다. 등이 있다. 그러나 개발자는 개발의 용이성, 데이터 모델의 단순성 등을 이유로 계층형 쿼리를 선호하곤 한다. 2. 계층형 쿼리 작성시 숙지할 내용들 계층형 쿼리를 사용할 경우, Oracle의 매뉴얼 https://docs.oracle.com/en/database/oracle/oracle-database/19/sqlrf/Hierarchical-Queries.html 을 참고하며 아래 내용을 기억하..
데이터 사이언스 DataScience/Data Base 데이터베이스 2023. 5. 2. Amazon RDS for Oracle Immersion Day 0. 계기AWS 솔루션 아키텍트에게 AWS의 Oracle DBaaS 서비스인 Amazon RDS for Oracle 설명을 들을 기회가 생겼다. 여러 동작을 해보며 익힐 수 있었고, 온라인으로도 동일한 내용이 준비되어있다. (아래 url의 온라인 워크샵으로도 내용은 파악할 수 있으나, 서버 자원 생성시 비용이 발생한다.) url : https://catalog.workshops.aws/rdsora/en-US Amazon RDS for Oracle에 대해서 개인적으로 찾아봤을때보다, 더 자세한 내용을 들을 수 있었다. 기존에 찾아본 내용 : https://subbak2.tistory.com/124 [Oracle] 온프레미스에서 AWS 마이그레이션 1. 준비IT서비스의 클라우드 전환은 피할 수 없는 흐름이다..

티스토리툴바