반응형

BigData&AI 24

프라이빗클라우드/퍼블릭클라우드/하이브리드클라우드

서비스 형태에 따른 클라우드 종류 좀 더 자세히 알아보자. 각 조직들은 서비스 형태에 따라 클라우드의 종류를 달리 사용한다. 크게 세가지 프라이빗, 퍼블릭, 하이브리드가 있다. 이해하기 쉽게 클라우드 서비스를 스터디 카페 회원권에 비유해 보자. ​ 자, 스터디 카페에서 회원권을 끊으려고 한다. 회원권에는 세가지 종류가 있다. 지정 좌석 이용권, 자유석 이용권, 그리고 모두 이용 가능한 프리미엄권 이다. ​ Private Cloud, 프라이빗 클라우드 Private Cloud는 지정 좌석 이용권이다. 지정된 좌석에서, 개인 사물함을 쓰면서, 독립된 개별 공간에서 집중하며 공부할 수 있다. 서로의 학습내용이 보이지 않아 전혀 방해되지 않고, 내 자리 앞에 포스트잇, 계획표를 마음껏 붙여놔도 된다. 프라이빗 ..

BigData&AI 2021.07.01

change data capture (CDC) 란

0. CDC 란 change data capture 의 약어로 마지막으로 추출한 이후 변경된 데이터만 골라내는 기술을 의미한다. 흔히 데이터 백업이나 통합 작업을 할 경우 방대한 데이터를 다뤄야 하는데 원본소스 가운데 최근 변경된 데이터들만 골라 다른 시스템으로 옮기게되면 시스템 로드도 줄이고 전체적인 작업 생산성을 향상시킬 수 있다. 특히 한 시스템에 있는 대량의 데이터를 정기적으로 추출해 다른 시스템으로 이동하는 데이터 통합이나 데이터 웨어하우스 업무의 경우 CDC 기술을 이용하면 데이터를 추출, 이동하는 시간을 크게 줄일 수 있다. 또한 24시간 운영해야 하는 필수업무 시스템의 경우 CDC 기술을 이용하면 다운타임 없이 실시간 백업과 데이터 통합이 가능하다. 1. CDC의 개념 및 특징- CDC는 ..

BigData&AI 2021.05.28

ODS, DW, DM, ETL, CDC, EDW, OLAP 정리

※ Operational systems 현업에서 '원천' 이라고 많이들 쓴다. (나도 마찬가지) ※ ODS (Operational Data Store) 갓 생성된 다양하고 많은양의 데이터를 정형화시켜 저장하는 곳이다. 이 곳의 데이터만으로는 사실상 활용이 불가능하다. ( 식당으로 비유하면, 갓 캐낸 야채들을 대충 씻고 바구니에 담은 정도...) ※ Data warehouse ODS 데이터들을 활용이 가능한 형태로 만들어 저장하고 관리, 분석할 수 있는 시스템 (식당으로 비유하면, 씻은 야채에 썩은 부분이 제거되고, 껍질이 벗겨진 상태) 데이터 웨어하우징이라 함은 다양하게 분포되어있는 데이터들을 분석과 데이터 웨어하우스가 활용가능한 데이터들의 집합 DW 구축 단계 1단계 DW Modeling – 비즈니스 ..

BigData&AI 2021.05.11

빅데이터 분석 기사 교재 구매

2020년 신설 자격증 인 '빅데이터 분석기사' 교재가 새로 나왔다. 첫 시험 예정일이 연말 이라, 미리 공부하기 위해 공식 교재는 아닌것 같지만 우선 구매했다. 2021년 할일 - 빅데이터 분석 기사 자격증따기 - React Native 스터디 후 Android/IOS 동시 App release (2건) 계속 찌라시같은 소식만 있어서 답답했는데 이제서야 시험 정보가 구체화 되는 것 같다

BigData&AI 2020.05.02
반응형