BDA3 [BDA 데이터 분석 개념반 4회차] 빅데이터~인공지능 기본 개념 (3) 빅데이터 저장 ① NoSQL: 전통적인 관계형 데이터베이스와는 다르게 데이터 모델을 단순화하여 설계된 비관계형 데이터베이스로 SQL을 사용하지 않는 DBMS와 데이터 저장장치이다. - 원자성, 일관성, 독립성, 지속성을 유연하게 적용한다. - 데이터 업데이트가 즉각적으로 가능한 데이터 저장소이다. ② 공유 데이터 시스템: 일관성, 가용성, 분할 내성 중에서 최대 두개의 속성만 보유할 수 있다. ③ 병렬 데이터베이스 관리 시스템: 다수의 마이크로프로세서를 사용하여 여러 디스크에 질의, 갱신, 입출력 등 데이터베이스 처리를 동시에 수행하는 시스템이다. ④ 분산 파일 시스템: 네트워크로 공유하는 여러 호스트의 파일에 접근할 수 있는 파일 시스템이다. ⑤ 네트워크 저장 시스템: 이기종 데이터 저장 장치를.. 2024. 3. 26. [BDA 데이터 분석 개념반 3회차]빅데이터 기술 1. 빅데이터 플랫폼 (1) 빅데이터 플랫폼: 빅데이터 수십, 저장, 처리, 분석 등 전 과정을 통합적으로 제공하여 그 기술들을 잘 사용할 수 있도록 준비된 환경. (2) 등장배경 1. 비즈니스 요구사항 변화 2. 데이터 규모&처리 복잡도 증가 3. 데이터 구조의 변화와 신속성 요구 4. 데이터 분석 유연성 증대 (3) 빅데이터 플랫폼 기능: 빅데이터를 처리하는 과정에서 부하 발생은 불가피하고, 빅데이터 플랫폼은 이런 부하들을 기술적인 요소들을 결합하여 해소한다. 1. 컴퓨팅 부하 발생 - 빅데이터 처리의 연산과정에서 발생 2. 저장 부하 발생 – 빅데이터 처리과정에서 발생 3. 네트워크 부하 발생 – 빅데이터 처리과정 중 분산처리를 하고자 할 때 발생 (4) 빅데이터 플랫폼의 조건 서비스 사용자 측면 .. 2024. 3. 20. [BDA 데이터 분석 개념반 2회차]빅데이터 개요 및 활용 1. 데이터와 정보 (1) 데이터: 데이터는 추론과 근거를 이루는 사실이다. (2) 데이터의 특징 - 단순한 객체로도 가치가 있으며 다른 객체와의 상호관계 속에서 더 큰 가치를 갖는다. - 객관적 사실이라는 존재적 특성을 갖는다. - 추론, 추정, 예측, 전망을 위한 근거로써 당위적 특성을 갖는다. (3) 데이터의 구분 정량적 데이터 (숫자) 정성적 데이터(텍스트) 유형 정형, 반정형 데이터 비정형 데이터 특징 여러 요소의 결합으로 의미 부여 객체 하나가 함축된 의미 내포 관점 객관적 내용 주관적 내용 구성 수치, 기호 문자, 언어 형태 DB, 스프레드시트 웹 로그/텍스트 파일 위치 내부(DBMS, 로컬 시스템) 외부(웹 사이트, 모바일 플랫폼) 분석 통계 분석 시 용이 통계 분석 시 어려움 예시 153.. 2024. 3. 20. 이전 1 다음