Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | |||||
| 3 | 4 | 5 | 6 | 7 | 8 | 9 |
| 10 | 11 | 12 | 13 | 14 | 15 | 16 |
| 17 | 18 | 19 | 20 | 21 | 22 | 23 |
| 24 | 25 | 26 | 27 | 28 | 29 | 30 |
Tags
- merge
- SQL on 하둡
- 하둡
- Sawzall
- k-means
- DBSCAN
- 딕셔너리
- 분산분석
- 병렬 쿼리 시스템
- Python
- 결정계수
- 다중공선성
- distribution
- pca
- join
- 분포
- SPLIT
- pig
- 유사도
- p-value
- 가설검정
- dict
- hive
- list
- T-검정
- cross validation
- 교차검증
- 데이터프레임
- 밀도기반
- DataFrame
Archives
- Today
- Total
one of a kind scene
4-1 데이터 처리 프로세스_데이터 통합 및 연계 기법 본문
데이터 통합 및 연계 기법
1. 데이터 연계 및 통합 아키텍쳐 비교(동기화 기준)
① 일괄(Batch) 통합 : 비실시간 데이터 통합, 대용량 데이터 대상, 높은 데이터 조작 복잡성
② 비동기식 실시간 통합 : 근접 실시간 데이터 통합, 중간 용량 데이터, 중간 데이터 조작 복잡성
③ 동기식 실시간 통합 : 실시간 데이터 통합, 목표 시스템 데이터 처리 기능시에만 원천 데이터 획득, 데이터 재처리 불가
2. 데이터 처리 기법 비교(전통적 처리 기법 vs 빅데이터 처리 기법)
① 전통적 데이터 처리 기법 : OLAP가 대표적
② 빅데이터 처리 기법 : 시각화가 있다는게 핵심
'ADP > 이론' 카테고리의 다른 글
| 4-2 데이터 처리 기술_분산 데이터 저장 기술 part1_분산 파일 시스템 (0) | 2019.11.21 |
|---|---|
| 4-1 데이터 처리 프로세스_대용량의 비정형 데이터 처리방법 (0) | 2019.11.18 |
| 4-1 데이터 처리 프로세스_EAI(Enterprise Application Integration) (0) | 2019.11.17 |
| 4-1 데이터 처리 프로세스_CDC(Change Data Capture) (0) | 2019.11.17 |
| 4-1 데이터 처리 프로세스_데이터 웨어하우스(DW), 데이터 마트(DM) (2) | 2019.11.17 |
'ADP/이론' Related Articles
more
