데이터 전문가 지식포털 - Data Quality Management …데이터베이스관리인력의 중복성에대한기술수준저 화및비용증대 재사용성 및관리능력저하

Data Quality Management Forum Data Quality Management Forum -- 엔터프라이즈엔터프라이즈 데이터데이터 품질품질 확보확보 방안방안

2004. 5. 19.

기업지식전략컨설팅(유)

대표대표 컨설턴트컨설턴트

이이 재재 관관

Contents

2004. 5. 19 18:30 ~ 19:00

Enterprise Data Enterprise Data 및및 InformationInformation

Enterprise Data QualityEnterprise Data Quality

Enterprise Data Quality Enterprise Data Quality 경영경영

질의응답질의응답

Enterprise Data 및Information

Enterprise Engineering

공 급 사고 객Business Engineering

Resource Engineering

Human Engineering

제품

서비스

대가

원료

e - Business e - Business기업(Enterprise)

설비

Activity Data

Network

DB

전산화

Information Engineering

목표, 전략, CSF, KPI

Software Engineering

Data와 Activity

Data Activity

Interaction

Function ModelER Model

CRUD Matrix

Knowledge Hierarchy

Activity (Process) + Data

Information

Knowledge

Wisdom

Meta

Meta

Meta

Information

Objective(목적)Objective(목적)

Goal(목표)Goal(목표)

Strategy(전략)Strategy(전략)

CSF KPIActivity + Data

Information

Knowledge

Wisdom

Meta

Meta

MetaMission(사명)

비즈니스 아키텍쳐

Mission(사명)

데이터/정보/지식의 정의

데이터

사물(Things)과 개체(Entities) 활동에 의한 결과, 사실, 속성 값

정보

Information=f(Data+Definition+Presentation)

지식

Knowledge=f(People+Information+Significance)

지혜

Wisdom=f(People+Knowledge+Action)

Enterprise Information System

공 급 사고 객Business Engineering

Resource Engineering

Human Engineering

제품

서비스

대가

원료

e - Business e - Business기업(Enterprise)

설비

Activity Data

Network

Database전산화

Information Engineering

목표, 전략, CSF, KPI

Information System

Information

Information 과 Information System

Information Information System

계획

분석

설계

구축

전환

운용

데이터 활동

상관관계

Data Model과 Database

설 계분 석

How를 정의

Business SystemData Structure(Database)

– Table– Column– Primary Key(P.K)– Foreign Key(F.K)

Application Structure– Task– User Interface(Screen, Report)– Module– Program Structure

What을 정의

Business Area

Data Model– Object Type(Entity Type)

– Attribute Type

– Identifier

– Relationship

Process Model– Elementary Process

– Event

– Business Rule

어플리케이션 구조

어플리케이션 계층(Application Layer) 관점

DATA LAYER

PRESENTATION LAYER

사용자인터페이스 서비스 제공

Business & Operations logic 수행FUNCTION LAYER

데이터 저장데이터의 접근/보안 무결성 제공

현 Enterprise Database의 문제점

현 상 문 제 점

데이터모델의 불명확성 및중복성

데이터모델과 데이터베이스의 불일치성

데이터의 통합성 부재 및 중복성 발생에 의한 무결성결여

데이터베이스관리인력의중복성에 대한 기술 수준 저화 및 비용 증대

재사용성 및 관리능력 저하

개발자에 의한 데이터모델링 수행

데이터모델의 산출물을문서로 보관

비지니스영역 단위의 데이터모델과 데이터베이스설계/구축

비지니스영역 단위로 관리조직 구성

지속적인 개발로 인한 관리 기능 약화

Enterprise Data Quality

Quality의 정의

“일관성 있게 고객의 기대치를 만족하는 것”Larry English, Information Quality Improvement

:Principles, Methods, and Management, Seminar 5th

품질(Quality)

제품/서비스 품질과 가치

Quality에 대한 접근방식

Deming’s 14 Points of Quality

The Juran Trilogy

Ishikawa: Quality Control as a Movement

Kaizen: The Art of Continuous Improvement

Quality Function Deployment

Crosby’ Quality is Free

ISO 9000

Baldrige Quality Award

Data Quality 관점

James Martin 관점

→ Data Integrity: Entity IntegrityDomain IntegrityReferential Integrity

→ Data Security→ Data Privacy

Data Quality 관점

Gartner의 Data Quality Six Major Characteristics

→ Non-redundancy→ Accuracy→ Accessibility→ Flexibility→ Integrity→ Security

Data Quality 관점

Jack E. Olson의 Data Quality Dimension

Accuracy

Timeliness

Relevance

Completeness

Understood

Trusted

Data Quality 차원

MIT의 TDQM 그룹

→ TDQM: Total Data Quality Management,

Richard Wang

→ ‘Data Quality for the Information Age”,

by Thomas Redman

Data Quality 차원

Data Quality 차원 카테고리

→ Data Model

→ Data Value

→ Data domain

→ Data presentation

→ Data Management policy

Data Quality와 Database 이슈

Data Model과 Database의 일치성

Database 내의 Data Integrity

Legacy Database의 통합

Data Migration의 안전성

Data Extraction, Transformation, Loading

Data Quality와 새로운 이슈

Data Warehouse

Data Mining– Data Enrichment

Electronic Data Interchange– STP와 EDI Message

XML– Structure vs Content

World Wide Web– Transaction Factory

– Internet Data Queries

Enterprise Data Quality 경영

–Fire –Kaizen–Innovation과

Breakthrough

EDQ Process Management

EDQ기획EDQ팀과문제해결

Enterprise Data Quality 정책(1)

EDQ의 3대 활동요소

– 준비, 목표

Enterprise Data Quality 정책(2)EDQ의 3대 영향요소

People

Process Technology

Enterprise Data Quality 정책(3)

EDQ정책 수립

우리는 지금으로부터 5년, 10년, 20년 후에

어디로 가기를 원하는가?

그곳에 어떻게 도달할 것인가?

우리의 고객은 누구인가?

그들의 요구사항과 합당한 기대치는 무엇인가?

EDQ 측정 및 평가 프레임워크

각 데이터의 고객 정의각 데이터의 고객 정의

데이터흐름 매핑데이터흐름 매핑

데이터흐름 내의 위치선정데이터흐름 내의 위치선정

DQ차원의 부분 선정DQ차원의 부분 선정

DQ 측정DQ 측정

결과 피드백결과 피드백

데이터모델의 DQ 측정

데이터 값의 DQ 측정

데이터 도메인의 DQ 측정

데이터 표현의 DQ 측정

데이터 경영정책의 DQ 측정

TQDM 방법론(Larry English)

P6

정보품질 환경 설정

P1

데이터정의 및정보체계품질평가

P2

정보 품질평가

P3

비품질 정보비용 측정

P4

데이터 클린즈및

리엔지니어

P5

정보 프로세스품질 개선

TQDM 방법론 프로세스 P1

데이터정의 및 정보체계 품질 평가

S2

평가를 위한정보그룹 정의

S1

S3 S5

S6

S4

데이터정의내역품질측정방법 정립

정보보관자 정의

데이터정의기술적품질평가

정보체계 및 DB설계 품질 평가

데이터정의를통한 고객만족도

평가

TQDM 방법론 프로세스 P4

데이터 클린즈 및 리엔지니어

S2

소스데이터추출 및 분석

S1

S3

데이터소스정의

데이터 표준화

S6

데이터결함유형분석

S5

데이터매치 및 통합

S4

데이터 수정 및완전화

Enterprise Information Management

공 급 사고 객Business Engineering

Resource Engineering

Human Engineering

제품

서비스

대가

원료

e - Business e - Business기업(Enterprise)

설비

Activity Data

Network

DB

전산화

Information Engineering

목표, 전략, CSF, KPI

Software Engineering

CIOCEO

DA

DBA

Enterprise Data Quality 방안

CIO 책임하에 Data Management 조직 구성

- DA, DBA, RA

Enterprise-wide Data Model로 통합

Meta-data를 위한 Repository 구축

Data Model에 근거한 Database 설계 및 구축

Data Management를 위한 표준운영절차(SOP)를 정립하여 운영하고 평가

지속적인 Data Quality 개선 활동 수행

질의응답

이슈사항

토론