Top Banner
27

Measuring and modelling data quality for quality-awareness in data mining

May 13, 2023

Download

Documents

Welcome message from author
This document is posted to help you gain knowledge. Please leave a comment to let me know what you think about it! Share it to your friends and learn new things together.
Transcript
Page 1: Measuring and modelling data quality for quality-awareness in data mining

��������� �� ������� �� � ����� � ��

����� ����������� �� �� � ������

����� ������������

������ ���� �� ��� �� �� �� ���� �� ������ ����������������������� ��������

�������� ��� ������� �������� �� �������� �� ���� ������� ��������������� ������� ��� ���� �������� ���������� ���� ��� �� �������������� ��������� ��� ��������� ��� ������� ��������� �� ��� ��������� ��������� ��������� ����� �� ���� ����������������� �������� �� ���� ������� ��������������� ������� ���� �������� � ��������� ������������ ��������� ��� ���� �������� ��������� ��� ����������� ������ ����������� ��� ������ ��� ������������������ �������� ��� ���� ��� ���� ������� ��� ������� ��� ���� �������� ���������� ������ ����������� ��� ���������� �������� ��� ��� ����������������� �������� �� ��� ������������������ !��� "������ #���������� $����� �������� !��� %��������!��� "������ #�������

� �����������

�� ������� �� ���� ������ ������� ��� ��� �������� �� ������� ������������������������� ���� �� ��� ���� ����������� ������� ��� �� ��� ������� �� ��� ������ �� ��������� &������ ���� ������ ��������� ��� ������������ ������� ������������ �� ���� ������������ ���������� ��� �������������� ��������� ����������� �������������� ���������� ��� �������� ����������� ��� �� ������� ������� ����� �� ��� ������ ���������� �� ������� �� ������� �� '����( ����� �������������� ���������� �� �������� ������������ �� ��������� ������� ��������� � ����� ��� ������� ��� ��������� '�����( ���� ��� ��� ��������� ���������� �� ������� ��� ����� � ��� ���� ��� ����������� ����������� ������������ �������� ������� !��� ������� �� � ����������������� ������� ��� ��������� ������� )**+� &� ��� ���� ������� ����� ��� ���� � �����,���� �������� ���� �� ��� ���� �� ����������� ��� ���� ������� ���������� ����������� ������� �������� ����������� -��������� ����������� ����.�� ������������ ��������� �����������/� ������� ���� ���������� ���� ������ ������������������ �� ����� ����������� ���� ����������� ������� ���� ������������� ����

Page 2: Measuring and modelling data quality for quality-awareness in data mining

� ���� ���� ���� ���

������� ���� ��0����� ������� �� ������� ��� ������ #��� ���� ������� ��,��������� �������� ������� ��� ������������� ���� ���� �������� �� ������������ ������������� ���� ��� ��� �� ������ ��� ���� ������� �� ���� ������� ���������1

� !�������� ��������� ��� ������ �������� ����� ����� ������� �����1 ������ ������ ������� )2*+� �����3����� ������� )45+� ��6��� �������� )78� 89+���������� ����������� )2� :4� :9+� �������� �������� )77� ::+� �������� ������������ );;+� ������ ������,������ ):5+� ������ ���������� )8+� ������ ��������);*+� �� ����������� ������ 6��� )2;+�

� �������� ���.��� ���������� )27+ ����� ���� ������ ��������� )*4� ;5+ �� ������������ ���������� )<2+�

� ������� ������ ):7+ ��� ���������� ���� )<8+�� ��������� �� ���� )7*� 99+�

&� ���������� ���� ���������� �� ��������������� ����������� ������� ������������� ����� ����� ��������� ��������� ���������� -���� �� ���������� �������� ����������� �����/ ��� �� ���������� ���� �� �������� ������ ����������� ������������� ������ ��� ��������� �������� ��� ��� �������� ���� �����=������������� ���� �� ��� ����� ���� ���� �� ������� ���������� ������ ������� ������� ������������� ����������� ������� ���� ��0����� ������� �� �������� ��� ������ ��� ��������� ���������� ��� ������� )79+� !�,�������� �� ����������� ����� ��� � ������� ����� �� ���� ����������� ������ ��� ������ �������� ��������� ������������ �� ��������� ��������� ��� ���� ������ ����������);<+� >� ������� ����� ����������� ����� ��������� �� ���� �� ���������� ��������� ����� ��� ���� �� ��������� �� ����� ����������� �������� �� ?������ *�>���� ����������� ����������� ���� ������ ����������� ����������� ����� ���������� )7+ ������,�� ����������������� �������� �� � �������� ��� ��������� ������� ��� �������� �� � ��� �� ���������� �� � ��������@� ������ -����� � ������������/ ���������� ��� �������� �� ����� �������� ���� �� ���������� �� ��� ���������� -������������ �� ��� ���� �����������/� �� ������� �� ����������� ������� �������� ��������� �� ��� ������� ��� ���,����� �������� )7� 49� 9;+� �� ������� �� � ���� �������� ��� ���������� ��������� �� ��� ������� �� ������� ����� ��� ���,����� �� ��� ������� �� ��� �������� �� ������������ ��������� �� ������ ����������� ����� �� �� �������� ��� ����������� ����� �������� ������� ��� ���,����� ������� ���� ��� ����������,�� ������� ���������� ���,����� ����������� ������� ������� ��� ���,������ ����� �������� ������������ ������� ���������� -������ ��������������� ��������/ ���� ���� ��������� �� ��� ���������� ���� ��� ������� �� ��������� ����������� ���������� ����� ���� �� ��� ������������� ��� ��� �� ��� ��� ���������� ��������� )49� 9;+����� �� ���������� ��� ������ �� ����������� ���� ���� ���������� ��������������� �������� ��� ����� ������������ ������ ������� � ��������� '�����������(���� ����� ��� � ��� -���� ��� ��������� ���������1 �����A��� ?��� �������� $�����A��� ?���/ �� ���������� ���� 25B �� ��� ��� ���� ��� ������������� �������� *5B �� ��� ��� ���� ��� ��� ��������� ��� 7:B �� ���

Page 3: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ %

��� ���� ���� ���� � ���� ������ ���� �� ���������� ��� ��� ��� ������������� ���� �� ������������

�� ���� ������������ �� ���� ������� �� �������1 ,���� �� ������������������ �� ���� ������� ���������� �� ����� ����� ��� �� ��������������� �������� ��� ��������� ��� ���� ������� ��������� �� ��������� ������������ ���� ������ ����������C ��������� � ������������ ��������� ��� ���� �������� ����������� ��� ��������� ��� ��� D!! ������� �� ���������

�� ���� �� ��� ������� �� ������ �� �� �������� ?������ * ��������� ������������ ��� ���� ������� ��������� ��� ���������� �� ����� ������ ���������� ?������ 2 ����� �� ���������� �������� �� ���� ������� ���������� ��������������� ���������� ��� �������� ����������� &� ?������ 4� � �������������D!! ��������� �� ���������� ?������ : �������� ���������� ��������

���� ���

���� ������ ����������� ����� ��� ��������� �� ���� ��� ���������� �� ����������� ��������� ���� ����������� ���� �� ��� ������� ���������� )22� <+1����� ���� ��������� ���������� ������������� ��������� ���������������� ���������������� ��� ���� ������ �����������

������ �� &� ���� ��������� ����������� ����������� ����������� ���� ���������� ������� ���������� ��� ������� ���� ��� ����� ������������ �������� ��� ������������ ����������� ����������� ��0����� ��������� �� ��������������� ���� � ������ ���������� )29+� E���������� ���� ������� ��� �� ����������� �� � ���������� ���� ���� �� ����������� �� ���� �� ��0����� ����� ������� ��������� �� ��� �������� �������� ��� ������������ �������� ��� ���� ��������� ������ #�������� ���������� ���� �� ���� ��� �������� ��� ���� �� �� ������� �� ���� ����� �������� �� ��� ������� �������� ��������� �������� ��� ������������ ����� ���� ��� ������ �� ������� �������� �� ������ ���� ��������� ����,������ �� ����� �������� �� ��� ���� ��������� ���1 �� ���� ���������� ���������� ��� �� � ������� ������� ��� ������� ��������� ����������� ������ �����,� ����� �� ��� ���� ���� �������� ��� ��� ����,������ �� � ������� ������� �� ���� ������������� �� ����������� ���� ����� ��� ��������������� ���� ��� ���� �� ��� ���� ���� ���.���� �� ��������� ���������� ����������������� ���� ��� �������� ������� ���� ������� ����������� �� ��� ���� ������� ����� ����� �� �� ���������� ��� ���� �� �� ��� ��� ����� �� ��������� ���������� ��� ���������� ��� ��������� ���������� ���� �������� #����� ����������� �� ������������� ���������� ���� ��� ���� �������� �� ):8+� ��� ������ ���������� ���������� ��� ����������� ���� ������� ���������� ������������� ������ ��� ��� ����� �� ���� ������ ��� ���������� ������ �������������#�������� ����� ��� ����������� ���� ��� ��� �������� �������� ����� ������ ��������������� �������� �� ���� ����������� �� ����� �� ������������������� ��� ����������� ���� ���������� ����� ������ ���� �� ��� ������� ��������� ����� ���� �� ����� ���� ��0����� ������� �� �� ������� ������������� ���������� �� �������� �������� ��� ���������� ��������� >� �����������

Page 4: Measuring and modelling data quality for quality-awareness in data mining

& ���� ���� ���� ���

������������ ��� ������� �� ����� ����������� ������ ���������� �� ���� ������������� ���������� ��� ����� �� ���6������ ��������� ?������ ������� ������� ��������� � ���� ������� �������� ��� ������ ���� �� �� ��������� ��� ��������� ��������� ���������� �� ������������ ����������� ���� ������� �������������� ��� ���������� � ������� �� ������� ���������� ��� �0����� ����� �������� � ������ ������ ���������� ����������� ������ ������ ��� ��������������������

������ �� &� �������� �� ������������� ������������ ��������� �0��������� �� ����� ��������� ���� ���� ������������� ����������� �������� ������ ��������� �������� ����� ������� ������������ ���������� ���������� ������������ �������� ����������������� F�� ������ ����������� ���� &� �� ����������� ���� �� ����� ���� ������� ���� ��0����� ������� �� ����� ��� ����������� ��� �� �������������� -�� �����������/ ���� -����� �� ����� ���������/�F��� ��� ������� �� ���� ������� �� �������� ��� ������������ �� �� ����������������������� �� ���� ������� ���� �� ����� ������� �� ��������� ����� ������ ���� ��������� � ���� ��� ������� ��������� ����� �� ��� ��������������������� �� � ������ ������� ��������� ����� ��� ������ �� ��������� ��������� ���� ������� ��� �� �� ���� �� ������ ��������� �� ����������� ����������� �� ������� ���� ���� ��.������� ��� �������� ������ ���������� ���������� ���������� ������ �� ����� �� ������������� ��������� ������������������ ���������������� �� ���� ������� ��� �������� �������� ���� ��� ����������

������ �� #��������� ������� -��������� ����� ������ ������ �����/�� ��� ���������� ��� ��� ���� ���������� ����������� ������� ������� �������������� �������� �� ������� ����� �� �������� ������� - G ���� ��� ��� ���������� ������ ����� ������ H!>� H%/� ������� ���������� ������� �� �������� ����� ��� ����� ������������ �������� ����� ��� ��������� �� ����������������� ������� ���������� �� ������� ��� �������� ��������������� �� ����������� ������ ���� �� ��� ��� �������� ������� ��� ������� ��������� ������� ��� ������ )*+� ���� ��������������� ��� ������ �������� �� ������� ������ �� ������������� �� ���������� A���� ����������� �� ��� ��� ���� ���������� ������� ��� ���� ��������� ������ E� ��� ����� ���� �� ��� ������������������ ������ ���������� ������ ���������� ��� �� �������� ��� �������������� ������ ������ �� ������ ��� '��������( ���� A������������� �������������������� ���� �� �������������� ���������� ��������� ���� �� ����� ������������ �������� ��� ��������� ������� ����� ��������� ����������� ��������-������� ��������� �� ��� ������� �� �/ ��� ������������ ���� ���� ���� ��������� ���������� ���������� &� ���� ������ ���� ��� ��� ������������� �������� ��� ����������� ���� ���� ��� �������� �� ����,�� -������� �� �������������/� %��������� ��� ����������� ����� ��������� �� ���������� ���������)*<� ;4� ;9� 757+ ��������� ������� ��� ������ �������� �� � ��������� �� ������-����� '������(� '�����(� ����/ ��� ������������ ���������� ������ �� ������ ��������� ��� ���� ��������� ��� ������� ������� ��� �������� ������ -�� ����������� �����/ ��� ��� �������� �� ��������� ����������� �������� -�� ��� ����������/� A���� ���6�������� ��� ���� �� ����������������� �� ��� ������������ ������ ��� ��� ������������� ����������� ��������� ���������� �����������

Page 5: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ '

����� �� (�!)��� ��� ������ �!�� !� !� ���� ��� �� #���$�����

���������� �� � �� ��� �������� ����� � ������� �� ����������

� � �� � ����� ���� ������ ���������� ���������� ������� �

��� ���� ������� � ��� ��������� � � ��!���" � � ����� ������������ #$%� &'� ()� (&*� ����� +� � �� ���,�� ���� �� � ����� � -���������� ��� � �� ��� � � ����� #)� .'*/ ������ ������ �� #0.� '$� )'� 1'*�� 2���� -������� ����� ������ �� � � ����� � ��" ������ #3)*

�� �������4����� 5����� ���� ������� �� ��������� ������� �

6 ��" �� �� ���" �� ����� ��� � � �� ������ 7 ����� �� ������� ������� #3$� 0&*-��� �� � ���8� � ����� � � ��� ����7 ������ ���! �� #$.*�

�����4����� ������� #0%*���9�� � ����� #3(� (1*������� � ������ ��� #$� '0� '1*��� ��� � ����� #33� ''*������� ����� ��� #))*� ���� �������� ��� #'%*����� ��������� #(*� �� ������� � �����9��� #$)*� ������ �� ����� � ����� #).*

� 2����� ��� ��������� � :� ��� ������ #0(*����8��� �� ���� ��� �� �� ������� � � ������

�������������� � ����������� ;���7 ������ �8�����"�� � ����� ��� �� � �:� ����� #.1*

� ��������� �������� <�� ����!���+� ����!� ������ � � ���������� � �������

� ���� � ������ �����:��� � ����!

���������� �� � � ����������

� �� � � ���� �� � ������ �� � � � ����� #..� ')� &)*�� �� 2� ������� � � ������ �� ����� � �� � �� � �� ������,� ��� ��� ��7

-� ��� ������� ���� � ���������� � ���"���� �� ��������� #.$� 3%.*6 ��" �� ����� �����" �� ���� ����

� ������� ������������ � ������� � �� � ���� � ���� ���� � ���� �� #.3*2���� ��� =��� ���������, ��� �������� � ���� ��� � ���� ���

-���� � � � ���������� ��������� #3&*;�� �� ������ -� ����� ���� �� � ��� �� ��������� ��� � ��������� � � ���� ��� ���� �5=;�7 ����>� ���� #&0*� -9 � #$0*�-� ��� ?���� @���� � #.$*� -�!�� #(3*� A���� #.%*�� ���� � ����� 6�������� �� ����� !�� #3'* ��

��� :� �������8�� :���� ����������7 62�2� #)%� )3*-� ����� ���� ��� ������� � 9��� � �����

� 6�� � ������ ��� �� 4 ��������� �������� ��������8 � ����� ��� � ����� ��� A���� �! ����

��" �� ����� ���� ���� ����������� ������

���� � 2����� �� �� �� � ���� � ��� ��� ������ #)&� &3*-� ����� ������� ��� �� ���������� �� � ���� 5����� ��� � ������ � �5��� #..* �� � @����� �� �� �! ����� �� � � �� ��� /�� �� ����� ����� ���� � ���������� - ����� � � ���� �� ������ ���������� ������� � �����

2���������� ��� �� �������� � ��� � � ������� ��������; �! �� � ���� ��� "�� �� � ������ 8�B ���� � �����

A���� �! �����

�� ���������� ������ ������� �� ��������� ��� �� ��� ���� �� ������������ ������������ �� ��� ������ �������� ��� ���������� ��� ��� �������� �� �������������������

>� ����.� ����� ������ ����� ����� �������� ��� ����������� �� ����������� ������� �������� ��������� ����� ��� ������ ���� ���������� ���������)**+� !��� ����������� )<7+ �� ������� ��� �������� �� ������� ��������� ����������� ���� �� �������� ����� ������� ���� �������� ������ ��������� �� �������������� ������������ �������� ������� ������� ������������ ��� ������ ������ ���� � ��� ���� �� ������� �������� ��� ��� ���� ������ �������� >� ������� ���� 7� �������� ��� !��� ��� I������@� ������ )**+� ������� �������� ������������� ��������� ���� ���� �������� �� ������ ���� �� ���� ���������������� ���������� �������� �� ���� ������� �� ���� ���� �� ���� �����������

Page 6: Measuring and modelling data quality for quality-awareness in data mining

* ���� ���� ���� ���

� �� ������� �� � � �� ��� � � ������

#���������� � ������� ����� �� ������� �� ���� �� ����������� ��� ������ ��������� �� �������� ���������� ���������� �������� ���� �������� �������� ����� �������� �� ����� �� ����������� ���� )79� **� 48+� ?������ ����� ���������������� ������ ������� ��� ����������������� ����������� ��� ����� ����������� %����������� ��� �������� ���������� ������ �� ���� ������� ������������ ��������1 �� ��������� ����������� -����� ����������� ����������� ���� �������� '������� ����( ���� ����� ������� ���� ��� ��������/ ��� ��� ������������������� -����� ���� �� ��� �������� ���� ���������� ��.���� ��� ���� ������������� ��� ����������/� ��� ����������� �������� �� ���� ������� ����������� ��� ���� �� ���������� ���� �� ��������� ������������ ����������� ���������� ������ ����������� ��� ����������� ��� ������������� �������� > ������������� �� ���� ������� ���������� �� ��������� �� ���� ������� -��� ����� ����� �������� �����������/� &� ��� ���� ������� ���������� �� ���� ��� ������������������ ������ ��0����� �������� ����������� -��������� ���������� ���������������.�� ���������� ��� ��������� �����������/ ���� �������� � ����������1

� !��� ������� ���������� ���� ������� ��,������� ��������� �� ���������� ����������� �������� )<� *:� 22� 8:+

� !��� ������� ��������� ������,������� ���� ��� ��������� �� ��� ������������1 ��������� ��� ��������� )<:+� ���� ������� )4;� 8<+ �� ��������� ����� ������ ������������ ����1 ��� );7+ ��� ���������� ����������� ��������)42� 44+ ��� ���� ��������� �������� �� )<<+ ��� ����������� ������������������ -%&?/

� !��� ������� ������� )**� 47� ;7� 755+� %��������� ������ ��� ������������� ):<� ;8� <5� <9� 82� 84� 8;+� J��������� �� ������� �� ������ ���� ������� �� ��������� )4� 4*� <:� 8:�

8;+� �� -�����������/ ����������� ������� ):� ;� :2� 8<+ �� �� ���� ���������������� )25� 42� 85� 82+�

� ���� � �������� ��������� ��� ���� �� ���� ������� ���� ������� ��� ��0������ ��������� ��� ���� ������� ���������� ������ ��������� ����������� ������������� ��������������

��� ���� ������� ���������������

?���� 7895 ���� ������@� ����������� �� )74+� ���� ���� *55 ���������� �������� ��������� �� ���������� � ���� ������� �� ��� ���������� )<� 4*� <:� 84+� �� ���� ���������� ��������� ���� ������� ���������� �� ��� ���������� ������������ ������������� ���������� ��� ������������ ���� ������� ��,�������1

� >������� �� ��� ������ �� ����� ��������� ���� �� ���� �� ������ ):*+ �� �� ����� �������� �� ��� �������� �� ��� ������ �� ������� ������ �� � ��������� ��� ������ �� ��� ������� ������ �� ������ );7+�

Page 7: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ +

��� �� #�� ! ���� ��� �� � ��� !�

� %����������� �� ��� ���������� �� ��� ���������� ����������� ������� ����� ������� ���3�� ��� ���� ��������� )42+ �� �� ��� �� �������� �� ����������� �� ��� ������ �� �������� ������ �� � ������ ��� ��� �� � �� ������������ �������� );7+�

� ��������� �� ��� ������ �� ����� ���� ��� ��������� ���������� ��� � ����):*+C ��� ��,������� �� ���������� ��������� ���������� ��� �������� �� )7*+�

� %���������� �� ��� ��������� �� ��� ���� ���� ����������� �� �������������� �� ��0����� ���� ���� ������� �� ��� ������,��� ��������� �������������� ����� )<+�

J����� 7 �������� � ������,������ �� ���� ������� ���������� ���� ��� �������� ���� ��� ��������� ���� ����������1

7� "������ ���������� ���������� ��� ������� �� ��� ���������� �� ���� ����� ������ ����� �� ��� ������������ �� ��������� ��� �������� �����������-����� �������������� ���� �� ������������ ������������ ����/�

Page 8: Measuring and modelling data quality for quality-awareness in data mining

, ���� ���� ���� ���

*� "������ ���������� ���������� ��� ������� �� ��� �������������� �� ���� ����� ������ ����� �� ��� ������������ �� ���������� ����������� �� ����������� ����������� ������������ -����� ����������� �� ������� ������������������������ �������� ����/�

2� &�������� ���� ������� ���������� -����� ��������� ����������� ����������������/�

4� $������� ���� ������� ���������� ���� ���������� �� ��� ���� -����� ���������������/� �� �� ��� ����������� -����� ������������ ����������� �� ��������� ������ ����/� �� �������������� -����� ������������ ����������� ��������������/ �� ���� ���������� �� � ����� ��������������� -����� ���� ����������������� ����,�������/�

��� ����������� ������ ��� !� ���� ������� "�������

�� ����������� ������� �� ���� ������� ���� ���� ��� ������� ����� �� ������������ ������� �� ���������� -����� ��������� ������� ���� ���� ������������������� �� ��������� ����/� ���������� �������� �� ��� ��������� ����� �� �������� ����� ���� ������ ��� ���������� ��������� ��� �������� �� �������� ������ )72� **� 4<+� =���� ����� �� ����������� ���������� ��� ��������� ������������� ��������� ������� ������������ �� ��� ��������� ����������� ���� ���������� )47+� �� ����������� ��� ������� ���� ��� �������� ��������� ����� ��������������� ����������� ���������� -����� �������� ��� ����������/� ��� ����������� �� ��� �������� �� ��������� ������� ����� ������������ &� �� ������ ������� ������ ���� ����� ���� ��� ���� ������������� �� ������� ��� ���������� ����� ����������� �� ��� ������� ?���� ��������� ����� � ������� �� ��� ��������� ����� ���������� �������� ��� ���� ������� ��������� ������ ���������� ���� ������� ��������� ��� ���������� ������� ������ �� �������� ������������� ��������� �� ��� �������� �� ���� �� ����� �������� �� ������������ �� ��� ��� �� ����,���� ������������ ������� -������� ��������� ���������� �������������� �������� ���������� �� �����������/ ��� ���� ����������)**� *2� 755+� �� ��� �� ������� �������� ���������� ��� ���� ���������� ������������� ��� ,��� ��������� �� H������ ��� %�������1 ����� �������� ���� ����������� ��������� �� ������� �������� ������� ���� ���� �� �������� ���������� ���� ��� ���������� ��� ���� ���������� �������� >������ ������� ����������� �������� �� )95+�

!# -���������� !��� #�����/ )**+ �� � ��� �� ����������� ������������������� ��������� ���� ���������� � ���� ���� ������� ������ -����� ���������� ��������/� ��������� ������ ��������� ��� ������������� =��� �� � ,��� �����!# ������� ��� �� �������������� �������� ��� ���� �������������� ������� �������� ��� ���� ��������� ��������� !# ���� �� �� ������ ��������������� ������� ���� ���������� ��������� ���� ���������� ���� � ����� ������������� ��� ���� ������� ����� ��� ���� �� ���������� �� ������ ��� �� �������!# ��� ������ �� ������ �� ��� ������ �� ���������� ��� ��� �� ����������������� -����� ����������� ��� ��������/� �� �� ������ �� ��� ���� ���������� ����� ����������� ����� ������������������� ������� ����� F���������

Page 9: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ -

�������������� ���������� ��� ��������� ������������ ������������� -���� ������������� ������������ �� ������ ��������/ ��� �� ����� �� !# ���������-����� ��������� �������� ����������� ������� �� ����� ���������/ ��� �� ������ ���������� � ��� ���� ������������� ��� ������������ ������� ����������� ����� ������ �� ��� ����� ������������ �� � �������������� ���������� ��� ������� �� ���� �� �������� ��� �������� ��� ���������� �� ��� ��������� ������������ ��� ������ -����� �������� ��������� ����/� E���� ���������� ��� ������ ������ ��� ���� ���� ����� �������� �� ����� ���� �� ������� ������� ����������� �������� ��� ���������� ������� %��������� ��� ���������� �� ���������� ������� ����� ��� ������ �� ���������� ������� ���������� ��������� �������� ��� $���� ):7+ �� ��������� ����� E���� ������� ���� �� #����� %����#���� %���� -#%#%/ )<8+ ��� ���� �� �������� ���� ����� ��� ������������������ ������������ ����������� E���� ���������� ������� �� ��� ������� ��������� ������ ��� ��������� �� ��� �������� �� H������ );<+� %��������� �����������1 ��� ���������� �� ��������� ��� ������ ������� ������ ��� ����������������� �����1 �� �� � ������������ ������ ��� �� ����������� ���������� �������� ����������� �� ��� ������� -������ ��������� ��������/� �� ���� ����� ������������ -�� ��� �������/ �� ���� ���������� )4<+ �������� �� ��� �������� �� ����� ��������� -������ ����� �������������� ��������/ )72+� E���� ������� '������������,�( ���� �� ���� ����� ��� ������������ �� ��� ����������� �� D����������?������ ���� �������� � ������� �� ��� ������� ��������������� ��� �������� ������������ �� ��� ���� ��� ��� ��������� �������������������� ���� ��� ����� ���� ���������� ����� ��� ���� ������ �� ����������� �������� ���������� ��� ��� ����������� �� ��� ���� ������� #��������������� ��� ������������ ����� ��� �� ���� ���� �� ��������� ����������������� #���������� ���� ��� ��������� ������� ������������ �������� )4:+� ������������ ������ �� ������� �� ���� ��� ������ �� H��� )<7+� �� ���������� ��� ������ �� ������� �� � ����������� ���� ���������� ����� ������� -)<7+� ?������77�2/� ��� )**+ ��� ��� ����������� �� ����� �����������

��� ���� ������� �����

&� ��������� ��������� ���� ������� �� �������� ������� ��� ������ ���� ���������� �� ������������ ��������� ���� ���� ��� ���� ���������������� ��������� ���������� F��������� ���������� ���� ���������� ������� ������������� �������� ������� ���������� ���� ���� ������� ��� ���� ������� ��� ������������ �� ��������� �� �������� ���������� ��� ���� ������� )<:� 8<+� ����� �� �������� ��� ���� ������� ���������� ��� ����������� ��� ���� ���������� �� ���� ������� )**� :;� <;+� $��������� ������ ���� ����������� ���������� ������ ������� ���������� �� ������ ��� ��������� ������ ������� ���� ��� ���� ���� ������ ������� ���� ������� �������� ����� ���� ����������� )<;+� ?������ ������������ ����� ��������� ��� �������� ��� ��� ����������� �� ������� �������� ���� ��� �������� ������� >���� ����� ���������������� ����������� ��� !"# ������� -�� ��� ��� �� ���������/�������� �� F��� � � � )84� 8;+ �������� � ����������� ��������� ��� ����

Page 10: Measuring and modelling data quality for quality-awareness in data mining

./ ���� ���� ���� ���

��� � ���� ��� �� #!���

����� �� ���� ������� �� ��� ������$����������� ���������� �������� ������&� ���� �������� ���������� ��� ������ ������������ ���� ������� �������� ������ ������� �� ��� ����� -������� ���������� �����������/� E���� ����� ��������� ������� -����� �������/ ���������� �� �������� ��� ��������� ��� �������� �� ���������� ���� ):<� <<+ ��� �� ��������������� ���� -����� ��� )<9+/�J����� * �������� � ������� ����� �� ���� ������� ���� =#� ��������� ������������ �� ��� ������ ������� �� ��� ����������� E�� �� ���� ���� �������� ��������� ��� �� ���������� �� ��� ���� ���� -����� ��������� ������ ��� ��������� ������� ������ ������� ����/� !��� ������� �� �������� �� ��� �� �������������� ���� ������ ���������� ������������ ��� ���� ��� ��� �������� ����� ������� ��������� ����� �� �������� �� ��� �� ���� �������� ����������� �� �� ��� ����� ������ ��� ������������ ��� ������� ��� ��� �� ���� ���������� ��� ������������� ���� ��� ����������� �����

#��� �� ��� �������� ���� ������� ������ ���� �� ���� ������� ������������� ���������� =������������� ����� ���������� ���� �� ������� ��� ����������������� A������� ���� �������� ��� ��� ������ ��������� ��� �� ��������� �������� �������� ���������� ���� ������� ���������� ��������� �������>������� ������������ �0���� ���� ���� �������� �� ��� ����������� �� ��������� �������� ������������ ��� ��� �������� �� ����������� ������ ��0���������������� ������� -������ ��� ���������� ����������� ������� )2:+/� ���������� ����������� ���� �� ���� ������� ���������� ����� �� ������ �������� ���������� ���� �� ���� �� �������� ��� ������� �������� �� ���� ����������� �������� ������� � ������� #��� �����,����� ��� ���� ��������� �������� ���������������� ������� ��� ��,������ �� ������� ������ )42� 44� 85� 82+ �������������� ��������� ���� �� ���� �������������� ���� �� ������� -���� �������������/ )*7+� ��� �������� �� ���� ������ ��� ��� �������� ��� ��� ��������������� �� ��� ����������� ������������� �� ��� ��������� ����� ��� ��������� ������� ��� ���������� ������������ ������� �������� ����� ��� ����� ��� ��������� �� ���� �������

Page 11: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ ..

��# ���� ������� ������$���

��� �������� �� ������� �� ��� ����� �� ��� ��� �� ���� ������� �������������� � ���� ����������� ����� �� ������� ����� ���� ���� ������� ����������� ����� ��� �������� -���� ������� ��������� ��,�������� ������� ��� ������/�� ������ ����� �������������� ����������� &� ���� ���� ����� �� ��������� �������� ���� ������������ ���� �� ������������� ��� ���������� ��������� �� ���������� ��� ������� �� ���� �� �������� ��� ����������� �������1 ����� ���� ���� �� ��������� ���� �� ��� ������� )25+� $�����@� ������������ )<:+� ��� ������ � �� ����� ����� ��� ��������� )<9� 94+� ��������� ������������� ���� �������� ��� ����������� ���������� ������������������ -#&?/� ��� ��� ���������� ��� ���� ���������� �� ������������� ������������ ����������� ������� )25+� >�� ������������� ���� ���� ���� ��������������� ��� ������������ ����������� H�������������� ���������� ������� �� �������� ���� �������� ��������� ���� ������� �� ��� ��������� ���� ������ ������� ������������ ������� ���� .���� !����������� ���������� ������� ���� �������� ������������� ���� ��� ���������� E��� ��� &"# ����������� ������������������ ��� �������� ������� ������� �� ���� �������� �����,����� ��� ����������� �� ��� ���� �� ������� ����� ��� ����� �� ��� ���� ����������� ������� ������ ����,�� ��� ������� ��������� ���� ���� ������� ������������ J����� 2�������� ��� ����� ������������� �� .�������� �������� ���� ������� �� ����������� ���������� ��� ����������� ���� ������� ������ ������

$�����@� ����������� )<:+ �������� � ���� ������ �� ���� ������� ����������� �������� �� ��� ���� ���� ������� ���� ��� ������� �� ������������������� > ����������� �����,����� ������� �� ����� ��� ������� �� ����������� ):2+� >������ � � � �� )4+ �������� �� ��������� ��� ������� ������ �� ��������� ����� �� ����������� �� �������3���� ��������� ��� � ����� ������ ������ ��� ������������� ������� �� � ����������� ����������� ������� A����������� ������������� ���� �� ����� ���������� �� ����� ����� �� ����� �������������� ��� �������� ������������ H������� ����� ���� ������� ���� ����������� ��������� ��� ������� �� ���� �� ���������� ��������� ��� ��������C������ ��������� �� ��� ���� ��������� ���������� �� �������� �� ���� ���������� ��� ���� �������� �� �������� ���� ��������

� �������� ���� ��������� ��� ���� ���������� ���� ������� ��� ���� ����������� �� ���� ������� ������������ �� ���������� ������ ������� ��� ������������ ���������� ���� ���������� ��������������������� - �/ ������������

��% ������ ��� !� &���� '��(�$�

�� ��������� �� ������ ������� �� ������ �� ������� ��� ����� �������� ����������� ��� -�� ����/ ������� ���� ��� �������� �� ������ �� ��� ���� ���������������� ��� ����� -���������� �����������/ ������������ ��� �� ������� ������ � ��� ���� ���� ��� ���� �� ������� �� � ������ ������ )2*+� �� �������� �� ��������� ��������� �������� ���� �������� ��� ���� ���������� ��6���

Page 12: Measuring and modelling data quality for quality-awareness in data mining

.� ���� ���� ���� ���

��� �� �(�#�(� 0��# ��� ������1 #��2!�!�!$� !� ���� ��� �� #���$�����

-��� ������� ����/ �� �� ��������� ���� �������� ����� ��� ���� �� ���������� �� ������� ���� �������� �� ���������� �� ��� ������� �� ���� ���������������� �� ������������ ����� ���� ���� ����������� ��� ������������� ����������� �� �������� ��� ������ ���� � ���� ��������� ������� !�������������� ���������� ���� �������� ������������ ��������� �� �������� ��� ������������������ ��� ���� ������ ����������� �� ��������� �� ��� �������������!��������������� ��������� ���� �������� ��� ��������� ���������� ��� %������ �������� )755+� ������� ���� );2+� ������������ ���� )<*+ �� ����������������� )77� ::+� !����������������� ��������� ������� �������� ����������� );;+������� ������,������ ):5+� ������ ���������� )8+� �� ����������� ������ 6���� )2;+�#��� ���������� ���� �� ��� ������� �������� �� ��� ���������� ��� ������ �������� ������� �� ��� ,�� ��������� �����1

�/ H������������� ��� ������� ���������� ��� ��������� ��� ��� ���� �� ��������

��/ ?�������� � �������� ������ �� ������ ��� ������ ����� �� ��������������� �������� ���� �������� ��������� ������ �� ������� -����� ���� ��������

Page 13: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ .%

����� � #� � �2������� � � ! � ����� ���� !� !� ��� �$ #���2 �$

�� ���� ��� �������� ���

6 ����� ��� ��� #$(* A���� ������� � ������ ��B�B +� C�� �����"���� ����������� ����4������� �� � ����

5�� ��� ��� ������ �� ����� � ��� �� � ������ ��� ����� ��4����4���� ��� �� �� � ����? ��4 ��!��� -������� #((* ����3 D ���. D �.� � � ��.���$ "�� � �� ������ �� ������ �� � ����

�� � �� ������ �� � ������� �� � ���� �� �� "� ������ �� ����� �3 �� �.

+��� �� ��� ��� #1(*��

�� ������ � ������ ������� �� ���� �� #$&*

������ @ ��� �� �������� �� ������ �� ��B�B� �� ���� �� E?���F �� E?��F �� ?'%%������ �� ���� ���� �� �� ����� �� �� ��������������� �� �� ������ ���� �����73 ��� @�A���GH . ��� ��/�?�I����J�CH $ ��� ��=H 0 ��� ;H ' ��� ��+H ) ��� �B

����� �� ��� !� #!��� !� ��� ���� ����� 3��� !� ��� ���!�� � �4�$�

������ ������ ������ ����

���������� ��� ����� � �� ������� ���� ��������������� ����������� ���� ���� ������� �� ���� ��!!� ���� "������������#������� $����%� �� ����&� �''� ����(�������� )�� *���� +��%� � ������ ��)�%& �� ���� �''�� ������� ������� �� $�� �� ���� ,��%���� �''-� ��''�������.������ .�� ����� ����� /������� �� ����)�� ���0� �-'�1+ 2�3��� ������ ,��� �� .������� �''-� ��4�/����������� ��������� ����� � 5������%������ �� ���� �''�� ��� ��������������� "�������� ���������� $����� �� ���� �''�� ��0����������� ���������� #�)������ +�� �� ��������� �0'�6����)�������� )������� ������ ������ 6�3�� �� �����''�� �4!� 7��8�� �*���� �� ������������� ��� ����� ������������� +�8 �� ���� �''�� �0-� �����

������� ����� ������ ������� ��������� �� ��������� ���������� ���� ����� ���� ���� -�� ����������// )45� 9+

���/ ?�������� ��� ��������� � ���������� ��������1 ���� ���� �������� �� ���������� ��� ���������� �������� ������� ��� ����� �� ������� ��� ������ ��������� );*+� ����� ����� ��� ������ ������ ��������� �� ��� ���������� ������������������ ��������� �� ������� �������� ���� �� A������ �������� )28+�K������ )98+� "������ )2<+� ���� -��� ���� */

��/ ?�������� � �������� �����1 ���� ���� �������� �� ��������� ��� ������������ ����� �� ������� �� ��������� ������������ �� ����������� ��������������� ���� � ������ ���� ��� �� ������������� -���� �� ������� ����������������/� ��������������� �� ���������� ���� 2 �������� ��� ������� �������� �������� �� ��� ���������� ��� ��������� �� )<+

�/ G��������� �� ��� ������ ��� ���������

�� ������� �� ����������� ��������� ������� �� ��������� ��� ����������������,�� �� K������� � � � �� 78:8 );2+ �� ������ ������� �� ������� �������� ��� ����������� ��� ���� ���������� ���� ��0����� ���� �������� J������ ���?����� )2*+ ��������� � ������ ������ ��� ������ ������� ��� �0���� ������������ ������� ��� ���������� �������� ���������� ��� ����� ������ >���� ������������ ����������� A������� ��� ?����� )45+ ��������� ��� ������ ������������� ������ ��� �������� ��� ������ �� ��������� ��������� ����� ����������� �������� ������������ >���� ��� ��������������� ����������� ��6��� � � � )9<+ ��������� � ������ ���� ������� ������ �������� ������� ���

Page 14: Measuring and modelling data quality for quality-awareness in data mining

.& ���� ���� ���� ���

����� �� #� � ���� 0��� !���� !� 5�����!� !� �0�

�� �������� ���������

������ �!-� 5������ � )������� �� �9��& 9���� �� �� ��������� �������� ��-� �) � ���������� ����� :���� �� �� ��������������� ���� �������������

�� ���������� ���������� �� ������;�� )��������<=5� ���� (��& 5���8 ����� �� � � ��8 ������� �� �� ��� �� ���& � ������=�� � 6����)���� ������������ 9����� �� �8� �������� ���������& ����������

� �������� �� ��� ����� �� )��� � ��8 ������=����� ������ � ������ ���� �8� �� ���� ������ �� �� ��� �&������& �� �����

� 9���� ���� ��� ����������� �����= 6�� ����� ��������� ��� �� �����;��& ��������� ���������� �� ���� ������������ �� �& ���������9��&���)����� ������ �� ������� 9�����=

�9�� (����������& �9��� � ������� ����� 9����� ���� ��� �) �8� ��8 ����������� �� � ��������=

��� �������� ������ �& ���9����� ��� ��8 ���� �������� ��8�� )���� ���� �) ������� �� ����� ���� ��� ������ �� ���������� ��� ����= (��9�����&>�)�� ��?������ ������ @ �� ��%�� �8� �������� �������� ���� ��9� ��� ����9����� )�� ��� ��� ����� �������� �� ��)��� ��� �8� ������ �������=

��������� ������ ����� ���� ��� ����������� ��� �������� ��� ������������ �������,��� �� ������,�� �������� ���������� ��������� ���� �������� ,���� ��������0����� �������� &� ��� �� ����� ����������� ,�������� ���������� ������� �������� �� ������� ��� �������� �������� ?������ �������� ����� ��� ������������� �������� ��� $����� �������1 &������%���� ):4+� ����� )*8+� %���#���� )7:+��� J���� )*5+�

��) ��������* �����!������ ��� '����$ !� ���� �������$

=���� ��� ������� ������� �� ��� ���������� ��������������������� ����������� ����� ��� ���� ��������� ����� �� ���� ����������� ������ ��� ��������������� ��� ������ ��������� )8*+� ��� �������1 �� ��� ������,������ ���������� ����������� �� ��� ������ ����� ��� ��� ���������� �� ���� ���������������� ��� �������������� ��� ����������� �� ��� ����������� ������ ���� ��������� ������� ���� � ������ ������ ���� �!� ��� �������� ��� ���������� �� ������������� �������� !������ ��� �������� �� � ����� -������ ��������� ������������ ����/ ��������� �� ��� ������� ���� ����������� ��� �������� ���������� ������ �������� ������ ��� �������� )9*+� ��� ���� ��� ������ � ��� ���������� ���� ��� �������� ��������� )<2� 8*+� ��� �������� �� ������������������� )89+� ?������ �������� ����� ��� ���������� ���� �������� ��� ���� ��������������� ��� ������������1 >I>L )24+� H�����@� F���� )<4+� >$D E? )87+� �������� )7<+�

>I>L )24+ �� �� ?"� ��������� ��� ���������� ���� ���� ��������������-���� �� ��������� �������� �������� ��� ����������/ ��� ��� ���� ���������������� ���� ��������������� ��������� � ���� ������� ���� �������� ���,�� ����� �� ������� ���� ���� �������� ����� �� ��� ���� ���������� ��6���� �� ��������� ����������� ���� �� ������� �� ����������� ��������� ������� ��������� ��� ����������� �������� �������� ���������� 6���� ������� ������������ .��� ��� ������������ ����� ���� 4 �������� ��� ���� � ���������

Page 15: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ .'

��� �� �6����� ! ���� 0��� !���� !� 7+&8

-����� ���� ���� ������ ����/ �������� �� H�����@� F���� )<4+ ��� >I>L)24+ ������� ����� �� ��� ,��� ������� ��� ���� �� ��� �������� ���� �� ��������� ������� ��� ��,������� J����� 4 ����� � ������ ��� ������������ ��������� ���� ��������������� ����� ����� ��������� -����� ���� "� � ��� �����/�� H�����@� F���� ������ )<4+ ������� �� ��� ��������� ������ �� � ������ E���������������� ������� ��� ��,������ �� ����������� �������� ���������� ��� �����������3�������� ������� �������� �� ��� �������� ���� ��������������� ���������� �� � �����,� �������� �������� �� ��������� "�!��� ��������� �� ?�����F��� ��� D������ )97+ ������ �� ��� �������� ���� ��� ������� ��� ����������� ���������� ��� ������� �� ����� � ������� �������� �������� -�!�MM/� �� ������ ������� ���� ���������� ����������� ��� ���� ������� ������ ���� � ����� ��� ���������� ������� �� � ����� ��� �0����� ������ ��� '���������� �����������( -���� ������ '���� ���� �����������(/ )92+ ������ �� � �������� ����� ������ ������ �� ���� ��������� ��� �������� ��� ���� �������������� ���� �� ������� �� ���������� �� �������� ���� ��� ��� ����������� �������������� ������ ���� ������ ��� � ����� ����� �� ,������ ������������ ��������� ���������� ���� ��� ������������ ���������

� � �� ������ �� � � �� ��� �� ������ ��� ��� ���

������

����� �� ���� ���������� ��� ����������������� �������� �� ���� ������� ������������ ���� ������� ��������� � ��������� ��������� ��� ���� ������� ���������� ��������� ��� ������ ��� ��������� ��������� �������� ��� ���� ������ ��� ������� ��� ���������� ��������� ����������� ������� ��� ����������� �������� �� ��� ���������� ��� ���������� ��� ��� ��������� ���� ��������� ������ �������� ��� ���� ��������� �� ����� ���� �� ��� ��������� ���������� �� J����� :� ��� ��������� �� ������� ���� ����� �������� ������������� �� ��� D!! ������� -������������ ��������� ��� ���������� �����

�� J����� :/� &� �������� �� ,�� ����� ���� =7 �� =: ��� �������� ��� �����

����� ���� !7 �� !< ��� ���������� ���� ���� �� ��������� �� ��� ����������������

Page 16: Measuring and modelling data quality for quality-awareness in data mining

.* ���� ���� ���� ���

#�� ��� +������� �������,"��� "���-�����

�� ,��� �������� ���� ������� =7 �� J����� : �������� ��1 �� ��������� ������� ������� ���� ����� ���� ���� �� ��������� �� ��������� ��� ������������� ���������� ��� ��� ��,���� � ������ ���������� ��� �� ���� ������� ������������� ��� ��� ���� ���������� ��� ��� ����� ���� ������� ��� ��� ������D!! ����.�� ��� ����������� ����� -����� ����������� ��� ������������ ������������� �� ������� �������� ��� ��� ����������� ������ D!! ��������� ���

�������������/� &� ��� =* ����� �� �� ��������� �� ������� ��� ����� ��� ������������� �������� ��� ����������� �������� �� ��� ���� ������� ���������� ����������� �����,�� �� ��� ,��� ����� !��� ����� �� ��� ���� ��� ���� ��������������� ��� ��� �� ���������� ���� � '���������( ����� �� ���� ��� � ���������� ���� �� ��� ���� �� �� ���������� �� � ������� ��� ��� ���������� �

��� ������ ����������� �� ���� ������� ����������� ���� =* ������ �������� � ,��� ���������� ����� �� ��� ���� ������� �� ��� ������������ ���� �������-�� ���������� !��� #����� ����������� ��� ��������/ ����� �� ���� ����������� ��� ���� ���������� �� !# ��������� ���� �� ������ �� ������� ��������� ���������� ��� ��� ������� �� ���� ���� ������� F��� � ���� ������������ ��������������� ������������ ��0����� ������ �� �������� ����������� ���������� ��� �� ����������� �� � ���� ��������� �� ����� �� J����� ; -�����

�� ���� >� �� I�/� �� =* ���� �������� �� ��������� ������� ������ ������������� ������ ����� �������������� �������� -��� A� �� J����� ;/� ������������ ��� ���������� � ���� ������������ ���������� �� ���� ������� ����

����������� ����������� �� =2 ���� �������� �� �������� ��������� ����������������������� ���� ��� ������� ���� ���� ��� ���� ��������� ���� ����������� � ����� ��� ������ ������� ����������� !�0����� � ��������� -����������� ���� 4/ ��� �� ���� ��� ����������� ������� �� ������� ��� ��������

������� �� �� ������ �� ��� ���� ���������� �� ���� �� ��� =4 ���� ��1 �� �������� ��� �������� �� ���� ������� -����� ������� �������� �� ���� ������� �����/ ���������� ���� ���������� ���� ��������������� �������� ������� �� ������� ��������� ������ -��� &� �� J����� ;/� ��� �� ������� ��� ������� ����������� ���� �� ����� � ��� ������ ��������� �� ��� ���� ������� -����/���������

���������� ��� ���� ������� ������ �� ������� �� ��� =: ���� �� �� ����������������� ������� ��� ��������������� �� ������������ ��� ���� �� ��� ������������ �������� ����� �� ����� �� ��� �� ������� �������� ������

#�� ��� ��������� ������� �������� ���������

?������� ��� D!! �������� ��� ��������� ,��� ���� �� ���� ����������� �����

!7 ��� ���������� �� ��� D!! ������� �� J����� :� &� �������� �� � ����������� �� ����� ���� ��1 �� ��������� �� �������� ��� ��6����� ��� ��������� ������������ �� ��� ��������� ��� ��������� ���� -���/������ ����� �!� ����� ���������� ������ ��� ��� ���� �������� !�0����� ����� �� ������� ������ ��� �������������� -����� ������� ��� ���������� ��� ���������� ��� ��������� ����/� !�

Page 17: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ .+

��� � 9������ �����"!�4 ! ���� ��� �� �"����� !� �2� :�� (�!��

��������� �� ���� ���������1 ������� �������� ��� ���������� ���� ������ ������� ������������ ���� ��� ��6����� �� ������ �� ��� ���� ����������� ��@� ���������� �� ���������� � ��� ������0���� �� ��� �������� �� ��������� ��� ����������������� !�� ��� �������� ����� �� ��� ���� ,���� !��� ��� �������� ����� ����� ���������� ���������� ��� !���� ��� �������� ��� �� ������ ����� ����������� ��� ���� ��������� -����� ��,���� ��������� �� �������/ �� ��������������

��������� ����������� �� ���� ����� !* ��� !2 �� J����� : ������� ����������� ��� ������ �������� ���,�������� ���������� ��� ���������� ������������� ��� ��������� �������������� ��� ������� ��� ��� ������ ������� -������������� ������� �������� ������ ������,������ ������ ����������� ������ �������������� �������� �������������� ��� ��������/� J�� ������������������ ����� �����

-�� ���������� !2 / ������ ������� ��� ������� ����� �� ���� ������� ����������

���������� �������� �� ���� =* ��� ������ �� ��� ������� �������� ����������� �� ��� ���� ����������

�� ����������� �� ������� �������� �������� �� ����� ������������ �� ������������ ������� ��� ���������� ���������� ��������� ��� ��� ���������� ���

������ ������� -���� !4 / ��� ��������� ��� ������� �� ������� ������ �����

������ -���� !: / ��� ���� ����� ��� �������� ���������� -���� !; / ��� ����

����� ����� -���� !< /�

Page 18: Measuring and modelling data quality for quality-awareness in data mining

., ���� ���� ���� ���

��� �� � ;����� ����� !� �!���!�� �$ ��� #��� �$ ���� ��� ��

#�� "� .���������-� ������

�� ��������� �� ��������� �� �������� �������� ��� ����������� �� ���������� �� ������� ��� �� ����� �� ��������� ��� �� ��������� ���� ���� � ������� ��������� ���� ��� ������� ������ ����� ���������� ��������� �������� ������ -����������� ������ �������� ���� ��� ��������/ ��� ������������� ������������ ��������� �� ���� �������������� �� � ������ ������������ ����� �� ���� ���� ��� ����� ��� ������� ����������� ��� ������� ������ �������� ��� ������������� �������� ��������� ��� ���� ��� � ������� ������,������ ���� �� �����,������� ���� ���� � �������� �� ����� =�� �� ���� ���� �������� � �������� �������� ��� ��������� ���� ��� �� ���� ������� ��� �������� �������� �������������� ���� �� ������� �� ����� ������� ����� ��� ���������� �������� ������������� �������� ���������� ��� �������������� ���� ������� �� ��� ������������� ������� ��� &� ��� ����������� �������� �� ��������� �������� �� �� ������������ ������� �� ������ �� ��������� ������0������� ������� ��� ������ %�������� ���� �� ��� �������� ���� ��� ����� �� � ������� ��������� > ����������������� ���� ���� �� � ����� �� � ���� �������� ����� H����� ��� ����� �������������� �� ������ �� � ��� ������� ��� ��� ���� ����� ��� �� ����

Page 19: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ .-

����� �� ���������� ��������� ��� ����������� ��� �� ��������� ������ �� �������������� �� ������� � ������ ���������� ��� ����������� �� ������������������ ������� ��� �������� ��� � ������ ������� ������������� �� ������ ������ ��� ������� �� ��� ����� �� ��������� ����������� ��� �������� ������������ ��������� �� �������� ���� �� ���� ������� �� ���� �� ��������� ���� $��������� ��� ������� ���� � ��������� ��������� ��� � ������ �� ���������� ��

,��� �������� ���� �� ��� �������� ������� =7 �� J����� : �������� ��1 ����������� ��� �������� ������� �� ���� -����� ������� ��� �������� ����� ������������� ���� ��������� �� ��� ���� �������� ��� ������ ����/ ��� ��� ��,����� ������ ���������� ��� �� ���� ������� ������������ ��� ��� ���� ������������� ������ ��� ���������� ����� J�� ��� �������� ��� ���������� ���� ��������������� ��� ��� ����� �������� ��� ��1

� !��� ����������� ���� �� ��,��� �� ��� ������� �� ������ ���� ������� ���� �� ������,��� ��������� ����������� �� ��� -�� � ��� ��/ ������-�/ -�����<���� = �� �2 >!2�� $����� = �? ���� ��� ������� ��� ���������� ����������� ��� �������������� ������� ��� ������ ��� ��� ,��� ����/� �� ������������ ��� ������� ���������� ��������� -����� � ��������� �� � ������������ ,��� �����/

� !��� ������������ ���� �� ��,��� �� ��� ������� �� ���� ,���� �������������� ������

� !��� �������� ���� �� ��,��� �� ��� ������� �� ���� ������ ������ ���� ���������� ����� ���������� ������ �� ��������� ������� !# ��������� ������� �� ���� �� ���������� � ��� ���� ������������ ��� ������ ��������

� !��� ���������� ���� �� ��,��� �� ��� ������� �� ���� ��������� ������ ������,�� ��������� ���� ����� -����� ����� ������ �������� �������/�

&� ��� =* ����� ��� ��������� ����������� �������� �� !# ��������� ����������� ��� ����� ���� ������� ���������� ��� �������� ��� ���� ���� �������� �������������� �������� ������ ������� ��� ����� �� !# ��������� ������ ������ �� ������� �������� ���������� ��� ��� ������� �� ���� ���� �������

�� =2 ���� �������� �� ������� ������� ��� ����������� ���� ������ ����������� ���� ��� ���� ���������� �� ��������� ����� �������1

�� �A���� B ����� C���� ���� B �� �����B- ��� �� (����� ��&�D���� (��&B"�����(�����&B������E�

�� �A���� B C= ������ ���� B � �����B(����� ��&���� (��&B!0'''� (�����&B�E��� �A���� B C��� ������ ���� B F� �����BF� (��&B"����� (����������B������E�

���� �� ��������� �� � ���������� ������,�� �� ������������ ��������������� ��� ,����� ������ ��� ������ �� � ������ ������ �� ��� ���� �����

������ �� ���� �� ��� =4 ���� �� �� ������ ��� �������� �� ���� ������� ����� ���� ��������� ����� ��������������� �������� -��� &� �� J����� ;/� ������ ������� ���������� ���� �� ������������ ������������� �������� ��� �������

���� ���� �� �������� �� ��� �������� �� ��� ���������� &� ��� =: ����� ������������� ������� ��� �� �� ����� ��� ����� �� ��� �� ��� ����� ���� ��������� �� ������� ��� ��� ��� ������� �� ��� ������������� ��� ��������� ��� �������� �� ��� ��������� �� �������� �������� �� ��� ��������� �� �� �������

Page 20: Measuring and modelling data quality for quality-awareness in data mining

�/ ���� ���� ���� ���

��� ���� ������� ��������� ���� ��� ���� ������ ������� ������� �� ����������������� ������ �� ������� �������� �� ��� ���� ��������� ���������� ������� ��� �������� �� ���������� � ��� ������� �� ��� ���������� ����������������� ��� �������� -�� �������� ����� �� ��������/� ��������� ���� � ���� �������������� ���� ��� �� ���� �������� ���������� ��������� �� ��� ������ ������ ������ ������� !�0����� ������ ��6������� ��� ���� �� ��0����� ��������� ��0����� ������� ��������� ?������� ��� D!! �������� ��� ,��� ���� ��

���� ����������� ����� !7 �� J����� : �������� �� ��������� ��� ������������ ���������� -���/������ ��� ������� ��� ��� ����� ��� ����� ��� ������������� -������������/� J�� ��������� ���������� ���� ��� �������� ��� ����

������� ������������ ��� �������� -��������/� J�� ��� ���� ����� !* ��� !2�� J����� :� �������� ���� ����������� ����� ��������� ��� ���� �������� �� ����� ��� ������ ������� ��� ����������� >� ������� �� ������� ���������� ����������� �� ��� ���������� �� ������ ��� ����� ����� �� ��� ����� �� ������������������� ����� &� ���� ����� ��� ������� �� � ���������� ���� �� � ��� �� ����������� ���� �� ����������� ��� ����������� ��������� ����������� ��� ������������� �� ��� ������ �� ������ ��� � ����� ���� ������ � ���� ������� A����� �� ������� �� � ����1

#� �' � ���������� � �0 5.

�� ''' � ������� �-0����� � �� ''' 5.

�''� ''' � �� ����� � �''� '''

6/�. 0� ''' � ���������� � 4� '''

,#6/ ���;����@ �''G 5.

���������� ������@ C��& �''-� ����= �''-� 2��= �''-� .�9= �''-� ��= �''-� C��= �''0=

�� �������������� �� ���� ���� �� '�� �� ������ ������ ������� �75 ����7: �� �� ����� ��� ����� ��� ��������� ������� 2�555 ��� ;�555 ��� �������255�555 �� ;55�555 G ������� ��� ������� ���� ������� ����� ������� :�555��� 9�555 ������ ��������� �� ��� ������ ��� �� ��������(� ��� ���� ����� ���������� ���� ���������� ����� ���� ��� ��������� �� ����� ���� ���� ������ ������� ������ �������� �������� ��������� ���������� ������� ��� �������� �� ��� ������ ��������� �� ���� ������� �����,� ������ ����� ��� �0���� ���������� ���� ���1 �� ��� ���������� ���� ������ ���� ����� ��� ���� ������������ -����������/� ��� ��� ���� �� ������������ �� ����������� �� ���� ����� ����� �� ���� ,����� ���� ��� �������� �� ������� ���� ���� ��� ���� ����-�� ���/ ���������� �� ��� ���� ��������� ��������

H��������� ��������� ��� �������� ��� ��� 6��� �������� ��� ���������� ������������ &� �0���� ��� ����� �� ����������� E�� �������� ��� ������� ���� ������������� �� �� ������������ ���� ��� ������ ������ $���� ������ �� ������ ���������� �� ��� ���� ���� ������� ��� ����� $���� ���� ���� ����� � ������� ������� ����������� ������ �� ��������� ��� �������� �� ��� ����� ���� �������� ������ ����� �� ����������� E�� ��� �� ��������� ��� ����� �� ���� ����������� �� ������������ ������� ��� ���� ���� ��������� ��� ������ ���� ��� �������� ���� ��������� �� ��� ���� ���������� �� ����� �� �������� ��� ������������ ����� ��� ���������� ���������� �������� ���������� �������� �����������

Page 21: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ �.

��� ��,������ �� ����� �� �� ��������� �0������� >������ ���� ���������������� '�������������( ��� ��������� �� )75+ �� �� ������� ��� ��������� ����������� ���������� �������� �� ��� ��� ���� ���� ��������� ��� �������� ������ ����������� �� ��� ���������� ����� �� ����� �� ���������� ��� ������������������������� �������� ��� ���������� �� ��� ���� ��� ���� ��� ���� ������������� ��� ������� ��� ���� ���� ���� ���� ���� ���,����� ��� �� ������ ���������� ��� ���������� ������� �� ����������� �����

! "��������

��� ������� ���� �� ���������� �������� �� ���� ������� ���������� ���������� ���������� ���� ��� �� �������� ��� ��������� ��� ���� ������� ���������� �� ��������� ��������� ��� ���� ������ ����������� ���� ������������������� ���� ���������� ��� ���������� �� ���� ����������������� ��� ���������� ��������� ����������� �� ������� ���� �������� � ��������� ��������������������� ��� � �������������� D!! ������� ����������� �� �� ������� �� ���������� ���� ������� > ������ ������ �� ��� �������� �������� �� ���� ������� ������ ��� ������� ����� ��� �������� ������ �� ������� ���� ������ ������� ���������������� ������ ���� �� ������� ��� ���� ������ ������������ ������������������� -�� ���� �� ���������� �������� ��� ��������/ ���� ������ �������� ���� ���� ������� ���� ������� ����������� ��� ���� ������������ ��������� ������ �� ��������� ��� ���� ������ �� �� �������� �� ������ ������������� ������� ����� �� ��� ���� ������� ��� ������ �� ���� �����,�� ��� �������,��� ��� ���� ��������� �������� ������ ��� �� � ���� ������ ������� ����� ������� ��� ���� ����������

#���������

.@ �$��"�� �� �� �� �4 0� �"�� �A B.--%C # � �$ �!� �� !� ��� )��"������ ! ���� � ���$� ����)��@ (�!�@ ! �2� .--% ��# ��9#5� �!� @� �@�/+D�.*� E�2 �$�!�� ������@

�@ �2��� 0� �$�� �F� #�2�!� �� �!��!� �� ���� ���� ��� �� :!�����G�9 B�//'C �����!���� ��� �� ! ���� �� (�!� !� �$ 02�!$2 �� ����$�����#���$����� ����� !� #�� ��� � �!����� ��� ����@ ���� �� �� ! �!������ �!��� ��� !� !� ����$ �$ # ����"��� !� A�6� 9������ !� A��"!�4��//'@

%@ �����2�4� 2�� �� �2��2� �� 9��� H B�//�C �� � ��� �$ �GG� ��� ���� � ����"���2!�@ (�!�@ ! �2� �,�2 ����@ �!� @ !� H��� ���$� ���� ���BH���C� �@ ',*D'-+� F!�$�:!�$� �2 ��@

&@ ������ �� ��� � �� ����!��GG (� # �� ( B�//&C � �!����� !� ! �2� ������� �� 5�� � G�� !� (�!)���@ (�!�@ ! �2� ����@ �� �� E!�42!� !� ���� ����� !���� !� ��� �� B���C� �@ &-D*%� � $�� ���� �@

'@ ����! �(� (�G�� F� B.--'C �� $� �$ �� !���� !� ����� �! 5�� � G� �2���������0 ��� �� 0�����!;@ �� !���� !� ����� ������2� *B.C@

Page 22: Measuring and modelling data quality for quality-awareness in data mining

�� ���� ���� ���� ���

*@ ����! �(� (�G�� F� B�//�C #!��� �$ �!�������� H�� �!� ����� 0�����!; � �� !���� !� ��� !� �!���6�@ ���� 0������ !� !� :�!"���$� ������� ��$ ���� �$ B0�:�C� .'B.CI�&/D�&%@

+@ ��� � �� ������ 0� ������� ���! #� B�//&C � ����� ! ���� ��� �� �� � �!!����� �� �� !���� !� �����@ 0�!� �� �������� �� �2� �%�� ����@ �!� @!� �!������� #!��� �$ B��C� �2��$2� � �2 ��@

,@ ��6��� �� �2� ��� (� �2��2� 0� B�//%C � �!���� !� ! ��� ��!�4 �$#��2!� !� ���!�� � �4�$�@ (�!�@ ! ��# ��9:��1/% E!�42!� !� ��������� �$� ���!�� � �4�$� ��� 5)J��� �!�!� ��� !�� �@ �+D�-� E�2 �$�!����� ���@

-@ ���J���!� 5� 9��� ��#!� �� F� � �� E �!� > B�//'C �"!!2I � 9���� �����!��2 �! ��� �� ��!�� !�@ 0��2@ ���@� ���� !�� ����)�� 9�!�@

./@ ���� ���� ��� � B�//*C ���� ��� �� �"�����I � ��� ���� !� �!��5�� ����!� �� !� ��� # � �$� :�!"�@ �� @ ���@� ��� �$���H����$� �!��!�@

..@ � ���4! #� #!!��� �> B�//%C ����� �� ��� ���� ������ !� � �$ ������)����� �$ � � ��� �� #����@ (�!�@ ! �2� -�2 ��# ��9:�� �!� @ !� :�!"���$�� �!���� ��� ���� # � �$ B:��C� �@ %-D&,� E�2 �$�!�� ��� ���@

.�@ �!G�$2!) #� (������ H B�//&C � �����"!�4 !� ����� ! ���� ���2��@(�!�@ ! �2� .� ��# ��9#5� E!�42!� !� �� !���� !� ��� �� � �� !����� !� ����� B����C� �@ '-�*+� (�� � ������@

.%@ ���� $ #� :� �$�� F� A$ �� ������ > B�///C �5�I ����� � �$ ��� ��������!��� 5�� ��@ (�!�@ ! �/// ��# ��9#5� �!� @� �@ -%D./&� ������ 0K����� #�� .*D.,@

.&@ ��!� � #� B.-,/C ���� ��� �� � �� !���� !� �����@ �� !���� !� ��� #����$������ %I�&'D�',@

.'@ ���2 #� �!��2" �4 �� E �4�� �� 9!��)��$ � B�//%C ���#�4��I � ���$�$� !� ����!6 ���� ���!�� #���2 �$@ (�!�@ ! �2� ,�2 ����@ �!� @ !� �� !���� !���� �� B��C� #�0� ���)� �$�� ���@

.*@ ����!� � B�//�C ���� ���"���2 � � ��� !�@ �# ��� �"@

.+@ ���! �� �!�2 �"��� #� 9������2� �� ���4 9� # �� ( B�///C 0���!�� �1����)�� ���!�� � �� !� ��� ���� ��� �� ����� 0!!�@ (�!�@ ! �2� �*�2 ����@�!� @ !� H��� ���$� ���� ��� BH���C� �@ *.'D*.,� �� �!� �$��� ������)��./D.&@

.,@ ���4! >� #��!���� > B.--'C �!�1� E���2!� � ��� ����@ ������� !�@ &.B.,C@

.-@ �2��2� �� 9��J�� :� 9��� H� #!�"�� � B�//%C �!)� ��� �� ����GG� #���2 !� 5�� �� ���� ����� �$@ (�!�@ ! �2� �//% ��# ��9#5� ����@�!� @ !� #���$����� ! ����� �@ %.%D%�&� ��� � �$!� ��� ���@

�/@ �2� ��� (� �2��2� 0� F�$���� # B�//&C ��)�� � � (������� 5��� �!��� ����� �4�$� �����I 2���I LL����� � �$@��@��@�L� �4�$�@2���@ (�!�@ ! �2� ,�2(�� 3� � � �!� @ !� ������� � :�!"����$� � �!���� ��� ���� # � �$B(�:��C� �@ *%,D*&+� ������� ����� �� #�� �*D�,@

�.@ � M� E �!� > B�//.C � ���$� 0��� �$ !� 9������ ���� E���2!� 0���� !���� !�@ (�!�@ ! �2� �+�2 ����@ �!� @ !� H��� ���$� ���� ��� BH���C� �@&+.D&,/� �!��� ������ ������)�� ..D.&@

��@ �� 0� >!2�!� 0 B�//%C �6��!���!�� ���� # � �$ ��� ���� ����� �$@ E ����A�" M!�4@

�%@ �� 0� >!2�!� 0� #�24� 2��� �� �24�����4 H B�//�C # � �$ ����)��������� !�� F!" �! � �� � ���� ��� �� ��!"��@ (�!�@ ! �2� �//� ��#��9#5� ����@ �!� @ !� #���$����� ! ����� �@ �&/��'.� #�� !�� E�� ���@

Page 23: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ �%

�&@ �� 9 ��!�! 9� ���)! �� ���G�� � #� �!�� � B�//&C 0��4� �$ ���!� ����� � � ���� ����$��� !� �2�!$2 �!��� (�� ������@ (�!�@ ! �2� .�� ��#��9#5� E!�42!� !� �� !���� !� ��� �� � �� !���� !� ����� B����C� �@�+D%&� (�� � ������@

�'@ ����� 9� � J��)� J � B.--�C 02� ���� 3��� !�� ��$ ���� �$ ��� #��������! �� !���� !� ����� ��� ��@ >!���� ! �! �"��� ����� .+I�/'D�.+@

�*@ ������� �(� �� �� A#� �) � �� B.-++C #�6 �� � 4�� 2!!� �!� ���!������� ���� � � �2� �# ��$!� �2�@ >!���� ! �2� �!��� ���� � ��� �!� ����%-I.D%,@

�+@ �J���)� � B�//%C �!� �� !� ��� �!���������� ���� ����@ ���� 0������ !�!� :�!"���$� ��� ���� ��$ ���� �$ B0�:�C� .'B.CI..,D.%'@

�,@ �#!�2�� E� H!� �4� �� >!2�!� 0� �!���G �� (��$ )!� � B.---C ���2� �$ ���� � �� �������@ (�!�@ ! �2� '�2 ��# ��9:�� �!� @ !� :�!"���$�� �!���� ��� ���� # � �$ B:��C� �@ *D.*� ��� � �$!� ��� ���@

�-@ �� �4� #9� H���4 ! H�� ����$��� � �: B�//�C 0� �!�I � ���!�� � �4�$�0!!�)!6@ (�!�@ ! �2� .-�2 ����@ �!� @ !� ���� ��$ ���� �$ B����C� �@ .D�,���� >!�� ��� ���@

%/@ ��$� 2 � B.--,C ����!� �$ ���� E���2!� ��� � �� �� !���� !� ��� ��@E ���� A�" M!�4@

%.@ ��� :� � F� #��� �4 �� �2��$ � B�//.C � �!��� �$ ��� ���!�� � �$ H����!�N �� !� A��� ��� ���� ����$��� !�@ �� !���� !� ������ �*B,CI�%'D*'*@

%�@ �����$ �(� ����� �� B.-*-C � 02�!�� !� ���!�� � �4�$�@ >!���� ! �2����� ��� ���� � ��� �!� �� !�� *&I..,%D.�./@

%%@ �!6 �� ��� � � �� ������ 0 B.--&C 02� A!� !� ! ���� ��� � ��� �� � ���� !�� �� !���� !� (�!�� �$ ��� #���$������ %/B.C@

%&@ 9��2���� F� ��!��� �� �2�2� �� � �!� �� �� �� � B�//.C �������� �� ��������� �$I ���$�$�� #!��� ��� ��$!� �2�@ (�!�@ ! �2� -�2 ����@ �!� @ !�H��� ���$� ���� ��� BH���C� �@ %+.D%,/� �!��� �����@

%'@ 9!!��2 �� #� >���!� � �@ B��@ B.--,C ���� ��� �� � 9�!$���2 � �� !����� !�I ��!� ���!� �! ������� ���� F���O�@

%*@ 9�����! �� ��� �!� (9� :!�� A� �� ������ � B�//%C 0�6� >! � � �����#� !� E�) ���� ����$��� !�@ (�!�@ ! �2� .��2 ����@ E!��� E �� E�)�!� @ BEEEC� �@ -/D./.� ������� F�$���@

%+@ 9�����! �� ��� �!� (9� >�$�� 2 FH� :!�� A� #�24� 2��� �� ( ���� ����� �� ������ � B�//.C � �$ ��$��� � � ��#� !� ����!6 ���� ��� �$(�!�� �$@ ���� ���� ��$ ���� �$ ����� �� �!�@ �&� �!@ &� �����)��@

%,@ 9��� � �� #����� 9� ��$� �� �!��� 5� ���� ���� ��� �� ���� �� #!!� � B�//'C ����$��� �$ ��� E���2! �$ � ��� 9��� �6��� !� ���� ��� �������� !��� ��� ��!��� � 9���E@ (�!�@ ! �2� ��� ����@ E!�42!� !� ��������$��� !� � �2� � � �� ���� B����C� ��� � �$!� ��� ���@

%-@ F��� �$ �E B.-'/C ���!�������� �$ ��� ���!���!����� �$ �!��@ ���� �����0��2� ��� >!���� �-B�CI.&+�.*/@

&/@ F�������G #� ��!� ! � B.--,C �����"!��� ���� � ���I ���� ����� �$ ����2� #��$�L(�$� (�!)���@ ���� # � �$ ��� :�!"���$� � �!����� �B.CI-D%+@

&.@ F! E�� P2��$ P B.--'C ��2��� �$ ����)�� �!�������I � ���� � ��� �����!��2@ (�!�@ ! �2� .--' ��# ��9#5� ����@ �!� @ !� #���$����� ! �������� >!�� ��� ���@

&�@ F��$ :� ��� M� E��$ � B.---C ��� �� �� !���� !� ��� :�!"���$� #���$������@ (���� �� F���� A�" >����@

Page 24: Measuring and modelling data quality for quality-awareness in data mining

�& ���� ���� ���� ���

&%@ >��4� #� >� ��� #@ �� � 6 �� H� � �� ( B.--,C ���2 ������ ��� ��� �� � ���� E���2!�@ (�!�@ ! �2� ./�2 ����@ �!� @ !� �������� �� !���� !������ ��$ ���� �$ B�� ��C� �@ -%D..%� ( �� �����@

&&@ >� ��� #�� � 6 �� >��4� # B.--,C �� $� ��� ����� ! ��� �� �� !����� !� !� ���� E���2!�@ (�!�@ ! .+�2 ����@ �!� @ �!������� #!���� �$B��C� �@ %&-D%*�� � �$��!��@

&'@ >!2�!� 0� �� 0 B.--,C �!���� �$ #� �� F $2�� ��� !��� ���� ���@(�!�@ ! �2� &�2 ����@ �!� @ :��� �@ ��-D�%%� A�" M!�4 � ��� A�" M!�4� ���@

&*@ :�2� �� ���!�$ �� E��$ � B�//�C �� !���� !� ��� �� ����2���4I (�!������ ���� �� (�� !������@ �!�@ ! �2� ��#� &'B&CI.,&D.-�@

&+@ :�!�� �� A$ � B.--,C ��$!� �2� !� # � �$ � ���������� 5�� �� � ���$�������@ (�!�@ ! �2� �&�2 ����@ �!� @ !� H��� ���$� ���� ��� BH���C� �@%-�D&/%� A�" M!�4 � ��� ���@

&,@ �����Q� A� ����2 (�� P��� � B.---C ��� ������ !� #����I � �� � �$H �"@ (�!�@ ! �2� ����@ E!�42!� !� ����� �� �!$ � (�!$���� �$ B��(C� �@.+&D.,'� ����� ��!��� �@

&-@ � �� � 9� ����� H B.--/C ���� ��� �� �!���!�I 02�!�� ��� (��$��� �@#@ ��44��@

'/@ � � �� �� ������ >� (��)2�4�� �� � �2���!� > B.--%C ��� �� ����� 3��� !� �����)�� ����$��� !�@ (�!�@ ! �2� -�2 ����@ �!� @ !� ���� ��$ ���� �$ B����C��@ �-&D%/.� H ����� ��� �@

'.@ � ���� �>� �) � �� B.-,+C ���� � ��� ����� " �2 # �$ ����@ E ����A�"�M!�4@

'�@ � �� �2 � B�//�C ��!�� !���� ���� ��� ��@ (�!�@ ! �2� +�2 ����@ �!� @ !��� !���� !� ��� �� B��C� #�0� ���)� �$�� ���@

'%@ �!2 � � B�//.C ������� � :�!"���$� #���$�����I 02� ���� ��� �� �����!��2@ #!�$�� :� ����@

'&@ �!" E�� ��� #�� � �$ 0E B�//.C � :�!"���$������ ����!��2 !� ��� ������ � ��� !� � ���� ����� �$@ �� !���� !� ������ �*B,C@

''@ #������ �� A $�� :� ��$�� �F B�///C �� ��� ����� �$ ! F $2�� ��� !��� ���� ��� " �2 ���� ��� !� �! �� ������ #���2 �$@ (�!�@ ! �2�*�2 ��# ��9:�� �!� @ !� :�!"���$� � �!���� ��� ���� # � �$ B:��C��@ .*-D.+,� �!�!�� #�� ���@

'*@ # 2� �� 9�� ���2 � �� H ��� # B�///C � �$ ��� �� ! ���� #������� !��!��� ������ !� ��� ���4 �$@ (�!�@ ! �2� %�� ����@ E�)�� E!�42!�� �@-%D-,� ������ 0K� ���@

'+@ # �� (� ��� � � B�//%C � #�� � ��� !��� #!��� !� �� !���� !� ��� �� ����@ (�!�@ ! �2� ,�2 ����@ �!� @ !� �� !���� !� ��� �� B��C� #�0� ���)� �$��#�� ���@

',@ #!�$� � B�///C #���2 �$ ��$!� �2� E �2 � � ��� ���� ������ !� �����@���� ���� ��$@ ���@� �%B&CI.&D�/@

'-@ #���� F� ���� �� ������$ >� B�//&C # � �$ !� (������ � �!����� ��!������@ (�!�@ ! �2� .�� ��# ��9#5� E!�42!� !� �� !���� !� ��� �� ��� !���� !� ����� B����C � �!�J��� !� " �2 ��# (5��L��9#5�� �@ '.D',� (�� � ������@

*/@ A����� �� ���� �� ������$ >� B.---C ��� ����� ��� ����$��� !� ! F����!�$���! �� !���� !� �����@ (�!�@ ! �2� �'�2 ����@ �!� @ !� H��� ���$� ������� BH���C� �@ &&+�&',� �� �)�$2� ��!�����@

*.@ A����� � B�//�C ��� ����� ��� ���� ��"�� �$ !� ����$����� �� !���� !������@ �A�� ��*.� ��� �$��@

Page 25: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ �'

*�@ A�����! 9 B�//.C � 9 ��� 0!� �! ����!6 ���� ��� �$ #���2 �$@ ��# �!������ ������ %%B.CI%.D,,@

*%@ A�"�!�)� F�� :������ >#� �6 !�� �>� >��� �( B.-'-C ��!��� � � �4�$�! H ��� ���!��@ �� ����� .%/� �@ -'&D-'-@

*&@ 5��!��G �� 5� �� �4 � B.---C � �!��� �$ �!� �� !� ��� ���� !� ���$��!�����@ ���� ������� � � $ ��� � )��� � �!� @ B���1--C� �@ %,D&-@

*'@ (���� �� ��� ���� E� B.--.C � #�� ���� ��� �� #���$����� ������$����� !� �� 5�� ��� #��2!�!�!$�@ >!���� ! �� !���� !� ������ 'B.CI&,D**@

**@ (��� F� #���2 �� # ��2 �� ���� �� �2� ��� � B�//%C ����� �� ������� ������ � ��� !� #���2 �$@ (�!�@ ! �2� ����@ �!� @ ������� � A���� �� !���� !�(�!�� �$ ����� BA�(�C� �@ .&/.D.&/,� H���!���� �� � 2 �!�!�) �@

*+@ (���!� �: B�//�C ���� # � �$ � ���� ! �!���� ����� ��� ���!���������!��@ (�!�@ ! ���# ����@ �!� @ ���� # � �$@

*,@ (����� ( B�//�C ���� # � �$ !� #�� ��� �@ �A�� �'',� ��� �$��@*-@ ( ��� � #� 9����! #� �����! �� (!�! �� � G � B�///C ����)�� ��� ��@

�� �2����� .&I �������� ����)�� 0��2�!�!$� ��� �� $�@ �����2 F!�� �@&,'D'/-@

+/@ ( ��� � #� �����! �� 9����! # B��@C B�//�C �� !���� !� ��� ����)�� ���� ��@ 02� :�"�� �������� !��� ��� � !� ������� � ����)�� ������ �'@

+.@ (��� � B.---C ���� (������� !� !� ���� # � �$@ #!�$�� :� ����@+�@ �� �� ����4�� ( B�//%C ���!�� � �4�$� !� 9�����!$ ��� ����)��@ (�!�@

! ��# ��9:��1/% E!�42!� !� ���� ����� �$� ���!�� � �4�$� ��� 5)J����!�!� ��� !�� �@ &/D&�� E�2 �$�!�� ��� ���@

+%@ ��2� �� �! F B�///C ���� ����� �$I (�!)��� ��� ������ ����!��2�@ �������� ��$@ ���@ �%B&CI%D.%@

+&@ ����� H� F������� � ># B�//.C (!����1 E2���I �� �������� �� ���� ����� �$�����@ (�!�@ ! �2� �*�2 ����@ �!� @ !� H��� ���$� ���� ��� BH���C� �@%,.D%-/� �!��� �����@

+'@ ������ 0 B�//.C ���� ��� ��I 02� � ��� 9 ��@ � $ ��� (��� ���� ��@+*@ �!�2��)��$ > B.--*C #������� �! ���!�� ���� ��� �� ��� �!�$�� ��@ (�!�@

! �2� .� ���� #������� �!� @++@ ���� ��� ������� ��! #� ������ 0 B�//%C 0�� �$ ���� ��� �� � �!!����

�� �� �� !���� !� �����@ (�!�@ ! �2� ����@ �!� @ !� �!!����� �� �� !���� !������ B�!!���C� �@ %'&D%*-� ����� �� � � ��� �����@

+,@ ������� ��! #� (��� � �� ( ���� � B�//&C �(��#�I � #��2!�!�!$� !� ��� ������!������ ���� !� �(�#�( ��� �#�@ ������� � #���$����� �� !����� !� ����� � �� !���� !� ��� �� #!�!$���2 B�#�����C� �2����@

+-@ ��2� �� >� B.--+C ����� ! ���!������ #�� ��� ��� ����@ �2����� R F���@,/@ ��2� ���� > B.--.C ����� �$ ������ ��� !� ��� �2��4 �$ ����)��@ (�!�@

! ���� E!�42!� !� :�!"���$� � �!���� � ����)��@,.@ �2��2 �� E!!� �� :�2��� H B.--%C ������I � �$ ����� �� ����)�� 0��2�

�!�!$� �! ����!�� ���� ��� ��@ (�!�@ ! ����@ E!�42!� !� (�!$���� �$ " �2�!$ � ����)�� B��(�C� �@ �%D'*@

,�@ � � � �� H� � �� (� ���� 0: B�//'C 5�� � G �$ �0� (�!��� � ����E���2!�@ (�!�@ ! �2� ..�2 ����@ �!� @ !� ���� ��$ ���� �$ B����C� �@'*&D'+'� 0!4�!� >����@

,%@ :���4� � �� H� � �� (� ( �!�� �� �0� ��� !� ��� �� ���� E����2! �$@ (�!�@ ! �2� ��� ��# ��9#5� E!�42!� !� �� !���� !� ��� ��

Page 26: Measuring and modelling data quality for quality-awareness in data mining

�* ���� ���� ���� ���

� �� !���� !� ����� B����C � �!�J��� !� " �2 ��# (5��L��9#5�� �@�,D%-� ���� �!��� #�� ���@

,&@ �2��4���������� 9� E��$ �M� P �� # B�///C #!��� �$ �2� #�� ����� ! ���� !���� !� (�!��� " �2 �(�#�(@ (�!�@ ! �2� *�2 ����@ �!� @ !� �� !���� !���� ��� �!�!�� #�� ���@

,'@ 0�� 9:� ����! �( B.--,C �6�� � �$ ���� ��� ��@ �!�@ ! �2� ��#�&.B�CI'&D'+@

,*@ 0�� (A� :��� H� �� ������ > B�//�C ������ �$ �2� � $2� ������� �$��#���� !� �!� �� !� (������@ (�!�@ ! �2� ,�2 ��# ��9:�� �!� @ !�:�!"���$� � �!���� ��� ���� # � �$ B:��C� �@ %�D&.� ���!��!�� ������@

,+@ 0�J��� �� :�!)�!�4 ��� # ��!� � B�//.C ����� �$ 5)J��� ����� 3��� !� ��� !� �� !���� !� ����$��� !�@ �� !���� !� ������ �*B,C@

,,@ 02�!�!���! �� �!G�$2!) # B�//.C ���� ������� ��� �� ��� ��� !� ��2� �� $� ! � ���� E���2!�@ ���� �� �� !� �� $� ��� #���$����� ! ���� E���2!�� ����@ >!���� ! �!!����� �� �� @ ���@� ./B%CI�--D%�*@

,-@ ������� >� B.--+C � ) ���� A�$��� ���2� �� !� ��!��� � �!����� !� ! )� �� !�� ����� !�� ���� !� ��� ������� ���!� � "!��@ 02� �!�����>!����� �/B�CI.&.D.&+@

-/@ H� � �� (� �!G�$2!) #� � 6 � B.---C 0!"��� ��� ���5� ����� ����E���2!� ��$� ��� ��!�� !�@ (�!�@ ! �2� ..�2 ����@ �!� @ !� ���������� !���� !� ����� ��$ ���� �$ B�� ��C� �@ .*&D.+-� F� ���)��$� 9������@

-.@ H� � �� (� H�$��� P� �4 ��!�!�! �� :������� � A B�///C ��:05�I �0!!� �!� ���� ����� �$ ��� 0��� !���� !� � ���� E���2!� ��� �!�����@���� ���� ��$@ ���@� �%B&CI&�D&+@

-�@ H� � �� (� � � � �� 9�!�$���� (� 0���!� � # B�//%C � �����"!�4 !��2� �� $� ! �0� ������ !@ (�!�@ ! �2� .'�2 ����@ �!� @ !� �������� �� !����� !� ����� ��$ ���� �$ B�� ��C� �@ '�/D'%'� :��$�� ��� ��� �@

-%@ H� � �� ( B�///C ���� E���2!� #!��� �$ ��� ��� �� ��@ (2� �2� �0��2� ��� �� ��� �� ! ��2��� 9�����@

-&@ E��$ �� :!� F�� #��� �4 �� B.--%C ���� ��� �� ��� ������ ����� ��� #!��� �$@ (�!�@ ! �2� -�2 ����@ �!� @ !� ���� ��$ ���� �$ B����C� �@*+/D*++� H ����� ��� �@

-'@ E��$ �� ��!��� H� � ��2 � B.--'C � �����"!�4 !� ����� ! ���� ��� ��������2@ ���� 0������ !� !� :�!"���$� ��� ���� ��$ ���� �$ B0�:�C�+B&CI*+/D*++@

-*@ E��$ � B.--,C � (�!��� (������ �� !� 0!��� ���� ��� �� #���$�����@�!�@ ! �2� ��#� &.B�CI',D*'@

-+@ E��$ � B�//�C >!���� �! ���� ��� ��@ H!�@ �% ! ������� � ����)�������� :�"�� ������ � (��� �!�!�� #�� ���@

-,@ E� #� A����� � B�//&C ������ �$ ��� ���� 5)J��� � K#� �!�����@(�!�@ ! �2� .� ����@ ��# ��9#5� E!�42!� !� �� !���� !� ��� �� ��� !���� !� ����� B����C � �!�J��� !� " �2 ��# (5��L��9#5�� �@./D.-� (�� � ������@

--@ E �4��� E�� 02 )���� M B.--.C �� ���� ��� !� ! �2� �����$ ������ #!���! ���!�� � �4�$� �! �2� .--/ �@�@ ������ �� ���@ ���� � ��� ������2���!�� ��� � ��-.L/-� �@�@ ���� ! �2� ���� E�2 �$�!�� ��� ���@

.//@ E �4��� E� B�//&C #��2!� !� ������ �$ ��� ����� �$ ���� ��� ��@ �� !����� !� ������ �-B+C@

Page 27: Measuring and modelling data quality for quality-awareness in data mining

���� ��� �� !� ��� ����"����� � ���� # � �$ �+

./.@ P�S ��� 5� F�� >� P2 F B�///C # � �$ �������� ���� � #�� ��� � " �2(�!$�� �� ��!�� !� ��3������@ (�!�@ ! �2� .*�2 ����@ �!� @ !� ���� ���$ ���� �$ B����C� �@&*.D&+*� ��� � �$!� ��� ���@

./�@ P2 M� �2�2� � B�//�C ����������I ���� � ��� #!� �!� �$ ! 02!��� ! ���� ������ � ���� 0 ��@ (�!�@ ! �2� ./�2 ����@ �!� @ !� H��� ���$� ������� BH���C� �@ %',D%*-� F!�$�:!�$� �2 ��@