• Jakub Sieradzki jakubs@student.agh.edu.pl
• Patryk Kiepas oneinchman.dev@gmail.com

Jak mierzyć jakość ontologii? Mamy ontologię A1, wprowadziliśmy do niej jakieś zmiany i powstała ontologia A2. W jaki sposób ocenić czy zmiany wyszły na korzyść czy wręcz przeciwnie?

• poszukać gotowych
• artykuł od KKL o metrykach w UML
• drugi tydzień stycznia konsultacje: aktualny stan poszukiwań i ustalenie co dalej

• OWL Ontology Metrics - wprowadzone metryki (39): tylko o charakterze statystycznym
• OntoQA - wprowadzone metryki (18): Total Classes, Relationship Richness, Instance Coverage i wiele innych…
• BioPortal - wprowadzone metryki (9): Classes count, Properties count, Individuals count, Maximum depth, Average siblings count, Maximum siblings count, Classes with only one subclass, Classes with more than 25 subclasses oraz Classes with no definition
• OQuaRE & GoodOD - wprowadzone metryki (14): Lack of Cohesion in Methods, Coupling between Objects, Properties Richness, Tangledness i inne…
• Semantic similarity

• "Web-Ontology Design Quality Metrics" - wprowadzone metryki (3): Knowledge Enriched (KnE), Characteristics Relevancy oraz Domain Modularity.
• "Cohesion Metrics for Ontology Design and Application" - wprowadzone metryki (3): Number of Root Class, Number of Leaf Classes oraz Average Depth of Inheritance Tree of Leaf Nodes.
• "Measuring design complexity of semantic web ontologies" - wprowadzone metryki (8): Size of vocabulary (SOV), Edge node ratio (ENR), Tree impurity (TIP), Entropy of graph (EOG), Number of children (NOC), Depth of inheritance (DIT), Class in-degree (CID) oraz Class out-degree (COD)

• "Approaches, methods, metrics, measures, and subjectivity in ontology evaluation: A survey" - przegląd metod ewaluacji ontologii
• "An Overview of OntoClean", OntoClean - formalna metodologia analizy ontologii
• "Evaluating Dynamic Ontologies" - ewaluacja ontologii

Jednym z rozważanych podejść do ewaluacji ontologi jest jej konwersja do odpowiedniego diagramu UML. Znaleziono narzędzie w teorii to umożliwiające EulerGUI (RDF/OWL → XMI → UML). Do wyliczenia odpowiednich metryk znaleziono potężne narzędzie SDMetrics. Program ten umożliwia wyliczenie ~120 metryk, podzielonych w następujące kategorie: Size, Inheritance, Coupling, Diagram, Complexity, Cohesion oraz Nesting (pełna lista dostępnych metryk).

Przegląd metryk dla ontologii

• https://files.ifi.uzh.ch/ddis/oldweb/ddis/research/simpack/
• http://www.semantic-measures-library.org/sml/index.php?q=doc_other_tools
• http://alignapi.gforge.inria.fr/