Ähnlichkeitssuche durch gestaltcharakterisierung auf 3d datenbanken daniel a. keim, dietmar saupe,...
TRANSCRIPT
![Page 1: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/1.jpg)
Ähnlichkeitssuche durch Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Gestaltcharakterisierung auf 3D
DatenbankenDatenbanken
Daniel A. Keim, Dietmar Saupe,
Benjamin Bustos, Tobias Schreck, Dejan V. Vranić
![Page 2: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/2.jpg)
Multimedia Signal Processing Group (SA 449/10-1)
Prof. Dr. Dietmar Saupe
Dr. Dejan V. Vranić (WissAng, 04/2002-03/2004)
Databases, Data Mining and Visualization Group (KE 740/6-1)
Prof. Dr. Daniel Keim
Tobias Schreck (WissAng, Beginn: 11/2002)
Benjamin Bustos (Forschungsstudent, Beginn: 10/2002)
Universität Konstanz, FB Informatik und Informationswissenschaft
Projektteilnehmer
![Page 3: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/3.jpg)
Projektüberblick
• Featuredefinition und Evaluierung• Selektion und Kombination von Feature Vektoren• Effiziente Anfragebearbeitung • SOM-basiertes Retrievalsystem
![Page 4: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/4.jpg)
1. Featuredefinition und Evaluierung (1)
• FV Extraktion
– Normalisierung: PCA-Varianten– Geometriebasiert: Volumina, Voxelisierung, Momente, Funktionen auf
der Kugelfläche– Bildbasiert: Silhouette und Tiefenpuffer– Representation im Orts- und im Frequenzbereich
• Untersuchte Eigenschaften
– Invarianz bzgl. Translation, Rotation, Skalierung– Robustheit bzgl. Auflösung– Robustheit bzgl. Rauschen– Effizienz der Featureextraktion– Effektivität des Retrieval
![Page 5: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/5.jpg)
1. Featuredefinition und Evaluierung (2)
Rotationsinvarianz und Kugelfunktionen bzgl. verschiedenen Radien
D. VRANIC: An Improvement of Rotation Invariant 3D Shape Descriptor Based on Functions on Concentric Spheres.IEEE International Conference on Image Processing (ICIP 2003) (Barcelona, Spain, September 2003).
Funkhouser et al (2003)
Vranic (2003)
![Page 6: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/6.jpg)
1. Featuredefinition und Evaluierung (3)
Experimentelle Untersuchungen:- Im Durchschnitt gute Retrievalqualität durch PCA-gestützte und
bildbasierte Verfahren
- Kein klarer Gewinner über alle Objektklassen hinweg
- Effiziente Extraktion möglich
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D.VRANIC: An Experimental Comparison of Feature-Based 3D Retrieval Methods. Poster Paper.2nd International Symposium on 3D Data Processing, Visualization, and Transmission (3DPVT’04) (Thessaloniki, Greece, September 2004).
![Page 7: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/7.jpg)
1. Featuredefinition und Evaluierung (4)
Dissertation von Dejan Vranić 12/2003:
• Definition und Implementierungsdetails zu 12 Algorithmen• Vergleich mit 7 konkurrierenden Verfahren• Sensitivitätsanalysen• Statische Kombinationen• Evaluierung auf 4 Referenzdatenbanken
D. VRANIC: 3D Model Retrieval (PhD Thesis), University Leipzig, 2004
![Page 8: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/8.jpg)
2. Selektion und Kombination (1)
Feature Selektionsproblem
![Page 9: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/9.jpg)
2. Selektion und Kombination (2)
Idee:- Schätze erwartete Retrievalqualität auf einer Testdatenbank- Selektiere oder Kombiniere anhand des Schätzwertes
Indikatorfunktionen:- Entropie- Purity (max. Klassengröße)
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D. VRANIC: Automatic Selection and Combination of Descriptors for Effective 3D Similarity Search. IEEE International Workshop on Multimedia Content-based Analysis and Retrieval (MCBAR’2004) (Miami, Florida, USA, December 2004).
k = 7
Ranking
![Page 10: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/10.jpg)
2. Selektion und Kombination (3)
Dynamische Selektion:
- Selektiere FV, der den Indikator maximiert- Verbesserung gegenüber Depth Buffer FV- Robustes k-Intervall
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D. VRANIC: Using Entropy Impurity for Improved 3D Object Similarity Search.IEEE International Conference on Multimedia and Expo (ICME’04) (Taipei/Taiwan, June 2004).
![Page 11: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/11.jpg)
2. Selektion und Kombination (4)
Dynamische Kombination:
- Nutze Indikator zur Bildung einer gewichteten Kombination- 30% Verbesserung gegenüber Depth Buffer FV- Dynamische Kombination nahe an optimaler Selektion
![Page 12: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/12.jpg)
3. Effiziente Anfragebearbeitung (1)
• Effizienzproblem: – Hochdimensionale Featurevektoren (>100d je FV) Curse of
dimensionality– Dynamische Gewichtung von Kombinationen Struktur der
Distanzfunktion variabel Räumliche Indexierungstechniken (R-Tree, X-Tree, SS-Tree ...) versagen
• Idee:- Verwende Pivot-basierte metrische Indexstruktur- Erzeuge zur Anfragezeit die Distanzmatrix Dq : P x (DB-P) aus der
Menge gegebener FV-spezifischer Distanzmatrizen- Verwende Dq zur Reduktion der Kandidatenmenge
B. BUSTOS, D. KEIM, T. SCHRECK: A pivot-based index structure for combination of feature vectors.20th Annual ACM Symposium on Applied Computing, Multimedia & Visualization Track (SAC-MMV'05) (Santa Fe, New Mexico, March 2005)
![Page 13: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/13.jpg)
3. Effiziente Anfragebearbeitung (2)
Evaluierung auf 2 Hauptspeicherbasierten Datenbanken:
- Ausschlussbedingung greift (Selektivität gut)- Speedup Faktoren von bis zu 7 gegenüber dem sequentiellen Scan möglich
Experiment:
4 Featurevektoren, total 89d
![Page 14: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/14.jpg)
4. Interaktives Retrievalsystem (1)
B. BUSTOS, D. KEIM, C. PANSE, T. SCHRECK: 2D Maps for Visual Analysis and Retrieval in Large Multi-Feature 3D Model Databases. Poster Paper.IEEE Visualization Conference (VIS’2004) (Austin, Texas, USA, October 2004).
Selbstorganisierende Karte (SOM) als Überblicksinstrument
Smoothed density histogram
![Page 15: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/15.jpg)
4. Interaktives Retrievalsystem (2)
SOM als Anfrageinstrument
Response surface
U-Matrix
![Page 16: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/16.jpg)
4. Interaktives Retrievalsystem (3)
SOM in der FV Evaluierung
U-Matrizen zu vier verschiedenen Featurevektoren
Markierung:
Best matching units zu einer Anfrageklassse mit 26 Objekten
![Page 17: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/17.jpg)
Danksagung
![Page 18: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/18.jpg)
Ende
Vielen Dank für Ihre Aufmerksamkeit!
Fragen?
![Page 19: Ähnlichkeitssuche durch Gestaltcharakterisierung auf 3D Datenbanken Daniel A. Keim, Dietmar Saupe, Benjamin Bustos, Tobias Schreck, Dejan V. Vranić](https://reader034.vdokument.com/reader034/viewer/2022042714/55204d7f49795902118d043d/html5/thumbnails/19.jpg)
Ausgewählte PublikationenB. BUSTOS, D. KEIM, T. SCHRECK: A pivot-based index structure for combination of feature vectors,
Proc. 20th Annual ACM Symposium on Applied Computing, Multimedia & Visualization Track (SAC-MMV'05)", to appear 2005
B. BUSTOS, D. KEIM, C. PANSE, T. SCHRECK: 2DMaps for Visual Analysis and Retrieval in Large Multi-Feature 3D Model Databases. In IEEE Visualization Conference (VIS’2004), Poster Paper (Austin, Texas, USA, October 2004).
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D. VRANIC: Automatic Selection and Combination of Descriptors for Effective 3D Similarity Search. In IEEE International Workshop on Multimedia Content- based Analysis and Retrieval (MCBAR’2004) (Miami, Florida, USA, December 2004).
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D. VRANIC: Using Entropy Impurity for Improved 3D Object Similarity Search. In Proc. IEEE International Conference on Multimedia and Expo (ICME’04) (Taipei/Taiwan, June 2004).
B. BUSTOS, D. KEIM, D. SAUPE, T. SCHRECK, D.VRANIC: An Experimental Comparison of Feature-Based 3D Retrieval Methods. In Second International Symposium on 3D Data Processing, Visualization, and Transmission (3DPVT’04) (Thessaloniki, Greece, September 2004).
D. VRANIC: An Improvement of Rotation Invariant 3D Shape Descriptor Based on Functions on Concentric Spheres. In Proceedings of the IEEE International Conference on Image Processing (ICIP 2003) (Barcelona, Spain, September 2003), vol. III, pp. 757–760.
D. VRANIC: 3D Model Retrieval (PhD Thesis), University Leipzig, 2004