
Welcome to the
ISPRS Commision III Working group 8 web-site
WORKING GROUP CONTEXT / CONTEXTE DU GROUPE DE TRAVAIL
The
conclusions of the ISPRS 1995-1999 WG II/6 workshop
"3D Geospatial Data Production: Meeting Application Requirements" held
in Paris in April 1999 was that both photogrammetric and computer
vision,
applied to geospatial data, communities were partly suffering in their
publications from a lack of evaluation and comparison of their
algorithms and
techniques in comparison with other scientific fields.
Indeed, the evaluation tasks and protocols are most of the
time not complete and rigourous enough for the published results to be
optimally
exploitable by other teams. This is certainly due to the fact that if
evaluation
had to be seriously realised within a year project or research the
evaluation
itself would take more than half of the project time.
Moreover data sets are often provided by a contractor and
thus results of differents teams can thus very seldomly be compared on
the same data source or on data of
comparable quality (image quality, geometry of acquisitions, ...).
Les conclusions du workshop "3D
Geospatial Data Production: Meeting Application Requirements"
En effet, les tâches et les
protocoles d'évaluation sont le plus souvent incomplets et non
suffisamment rigoureux pour que les résultats publiés
soient réutilisables optimalement par d'autres équipes.
Ceci est probablement lié au fait que sur un projet ou sur une
recherche d'une année une évaluation
sérieuse prendrait en elle même la moitié du temps.
D'autre part, les données
elles-mêmes sont le plus souvent fournies par le client et par
conséquent les résultats des différentes
équipes
ne peuvent jamais être
comparés sur les mêmes données sources ou sur des
données de qualité comparable (bruit, FTM,
géométrie d'acquisition, paysages, ...).
WORKING GROUP OBJECTIVES /
OBJECTIFS DU GROUPE DE TRAVAIL
The
goal of this 1999-2003 commission III working group is
to start providing data, recommandations, and tools to ease comparison
and evaluation within our 3D geospatial
community.
The
premium very practical issue of this WG is to provide
within a website a very complete and uptodate set of free and available
source data but also reference
data so that all laboratories could compare their results with one
another on the same data sets.
This
website will also host the results of the willing and
volunteer teams.
The
second issue is to build evaluation protocols and give
free on-line access to the evaluation softwares so that researchers can
evaluate their algorithms and
systems at minor costs and within a common frame.
L'objectif de notre groupe de travail est
de commencer à mettre à disposition des chercheurs des
données de qualité, des recommandations et des outils
pour faciliter l'évaluation et la comparaison des travaux
à l'intérieur de notre communauté.
L'objectif premier de notre
groupe de travail était de proposer au travers d'un site Web
(celui-ci!) un jeu complet et à la page de données
gratuites y compris de données de références de
manière à ce que les différentes équipes puissent comparer et évaluer leurs résultats sur les
mêmes jeu de données.
Dans un objectif de comparaison,
ce site Web hébergera également les résultats des
équipes le désirant.
Le deuxième objectif de ce
groupe de travail est de mettre au point des protocoles et commencer
à mettre en ligne des outils logiciels
permettant une
évaluation à moindre coût des algorithmes et
techniques.
ENTER
WEB SITE