ModellingSpace Concertation meeting 34092001

1
Vers des Outils dAnalyse des Interactions pour
lAssistance Metacognitive des Participants aux
Forums de Discussion
Angelique Dimitracopoulou Learning Technology and
Educational Engineering Laboratory University of
the Aegean, Greece www.rhodes.aegean.gr/LTEE
SYMFONIC SYMPOSIUM
AMIENS,
20-22 Janvier, 2005
2
? Structure

• I) ? La voie dAnalyse des Interactions pour
  assister aux participants
• ? Considerations theoriques
• III) ? Assister aux etudiants metacognition
• ? Assister aux enseignants cognition
  et metacognition
• ? Etude de cas similaire
• IV) ? Cadre conceptuel Indicateurs dAnalyse et
  Outils
• V) ? Conclusions- perspectives etat de la
  recherche

--- FORUM DANS UN CADRE DAPPRENTISSAGE ---
3
FORUM ? Recherche actuelle
Images des systems,
4
FORUM ? Etat actuel
? Les problèmes rapportes a la littérature
? Pauvre participation ? Pauvre résultats
dargumentation, de production des connaissances,
etc.
? Les causes
? Manque de confiance, pauvre qualité de
réduction, ? Les étudiants ne savent pas comment
procéder ? Le contrat didactique nest pas clair,
La déontologie nest pas formée ? Ils souffrent
de surcharge dinformation ? Ils ne peuvent pas
créer une image de leur activité ? Ils ne peuvent
non plus créer une image de leur activité comme
groupe
Images des systems,
5
FORUM ? Recherche actuelle
Les chercheurs ne prennent pas en compte ? Les
difficultés des enseignants, quand ils gerent
des forums, Specialement quand un grand nombre
des etudiants y participant où ils ont à
apercevoir un grand nombre dinteractions. ?
Les étudiants ne peuvent pas créer une image de
leur propre activité en comparaison aux autres.
Ils ne peuvent non plus créer une image de la
qualité de lactivité du groupe comme un ensemble
Images des systems,
6
FORUM ? Recherche actuelle
Un sous-champs de recherche promettant
ANALYSE des INTERACTIONS saisie et traitement
des traces des interactions et du contenu du
produit de communication

• LAnalyse des Interactions a été mise en uvre,
  principalement
• Pour les chercheurs eux-mêmes (outils)
• Pour construire des systèmes Intelligents qui
  guident lapprenant (composantes)

Images des systems,
7
La voie danalyse des interactions ?
Un sous-champs de recherche promettant
Analyse des Interactions

Systemes Intelligents de Guidage des apprenants
Les chercheurs
Analyse Automatique
8
La voie danalyse des interactions ?
Examples des outils
9
La voie danalyse des interactions ?
Outils de prise de conscience
Examples des outils
Pour ladministrateur, enseignants
phpBB Forum statistics Number of posts Number of
users Database size Who is online
Webct, Student tracking read messages, posted
messages Summary of activity report Most active
day, Most active hour per day, Average users
per day, etc.
Carres emboites, (discussion threads de Forum)
Simmoff, 1999
10
Considerations theoriques ?
? I. Se rendre compte de la totalité des agents
quils sont impliqués et des
systèmes cognitives qui se forment
11
Considerations theoriques ?

• II. Une vision du controle de lactivite sociale
  comme un control
• distribue a tous les agents impliques
  (humaines, artificiels)

? Etudiants Auto-regulation (via assistance
metacognitive) ? Enseignants Supervision et
evaluation aussi auto-evaluation ? Conseillers
(agents pedagogiques) du systeme
12
Pourquoi AdI ? ? Considerations theoriques
Adultes Cognition - metacognition
Offrir une Assistance au niveau de ? Prise
de Conscience ? Estimation, Auto-Evaluation
par rapport a une norme ?Guidage (trop
spécifique, coûteux a effectuer) Saddressant
aux principaux acteurs leur permettant
d Auto-reguler leur activites
Apprenant Enseignant
13
AdI ? Etudiants /Assistance et Metacognition
Apprenant Metacognition
niveau dassistance
de Quoi ?
Prise de conscience
Actions
Estimation Jugement
Processus // Mode
Evaluation
Produit contenu
De soi meme
de Qui ?
Des autres
Du Groupe
Communite
14
AdI ? Etudiants /Assistance et Metacognition
Situation dapprentissage
Activites Cognitives
Produit mental
Metacognition
Decision MC
Jugement MetaCognitive
Prise de Conscience Explicitation
Regulation
norme
Assistance
15
Assister aux enseignants ?
Activite dapprentissage Assiste par TIC
Produit Mental
Cognition Activites Cognitives des
enseignants (Diagnosis Evaluation en regard des
activites des leurs etudiants
Metacognition
Prise de Conscience de leur propre
strategies Explicitation
Jugement metacognitive Pre-interaction, Pendant
l interaction
Decision MC
Regulation
16
AdI ?Etudiants gtEtude de cas
Etude de Cas Prise de conscience
auto/group-evaluation
des exchanges e-mail messages,
dans le cadre des courses dun
programme de formation
a distance LTEE, Hlapanis, CAE,2004

• Pourquoi ?
• Les messages invisibles

? Assistance aux etudiants afin d autoreguler
leur activite
17
Assister aux participants / ? etudiants
Etude de cas exchanges des messages e-mail

• Conditions
• Programme de Formation a distance, CAE, LTEE,
  2003-2004
• Communite de 80 personnes
• 25 Formateurs- professeurs des Universites
• 50 enseignants en formation (TICE)
• Programme de 15 courses (2 min courses par
  semaine).
• Un espace pour chaque cours, matériel, forum,
  chat, etc.
• Un forum général de lunité de courses, Un
  Forum thématique ,
• un forum général pour toute la communite.
• Activité Préparation des thèmes d analyse /
  synthèse

18
Assister aux participants etudiants?
Etude de cas exchanges des messages e-mail

• Activité Préparation dun thème de synthèse,
• soit en individuel, soit en
  collaboration en petit groups
• Publication des représentations des leur
  exchanges
• des messages e-mail dans le cadre du group
  dun course
• Périodicité Chaque semaine
• Codification des Personnes- anonymité Chaque
  étudiant a
• été représente par un code.
• Lecture au choix Chaque étudiant devrait
  demander son code,
• afin de voir la représentation de sa propre
  contribution.

19
Assister aux participants etudiants?
Etude de cas exchanges e-mail messages

• Reseau social (SNA)

Nuds chaque participant Liaisons interactions
parmi les participants. grand poids de
liaisons -gt grand interaction,
les noeuds sont proches
? Deux types dinformation (SNA)
I. La representation de SNA
II. Indicateurs danalyse Densite du reseau
linteraction enregistree / la maximum
dinteractivite possible Concentration 0
tous communiquent avec tous les autres
100 tous communiquent
avec seulement une personne
20
Assister aux participants-etudiants?
Etude de cas exchanges e-mail messages
Le participant dun RS codifie, peut
re-connaître (a) son role comme individu,
(b) la situation de lensemble du group
21
Assister aux participants etudiants?
Etude de cas prise de conscience des exchanges

messages e-mail

• Donnees
• Comparaison de comportement des
• participants specifiques
• Entretiens
• Questionnaire

• Conclusions principales
• La majorite de ceux qui ont recu
  lassistance, ont regule leur
• comportement et ils lont explicite je
  prefere etre dans un etat moyen par
• rapport aux actions/interactions des autres
  U5/C1
• Il na pas ete observe, regulation superficielle,
  non justifie

SNA Sans donner un jugement explicite, sans
donner un guidage concret Il peut
conduire a une regulation individuelle, et une
regulation collective
22
Assister aux participants etudiants?
Etude de cas
SNA Pour les forums de course
Interactions actives (participation a la meme
discussion et non les discussions elle-même) -
Densite globale0,6,94 - Concentration
globale30, 556 - Interaction globale 100 -
Concentrations individuelles,
23
Cadre conceptuel ? Notions de base

• ? A qui ils addressent ils?
• letudiant
• un group detudiants,
• lenseignant xx,xx
• ladministrateur
• le systeme,
• le chercheur

• ? En quoi les donnees se referent?
• les actions ou le produit des etudiants
  individuels,
• les actions ou les produits dun groupe specific
• les actions ou le produit dun nombre de groups
• les actions dun enseignant, etc

• ? Outils danalyse des Interactions
• outils de prise de conscience
• outils devaluation
• outils de guidage
• Outils mixed

24
(No Transcript)
25
Cadre conceptuel ? Notions de base

• ? Le contenu dun indicateur
• (variable qui represente un aspect de
  linteraction)
•  prise de conscience 
• (p.ex. answered contributions per agent,
  learners ration participation,
• degree of presence in the forum,
• vicarious interaction -relation among read
  and writing-),
•  qualité du contenu de contribution 
• (p.ex. activity level indicator per
  category of posting,
• work amount, argumentation level, )
•  qualité de collaboration 
• (p.ex. interaction level, initiative,
  contribution to group process,
• actors degree centrality, network
  density).

26
Cadre conceptuel ? Notions de base

• Indicateurs utilises en situations de Forum
• Litterature gt25 indicateurs
• Dringus L., Ellis T. (2004). Using data
  mining as a strategy for assessing
• asynchronous discussion
  forums. In Computers Education.
• indicateurs appropries pour les
  chercheurs,
• (et non
  toujours calcules de facon automatique)

27
Cadre conceptuel ? Notions de base
Indicateur modele dinteraction
Dans le cas idéal, pour chaque session
dapprentissage, un nombre des indicateurs
complémentaires pourraient se produire.
Différents indicateurs et combinaison de
ceux-ci, pourraient former un modèle
descriptif ou même évaluatif, pour des
catégories spécifiques dactivités. Pour cela
est necessaire a attribuer une signification
psychologique/pedagogique a chacun des
indicateurs utilises.
28
Cadre conceptuel ? Etat actuel
Il est à admettre que jusqu'à maintenant  (a)
les indicateurs définis ne forment pas un
ensemble cohérent, (b) la plupart dentre eux
sont des indicateurs de niveau inférieur,
mesurant simplement la participation (low level,
high level indicators) (c) dans la majorité, il
sagit dindicateurs quantitatifs et il
ny a pas encore un nombre significatif
dindicateurs qualitatifs, (d) il ny a pas
encore une différentiation des indicateurs
en fonction des catégories dactivités
variées. (e) .. Differentiation des indicateurs
et/ou de leur visualisation en fonction
du profil et du role de lusager de  loutil
AdI 
29
CONCLUSIONS ? Recherche-perspectives
Indicateurs

• Focaliser, approfondir sur les indicateurs
• Il peut y avoir des differences ou meme
  des gap, parmi
• les indicateurs quon peut
  calculer de
• ceux qui ont une signification
  psychologique / pedagogique
• ceux qui peuvent activer un processus
  metacognitive aux usagers

Indicateurs psycho/peda
-chercheurs-
Indicateurs calcules
Indicateurs meta-cognitives
-usagers-
30
CONCLUSIONS ? Recherche-perspectives
Indicateurs

• Indicateurs differents et visualisations
  differentes
• en prenant en compte ? les
  profiles et
• 
  les roles des usagers
• mais aussi ?
  le type dActivite
• 
  ? le context
• ,

• Etudier la signification des Indicateurs aupres
  des usagers
• - le meaning du concept
• - Le decodage de limage visualisee

31
CONCLUSIONS ? Recherche-perspectives

• Nécessite de développer des Outils AdI
  customisés et optionnels
• Tester leur usabilité et acceptabilité auprès
  des utilisateurs
• Sorienter vers la production des outils
  indépendants des
• instruments/environnements de
  communication/apprentissage
• Faire un effort de standardisation format des
  données, interfaces
• danalyse des méthodes

32
CONCLUSIONS ? Recherche-perspectives
Indicateurs
Indicateurs -gt Methodes danalyse

• Mettre laccent sur lanalyse automatique du
  contenu
• (p.ex.data mining)
• ,

33
BIBLIO ?
www.rhodes.aegean.gr/LTEE www.rhodes.aegean.gr/
adimitr
www.rhodes.aegean.gr/LTEE/kaleidoscope-icalts
www.modellingspace.net