analise comparativa da usabilidade dos ambientes de gestao da aprendizagem amadeus e moodle.pdf

14
Revista Brasileira de Informática na Educação, Volume 22, Número 1, 2014 Recebido: 18 de Julho de 2013 / Aceito: 08 Janeiro de 2014 DOI: 10.5753/RBIE.2014.22.01.107 Análise comparativa da usabilidade dos ambientes de ges- tão da aprendizagem Amadeus e Moodle Comparative analysis of Usability between Learning Management Systems Amadeus and Moodle Rosângela Saraiva Carvalho UFPE Centro de Informática [email protected] Ivanildo José de Melo Filho Instituto Federal de Pernambuco Campus Belo Jardim UFPE Centro de Informática [email protected] Alex Sandro Gomes UFPE - Centro de Informática [email protected] Fábio Denilson de Oliveira Feliciano Instituto Federal de Pernambuco Campus Belo Jardim [email protected] Paulo André da Rocha Perris UFPE - Centro de Informática [email protected] Rodrigo Lins Rodrigues UFPE Centro de Informática [email protected] Resumo Este trabalho teve como objetivo comparar a eficiência dos ambientes de gestão da aprendizagem: LMS Amadeus e Moodle com relação à execução de tarefas docentes semelhantes por docentes em formação inicial, em curso de licenciatura em música do IFPE – Instituto Federal de Pernambuco – Campus Belo Jardim. A metodologia aplicada consistiu na utilização das recomendações da ISO/IEC 9241-11 referentes a usabilidade cujas medidas adotadas foram eficácia, eficiência e satis- fação na execução de tarefas docentes. A análise da tarefa foi utilizada com a finalidade de identifi- car as necessidades ou problemas relacionados ao uso dos ambientes. Os resultados preliminares, mesmo não sendo generalizáveis, sugerem que o LMS Amadeus possui melhor eficiência que o Mo- odle em tarefas de mediação da aprendizagem. Palavras-Chave: Formação docente, Analise comparativa, Usabilidade, LMS Amadeus, Mo- odle, ISO/IEC 9241-11 Abstract This paper aimed to compare the efficiency of learning in management environments: Amadeus and Moodle LMS , related performing of similar teacher tasks, by teachers in initial training in music degree course at the IFPE – Federal Institute of Pernambuco – Belo Jardim Campus. The methodol- ogy applied consisted in the use of the recommendations of ISO/IEC 9241-11, which usability measures adopted were efficacy, efficiency and satisfaction in performing teacher tasks. The task analysis was used in order to identify the needs or problems related to the use of the environments. Preliminary results for while not generalizable suggest that the LMS Amadeus has better efficiency than Moodle in mediation of learning. Keywords: Teacher training, Comparative analysis, Usability, LMS Amadeus, Moodle, ISO/IEC 9241-11

Upload: ciencias-cognitivas-e-tecnologia-educacional

Post on 24-Nov-2015

48 views

Category:

Documents


0 download

DESCRIPTION

Este trabalho teve como objetivo comparar a usabilidade dos ambientes de gestão da aprendizagem: LMS Amadeus e Moodle. A comparação esteve relacionada a execução de tarefas docentes semelhantes por usuários em formação docente do curso de licenciatura em música da Instituição ABCD. A metodologia aplicada consistiu na utilização das recomendações da ISO/IEC 9241-11 referentes a usabilidade cujas medidas adotadas foram eficácia, eficiência e satisfação na execução de tarefas docentes. A análise da tarefa foi utilizada com a finalidade de identificar as necessidades ou problemas relacionados à usabilidade dos ambientes. Os resultados iniciais embora ainda não são generalizáveis sugerem que o LMS Amadeus possui melhor usabilidade que o Moodle para a prática de mediação docente via um LMS.

TRANSCRIPT

  • Revista Brasileira de Informtica na Educao, Volume 22, Nmero 1, 2014

    Recebido: 18 de Julho de 2013 / Aceito: 08 Janeiro de 2014

    DOI: 10.5753/RBIE.2014.22.01.107

    Anlise comparativa da usabilidade dos ambientes de ges-

    to da aprendizagem Amadeus e Moodle

    Comparative analysis of Usability between Learning Management Systems Amadeus and Moodle

    Rosngela Saraiva Carvalho UFPE Centro de Informtica [email protected]

    Ivanildo Jos de Melo Filho Instituto Federal de Pernambuco Campus Belo Jardim UFPE Centro de Informtica [email protected]

    Alex Sandro Gomes

    UFPE - Centro de Informtica

    [email protected]

    Fbio Denilson de Oliveira Feliciano

    Instituto Federal de Pernambuco Campus Belo Jardim [email protected]

    Paulo Andr da Rocha Perris

    UFPE - Centro de Informtica

    [email protected]

    Rodrigo Lins Rodrigues

    UFPE Centro de Informtica [email protected]

    Resumo Este trabalho teve como objetivo comparar a eficincia dos ambientes de gesto da aprendizagem: LMS Amadeus e Moodle com relao execuo de tarefas docentes semelhantes por docentes em

    formao inicial, em curso de licenciatura em msica do IFPE Instituto Federal de Pernambuco Campus Belo Jardim. A metodologia aplicada consistiu na utilizao das recomendaes da

    ISO/IEC 9241-11 referentes a usabilidade cujas medidas adotadas foram eficcia, eficincia e satis-

    fao na execuo de tarefas docentes. A anlise da tarefa foi utilizada com a finalidade de identifi-

    car as necessidades ou problemas relacionados ao uso dos ambientes. Os resultados preliminares,

    mesmo no sendo generalizveis, sugerem que o LMS Amadeus possui melhor eficincia que o Mo-

    odle em tarefas de mediao da aprendizagem.

    Palavras-Chave: Formao docente, Analise comparativa, Usabilidade, LMS Amadeus, Mo-

    odle, ISO/IEC 9241-11

    Abstract This paper aimed to compare the efficiency of learning in management environments: Amadeus and Moodle LMS , related performing of similar teacher tasks, by teachers in initial training in music

    degree course at the IFPE Federal Institute of Pernambuco Belo Jardim Campus. The methodol-ogy applied consisted in the use of the recommendations of ISO/IEC 9241-11, which usability

    measures adopted were efficacy, efficiency and satisfaction in performing teacher tasks. The task

    analysis was used in order to identify the needs or problems related to the use of the environments.

    Preliminary results for while not generalizable suggest that the LMS Amadeus has better efficiency

    than Moodle in mediation of learning.

    Keywords: Teacher training, Comparative analysis, Usability, LMS Amadeus, Moodle, ISO/IEC

    9241-11

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    108

    1 Introduo

    No Brasil observa-se o crescimento pelo interesse em

    cursos na modalidade a distncia e h uma preocupao

    dos governos em ampliar a oferta desses cursos para

    minimizar as distores observadas entre as regies na

    formao da populao. Segundo o Ministrio da Educa-

    o do Brasil (MEC), os resultados do Censo da Educa-

    o Superiori aferidos pelo INEP (Instituto Nacional de

    Estudos e Pesquisas Educacionais Ansio Teixeira) em

    2010 evidenciam o crescimento do nmero de cursos e de

    matrculas em cursos na modalidade de ensino a distn-

    cia. De acordo com o censo, essa tendncia tem-se con-

    firmado e apresenta um total de 14,6% do total de matr-

    culas no ensino superior.

    No ensino a distncia ou no blended learning fre-

    quente a utilizao de ambientes de gesto da aprendiza-

    gem (ou LMS, do ingls Learning Management System).

    Este tipo de sistema abrange funcionalidades para arma-

    zenar, distribuir e gerenciar contedos de aprendizado, de

    forma interativa e gradativa. A utilizao do referido

    sistema, tornou possvel registrar e apresentar as ativida-

    des do discente, bem como, seu desempenho, alm da

    emisso de relatrios, os quais propiciam o aperfeioa-

    mento do processo de ensino-aprendizagem, facilitando a

    gerncia e o acompanhamento de programas de ensino.

    Os LMS so produtos concebidos para o uso na edu-

    cao, segundo [1], [2] e [3] so desenvolvidos para per-

    mitir abordagens didticas que auxiliem a promoo do

    ensino e da aprendizagem, em situaes de mediao

    virtual ou semipresencial. Atualmente, tambm so utili-

    zados por muitas empresas para realizar treinamentos de

    funcionrios e seleo de pessoal.

    De acordo com [4], o objetivo primordial dos ambi-

    entes LMS apoiar a prtica docente de ensino mediada por meio dos mesmos, considerando as diversas

    modalidades de ensino e aprendizagem, quer seja dis-

    tncia, quer seja semipresencial, que tambm denomi-

    nado, Blending ou B-Learning. Este pensamento com-

    plementado por [5] que expe que tais ambientes pro-

    porcionam e facilitam diversas formas de interao, co-

    mo: dos discentes entre si, com o contedo e com o do-

    cente, alm de terem modificado as relaes de tempo e

    espao. Assim, a relao entre discente e docente deixa

    de ser restrita sala de aula, visto que esses ambientes

    proporcionam interao nos nveis: Aluno/Professor;

    Aluno/Contedo; Aluno/Aluno e Aluno/Ambiente.

    Na concepo do ensino a distncia as atividades da

    prtica docente no ensino a distncia incluem: o planeja-

    mento, desenvolvimento, distribuio, exposio, assis-

    tncia e avaliao. A Figura 1 uma adaptao das ativi-

    dades da prtica docente elencadas por [6].

    Figura 1 Atividades da Prtica Docente no Ensino a Distncia - Adaptado de [3].

    Todas as fases, evidenciadas, na Figura 1 esto inter-

    relacionadas e influenciam-se reciprocamente. A primeira

    fase, a do planejamento, como no ensino presencial, refe-

    re-se a estruturao e organizao da disciplina; a segun-

    da compreende o desenvolvimento e a distribuio do

    material didtico; a terceira fase, a da exposio, equivale

    fase de ensino, existente, tambm, na prtica docente do

    ensino presencial; a quarta fase, a da avaliao, tem

    a mesma finalidade que a respectiva fase presente no

    ensino presencial e a quinta fase, nomeada de assistncia,

    diz respeito ao tutoramento. Nesta ltima, o discente

    acompanhado pelo tutor que, segundo [6], tem a funo

    de assessorar os discentes, individualmente, dando-lhes

    assistncia ao estudo e orientao voltada para o seu

    desenvolvimento acadmico. Pode-se observar quo

    necessrio a adoo de LMS capaz de atender com

    eficincia s necessidades da prtica docente em todas as

    etapas do processo de ensino; e como a efetividade de

    cada tarefa realizada pelo docente interfere em sua prtica

    profissional.

    Alguns estudos mostram que as interfaces dos LMS

    so complexas e inserem dificuldades prtica docente

    mediada por ambientes desse tipo. Observa-se a impor-

    tncia do LMS para a prtica docente independente da

    modalidade de ensino e, sua consequente interferncia

    nesta. Existem inmeros ambientes deste tipo no mercado

    e adotados em programas de educao no Brasil. Neste

    artigo so comparadas algumas dimenses da usabilidade

    de dois modelos: o Moodle [7] e o Amadeus [8].

    O objetivo deste estudo comparar os ambientes de

    gesto da aprendizagem em relao execuo de tarefas

    docentes semelhantes por usurios docentes. Nesta pes-

    quisa a tcnica de anlise da tarefa foi utilizada com vis-

    tas a identificar as necessidades ou problemas relaciona-

    dos desses ambientes. Este trabalho corrobora com a

    viso de [9] que considera que analisar tarefas uma

    viso especfica do design de sistemas interativos que

    leva a tcnicas especficas. O autor destaca que uma tare-

    fa uma meta acompanhada por um conjunto ordenado

    de aes.

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    109

    Este artigo est estruturado em 6 sees. A segunda

    seo aborda a tcnica de avaliao da usabilidade de

    ambientes de gesto da aprendizagem para a prtica do-

    cente; a terceira apresenta o mtodo; a quarta traz a anli-

    se e interpretao dos dados, a quinta so discutidos e

    interpretados os dados; relacionando as dificuldades e

    limitaes encontradas no desenvolvimento desta pesqui-

    sa. E, finalmente, a sexta apresenta as consideraes

    finais.

    2 Usabilidade de tarefas docentes com Ambientes de Gesto da Aprendi-

    zagem

    afirmado por [10] que: Agregar prtica docente

    as tecnologias para seu desenvolvimento um dos cami-

    nhos para a ao experimental docente na construo de

    uma nova metodologia educativa, a partir da inovao

    (p. 10). Para [11] as novas tecnologias e o aumento expo-

    nencial da informao tm conduzido a uma nova organi-

    zao no trabalho, segundo a qual se torna indispensvel

    especializao dos saberes e, neste contexto, segundo o

    autor, o papel do docente frente s novas tecnologias na

    escola ser diferente.

    Para [12] a qualidade de uma interface educacional

    requer que ela preencha os requisitos de usabilidade e

    comunicabilidade como a interface de qualquer software,

    entretanto, isto no suficiente para garanti-la. O autor

    refora que para ser considerada de boa qualidade, a

    interface educacional deve atingir com sucesso o seu

    principal objetivo, proporcionar o aprendizado de um

    contedo por um usurio. Portanto, as tcnicas de ensino

    e objetivos de aprendizagem devem estar representadas

    na interface de forma a guiar as atividades dos envolvidos

    no ambiente.

    Posicionado os LMS neste contexto, pesquisas recen-

    tes comprovam que a falta de disponibilidade de recursos

    neste tipo de ambiente afeta negativamente a sua eficin-

    cia e diminui acentuadamente o seu nvel de aceitao

    [13]. Outro ponto ressaltado o tempo gasto na elabora-

    o ou na resoluo das atividades, pois, como esse tem-

    po ser relativamente longo, impacta negativamente na

    experincia do usurio no ambiente.

    Os usurios adquirem mais experincia com os LMS

    na medida em que o utilizam, portanto, a percepo do

    usurio no sistema, pode determinar se este ir confiar ou

    no no produto ou servio oferecido [14]. Outro aspecto

    fundamental para o sucesso de um software a qualidade

    da sua interface [12]. Afinal, de acordo com [15] a inter-

    face envolve todos os aspectos de um sistema com o qual

    o usurio mantm contato. Desta forma, pode-se entender

    que o design de uma interface depende de diversos fato-

    res que incluem desde a satisfao subjetiva do usurio

    at o retorno do investimento.

    Pesquisas relacionadas usabilidade de ambientes

    virtuais de aprendizagem sob a perspectiva docente indi-

    cam recomendaes relacionadas a esse aspecto que so

    indispensveis prtica docente em LMS. Para [16] e

    [17] os recursos nos LMS devem constituir-se como

    artefato adequado de forma clara e intuitiva, evitando que

    o usurio utilize de artifcios e comportamentos estranhos

    ao contexto da ao como tentativa e erro para execuo

    de tarefas no ambiente. Portanto, esses ambientes devem

    ser de fcil aprendizado e eventualmente prover ajudas

    contextuais de forma a eliminar transtornos provocados

    ao usurio levando-o a buscar, fora do ambiente, respos-

    tas s suas dvidas.

    O fato de o ambiente LMS provocar muitas dificul-

    dades de utilizao ocasiona naturalmente o sentimento

    de desmotivao. Para [17]: Se a interface fosse agrad-

    vel e produtiva, talvez os professores se sentiriam esti-

    mulados a fazer alm do necessrio, como postar mais

    vdeos, mais materiais complementares, mais testes e,

    enfim se sentiriam mais motivados e, por conseguinte,

    provocariam maior reflexo e motivao por parte dos

    alunos. As dificuldades iniciais para qualquer ambiente

    no seu uso inicial deve ser a menor possvel de modo que

    a curva de aprendizagem seja mnima (p. 207).

    sabido que ainda existe a reproduo da prtica

    docente presencial quando se faz uso de LMS, sendo

    assim, faz-se necessrio que os softwares que apoiam o

    ensino sejam simples e fceis de usar, de forma a permitir

    que o docente desenvolva atividades pedaggicas ade-

    quadas que beneficiem todos os envolvidos no processo

    de ensino aprendizagem.

    Neste sentido, a ergonomia de tarefas docentes com

    os LMS deve possibilitar que a preparao e a execuo

    das atividades no LMS sejam descomplicadas e qui

    prazerosas. Para que dessa maneira, o docente possa

    dedicar-se ao desenvolvimento de atividades centradas

    nos discentes, na interao social, na colaborao e, con-

    sequentemente na autonomia dos mesmos.

    So diversos os aspectos a considerar quando do de-

    senvolvimento de qualquer produto de software. Da

    mesma forma ocorre com o desenvolvimento de um

    LMS. Tais fatores precisam ser ponderados no sentido de

    tornar a experincia do usurio docente positiva nesse

    tipo de ambiente. Isso significa dizer que a realizao de

    suas tarefas com o LMS precisa ser simples de modo que

    o docente possa explorar todos os recursos disponveis de

    forma a obter sucesso em sua prtica utilizando esse tipo

    de ambiente.

    Para que o docente possa fazer o uso efetivo dos be-

    nefcios advindos com o uso do LMS em sua prtica, faz-

    se necessrio que esses ambientes atendam as necessida-

    des dos docentes como descrito ao longo do texto. Desse

    modo, todos os envolvidos no processo de ensino-

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    110

    aprendizagem que fazem uso destas tecnologias desde a instituio, coordenadores, docentes e discentes sintam-se vontade e satisfeitos com os resultados viabilizados e

    alcanados por meio desta forma de interao.

    3 Anlise de tarefas: docentes

    Segundo a UXNetii a experincia do usurio a qua-

    lidade da experincia que uma pessoa tem ao interagir

    com algo projetado. Inclusive [18] e [19] reforam que a

    experincia do usurio uma interseco de vrias disci-

    plinas que juntas objetivam prover ao usurio uma expe-

    rincia consistente e harmoniosa. Isso inclui todos os

    aspectos da interao de uma pessoa com um produto ou

    servio e como eles se sentem em relao ao seu uso.

    Desse modo, se a marca vende simplicidade o software

    dever ser simples e de fcil uso.

    De acordo com [20] a rea de Engenharia de Softwa-

    re e de Interao Humano Computador (IHC) tm em

    comum a preocupao em fornecer produtos de software

    de alta qualidade. A diferena entre ambas est no fato

    que a primeira preocupa-se com os aspectos estruturais e

    funcionais do produto. Por sua vez, em IHC a qualidade

    est relacionada com a experincia do usurio no sistema.

    Para [21], a usabilidade um atributo de qualidade

    que avalia quo fcil de usar e de memorizar so as inter-

    faces de usurio. Usabilidade tambm se refere aos mto-

    dos para melhorar a facilidade de uso durante o processo

    de design. E, nesta direo, a recomendao ISO 9241-

    11 descrita em [22] especifica que a usabilidade de um

    produto est associada sua qualidade de uso pelos usu-

    rios de forma a atingir determinadas metas com eficin-

    cia, eficcia e satisfao, considerando um contexto espe-

    cfico. Essa norma tem como arcabouo terico, os con-

    ceitos definidos pelos principais autores no que tange a

    concepo, desenvolvimentos de sistemas interativos.

    A ISO 9241-11 define eficincia como a preciso e

    completeza que os usurios atingem seus objetivos estan-

    do relacionada aos recursos fornecidos para que a meta

    definida seja alcanada com preciso e completeza. A

    eficcia est relacionada aos recursos gastos em relao

    exatido e a abrangncia com as quais os usurios atin-

    gem objetivos. A satisfao refere-se aceitabilidade e ao

    conforto do usurio com relao ao produto. E, finalmen-

    te, esta recomendao define a efetividade de uma inter-

    face como sendo composta das dimenses: eficcia, efici-

    ncia e satisfao. Cada uma das dimenses pode ser

    medida quantitativamente ou descrita qualitativamente.

    Nesta pesquisa, para a comparao dos ambientes do

    tipo LMS, foram aplicados os princpios de qualidade de

    Engenharia de Software conforme descrito na ISO/IEC

    9241-11iii. Portanto, a medida da efetividade de uma

    interface considerada baseia-se na definio do conceito

    de usabilidade especificada no modelo, detalhados na

    Figura 2.

    Figura 2 - Componentes para a medio da usabilidade Adaptado da ISO/IEC 9241-11.

    Considerando a ISO/IEC 9241-11, os aspectos de

    usabilidade nesta pesquisa foram: eficcia, eficincia e

    satisfao. O Quadro 1 descreve os critrios de medio

    que foram adotados.

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    111

    Quadro 1 Critrios para medio da usabilidade.

    Medida Critrio de Medio

    Eficcia

    Percentual de objetivos alcanados.

    Percentual de usurios completando a

    tarefa com sucesso.

    Eficincia Tempo gasto pelo usurio para com-

    pletar a tarefa com sucesso

    Satisfao Compreende a satisfao do usurio

    referente ao uso de cada ambiente.

    4 Mtodo

    O mtodo deste trabalho apresentado a seguir e tem

    como objetivo: comparar a usabilidade eficincia, efi-ccia e satisfao entre os ambientes de gesto da aprendizagem Amadeus e Moodle quando usurios exe-

    cutam tarefas docentes.

    Inicialmente, a inteno foi adotar um paradigma

    quantitativo e qualitativo para permitir identificar dife-

    renas na usabilidade das duas plataformas, assim como,

    identificar os fatores que influenciam e determinam essas

    diferenas. Contudo, ao longo do experimento tornou-se

    invivel a anlise quantitativa por conta do nmero redu-

    zido de participantes, primeiramente 30 (trinta) na sele-o prvia porm, tendo sido analisados, os dados re-sultantes de apenas13 (treze) participantes, o que devi-

    damente explicado ainda nesta seo no item participan-

    tes.

    Entendendo, pois, que a anlise dos dados seria uni-

    camente qualitativa deu-se prosseguimento ao experi-

    mento. Para a medida da usabilidade, procederam-se

    avaliaes da usabilidade em suas trs dimenses para em

    seguida realizar a comparao entre as plataformas. O

    desenvolvimento desta pesquisa partiu da premissa de

    que as tarefas propostas seriam mais eficientes no ambi-

    ente Amadeus.

    Produtos sob comparao

    Sabe-se que o objetivo primordial dos ambientes vir-

    tuais da aprendizagem o de apoiar o processo de e-

    learning, facultando o ensino-aprendizagem a distncia,

    presencial ou mesmo semipresencial. Tais ambientes

    proporcionam e facilitam diversas formas de interao

    dos discentes, quer sejam entre si, com o contedo, bem

    como com o docente. Os produtos de software utilizados

    para a avaliao da usabilidade nesta pesquisa foram os

    LMS Amadeus verso 00.96.30 e o Moodle verso 2.2.2.

    O LMS Amadeus definido por [23], [24] e [25]

    como um sistema de gesto de aprendizagem para educa-

    o presencial, a distncia e todas as suas variaes. Ele

    baseado no conceito de blended learning, segundo o qual,

    para se atingir um grande pblico com projetos de forma-

    o a distncia, faz-se necessrio uma combinao de

    formas de mediar a apresentao e as interaes com os

    contedos das aulas. A interao entre os usurios, e

    destes, com o contedo no ambiente permite a execuo

    de novas estratgias de ensino e de aprendizagem orien-

    tadas por teorias construtivistas ou scio interacionista do

    desenvolvimento humano. Para [24], o LMS Amadeus

    tem como principal propsito contribuir com o desenvol-

    vimento social pela formao e educao para todos,

    reduzindo custos, gerando empregos e negcios, e conse-

    quentemente melhorando o atendimento ao cidado, alm

    da democratizao do conhecimento.

    O LMS Moodle, um sistema de gesto do ensino e

    aprendizagem. Por sua vez, trata-se de um software de-

    senvolvido para ajudar os docentes a criar cursos online,

    ou suporte online a cursos presenciais com muitos tipos

    de recursos disponveis. O termo Moodle, segundo [26],

    um acrnimo de Modular Object-Oriented Dynamic

    Learning Environment (ambiente modular de aprendi-

    zagem dinmica orientada a objetos). De acordo com o

    autor o LMS Moodle foi e continua sendo desenvolvido

    continuamente por uma comunidade de centenas de pro-

    gramadores em todo o mundo, que tambm constituem

    um grupo de suporte aos usurios para o acrscimo de

    novas funcionalidades sob a filosofia GNU1 de software

    livre. Uma fundao (www.moodle.org) e uma empresa

    (www.moodle.com) fornecem, respectivamente, o apoio

    para o desenvolvimento do software e sua traduo para

    dezenas de idiomas, e apoio sua instalao.

    Tanto o LMS Amadeus quanto o Moodle so plata-

    formas de aprendizagem a distncia baseadas em softwa-

    re livre. Isto quer dizer que estes softwares podem ser

    instalados, utilizados, modificados, bem como, distribu-

    dos. Possuem caractersticas semelhantes, como o fato de

    seus cdigos fonte serem disponibilizados gratuitamente,

    e poderem ser adaptados, estendidos, personalizados

    pelas organizaes que os adotam.

    Por se tratar de uma pesquisa de avaliao de usabi-

    lidade de dois produtos de software os nomes dos ambi-

    entes so mencionados em ordem alfabtica crescente

    durante o decorrer do texto.

    Participantes

    Os usurios que participaram da pesquisa foram, ini-

    cialmente, 30 (trinta) alunos do 1 Perodo do curso de

    Licenciatura em Msica do IFPE Instituto Federal de Pernambuco Campus Belo Jardim. Esses alunos so oriundos de stios localizados na rea rural, prximos

    cidade da Instituio, e, em sua maioria possuem pouca

    1 General Public License designao da licena para software livre idealizada por Richard Matthew Stallman em 1989, no mbito do

    projeto GNU da Free Software Foundation (FSF).

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    112

    experincia com computadores. Esta seleo foi realizada

    atravs da aplicao de questionrio para identificar o

    perfil do participante.

    Os participantes selecionados, ento 19 (dezenove),

    no possuam experincia anterior com ambientes virtuais

    de aprendizagem, visto que a condio era que a amostra

    fosse de sujeitos sem conhecimento prvio em ambientes

    virtuais da aprendizagem. Disto, resultou numa quantida-

    de menor que a estimada.

    Saliente-se que apenas 14 (quatorze) participaram da

    sesso interao do Amadeus e no Moodle devido a pro-

    blemas pessoais relacionados a tempo e deslocamento da

    escola at suas residncias. Tambm cabe registrar que

    ocorreram problemas tcnicos com a captura das telas da

    sesso de interao de um dos participantes. Portanto, a

    anlise apresentada neste trabalho, para fins da avaliao

    da usabilidade considerou 13 (treze) usurios vlidos e,

    para a avaliao da execuo das tarefas, ou seja, para a

    medida de satisfao foram considerados 14 (treze) parti-

    cipantes.

    Dessa forma, houve a necessidade de analisar os da-

    dos apenas qualitativamente. Contudo, h inteno de

    replicar o experimento com um universo maior de parti-

    cipantes de forma que os indcios apresentados possam

    ser reafirmados.

    Tarefas

    As tarefas executadas nos dois ambientes esto en-

    quadradas, segundo [6], na atividade de desenvolvimento

    e distribuio do material didtico. As tarefas que foram

    propostas aos participantes consistiram de solicitar:

    1. Tarefa 1

    1.1. criao de um mdulo

    1.2. insero de material no mdulo

    1.3. disponibilizao de um link no mdulo

    2. Tarefa 2

    2.1. criao de um frum

    2.2. postagem de uma mensagem

    3. Tarefa 3: a insero de atividades avaliativas,

    sendo estas:

    3.1. do tipo mltipla escolha

    3.2. outra com alternativas Falsa ou Verda-

    deira

    3.3. e uma discursiva

    Estas tarefas foram escolhidas de modo que a experi-

    ncia do usurio docente estivesse em consonncia com

    as fases descritas em [6]. E so apresentadas na prxima

    seo vide Figura 3.

    Materiais

    Os recursos incluram 04 (quatro) computadores por-

    tteis com acesso off-line aos ambientes Amadeus e Mo-

    odle. Justifique-se o uso off-line dos equipamentos ao

    fato de garantir a no influncia de possveis problemas

    tcnicos relacionados ao acesso internet.

    Todas as tarefas propostas na sesso de interao em

    ambos os ambientes foram entregues impressas aos parti-

    cipantes e so apresentadas na Figura 3. Sobre as ativida-

    des avaliativas que deveriam ser criadas, estes no as

    elaboraram, todos as receberam prontas para a execuo

    nos dois ambientes, o mesmo ocorreu com o material a

    ser disponibilizado nos LMS.

    Figura 3 Descrio das tarefas apresentadas aos participantes.

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    113

    No sentido de obter parmetros para comparao, as

    tarefas propostas foram previamente executadas nos dois

    ambientes, o que possibilitou a definio mnima de pas-

    sos necessrios para sua execuo com xito, vide Tabela

    1.

    Tabela 1 Passos para execuo das tarefas propostas no LMS Ama-deus e Moodle.

    Tarefa Sub-

    tarefas

    Total de

    Passos

    Amadeus

    Total de

    Passos

    Moodle

    1

    1.1 5 5

    1.2. 4 6

    1.3 4 3

    2

    2.1 7 5

    2.2 6 5

    3

    3.1 12 10

    3.2 5 9

    3.3 5 6

    Acrescente-se que em momento algum foi imposta

    aos participantes a ordem de execuo das tarefas. Estas

    aes foram planejadas de modo que os participantes no

    perdessem tempo pensando qual contedo disponibilizar,

    qual o link a ser inserido, o nome do frum, a mensagem

    a ser postada. Pois, estes aspectos poderiam mascarar a

    real dificuldade no uso dos ambientes, visto que poderia

    ser gasto desnecessariamente tempo com as aes supra-

    citadas.

    O questionrio denominado: Questionrio de ava-liao sobre a execuo das tarefas foi aplicado aps a sesso de interao nos dois ambientes e objetivou aferir

    o nvel de satisfao na realizao das tarefas propostas.

    Este instrumento foi composto por 5 (cinco) perguntas,

    das quais 3 (trs) fizeram uso da escala Likert1, abordan-

    do o nvel de facilidade ou dificuldade na execuo das

    tarefas, tendo sido tambm solicitado que comentassem

    suas respostas. As demais questes versavam respectiva-

    mente: uma sobre qual ambiente o docente considerou

    mais amigvel e fcil de utilizar e a outra qual ambiente o

    docente utilizaria em sua prtica.

    Ambiente

    A pesquisa foi realizada no local do curso de forma-

    o docente do IFPE Instituto Federal de Pernambuco

    1 A escala Likert uma escala de resposta usada normalmente em

    questionrios.

    Campus Belo Jardim. A proposta metodolgica aplica-da para o desenvolvimento desta pesquisa consistiu na

    anlise da tarefa de uma sesso de interao realizada por

    cada participante nos dois ambientes. Os participantes da

    pesquisa foram alunos do 1 perodo do curso de Licenci-

    atura em Msica da respectiva instituio.

    Procedimentos

    Os procedimentos adotados consistiram na apresen-

    tao dos ambientes Amadeus e Moodle aos participantes

    e posterior solicitao para realizarem tarefas pr-

    definidas. Durante as sesses de interao, os movimen-

    tos dos usurios com as duas plataformas foram captura-

    dos por software adequado e anotados a parte.

    Ao final foi aplicado o Questionrio de avaliao sobre a execuo das tarefas, e a anlise dos dados cole-tados foi feita qualitativamente.

    As sesses de interao em cada ambiente ocorreram

    individualmente por um perodo mximo de 20 (vinte)

    minutos. Os participantes foram divididos em grupo de 4

    (quatro), de forma que 2 (dois) iniciavam no Amadeus e

    os outros 2 (dois) no Moodle. Aps o tempo estabelecido,

    os participantes foram convidados a interromper a execu-

    o das atividades propostas, independente de no as

    terem concludo.

    Na sequncia, houve a permuta entre os dois ambien-

    tes, de modo a evitar a influncia da curva de aprendiza-

    gem na execuo das atividades no outro ambiente. To-

    das as aes foram registradas com o software Auto Scre-

    en Recorder 3.1.

    A Tabela 2 apresenta resumidamente a sequncia dos

    procedimentos metodolgicos adotados nesta pesquisa

    que compreenderam 4 (quatro) etapas descritas a saber:

    Tabela 2 Sequncia dos procedimentos.

    Etapa Atividades Dias

    01 Seleo dos participantes 02

    02 Sesses de interao com os

    ambientes Amadeus e Moodle

    01

    03 Aplicao do Questionrio

    de avaliao sobre a execu-

    o das tarefas, este ques-

    tionrio teve como objetivo

    verificar as dificuldades e

    facilidades encontradas no

    uso dos ambientes pesquisa-

    dos. Foi aplicado a cada

    participante aps a sesso

    de interao nos ambientes.

    01

    04 Anlise dos dados coletados. 10

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    114

    Foi utilizada a anlise da tarefa que segundo [27]:

    emergiu da Ergonomia como um mtodo emprico que permite descrever e analisar como as pessoas realizam

    suas atividades (p. 3). Ainda para o autor, uma anlise de tarefa decompe uma tarefa complexa em seus com-

    ponentes, que so seus conhecimentos sobre artefatos e

    tarefa. Em outras palavras, consiste em medir diretamente

    o desempenho do usurio enquanto realiza uma tarefa

    com a interface. Conforme o objetivo da avaliao, o

    valor obtido pode ser a mensurao do tempo que o usu-

    rio leva para executar completamente uma tarefa; o n-

    mero de erros cometidos na tentativa de executar a tarefa

    solicitada; o total de acessos ao sistema de ajuda ou

    documentao; a percentagem cumprida da tarefa em um

    dado perodo; o nmero de comandos ou aes realiza-

    das.

    5 Anlise e interpretao dos dados

    Nas sees a seguir so descritos e analisados os re-

    sultados da pesquisa e suas discusses, sendo apresenta-

    dos considerando a seguinte ordem: primeiramente a

    anlise qualitativa da usabilidade, em seguida a anlise da

    satisfao dos usurios. Buscou-se:

    1. Descobrir se h influncia do uso do computa-

    dor em relao ao total de tarefas concludas.

    2. Averiguar a influncia da sequncia de uso em

    relao as tarefas concludas, e por fim,

    3. Verificar a relao entre o tempo total e as tare-

    fas concludas nos dois ambientes.

    importante registrar que o planejamento desta pes-

    quisa previu um total representativo de participantes

    necessrio a uma anlise quantitativa do experimento.

    Contudo, como descrito no mtodo, a seleo dos partici-

    pantes foi afetada em funo do perfil definido como

    ideal para a participao nesta pesquisa, o que ocasionou

    a reduo do total inicialmente estimado. Isso inviabili-

    zou a anlise quantitativa, visto que os questionamentos

    supracitados passaram a no mais gerar valores significa-

    tivos, impedindo qualquer tipo de generalizao pudesse

    ser afirmada. No entanto, os dados foram analisados

    qualitativamente.

    A seguir so apresentados e discutidos os resultados

    de cada tarefa proposta durante a sesso de interao nos

    dois ambientes.

    Tarefa 1

    A Tabela 3 apresenta o quantitativo de tarefas con-

    cludas nos dois ambientes considerando o total de tarefas

    propostas descritas na seo anterior. Observa-se que nos

    subitens que compe a Tarefa 1 (Tarefas 1.1 1.2 1.3) que corresponde a criao de um mdulo, insero de

    material no mdulo e disponibilizao de um link no

    mdulo, existe uma predominncia de tarefas executadas

    no LMS Amadeus..

    Observou-se que nos subitens que compe a Tarefa 1

    (Tarefas 1.1 1.2 1.3) que correspondem a criao de um mdulo, insero de material no mdulo e disponibi-

    lizao de um link no mdulo, existe uma predominncia

    de tarefas executadas no LMS Amadeus.

    Dos usurios participantes, 10 (dez) concluram a

    Tarefa 1.1 (tarefa de criao de um mdulo) no Ama-

    deus, enquanto apenas 7 (sete) a concluram no Moodle.

    Por outro lado, o mesmo nmero de participantes 5 (cinco) conseguiram concluir a Tarefa 1.2 (tarefa de inserir um arquivo) nos dois ambientes. Por conseguinte,

    a Tarefa 1.3 (disponibilizao de um link no mdulo) foi

    concluda por 6(seis) participantes no Amadeus, e por

    apenas 3 (trs) no Moodle.

    Sabendo-se que a quantidade de passos para a reali-

    zao da Tarefa 1 (Tarefas 1.1; 1.2 e 1.3) no Amadeus

    de 13 (treze) e no Moodle 14 (quatorze), e que apesar do

    total de passos a serem executados ser quase o mesmo, os

    resultados descritos na Tabela 3 apontam que a realizao

    da referida tarefa foi mais eficaz no Amadeus. Isto pode

    ter sido motivado pelo fato da interface do Amadeus

    apresentar menos elementos simblicos (cones) que

    possam vir a confundir o usurio, o que foi relatado por

    alguns dos participantes no Questionrio de avaliao sobre a execuo das tarefas.

    Por sua vez, a interface do Moodle alm dos elemen-

    tos simblicos, apresenta tambm diversas funcionalida-

    des na mesma interface, o que no deixa claro o prximo

    passo a ser executado, dificultando a comunicabilidade

    do software. Convm ressaltar que os usurios participan-

    tes possuem pouca experincia na utilizao de computa-

    dores, o que leva a crer que a forma como os elementos

    dispostos na interface do Moodle se encontram, no fo-

    ram adequadamente compreendidos.

    Tarefa 2

    As Tarefas 2.1 (criar um frum) e 2.2 (postar uma

    mensagem no frum) obtiveram uma quantidade de acer-

    tos semelhante para os ambientes Amadeus e Moodle,

    respectivamente: Tarefa 2.1 5 (cinco) e 4 (quatro) e Tarefa 2.2 1(um) nos dois ambientes.

    Acredita-se que o maior sucesso na resoluo da Ta-

    refa 1 pode ter relao com o fato destas terem alguma

    associao com o conhecimento que os participantes

    possuem ao tratar com aplicativos, como por exemplo,

    editores de texto. Por outro lado, as Tarefas 2.1 e 2.2

    apresentam aos participantes um horizonte no qual h a

    necessidade de conhecimentos adicionais, como concei-

    tos de funcionalidade tpicas da internet, no caso fruns.

    H indcios que tal resultado reflexo do perfil dos parti-

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    115

    cipantes que indica que a experincia dos usurios no uso

    de tecnologias pequena, agravada pelo fato desses par-

    ticipantes serem oriundos de cidades distritais que so

    localizadas na rea rural, prximos cidade da Institui-

    o, e que o uso frequente de computadores adveio com o

    incio recente de seus estudos de licenciatura.

    Tarefa 3

    As Tarefas 3.1 (criar uma questo de mltipla esco-

    lha) e 3.2 (criar uma questo de Verdadeiro ou Fal-so) foram concludas por 3 (trs) participantes exclusi-vamente no Amadeus.

    As capturas de tela evidenciaram dificuldade dos

    participantes em concluir as tarefas. Muitos so os moti-

    vos que podem estar relacionados a no completude das

    tarefas, como o tempo estabelecido na proposta metodo-

    lgica que foi de 20 (vinte) minutos. Desse modo, no

    possvel afirmar com preciso que se o tempo no fosse

    estipulado, os participantes poderiam ter concludo ou

    desistido das tarefas.

    Outro aspecto relevante a quantidade de passos ne-

    cessria concluso das tarefas, conforme descrito na

    Tabela 1. Por fim, atravs da anlise das capturas das

    suas aes percebe-se a realizao de procedimentos

    equivocados pelos participantes nos dois ambientes. Ape-

    sar disso, poucos participantes conseguem realizar as

    tarefas propostas no Amadeus, e nenhum as finaliza no

    Moodle, o que leva a crer uma possvel ausncia efetiva

    da comunicabilidade da interface.

    Um fato observado foi que a partir da Tarefa 2.1

    (criar um frum) a maioria dos participantes passou a

    executar sem xito as tarefas restantes. E, em relao a

    Tarefa 3.3 (tarefa para criar uma questo discursiva) no

    foi concluda em nenhum dos dois ambientes. Ressalte-se

    que no Moodle nenhuma das tarefas propostas no item 3

    foi concluda.

    A quantidade de tarefas concludas no Amadeus

    (30%) mostra-se mais representativa que a do Moodle

    (18%). No entanto, observa-se que o percentual de tarefas

    no concludas 63% no Amadeus e 75% no Moodle significativo para os dois ambientes.

    Pelo percentual de tarefas no concludas descrito anteriormente ser significativo. O resultado exposto pode estar relacionado s dificuldades antes menciona-

    das: limite de tempo para execuo das tarefas e inexpe-

    rincia dos participantes no uso de tecnologias da infor-

    mao e comunicao, ou at mesmo com a comunicabi-

    lidade das interfaces dos ambientes.

    Destaque-se que em relao ao total de tarefas con-

    cludas, registrou-se uma mdia de 2,36 tarefas conclu-

    das no Amadeus contra 1,43 no Moodle. E, identificou-se

    um valor mximo de 6 (seis) tarefas concludas por usu-

    rio no Amadeus, contra 5 (cinco) tarefas no Moodle.

    Este resultado sugere uma possvel relao com a

    simplicidade e objetividade das interfaces do ambiente

    Amadeus, corroborando com [3] que propem para afir-

    ma a inteno de facilitar e viabilizar prticas docentes.

    6 Anlise da satisfao

    Conforme descrito nos procedimentos seguidos nesta

    pesquisa, a aplicao do Questionrio de avaliao sobre a execuo das tarefas" logo aps a sesso de interao teve como objetivo verificar as dificuldades e facilida-des encontradas no uso dos ambientes pesquisados. A

    seguir, os resultados sero apresentados para cada tarefa.

    Tarefa 1: criao de um mdulo, insero de material no

    mdulo, disponibilizao de um link no mdulo

    Considerando a escala de medio utilizada de Um pouco fcil, Fcil e Muito Fcil, os resultados obti-dos para a execuo Tarefa 1 apontam um grau de facili-

    dade no uso que favorece o Amadeus vide Tabela 4 em relao ao Moodle.

    Tabela 3 Dificuldades na Tarefa 1.

    Do mesmo modo, quando se observa o grau de difi-

    culdade Um pouco difcil, Difcil e Muito difcil constata-se atravs de suas respostas que o ambiente Moodle foi considerado mais difcil. Portanto, esta tarefa

    foi indicada como sendo de mais fcil realizao no am-

    biente Amadeus, isso pode estar associado simplicidade

    da interface apontada pelos participantes e so apresenta-

    das pelo Quadro 2.

    Quadro 2 Falas dos participantes no questionrio de satisfao. Participante Falas

    10

    O Amadeus por ter o layout mais

    simples, no entanto, a pgina onde

    fica o login no d para perceber

    de incio quando a senha est

    incorreta. J o Moodle tem o la-

    yout mais detalhado, porm o ex-

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    116

    cesso de informao acaba atrapa-

    lhando.

    11

    No Amadeus estavam mais na cara,

    ou seja, encontrei mais rpido.

    No Moodle a forma de execuo

    est mais difcil com as ferramen-

    tas escondidas.

    12

    Amadeus: achei mais fcil de

    encontrar o que precisava.

    Moodle: achei menos fcil de

    encontrar o que precisava.

    13

    O Amadeus devido a sua interface

    simples e sua linguagem mais dire-

    ta e objetiva. O modo como os

    arquivos so anexados simples e

    a forma de criar a avaliao tam-

    bm.

    Tarefa 2: criao de frum, postagem de uma mensagem

    A anlise da satisfao da Tarefa 2 apresentado na

    Tabela 5 destoa dos resultados descritos na anlise quali-

    tativa dessa tarefa. A anlise qualitativa aponta o pouco

    sucesso na concluso da tarefa nos ambientes. Observa-se

    que mesmo no tendo concludo a tarefa no Amadeus os

    participantes o consideraram fcil segundo a escala: Um pouco fcil, Fcil e Muito Fcil. Refora-se que esse entendimento possa estar relacionado simplicidade

    da interface apontada pelos participantes e so apresenta-

    das anteriormente pelo Quadro 2.

    . Tabela 4 Dificuldades na Tarefa 2.

    Tarefa 3: insero de atividades avaliativas, sendo estas

    do tipo mltipla escola, outra com alternativas Falsa ou Verdadeira, e uma discursiva

    De forma similar a descrio da Tarefa 2, para esta

    tarefa, as respostas dos participantes apontam de forma

    pouco expressiva que o Amadeus possui maior facilidade

    vide Tabela 6 de uso que o Moodle para a execuo da Tarefa 3. preciso destacar que esta tarefa no foi

    concluda por nenhum dos participantes nos ambientes e,

    ainda assim, o Amadeus apontado como o ambiente

    com maior facilidade de uso. Entretanto, quando se ob-

    serva o nvel de dificuldade, registra-se praticamente um

    empate na avaliao dos participantes para os ambientes.

    Mais uma vez, volta-se a questionar se isto se deve

    simplicidade da interface apontada pelos participantes

    que apresentada pelo Quadro 2 que descreve as falas

    dos participantes no questionrio de satisfao.

    Tabela 5 Dificuldades na Tarefa 3.

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    117

    7 DISCUSSO

    Como evidenciado anteriormente, os resultados infe-

    renciais obtidos no permitem concluir que exista uma

    maior eficincia de um ambiente em detrimento do outro,

    visto que o nvel de significncia foi superior ao aceito.

    No entanto, do ponto de vista qualitativo, os resultados

    resumidos no Quadro 3 sinalizam que o maior nmero de

    tarefas concludas ocorreu com o LMS Amadeus. O

    mesmo tambm ocorreu quando questionados a respeito

    da satisfao que abrange qual ambiente o mais fcil de

    usar, mais amigvel, e ainda, qual dos ambientes eles

    escolheriam para adotar em sua prtica docente.

    Quadro 2 Resumo dos critrios para medio da usabilidade.

    Medida Critrio de Medio AMBIENTE

    Amadeus Moodle

    Eficcia

    Percentual de objetivos

    alcanados Total de

    tarefas propostas que

    foram completadas com

    sucesso.

    30% 18%

    Percentual de usurios

    completando cada tarefa

    com sucesso.

    O total de tarefas e suas respectivas subtarefas

    soma 8 tarefas a serem realizadas em cada ambi-

    ente. Os resultados sinalizam que o uso LMS Ama-

    deus produziu um resultado superior em todas as

    tarefas exceto na Tarefa 1.2 (tarefa de inserir

    um arquivo) onde ocorreu o empate com o LMS Mo-

    odle. Com relao a Tarefa 3.3 (insero de ati-

    vidades avaliativas, sendo estas do tipo mlti-

    pla escola, outra com alternativas Falsa ou

    Verdadeira, e uma discursiva) que no foi rea-

    lizada por nenhum participante em nenhum dos

    ambientes.

    Eficincia Tempo gasto pelo usurio

    para completar a tarefa

    com sucesso

    Esse aspecto no foi considerado para fins de

    anlise, tendo em vista que a maioria dos parti-

    cipantes no concluram com xito todas as tare-

    fas propostas. Os participantes foram convidados

    a encerrar a sesso de interao nos ambientes

    aps 20 minutos, independente de as terem con-

    cludo ou no.

    Satisfao Compreende a satisfao

    do usurio referente ao

    uso de cada ambiente.

    85,7% correspondem a 12 participantes Indi-

    caram o LMS Amadeus.

    Os dados apontaram que quando comparado ao Mo-

    odle, o Amadeus apresentou-se superior em todos os

    quesitos analisados, desde a realizao das tarefas at as

    respostas obtidas no questionrio de avaliao.

    Dificuldades com o experimento

    Outro aspecto que dificultou a conduo do experi-

    mento est associado a no aplicao de um experimento

    piloto para adequao das tarefas. Alguns participantes

    so oriundos de stios das redondezas do municpio de

    Belo Jardim e fazem limitado uso de tecnologias da in-

    formao e comunicao. Alm da limitao no uso do

    computador, ressalte-se que alguns deles comearam a ter

    contato com computador no semestre corrente pesquisa.

    Observou-se que alguns participantes demoraram

    muito tempo na leitura e compreenso do que estava

    sendo solicitado na tarefa, dessa forma, questiona-se se o

    roteiro das tarefas a serem executadas tivesse sido lido

    em conjunto antes do incio de cada seo de interao

    haveria alguma diferena nos resultados. Ou seja, os

    participantes concluiriam uma maior quantidade de tare-

    fas? Outro ponto refere-se ao tempo estabelecido para a

    execuo das tarefas (20 minutos), caso o tempo forneci-

    do para que os participantes executassem as tarefas pro-

    postas tivesse sido livre teria feito alguma diferena? Eles

    teriam concluindo um maior nmero de tarefas?

    8 Consideraes finais

    Neste trabalho, foi realizada a comparao da usabi-

    lidade dos ambientes Amadeus e Moodle para a realiza-

    o de tarefas tpicas da prtica docente, por usurios

    docentes. Note que no possvel afirmar que a sutil

    diferena identificada da usabilidade do Amadeus em

    relao ao Moodle relacione-se ao total mnimo de passos

    para a realizao das tarefas propostas nos dois ambien-

    tes, visto que a diferena mnima. Pois, para a conclu-

    so com sucessos das oito tarefas analisadas so necess-

    rios 48 (quarenta e oito) passos no Amadeus e 49 (qua-

    renta e nove) no Moodle.

    Sabe-se que um dos grandes desafios para as entida-

    des que desenvolvem software que estes estejam en-

    quadrados em critrios de qualidade que permitam aos

    seus usurios fazer uso e explorar todas suas potenciali-

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    118

    dades. Para tanto, diversos fatores devem ser considera-

    dos, desde os associados sua instalao, bem como, se

    este executa adequadamente, se confivel, fcil de usar,

    eficiente na realizao de atividades propostas, se sua

    manuteno impacta em outras funcionalidades do siste-

    ma e, por fim, se portvel. Estes fatores esto em con-

    sonncia com a ISO/IEC 9126 e podem ser entendidos

    como atributos de qualidade de um software. Outro as-

    pecto a ponderar quanto aos atributos de qualidade de

    software a usabilidade que especificada na norma

    ISO/IEC 9241-11.

    Todavia, h evidncias de que a preferncia dos usu-

    rios da ordem de 85,7% a favor do ambiente Amadeus

    em detrimento do Moodle relacione-se sua simplicidade

    como evidenciado pela fala de alguns participantes na

    seo da anlise da satisfao. Em relao a varivel

    tempo, esta no foi devidamente analisada visto que foi

    definido um tempo padro para execuo da seo de

    interao em cada ambiente, no caso 20 minutos.

    Estes resultados, apesar de mostrarem alguma dife-

    rena, so ainda pouco generalizveis. Contudo, sinali-

    zam a hiptese de que o Amadeus possui melhor usabili-

    dade que o Moodle para a prtica de mediao docente

    por meio de um LMS. Isso pode ser confirmado ou refu-

    tado em trabalhos futuros atravs de inferncias em uma

    amostra significativa.

    Referncias

    [1] Carvalho, R. S.; Gomes, A. S. Sistemas de Gesto de Aprendizagem e Sistemas de Gesto

    Acadmico avaliados pela tica docente. Con-

    curso de Teses, Dissertaes e TCCs. 2010. In:

    XXI Simpsio Brasileiro de Informtica na Edu-

    cao SBIE Joo Pessoa 2010.

    [2] Carvalho, R. S. ; Melo Filho, I. J. ; Amorim,

    R.J.R. ; Rolim, Ana L.S. ; Vidal, T. C. ; Gomes,

    A. S. . Integrao entre o Sistema de Gesto

    Acadmica e o Sistema de Gesto da Aprendiza-

    gem: Ao Reflexiva. Revista OPARA - Cin-

    cias Contemporneas Aplicadas, v. 01, p. 215-

    229, 2011.

    [3] Carvalho, R. S.; Melo Filho, I. J. ; Vidal, T. C. ;

    Melo, R. M.; Gomes, A.S. . Integrao entre o

    sistema de gesto acadmica e o sistema de ges-

    to da aprendizagem: identificando necessidades

    e prototipando requisitos favorveis prtica

    docente. Revista Brasileira de Computao Apli-

    cada, v. 4, p. 81-91, 2012. Disponvel em:<

    http://www.upf.br/seer/index.php/rbca/article/vie

    w/1951>. Acesso em: 05 dez. 2012.

    [4] Felipini, D. e-Learning: O Ensino do Prximo

    Milnio. Disponvel em:

    .

    Acesso em: 12 out. 2012.

    [5] Mattar, J. Tutoria e Interao Educao a Dis-

    tncia. Srie Educao e tecnologia. Editora

    Cengage. So Paulo. 2012.

    [6] Peters. Otto. Didtica do Ensino a Distncia. So

    Leopoldo/RS. Editora Unisinos - Universidade

    do Vale do Rio dos Sinos, 2006.

    [7] MOODLE. Modular Object-Oriented Dynamic

    Learning Environment Disponvel

    em:. Acesso em:

    26 nov. 2012.

    [8] AMADEUS (2008) Projeto Amadeus, Dispon-

    vel em: . Acesso

    em: 26 nov. 2012.

    [9] Benyon, D. Interao Humano-Computador. 2a

    Edio. Editora Pearson. So Paulo. 2011.

    [10] Barros, D. M. V.; Amaral, S.F.; Rivilla, A. M.;

    Garrido, M. c. D.; Garcia. F.G.; Bianchini, D.;

    Silva, D.; Garbin, M. C. Competncias para a formao docente: metodologia de uso de ambi-

    entes virtuais para o ensino das competncias.

    Revista Cientfica de Educao a Distncia. Vol.

    1 N 1 2008. Universidade Metropolitana de Santos Ncleo de Educao a Distncia. Dis-ponvel em:

    http://revistapaideia.unimesvirtual.com.br/index.

    php?journal=paideia&page=article&op=viewFil

    e&path[]=52&path[]=25>. Acesso em: 28 nov.

    2012.

    [11] Mercado, L. P. L. Novas tecnologias na educa-o Organizador. Editora EDUFAL. 2002.

    [12] Prates, R, O.; Figueredo.; R,M,V., Bach, C, F..

    Um modelo de Apoio ao Projeto de Design de

    Interfaces de Ambientes de Aprendizado. IX

    Workshop de Informtica na Escola - WIE.

    2003.

    [13] Mafuna, M. e Wadesango, N. - Students Ac-ceptance and Experiences of the New Learning

    Management System (LMS) Wiseup. Walter Sisulu University, Centre for Learning and

    Teaching, Republic of South Africa. Kamla-Raj

    2012 Anthropologist, 14(4): 311-318 (2012).

  • Carvalho,R.S.; Melo Filho,I.J. et al. Anlise Comparativa da Usabilidade dos Ambientes

    de Gesto da Aprendizagem Amadeus e Moodle

    119

    [14] Steel, C.H. 2006. What do university students

    expect from teachers using an LMS? In ICT:

    Providing Choices for Learners and Learning.

    Proceedings Ascilite. Singapore 2007.

    [15] Moran, T. (1981) The Command Language Grammars: a representation for the user inter-

    face of interactive computer systems. Interna-tional Journal of Man-Machine Studies, 15, 3-

    50.

    [16] Custdio, C. A. Avaliao da usabilidade do ambiente de ensino distncia moodle sob a

    perspectiva de professores. Universidade Meto-

    dista de Piracicaba Faculdade de Cincias Exatas e da Natureza. Dissertao de Mestrado

    em Cincia da Computao. 2008. Disponvel

    em:<

    https://www.unimep.br/phpg/bibdig/pdfs/2006/

    MFEKQPNSIIYC.pdf >. Acesso em: 10 dez.

    2012.

    [17] Almeida, M. C Estudo da usabilidade da inter-face do ambiente virtual de aprendizagem da

    Unitins Universidade de Braslia Faculdade de Educao Programa de Ps-Graduao em Educao. Dissertao de Mestrado em Educa-

    o. 2009. Disponvel em<

    http://biblioteca.fe.unb.br/pdfs/2009-12-

    151612marianadecarlaalmeida.pdf >. Acesso

    em: 10 dez. 2012.

    [18] Saffer, D. - Designing for interaction creating

    innovative applications and devices. Prentice

    Hall. Coleo: Voices that matter. 2009.

    [19] Poole, A. - What is user experience?. Alex Poole

    - User experience design and research. 2012.

    Disponvel em:< http://alexpoole.info/blog/what-

    is-user-experience/>. Acesso em: 01 out. 2012.

    [20] Bastos, J.C. S.; Oliveira, S.R. B - Prticas de

    IHC versus Processos de Engenharia de Softwa-

    re: Uma Anlise para Adoo - X Encontro

    Anual de Computao (ENACOMP). Anais da

    Conferncia. 2010. Disponvel em:<

    http://www.enacomp.com.br/2010/cd/artigos/co

    mpletos/enacomp2010_5.pdf>. Acesso em: 01

    out. 2012.

    [21] Nielsen, Jakob - Usability 101: Introduction to

    Usability. 2003. Disponvel em:< http://www.useit.com/alertbox/20030825.html>.

    Acesso em: 05 dez. 2012.

    [22] NBR 9241-11 ABNT Associao Brasileira

    de Normas Tcnicas. Requisitos Ergonmicos

    para Trabalho de Escritrios com Computadores.

    Parte 11 Orientaes sobre Usabilida-de.ABNT/CB-21/SC-10 Subcomit de Softwa-re ABNT/CE-21.101.08 Comisso de Ergo-nomia de Software. So Paulo. 2002.

    [23] (a) Gomes, A. S.; Carvalho, S. C.; Melo Filho, I.

    J.; Rolim; A. L. S.; Monteiro, B. S.; Oliveira; G.

    R. S. Amadeus: Novo Modelo de Sistema de Gesto de Aprendizagem Revista Brasileira de Aprendizagem Aberta e a Distncia Brazilian Review of Open and Distance Learning. Vol 8.

    (2009). Disponvel em:<

    http://www.abed.org.br/revistacientifica/revista_

    pdf_doc/2009/amadeus_novo_model0_de_siste

    ma_de_gestao_de_aprendizagemrbaad2009.pdf>

    Acesso em: 12 out. 2012.

    [24] (b) Gomes, A.S; Monteiro, B.S.; Carvalho, R.S;

    Melo Filho, I.J.; Rolim, A.L.S.; Oliveira, G.R.S.

    AMADEUS - Novas Formas de Interao para Educao a Distncia. Revista Esprito Livre Edio 008 Pginas 73 - 78. Novembro/2009.

    [25] Melo Filho, I. J. ; Carvalho, R. S. ; Melo, R. M. ;

    Gomes, A.S. . Percepo social em EAD: Identi-

    ficando necessidades para o LMS Amadeus.

    RBIE Revista Brasileira de Informao na Educao, v. 19, p. 29-41, 2011. Disponvel

    em:< http://www.br-

    ie.org/pub/index.php/rbie/article/view/1263/1183

    >. Acesso em: 12 out. 2012.

    [26] Sabbatini R.M.E. Ambiente de Ensino e Aprendizagem via Internet A Plataforma Mo-odle. (2007). Disponvel em:<

    http://www.ead.edumed.org.br/file.php/1/Platafo

    rmaMoodle.pdf>. Acesso em: 12 out. 2012.

    [27] Winckler, M. A. A.; Pimenta, M. S..Anlise e

    Modelagem de Tarefas. Congresso Brasileiro de

    Fatores Humanos em Sistemas Computacionais,

    p.3, Curitiba/PR. 2004.

    i Censo da Educao Superior Realizado anualmente pelo Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira (INEP),

    constitui-se em um importante instrumento de obteno de dados para a

    gerao de informaes que subsidiam a formulao, o monitoramento e avaliao das polticas pblicas, bem como os estudos acadmicos e a

    gesto das instituies de ensino. O Censo coleta informaes sobre as

    Instituies de Educao Superior (IES), os cursos de graduao e sequenciais de formao especfica e sobre cada aluno e docente, vincu-

    lados a esses cursos. Documento disponvel em: <

    http://portal.mec.gov.br/index.php?option=com_content&view=article&

    id=17212>.

  • RBIE V.22 N.1 2014

    Carvalho,R.S.; Melo Filho,I.J. et al.

    120

    ii UXNet uma comunidade que estuda o tema Experincia do Usu-

    rio. Tem como objetivo facilitar o acesso a conceitos e especialistas no tema. Disponvel em:.

    iii Faz-se necessrio ressaltar que a efetividade aqui tratada refere-se a usabilidade do LMS, e no a efetividade do modelo de e-learning como

    tratado nos modelos de avaliao conhecidos como os modelos de:

    Kirkpatrick (1975), Hamblin (1978), MAIS (1982), Phillips (1996), IMPACT (1999), UCB (2001).