Usability evaluation approaches in digital editorial products
DOI:
https://doi.org/10.5433/2236-2207.2020v11n2p35Keywords:
Usability, Interface Evaluation, Digital Convergence, MethodsAbstract
Analyzing the media that is traditionally printed and move to the digital environment requires a process of usability evaluation. Thus, this study presents a systematic bibliographic review with the main issues related to the usability evaluation processes for newspapers, magazines, books and distribution platforms, and also demonstrates the current stage of usability research for such products. It highlights that summative evaluations and digital libraries are predominant, including studies whose purpose is to verify the degree of general usability of those products. The most used methods are questionnaires and task analysis, and usability criteria are based on traditional literature. It is concluded that new studies can explore several gaps such as specific heuristics, protocols and questionnaires to evaluate such products, comparing the usability and accessibility of the platforms.References
ABDULLAH, Rusli; WEI, Koh Tieng. Usability measurement of malaysia online news websites. International Journal of Computer Science and Network Security, Seoul, v. 8, n. 5, p. 159-166, 2008.
ALASEM, Abdulrahman. Evaluating the Usability of Saudi Digital Library’s Interface. Proceedings of the World Congress on Engineering and Computer, San Francisco, v. 1, p. 23–25, 2013.
ASSOCIAÇÃO BRASILEIRA DE NORMAS TÉCNICAS. NBR ISO 9241: ergonomia da interação humano-sistema. Parte 100: introdução às normas relacionadas à ergonomia de software. Rio de Janeiro: ABNT, 2012.
BLANDFORD, Ann; BUCHANAN, George. Usability of digital libraries: a source of creative tensions with technical developments. IEEE Technical Committee on Digital Libraries Bulletin, Birmingham, AL, v. 1, n. 1, p. 1-9, 2003.
BLANDFORD, Ann; BUCHANAN, George. Usability of digital libraries: a source of creative tensions with technical developments.
BOHMERWALD, Paula. Uma proposta metodológica para avaliação de bibliotecas digitais: usabilidade e comportamento de busca por informação na Biblioteca Digital da PUC-Minas. Ciência da Informação, Brasília, v. 34, n. 1, p. 95-103, 2005.
CAETANO, Alessandra Monteiro Pattuzzo; SILVA, Daniela Lucas; CORREA, Suelisbete Pinto. Avaliação de usabilidade da interface da Biblioteca Digital das Faculdades Integradas São Pedro: um estudo de caso. Revista Científica Faesa, Vitória, v. 8, n. 1, p. 65-85, 2012.
ÇETIN, Güercan; Özkaraca, Osman; SAKAL, Murat; GÜVENÇ, Ercüment. A usability assessment of an epub 3.0 based ebook developed for algorithms and programming course. Information Technologies and Learning Tools, Kyiv, v. 58, n. 2, p. 129-140, 2017. Disponível em: https://journal.iitta.gov.ua/ index.php/itlt/article/view/1576. Acesso em: 20 jan. 2018. 9.
CHANLIN, Lih-Juan; HUNG, Wei-Hsiang. Usability and evaluation of a library mobile web site. The Electronic Library, Oxford, v. 34, n. 4, p. 636-650, 2016.
CHARTIER, Roger. Os livros resistirão às tecnologias digitais. [Depoimento a Cristina Zahar]. Revista Nova Escola, São Paulo, n. 204, ago. 2007. Disponível em: http://revistaescola.abril.com.br/ lingua-portuguesa/fundamentos/ roger-chartier-livros-resistirão-tecnologias-digitais-610077.shtml?page=all. Acesso em: 20 jan. 2018.
CYBIS, Walter de Abreu. Abordagem ergonômica para IHC. Florianópolis, SC: Laboratório de Utilizabilidade da Informática, Universidade Federal de Santa Catarina, 1997.
CYBIS, Walter de Abreu. Engenharia de usabilidade: uma abordagem ergonômica. Florianópolis, SC: Laboratório de Utilizabilidade da Informática, Universidade Federal de Santa Catarina, 2003.
DE LAS HERAS, Antonio Rodríguez. Las propriedades del espacio digital. In: CONGRESO IBEROLATINOAMERICANO DE INFORMÁTICA EDUCATIVA ESPECIAL, Córdoba. Anais […]. Córdoba: CIIEE, 2000. CD-ROM.
FEBVRE, Lucien; MARTIN, Henri-Jean. The coming of the book. London: Verso, 1999.
FENSTERSEIFER, Thais Arnold; KRENING, Thiago da Silva; TEIXEIRA, Fábio Gonçalves; SILVA, Tânia Koltermann; SILVA, Régio Pierre. Histórias em quadrinhos no contexto dos dispositivos móveis: aspectos teóricos e análise de usabilidade. InfoDesign: revista brasileira de design da informação, São Paulo, v. 13, n. 1, p. 22-38, 2016.
GLOVER, Ian; GRANT, Peter. Digital communications. 3. ed. United Kingdom: Harlow, 2009.
GUEVAL, Jennifer; TARNOW, Karen; KUMM, Sharon. Implementing e-books: Faculty and student experiences. Teaching and Learning in Nursing, Amsterdam, v. 10, n. 4, p. 181-185, 2015.
HAMELINK, Cees J. New information and communication technologies, social development and cultural change. Geneva: United Nations Research Institute for Social Development, 1997. (Discussion Paper, n. 86.)
HENN, Gustavo; FRANÇA, Henrique; DIAS, Guilherme Ataíde. Navegabilidade em portais: estudo com usuários dos portais dos jornais O Norte e Jornal da Paraíba. Revista Digital de Biblioteconomia e Ciência da Informação, Campinas, v. 8, n. 1, p. 37-52, jul. /dez. 2010.
HIX, Deborah; GABBARD, Joseph L.; SWAN, Edward; LIVINGSTON, Mark A.; HOLLERER, Tobbias H.; JULIER, Simon J.; BAILLOT, Yohan; BROWN, Dennis. A cost-effective usability evaluation progression for novel interactive systems. In: ANNUAL HAWAII INTERNATIONAL CONFERENCE ON SYSTEM SCIENCES, 37th, 2004, Big Island, HI, USA. Proceedings [...]. New York, NY: IEEE, 2004. p. 1-10.
IQBAL, Memoona; WARRAICH, Nosheen Fatima. Usability evaluation of an academic library website: a case of the university of the Punjab. Pakistan Journal of Library and Information Science, Lahore, v. 13, n. 13, 2012.
JENKINS, Henry. Cultura da convergência. São Paulo: Aleph, 2006.
JOO, Soohyung; LEE, Jee Yeon. Measuring the usability of academic digital libraries: instrument development and validation. Electronic Library, Oxford, v. 29, n. 4, p. 523-537, 2011.
JOO, Soohyung; LIN, Suyu; LU, Kun. A usability evaluation model for academic library websites: efficiency, effectiveness and learnability. Journal of Library and Information Studies, Taiwan, v. 9, n. 2, p. 11-26, 2011.
JORDAN, Patrick W. An introduction to usability. London: Taylor & Francis, 1998.
JOU, Min; TENNYSON, Robert D.; WANG, Jingying; HUANG, Szu Yiang. A study on the usability of E-books and APP in engineering courses: a case study on mechanical drawing. Computers and Education, New York, v. 92, p. 181-193, 2016.
KHAN, Muhammad Tufail; ZAHID, Anella; RAFIQ, Muhammad. Usability evaluation of university of management and technology library, lahore website: a survey of user satisfaction. Pakistan Library & Information Science Journal, Lahore, Pakistan, v. 45, n. 4, 2014.
KITCHENHAM, Barbara; CHARTERS, Stuart. Guidelines for performing systematic literature reviews in software engineering. Version 2.3. Keele, Staffs: Software Engineering Group, School of Computer Science and Mathematics, Keele University; Durham, UK: Department of Computer Science, University of Durham, 2007. EBSE Technical Report, EBSE-2007-01, p. 1-65.
LACERDA, Luciana Melo. Análise de usabilidade de livro digital na EaD: aplicação da avaliação heurística proposta por Pechansky. 2014. 70 f. Dissertação (Mestrado Profissional em Design) - Centro de Ciências Humanas, Letras e Artes, Universidade Federal do Rio Grande do Norte, Natal, RN, 2014.
LIMA, Izabel França; OLIVEIRA, Henry Poncio Cruz; SANTANA, Sérgio Rodrigues. Metodologia para avaliação do nível de usabilidade de bibliotecas digitais: um estudo na Biblioteca Virtual de Saúde. TransInformação, Campinas, v. 25, n. 2, p. 135-143, 2013.
MASREK, Mohamad Noorman; KHAN, Asad. Usability assessment of web digital library: a survey among undergraduate students. Journal of Information and Knowledge Management, Denton, Texas, v. 5, n. 2, p. 46-56, 2015.
PEREIRA, Fernanda. Avaliação de usabilidade em bibliotecas digitais: um estudo de caso. 2011. 122 f. Dissertação (Mestrado em Ciência da Informação) - Universidade Federal de Minas Gerais, Belo Horizonte, MG, 2011.
PRYOR, Larry. The future of news: the third wave on online journalism. Online Journalism Review, Los Angeles, CA, 18 Apr. 2002. Disponível em: http://www.ojr.org/ojr/future/1019174689.php. Acesso em: 14 mar. 2018.
ROSA, Juan Miguel; VERAS, Manoel. Avaliação heurística de usabilidade em jornais online: estudo de caso em dois sites. Perspectivas em Ciência da Informação, Belo Horizonte, MG, v. 18, n. 1, p. 138-157, 2013.
SAID, A.; ALBAN, D.; ANAS B.; COLIN C.; ALBAN D.; ANDREW M.; CAMILLE R.; DOTAN S.; ACADIA, W. AUP Library web site usability study. CM/CS, Fall, 2010. Disponível em: https://ac.aup.edu/~croda/SampleStudentsWork/cs348/finalProjectCS348F10/AUPLibraryWebSiteUsabilityCS248F10_Small. pdf. Acesso em: 14 mar. 2018.
SOUZA, Clarisse S.; PRATES, Raquel O.; BARBOSA, Simone D. J. A method for evaluating software communicability. Rio de Janeiro, RJ: Departamento de Informática, PUC-Rio, 1999. Monografias em Ciência da Computação. MCC11/99.
TULLIS, Thomas, ALBERT, William. Measuring the user experience: collecting, analyzing and presenting usability. San Francisco, CA: Morgan Kaufmann, 2008.
WEI, Chun-Chun; LIN, Yang-Cheng; YEH, Chung-Hsing. Effects of touch screen mobile devices and e- book systems on students’ reading performance: a usability evidence. Journal of Engineering Technology, Johnson City, v. 6, n. 2007, p. 58-78, 2017.
ALASEM, Abdulrahman. Evaluating the Usability of Saudi Digital Library’s Interface. Proceedings of the World Congress on Engineering and Computer, San Francisco, v. 1, p. 23–25, 2013.
ASSOCIAÇÃO BRASILEIRA DE NORMAS TÉCNICAS. NBR ISO 9241: ergonomia da interação humano-sistema. Parte 100: introdução às normas relacionadas à ergonomia de software. Rio de Janeiro: ABNT, 2012.
BLANDFORD, Ann; BUCHANAN, George. Usability of digital libraries: a source of creative tensions with technical developments. IEEE Technical Committee on Digital Libraries Bulletin, Birmingham, AL, v. 1, n. 1, p. 1-9, 2003.
BLANDFORD, Ann; BUCHANAN, George. Usability of digital libraries: a source of creative tensions with technical developments.
BOHMERWALD, Paula. Uma proposta metodológica para avaliação de bibliotecas digitais: usabilidade e comportamento de busca por informação na Biblioteca Digital da PUC-Minas. Ciência da Informação, Brasília, v. 34, n. 1, p. 95-103, 2005.
CAETANO, Alessandra Monteiro Pattuzzo; SILVA, Daniela Lucas; CORREA, Suelisbete Pinto. Avaliação de usabilidade da interface da Biblioteca Digital das Faculdades Integradas São Pedro: um estudo de caso. Revista Científica Faesa, Vitória, v. 8, n. 1, p. 65-85, 2012.
ÇETIN, Güercan; Özkaraca, Osman; SAKAL, Murat; GÜVENÇ, Ercüment. A usability assessment of an epub 3.0 based ebook developed for algorithms and programming course. Information Technologies and Learning Tools, Kyiv, v. 58, n. 2, p. 129-140, 2017. Disponível em: https://journal.iitta.gov.ua/ index.php/itlt/article/view/1576. Acesso em: 20 jan. 2018. 9.
CHANLIN, Lih-Juan; HUNG, Wei-Hsiang. Usability and evaluation of a library mobile web site. The Electronic Library, Oxford, v. 34, n. 4, p. 636-650, 2016.
CHARTIER, Roger. Os livros resistirão às tecnologias digitais. [Depoimento a Cristina Zahar]. Revista Nova Escola, São Paulo, n. 204, ago. 2007. Disponível em: http://revistaescola.abril.com.br/ lingua-portuguesa/fundamentos/ roger-chartier-livros-resistirão-tecnologias-digitais-610077.shtml?page=all. Acesso em: 20 jan. 2018.
CYBIS, Walter de Abreu. Abordagem ergonômica para IHC. Florianópolis, SC: Laboratório de Utilizabilidade da Informática, Universidade Federal de Santa Catarina, 1997.
CYBIS, Walter de Abreu. Engenharia de usabilidade: uma abordagem ergonômica. Florianópolis, SC: Laboratório de Utilizabilidade da Informática, Universidade Federal de Santa Catarina, 2003.
DE LAS HERAS, Antonio Rodríguez. Las propriedades del espacio digital. In: CONGRESO IBEROLATINOAMERICANO DE INFORMÁTICA EDUCATIVA ESPECIAL, Córdoba. Anais […]. Córdoba: CIIEE, 2000. CD-ROM.
FEBVRE, Lucien; MARTIN, Henri-Jean. The coming of the book. London: Verso, 1999.
FENSTERSEIFER, Thais Arnold; KRENING, Thiago da Silva; TEIXEIRA, Fábio Gonçalves; SILVA, Tânia Koltermann; SILVA, Régio Pierre. Histórias em quadrinhos no contexto dos dispositivos móveis: aspectos teóricos e análise de usabilidade. InfoDesign: revista brasileira de design da informação, São Paulo, v. 13, n. 1, p. 22-38, 2016.
GLOVER, Ian; GRANT, Peter. Digital communications. 3. ed. United Kingdom: Harlow, 2009.
GUEVAL, Jennifer; TARNOW, Karen; KUMM, Sharon. Implementing e-books: Faculty and student experiences. Teaching and Learning in Nursing, Amsterdam, v. 10, n. 4, p. 181-185, 2015.
HAMELINK, Cees J. New information and communication technologies, social development and cultural change. Geneva: United Nations Research Institute for Social Development, 1997. (Discussion Paper, n. 86.)
HENN, Gustavo; FRANÇA, Henrique; DIAS, Guilherme Ataíde. Navegabilidade em portais: estudo com usuários dos portais dos jornais O Norte e Jornal da Paraíba. Revista Digital de Biblioteconomia e Ciência da Informação, Campinas, v. 8, n. 1, p. 37-52, jul. /dez. 2010.
HIX, Deborah; GABBARD, Joseph L.; SWAN, Edward; LIVINGSTON, Mark A.; HOLLERER, Tobbias H.; JULIER, Simon J.; BAILLOT, Yohan; BROWN, Dennis. A cost-effective usability evaluation progression for novel interactive systems. In: ANNUAL HAWAII INTERNATIONAL CONFERENCE ON SYSTEM SCIENCES, 37th, 2004, Big Island, HI, USA. Proceedings [...]. New York, NY: IEEE, 2004. p. 1-10.
IQBAL, Memoona; WARRAICH, Nosheen Fatima. Usability evaluation of an academic library website: a case of the university of the Punjab. Pakistan Journal of Library and Information Science, Lahore, v. 13, n. 13, 2012.
JENKINS, Henry. Cultura da convergência. São Paulo: Aleph, 2006.
JOO, Soohyung; LEE, Jee Yeon. Measuring the usability of academic digital libraries: instrument development and validation. Electronic Library, Oxford, v. 29, n. 4, p. 523-537, 2011.
JOO, Soohyung; LIN, Suyu; LU, Kun. A usability evaluation model for academic library websites: efficiency, effectiveness and learnability. Journal of Library and Information Studies, Taiwan, v. 9, n. 2, p. 11-26, 2011.
JORDAN, Patrick W. An introduction to usability. London: Taylor & Francis, 1998.
JOU, Min; TENNYSON, Robert D.; WANG, Jingying; HUANG, Szu Yiang. A study on the usability of E-books and APP in engineering courses: a case study on mechanical drawing. Computers and Education, New York, v. 92, p. 181-193, 2016.
KHAN, Muhammad Tufail; ZAHID, Anella; RAFIQ, Muhammad. Usability evaluation of university of management and technology library, lahore website: a survey of user satisfaction. Pakistan Library & Information Science Journal, Lahore, Pakistan, v. 45, n. 4, 2014.
KITCHENHAM, Barbara; CHARTERS, Stuart. Guidelines for performing systematic literature reviews in software engineering. Version 2.3. Keele, Staffs: Software Engineering Group, School of Computer Science and Mathematics, Keele University; Durham, UK: Department of Computer Science, University of Durham, 2007. EBSE Technical Report, EBSE-2007-01, p. 1-65.
LACERDA, Luciana Melo. Análise de usabilidade de livro digital na EaD: aplicação da avaliação heurística proposta por Pechansky. 2014. 70 f. Dissertação (Mestrado Profissional em Design) - Centro de Ciências Humanas, Letras e Artes, Universidade Federal do Rio Grande do Norte, Natal, RN, 2014.
LIMA, Izabel França; OLIVEIRA, Henry Poncio Cruz; SANTANA, Sérgio Rodrigues. Metodologia para avaliação do nível de usabilidade de bibliotecas digitais: um estudo na Biblioteca Virtual de Saúde. TransInformação, Campinas, v. 25, n. 2, p. 135-143, 2013.
MASREK, Mohamad Noorman; KHAN, Asad. Usability assessment of web digital library: a survey among undergraduate students. Journal of Information and Knowledge Management, Denton, Texas, v. 5, n. 2, p. 46-56, 2015.
PEREIRA, Fernanda. Avaliação de usabilidade em bibliotecas digitais: um estudo de caso. 2011. 122 f. Dissertação (Mestrado em Ciência da Informação) - Universidade Federal de Minas Gerais, Belo Horizonte, MG, 2011.
PRYOR, Larry. The future of news: the third wave on online journalism. Online Journalism Review, Los Angeles, CA, 18 Apr. 2002. Disponível em: http://www.ojr.org/ojr/future/1019174689.php. Acesso em: 14 mar. 2018.
ROSA, Juan Miguel; VERAS, Manoel. Avaliação heurística de usabilidade em jornais online: estudo de caso em dois sites. Perspectivas em Ciência da Informação, Belo Horizonte, MG, v. 18, n. 1, p. 138-157, 2013.
SAID, A.; ALBAN, D.; ANAS B.; COLIN C.; ALBAN D.; ANDREW M.; CAMILLE R.; DOTAN S.; ACADIA, W. AUP Library web site usability study. CM/CS, Fall, 2010. Disponível em: https://ac.aup.edu/~croda/SampleStudentsWork/cs348/finalProjectCS348F10/AUPLibraryWebSiteUsabilityCS248F10_Small. pdf. Acesso em: 14 mar. 2018.
SOUZA, Clarisse S.; PRATES, Raquel O.; BARBOSA, Simone D. J. A method for evaluating software communicability. Rio de Janeiro, RJ: Departamento de Informática, PUC-Rio, 1999. Monografias em Ciência da Computação. MCC11/99.
TULLIS, Thomas, ALBERT, William. Measuring the user experience: collecting, analyzing and presenting usability. San Francisco, CA: Morgan Kaufmann, 2008.
WEI, Chun-Chun; LIN, Yang-Cheng; YEH, Chung-Hsing. Effects of touch screen mobile devices and e- book systems on students’ reading performance: a usability evidence. Journal of Engineering Technology, Johnson City, v. 6, n. 2007, p. 58-78, 2017.
Downloads
Published
2020-08-31
How to Cite
Bertagnolli, B. C. (2020). Usability evaluation approaches in digital editorial products. Projetica, 11(2), 35–59. https://doi.org/10.5433/2236-2207.2020v11n2p35
Issue
Section
Ergonomia e Usabilidade
License
Projética está licenciada sob a Creative Commons Attribution CC-BY 4.0 International. Os autores detém os direitos autorais e concedem à revista o direito de exclusividade de primeira publicação.
Os autores dos trabalhos aprovados autorizam Projética a, após a publicação, ceder seu conteúdo para reprodução em indexadores de conteúdo, bibliotecas virtuais e similares.
Os autores assumem que os textos submetidos à publicação são de sua criação original, responsabilizando-se inteiramente por seu conteúdo em caso de eventual impugnação por parte de terceiros. As opiniões emitidas pelos autores dos artigos são de sua exclusiva responsabilidade.
A revista se reserva o direito de efetuar, nos originais, alterações de ordem normativa, ortográfica e gramatical, com vistas a manter o padrão culto da língua e a credibilidade do veículo. Respeitará, no entanto, o estilo de escrever dos autores. Alterações, correções ou sugestões de ordem conceitual serão encaminhadas aos autores, quando necessário. Nesses casos, os artigos, depois de adequados, deverão ser submetidos a nova apreciação. As provas finais não serão encaminhadas aos autores.
