{"id":527,"date":"2021-11-04T04:03:35","date_gmt":"2021-11-04T04:03:35","guid":{"rendered":"http:\/\/www.compadd.ufpr.br\/?p=527"},"modified":"2021-11-04T04:15:09","modified_gmt":"2021-11-04T04:15:09","slug":"por-uma-analise-de-conteudo-mais-cientifica-uma-agenda-de-pesquisa","status":"publish","type":"post","link":"http:\/\/www.compadd.ufpr.br\/?p=527","title":{"rendered":"Por uma an\u00e1lise de conte\u00fado mais cient\u00edfica: uma agenda de pesquisa"},"content":{"rendered":"<p>Hoje, \u00e9 um dia bem especial para mim. Lan\u00e7o em conjunto com o parceiro acad\u00eamico e amigo <a href=\"https:\/\/gruppocom.ufc.br\/pt\/integrantes\/\">Di\u00f3genes Lycari\u00e3o<\/a>, oficialmente, meu primeiro livro autoral, a saber \u201c<a href=\"https:\/\/repositorio.enap.gov.br\/handle\/1\/6542\">An\u00e1lise de conte\u00fado categorial: um manual de aplica\u00e7\u00e3o<\/a>\u201d pela Escola Nacional de Administra\u00e7\u00e3o P\u00fablica (ENAP). O webinar de lan\u00e7amento ainda contar\u00e1 com os professores <a href=\"https:\/\/www.pedrosmundim.com.br\/\">Pedro Mundim<\/a> da UFG e <a href=\"http:\/\/raquelrecuero.com\/\">Raquel Recuero<\/a> da UFPEL. Para se inscrever para o webinar, clique <a href=\"https:\/\/suap.enap.gov.br\/portaldoaluno\/curso\/1504\/\">aqui<\/a>. O livro \u00e9 a consolida\u00e7\u00e3o de uma longa parceria e o in\u00edcio de uma (provavelmente) longa jornada para desafiar certos tabus metodol\u00f3gicos no Brasil, como desejo destacar neste texto.<\/p>\n<p>&nbsp;<\/p>\n<p>Esta segunda jornada em especial se iniciou com algumas discuss\u00f5es que t\u00ednhamos a respeito de etapas mais consolidadas na an\u00e1lise de conte\u00fado (AC) especializada em <em>journals<\/em> de grande impacto. Em especial, chamava-nos a aten\u00e7\u00e3o sobre o teste de confiabilidade entre codificadores (<em>intercoder reliability test<\/em> no original), algo visto de maneira constante nesses artigos e bastante ausente na AC brasileira. Ao fazermos uma boa varredura do campo, notamos que era algo quase inexistente em termos de artigos e n\u00e3o estava presente nos principais manuais da t\u00e9cnica dispon\u00edveis em portugu\u00eas.<\/p>\n<p>&nbsp;<\/p>\n<p>Ent\u00e3o, achamos que era um bom lugar para se come\u00e7ar. Fazendo um artigo meio epistemol\u00f3gico e meio metodol\u00f3gico sobre testes de confiabilidade entre codificadores na an\u00e1lise de conte\u00fado. No artigo (Sampaio, Lycari\u00e3o, 2018), discutimos se tratar de uma etapa importante, mas n\u00e3o suficiente para garantir a confiabilidade dos dados, inclusive criticando a vis\u00e3o de certos autores, como Neuendorf (2002) e Krippendorff (2004), que se debru\u00e7am excessivamente sobre os diferentes \u00edndices existentes para tais testes e n\u00e3o na discuss\u00e3o mais ampliada sobre a confiabilidade da pesquisa.<\/p>\n<p>&nbsp;<\/p>\n<p>Do artigo, veio o convite para fazer o manual para a ENAP. Ficamos quase um ano e meio no desenvolvimento do livro. \u00c0 \u00e9poca, ap\u00f3s fazer uma explora\u00e7\u00e3o inicial do campo, notamos que a maior parte da AC brasileira era baseada no manual de Laurence Bardin ([1977]2016). Enquanto se trata de uma obra robusta e de ineg\u00e1vel import\u00e2ncia, conclu\u00edmos que havia, no m\u00ednimo, dois grandes problemas com o mesmo (ou ainda, com a forma que o mesmo \u00e9 lido).<\/p>\n<p>&nbsp;<\/p>\n<p>Em primeiro lugar, Bardin resume o seu m\u00e9todo a tr\u00eas grandes etapas, nomeadamente 1. Pr\u00e9-an\u00e1lise, na qual acontece a leitura flutuante dos materiais; 2. Explora\u00e7\u00e3o do material, na qual ocorre a codifica\u00e7\u00e3o em si e 3. Tratamento dos resultados e interpreta\u00e7\u00f5es, no qual ocorrem infer\u00eancias e mesmo tratamentos estat\u00edsticos dos dados. Nenhum problema nesta divis\u00e3o, por\u00e9m falta ao manual uma melhor especifica\u00e7\u00e3o das diversas etapas e fases que est\u00e3o presentes nessas tr\u00eas etapas. Apesar do resumo apresentado no manual (Bardin, 2016, p. 123), que evidencia todas as etapas, elas s\u00e3o descritas de maneira pouco organizada nas se\u00e7\u00f5es seguintes, frequentemente, atrav\u00e9s de aplica\u00e7\u00f5es de AC pela autora. Em outras palavras, com algum esfor\u00e7o, \u00e9 poss\u00edvel verificar todas as etapas apresentadas pela autora, por\u00e9m essa baixa organiza\u00e7\u00e3o tendeu a levar v\u00e1rias aplica\u00e7\u00f5es da t\u00e9cnica na pesquisa brasileira a pensar apenas nas tr\u00eas grandes etapas e ignorar as subetapas presentes em cada fase.<\/p>\n<p><img loading=\"lazy\" class=\"aligncenter wp-image-530 size-full\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/FIGURA-8-FASES-DA-ANALISE-DE-CONTEUDO-ORGANIZACAO-DA-ANALISE-FONTE-BARDIN-2010.jpg\" alt=\"\" width=\"510\" height=\"509\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/FIGURA-8-FASES-DA-ANALISE-DE-CONTEUDO-ORGANIZACAO-DA-ANALISE-FONTE-BARDIN-2010.jpg 510w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/FIGURA-8-FASES-DA-ANALISE-DE-CONTEUDO-ORGANIZACAO-DA-ANALISE-FONTE-BARDIN-2010-300x300.jpg 300w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/FIGURA-8-FASES-DA-ANALISE-DE-CONTEUDO-ORGANIZACAO-DA-ANALISE-FONTE-BARDIN-2010-150x150.jpg 150w\" sizes=\"(max-width: 510px) 100vw, 510px\" \/><\/p>\n<p style=\"text-align: center;\">Etapas da AC, segundo Bardin (2016)<\/p>\n<p>&nbsp;<\/p>\n<p>Em segundo lugar, o manual de Bardin se estende muito nas regras gerais para a cria\u00e7\u00e3o de categorias e diferentes formas de codifica\u00e7\u00e3o, mas n\u00e3o explica de forma muito adequada como o \u201csistema de codifica\u00e7\u00e3o\u201d deve ser manifesto num livro de c\u00f3digos, sobre a import\u00e2ncia do treinamento dos codificadores e do teste de confiabilidade entre eles. Ademais, em certas etapas, como a quest\u00e3o da amostragem, o manual tamb\u00e9m se mostra pouco espec\u00edfico e mesmo um pouco amb\u00edguo. O mesmo valendo para abordagens mais estat\u00edsticas.<\/p>\n<p>&nbsp;<\/p>\n<p>Ent\u00e3o, tendo isso em vista, buscamos fazer uma apresenta\u00e7\u00e3o bem did\u00e1tica da aplica\u00e7\u00e3o de uma an\u00e1lise de conte\u00fado categorial (tamb\u00e9m conhecida como tem\u00e1tica) em 12 grandes etapas, salientando um passo a passo para cada uma delas, conforme a imagem abaixo. Partindo desde a conceitua\u00e7\u00e3o (problemas, perguntas de pesquisa, hip\u00f3teses etc.) at\u00e9 o tratamento estat\u00edstico (caso haja necessidade definida pelo desenho de pesquisa). Em especial, destacamos n\u00e3o apenas as regras e dicas para a cria\u00e7\u00e3o de boas categorias, mas tamb\u00e9m a import\u00e2ncia da elabora\u00e7\u00e3o de um livro de c\u00f3digos (e sua futura disponibiliza\u00e7\u00e3o para aumento da replicabilidade da pesquisa), a necessidade da exist\u00eancia de dois ou mais codificadores, de um treinamento adequado para os mesmos e da realiza\u00e7\u00e3o de um teste de confiabilidade antes da codifica\u00e7\u00e3o final.<\/p>\n<p><img loading=\"lazy\" class=\"wp-image-531 size-full aligncenter\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/etapasAC-manual.png\" alt=\"\" width=\"694\" height=\"704\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/etapasAC-manual.png 694w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/etapasAC-manual-296x300.png 296w\" sizes=\"(max-width: 694px) 100vw, 694px\" \/><\/p>\n<p>Etapas da AC (Sampaio, Lycari\u00e3o, 2021)<\/p>\n<p>&nbsp;<\/p>\n<p>Portanto, o manual (Sampaio, Lycari\u00e3o, 2021) busca preencher uma lacuna que verificamos na literatura brasileira. Ap\u00f3s sua escrita, resolvemos que era hora de fazer uma investiga\u00e7\u00e3o mais aprofundada sobre o uso da AC no pa\u00eds. Assim, recolhemos e tratamos todas as refer\u00eancias que fazem uso de an\u00e1lise de conte\u00fado na Scielo Brasil, chegando a um n\u00famero de 3.484 artigos cient\u00edficos. Atrav\u00e9s do VOSViewer, rodamos redes de cocita\u00e7\u00f5es das refer\u00eancias citadas nos artigos (Van Eck, Waltman, 2010) e nos deparamos com um quadro muito mais desesperador que o esperado. N\u00e3o s\u00f3 Bardin \u00e9, de muito longe, a autora mais citada e cocitada na AC brasileira, mas as diferentes vers\u00f5es de seu manual dominam de forma anormal a grande maioria dos clusters de obras utilizadas pela \u00e1rea. Algo que acontece tanto nas humanidades quanto no col\u00e9gio de ci\u00eancias da vida, conforme as duas imagens abaixo.<\/p>\n<p><img loading=\"lazy\" class=\"wp-image-532 size-large aligncenter\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-saude-1024x656.png\" alt=\"\" width=\"980\" height=\"628\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-saude-1024x656.png 1024w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-saude-300x192.png 300w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-saude-768x492.png 768w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-saude.png 1117w\" sizes=\"(max-width: 980px) 100vw, 980px\" \/><\/p>\n<p>Cocita\u00e7\u00f5es no c\u00f3legio de ci\u00eancias da vida (Sampaio et al, 2021)<\/p>\n<p><img loading=\"lazy\" class=\"wp-image-533 size-full aligncenter\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-humanas.png\" alt=\"\" width=\"1016\" height=\"720\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-humanas.png 1016w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-humanas-300x213.png 300w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/cocitacoes-humanas-768x544.png 768w\" sizes=\"(max-width: 1016px) 100vw, 1016px\" \/><\/p>\n<p>Cocita\u00e7\u00f5es no c\u00f3legio de humanidades (Sampaio et al, 2021)<\/p>\n<p>&nbsp;<\/p>\n<p>Portanto, com base nesse estudo, ainda preliminar, vimos que se trata de um problema de enormes propor\u00e7\u00f5es. No Brasil, an\u00e1lise de conte\u00fado \u00e9 sin\u00f4nimo de Bardin. Desconfio, inclusive, que Bardin se tornou nacionalmente um sin\u00f4nimo de an\u00e1lise da dos qualitativos. O estudo cientom\u00e9trico de Antonio Brasil J\u00fanior e Lucas Carvalho s\u00e3o fortes indicativos disso (Brasil Jr, Carvalho, 2020). Ao analisar a produ\u00e7\u00e3o em toda a Scielo Brasil nas ci\u00eancias humanas, \u00e9 poss\u00edvel verificar que Bardin \u00e9 uma autora central da \u00e1rea e que sua obra \u00e9 tamb\u00e9m central nas principais refer\u00eancias acionadas em toda a literatura de humanas.<\/p>\n<p><img loading=\"lazy\" class=\"wp-image-534 size-full aligncenter\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas.png\" alt=\"\" width=\"688\" height=\"721\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas.png 688w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas-286x300.png 286w\" sizes=\"(max-width: 688px) 100vw, 688px\" \/> <img loading=\"lazy\" class=\"wp-image-535 size-full aligncenter\" src=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas2.png\" alt=\"\" width=\"716\" height=\"526\" srcset=\"http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas2.png 716w, http:\/\/www.compadd.ufpr.br\/wp-content\/uploads\/obrasmaiscitadasemhumanas2-300x220.png 300w\" sizes=\"(max-width: 716px) 100vw, 716px\" \/><\/p>\n<p>Cocita\u00e7\u00f5es nas humanidades na Scielo Brasil (Brasil Jr, Carvalho, 2020).<\/p>\n<p>&nbsp;<\/p>\n<p>Portanto, como apontamos na discuss\u00e3o do artigo (Sampaio et al, 2021), trata-se de um manual que foi originalmente publicado em 1977 e atualizado pela \u00faltima vez no in\u00edcio dos anos 90 (Bardin, 2016, p. 13). Isso significa que todas as grandes modifica\u00e7\u00f5es trazidas pelos meios digitais, especialmente a internet, n\u00e3o foram atualizadas, assim como as vibrantes discuss\u00f5es metodol\u00f3gicas e epistemol\u00f3gicas das duas \u00faltimas d\u00e9cadas n\u00e3o foram contempladas.<\/p>\n<p>&nbsp;<\/p>\n<p>Portanto, em grande medida, acreditamos que exista uma importante agenda de pesquisa \u00e0 frente. Ela envolve simultaneamente desnaturalizar o uso exclusivo do manual de Bardin e denotar a import\u00e2ncia de certos avan\u00e7os metodol\u00f3gicos das aplica\u00e7\u00f5es especializadas e contempor\u00e2neas da an\u00e1lise de conte\u00fado. Para tanto, mais autores e autoras, mais manuais precisam ser acionados. \u00c9 necess\u00e1ria uma grande discuss\u00e3o epistemol\u00f3gica transdiciplinar sobre o uso da t\u00e9cnica no Brasil. Estamos aqui dando nossas primeiras contribui\u00e7\u00f5es.<\/p>\n<p>&nbsp;<\/p>\n<p><strong>Refer\u00eancias<\/strong><\/p>\n<p>Bardin L. An\u00e1lise de conte\u00fado. Edi\u00e7\u00e3o revista e ampliada. S\u00e3o Paulo: Edi\u00e7\u00f5es 70 Brasil; [1977] 2016.<\/p>\n<p>Brasil Jr A, Carvalho L. Por dentro das Ci\u00eancias Humanas: um mapeamento sem\u00e2ntico da \u00e1rea via base SciELO-Brasil (2002-2019). Revista de Humanidades Digitales 2020; 5: 149-183. <a href=\"https:\/\/doi.org\/10.5944\/rhd.vol.5.2020.27687\">https:\/\/doi.org\/10.5944\/rhd.vol.5.2020.27687 <\/a><\/p>\n<p>Krippendorff K. Content analysis: an introduction to its methodology. Londres: Sage; [1980] 2004.<\/p>\n<p>Neuendorf K. The content analysis guidebook. Londres: Sage; 2002.<\/p>\n<p>Sampaio R, Lycari\u00e3o D. Eu quero acreditar! Da import\u00e2ncia, formas de uso e limites dos testes de confiabilidade na An\u00e1lise de Conte\u00fado. Revista de Sociologia e Pol\u00edtica 2018; 66(26): 31-47. <a href=\"https:\/\/doi.org\/10.1590\/1678-987318266602\">https:\/\/doi.org\/10.1590\/1678-987318266602<\/a><\/p>\n<p>Sampaio, R. C., Lycari\u00e3o, D. An\u00e1lise de conte\u00fado categorial: manual de aplica\u00e7\u00e3o. Bras\u00edlia: Enap, 2021. Dispon\u00edvel em: <a href=\"https:\/\/repositorio.enap.gov.br\/handle\/1\/6542\">https:\/\/repositorio.enap.gov.br\/handle\/1\/6542<\/a><\/p>\n<p>Sampaio, R. C., Lycari\u00e3o, D., Codato, A., Marioto, D., Bittencourt, M., &amp; Nichols, B. Uma t\u00e9cnica parada no tempo? Mapeamento da produ\u00e7\u00e3o cient\u00edfica baseada em an\u00e1lise de conte\u00fado na SciELO Brasil (2002-19). Preprint Scielo, 2021. Dispon\u00edvel em: <a href=\"https:\/\/preprints.scielo.org\/index.php\/scielo\/preprint\/view\/1913\">https:\/\/preprints.scielo.org\/index.php\/scielo\/preprint\/view\/1913<\/a>.<\/p>\n<p>Van Eck N, Waltman L. Software survey: VOSviewer, a computer program for bibliometric mapping. Scientometrics 2010; 2(84): 523-538. <a href=\"https:\/\/doi.org\/10.1007\/s11192-009-0146-3\">https:\/\/doi.org\/10.1007\/s11192-009-0146-3<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Hoje, \u00e9 um dia bem especial para mim. Lan\u00e7o em conjunto com o parceiro acad\u00eamico e amigo Di\u00f3genes Lycari\u00e3o, oficialmente, meu primeiro livro autoral, a saber \u201cAn\u00e1lise de conte\u00fado categorial: um manual de aplica\u00e7\u00e3o\u201d pela Escola Nacional de Administra\u00e7\u00e3o P\u00fablica&hellip;<\/p>\n","protected":false},"author":2,"featured_media":537,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":[],"categories":[4,1],"tags":[34,35],"post_series":[],"_links":{"self":[{"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/posts\/527"}],"collection":[{"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=527"}],"version-history":[{"count":8,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/posts\/527\/revisions"}],"predecessor-version":[{"id":543,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/posts\/527\/revisions\/543"}],"wp:featuredmedia":[{"embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=\/wp\/v2\/media\/537"}],"wp:attachment":[{"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=527"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=527"},{"taxonomy":"post_tag","embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=527"},{"taxonomy":"post_series","embeddable":true,"href":"http:\/\/www.compadd.ufpr.br\/index.php?rest_route=%2Fwp%2Fv2%2Fpost_series&post=527"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}