Documente Academic
Documente Profesional
Documente Cultură
bibliomtrica no convencional
J os J oaqun Brunner*
Felipe Salazar
Documento de Trabajo CPCE N 1
http://www.cpce.cl/
J unio, 2009
* Correo de contacto: josejoaquin.brunner@cpce.cl
La investigacin educacional en Chile: Una aproximacin bibliomtrica no convencional
J os J oaqun Brunner, Felipe Salazar
Documento de Trabajo CPCE N 1
J unio, 2009
Abstract
En este artculo, los autores se proponen cuantificar los resultados de la investigacin
educacional en Chile. Con tal este propsito revisan las prcticas de medicin bibliomtrica
en boga, basadas en la contabilidad de artculos registrados en las bases de Thomson-ISI, y
describen sus efectos sobre la organizacin del trabajo cientfico, la reputacin de los
investigadores, su carrera acadmica y la asignacin de fondos nacionales a la
investigacin. Tan poderosos son dichos efectos que los autores sugieren podra hablarse de
un proceso de ISIficacin de la produccin cientfica, tambin en Chile. Luego los autores
muestran las fallas y falencias que presenta este tipo convencional de medicin en el caso
de las ciencias sociales, las humanidades y la investigacin educacional, y revisan la
literatura que aborda estos dficit y algunas de las alternativas de medicin que se
proponen. Por ltimo, los autores realizan un ejercicio emprico de cuantificacin de la
produccin en el caso de la investigacin educacional en Chile, usando la tecnologa del
Google Scholar on Google Acadmico e ndices de medicin de nueva generacin, en
particular el ndice h, segn los datos obtenidos durante Marzo 2008.
2
Debellamaralareflexinelhechoquealrededordel90%delosartculospublicadosenrevistascientficas
nosecitan.Msan,hastaun50%deellosnosonledosnuncaporningunaotrapersonaquenoseansus
autores,losparesevaluadoresyloseditoresdedichasrevistas.
L.I.Meho,TheRiseandRiseofCitationAnalysis,2007
Dndeuninvestigadorpublicaycmol/ellaescitadopuedefrecuentementeserpercibidocomodemayor
importanciaqueelcontenidodelartculo.
C.Steele,L.ButlerandD.Kingsley,ThePublishingImperative:thepervasiveinfluenceofpublicationmetrics,
2006
3
Elcontextoevaluativodelasciencias
Elprogresoenlacarreraacadmicadelosinvestigadores;laevaluacindesu
productividadyladesuscolectivos,trtesedegruposoequiposdeinvestigacin,
departamentos,centros,institutos,universidadeso,inclusopases;elprestigiodeestos
colectivosyladesusmiembros,ascomosureconocimientoyreputacindentrodelas
correspondientescomunidadesdeparesocolegiosinvisibles;laasignacincompetitiva
defondosylaorientacindelaspolticasdedesarrollocientfico,todoestodependeenla
actualidad,crticamente,delamedicinderesultadosdelaactividaddeinvestigacin.
Tambinlaevaluacinyacreditacindeprogramasyunidadesdeposgradoe
investigacinconsideranlaproduccindesusmiembros,individualycolectivamente,
comounparmetroesencial.Porltimo,elpropioprestigiodelasuniversidades,ysu
ubicacinenlosrankingsnacionaleseinternacionalescomoelAcademicWorldRanking
ofUniversities(AWRU)porejemplo
1
atribuyenunvalorpreponderantealaproduccin
institucionaldeconocimiento,medidadeacuerdoaindicadoresconvencionalmente
aceptados.
Enefecto,lasmtricasempleadasparaestefin
2
desarrolladasbajolosenfoques
comnmentedesignadoscomodelacienciometra,bibliometraeinfometra,aunqueen
propiedadcadaunoserefiereauniversosdistintos(HoodyWilson,2001)respondena
unmodelosimple,expeditoydepotentesconsecuencias.Suselementosesencialesson:
(i)elnmerodeartculospublicadosporuninvestigadoroentredosomscoautores
duranteunperododeterminadodetiempo;(ii)elnmerodecitasrecibidaspordichos
artculosduranteuntiempoespecificado,y(iii)elfactordeimpactodelasrevistasenque
dichosartculosaparecenpublicados.
3
1
AcademicRankingofWorldUniversities,ShanghaiJiaoTongUniversity,Shanghai,China.Disponibleen:
http://ed.sjtu.edu.cn/ranking.htm
2
Paraunacompletarevisinypuestaaldadelaliteratura,verREPP(2005)
3
Elfactordeimpactodeunarevistacientfica(conocidoporsusiglaeninglscomoIF,ImpactFactor)fue
introducidoporE.Garfield,fundadordelInstituteforScientificInformation(ISI),hoyThomsonScientific.
Expresalaraznentreelnmerodecitasyotraspublicacionescitablesrecientes.Entonces,elfactorde
impactodeunapublicacinsecalculadividiendoelnmerodecitasdelaocorrienteporeltotalde
artculosaparecidosenesapublicacinenlosdosaosprevios(Garfield,1994).Proveeunmediopara
ranquear,evaluar,categorizarycompararpublicaciones.ElIFdelasrevistasregistradasporThomsonISIse
publicaanualmenteenelSCIJournalCitationsReport(JCR).ThomsonISIempleaadicionalmentedosndices
complementarios.Uno,elImmediacyIndex,secalculadividiendolascitasqueunapublicacinrecibenenel
presenteaoporelnmerodeartculosquepublicaeneseao,esdecir,elImmediacyIndex2006esel
promediodecitasen2006paraartculospublicadosen2006.Proporcionaunamedidadecunrpidolos
artculossoncitadosunavezquesonpublicados.Elotro,denominadoCitedHalflife,representaelnmero
deaosqueelnmerodecitasactualesnecesitaparabajardel50%desuvalorinicial.Proporcionauna
medidadecuantotiempolosartculosdeunapublicacinsiguensiendocitados.Paramayorinformacin,
verThomsonScientificen:http://thomsonreuters.com/business_units/scientific/free/essays/impactfactor/.
ParaunahistoriadelsurgimientoydifusindelIF,vaseGarfield(2005).Paraunabrevereseadel
surgimientodelanlisisdecitas,verYancey(2005).
4
Tambinlatecnologaquehaceposibleestasmedicionesesrelativamentesimpley
directa,aunquecostosaynosiempretransparente.Consisteenelusodebasesdedatos
bibliomtricos,entrelascualeslasmscomnmenteutilizadas,aunquenolasnicas,son
provistasporThomsonScientific
4
(Recuadro1),msconocidoporsuanteriornombrede
InstituteforScientificInformation(ISI):elScienceCitationIndex(SCI),elSocialScience
CitationIndex(SSCI)yelArtsandHumanitiesCitationIndex(AHCI),loscualesregistran
alrededorde7.500revistascientficasen200especialidadesdisciplinariasyproporcionan
regularmenteestadsticassobrecitasapartirdelao1997.Asuturno,laWebofScience
(WoS)deThomsonISIagrupaestasbasesyotrasenunPortal,conuntotalde9mil
revistasyunregistrodemsde35millonesdecitas,facilitandosuacceso,anivel
mundial,atravsdeInternet.
Laampliadifusindeestasmtricas,sumodelodebaseytecnologa,determinanhoy,
casisincontrapeso,elentornoevaluativoglobaldentrodelcualsedesenvuelvela
actividadcientfica.ComosealanYangyMeho(2006),investigadoresyadministradores
enmuchasinstitucionesacadmicasalrededordelmundoutilizanhoydatosdecitaspara
susdecisionesdecontratar,promoveryotorgarposicionesacadmicasporvida(tenure),
entreotras.Lacontabilidaddecitaslesproporcionaunindicadorconfiableyeficientepara
evaluarlaperformancedeautores,proyectos,programas,institucionesypasesyel
impactorelativoycalidaddesutrabajo.Luegoveremosqueestapercepcinoptimista
presentaimportantesflancosdbiles.
4
Enelterrenocomercial,elprincipalcompetidordeThomsonISIeslacasaeditorialElsevier,cuyasbasesde
datosScopusregistran15.000revistas.InformacindebasesobreScopussehalladisponibleen:
http://www.info.scopus.com/docs/content_coverage.pdf
5
Recuadro1
ThomsonISI:principalproveedordebasescienciomtricas
Dentrodelosrankingsdeuniversidadesyejerciciosdeevaluacindelainvestigacin,labibliometrajuegaunrol
importante,ydentrodeella,lamtricadeThomsonScientificesunfactordominante.Garfield,elcreadordelScience
CitationIndex(SCI),actualmentepartedeThomsonScientific,haargumentadoquelosfactoresdeimpactoenla
literaturacientficasonusadosahoradeunamaneraquedifcilmentefueconcebidaalmomentodeelaborarlos.
Garfieldcreeque,comolaenerganuclear,elfactordeimpactopuedeserunabendicinamedias.Esperquefuese
usadodemaneraconstructivareconociendoqueenmanosequivocadaspodraserobjetodeabusonuncapredijimos
quelaspersonasconvertiranestoenunaherramientadeevaluacinparaentregarbecasyfinanciamiento(Garfield,
2005).
DesdelaadquisicindeSCIysusndicesdecitasporpartedeThomsonScientificaprincipiosdelos1990s,hahabido
uncambiomarcadoenelmarketingycomercializacindelosproductos.Unobservadorhallamadoalperodopre
ThomsoncomoelPerodoRomnticodeSCI,cuandoalosespecialistasenelcampotambinselespermitauna
mayorlibertadparaexaminarlainformacin(BrauncitadoenAdam,2002).Elsignificativoaumentoenlainfluenciade
ThomsonScientificharesultadodeunacombinacindemayordominanciadelmercado,comodeunaaceptacinde
administradoresdeloquelesparecenherramientascompletasparaelanlisisdeldesempeodelainvestigacin.
ThomsonScientificesunaimportantecompaamultinacional,conunentendibleobjetivodeaumentargananciasy
retornosasusaccionistas.En2005,laThomsonScientificWebofKnowledgereportunincrementoensuusode62%.
Msde54millonesdesesionesdeusuariosfueronregistradas,conunincrementode27%enelpromediodesesiones
porcliente.EnelReinoUnido,msdeunmillndesesionesdeusuariofueronregistradasenEnerode2006.Estas
sesionesestnaumentandoenunpromediode20%almes,conunpromediodetresbsquedasporvisita(Caldwell,
2006).Cadasesin,claramentereportaretornosfinancieros.
LainformacindecitasdeThomsonScientific,esinvaluableparaaquelloscuerposenbsquedadeevaluar
investigacin,puessehaafirmadoqueentreganunavararpidayfcilparamedirlacalidaddelainvestigacin
(Adam,2002).Esclaroqueenlabsquedadeaccountabilityyrankingsdeexcelenciaeninvestigacin,losndicesde
citasdeThomsonScientifichanadquiridounaimportanciaquenohasidoponderadaporelentendimientodelas
limitacionesinherentesdelsistema.Lostomadoresdedecisionesusualmentenoestnaltantodelosproblemasenel
usodelainformacin,porejemplo,inherentesasesgosdepaseseidiomas,ladiferenciaentrepatronesdecitasentre
disciplinas,lafaltadecoberturadeciertostemas,lanecesidaddelimpiezabibliogrfica,patronesdeautocitasde
autores,etc.
ThomsonScientifichaadvertidodelriesgodeemplearsuinformacincomoelfactoresdeimpactoparaevaluar
individuos:enefecto,lospuntajesnuncafuerondiseadosporThomsonScientificparaseraproximacionesdela
influenciadelosartculos,ocuandosonagregados,deltrabajodelosindividuos(Kipnis,2002).ThomsonScientific
mismosealaqueelfactordeimpactonodebeserusadosinatencincuidadosaalosmltiplesfenmenosque
afectanlastasasdecitas,comoporejemploelnmerodereferenciaspromediocitadasenelartculopromedio.El
factordeimpactodebeserusadojuntoaunarevisininformadadelospares(ThomsonScientific,2006).
Fuente:Steele,ButleryKingsley(2006:4).Verallreferenciasdeltexto.
Encualquiercaso,Chilenosehallaajenoaesteprocesoquebienpodrallamarsede
ISIficacindelainvestigacinacadmicasegnsereflejatantoenestudios
cienciomtricosdelaproduccincientficanacional
5
como,msvitalmente,enlaprctica
5
Losmsrecientesdeestosestudiosserefierenalascienciasagropecuarias,qumica,cienciasbiomdicas,
astronoma,fsica,ecologa,matemticas,cienciasdelatierraeingeniera(Inestrosaetal,2005)y,
separadamenteabiologa(HidalgoeInestrosaetal,2005)yalgunasdesussubdisciplnas(Krauskopf,2002),
biomedicina(Israeletal,2005),cienciasqumicas(Gargalloetal,2005),cienciasmatemticas(Manasevich
etal,2005),fsica(SotoyZambraetal,2005),astronoma(Lpezetal,2005),cienciasagronmicasy
forestales(Cooperetal,2005),cienciasambientales(KalinArroyoetal,2005),cienciasdelaingeniera
6
cotidianadelosinvestigadores,enladistribucindeincentivosyreconocimientosal
interiordelasuniversidadesyenlamaneracomoseorganizanydirimenlosconcursosde
investigacin.Segnconcluyeunrecienteanlisisdebalancedelainvestigacinnacional,
enelmbitodelasciencias,losnuevosaportesalconocimiento,slosonreconocidos
comotalessisonpublicadosenunarevistacientficaquesometedichosresultados,sus
mtodosyconclusiones,alescrutiniodeexigentesparesevaluadoresyuncomiteditorial
deprestigio.Esaeslaraznporlaquelacapacidadcientficadeunpasestreflejadapor
lacantidadycalidaddelaspublicaciones(Allendeetal,2003:408).Msadelantese
discutiresteaserto.
Problemasdelamtricaconvencional
Apesardelentusiasmoquedespiertaelempleodelacontabilidaddepublicacionesycitas
enamplioscrculoscientficosyadministrativos(gubernamentalesyacadmicos)al
puntoquecantidadycalidadparecieranhabersevueltoequivalenteexistenfundadas
dudasrespectodeesteenfoqueysusvariadasaplicaciones.Engeneral,ellasapuntanalas
limitacionesquepresentanelmodeloylatecnologasubyacentesaestasmtricas
convencionales.Laliteraturacrticaesabundanteenrelacinaambosaspectos.Sus
sealamientosmsrelevantespuedenresumirseenlossiguientespuntos.
6
LacontabilidaddecitasenlasbasesdeThomsonISIsehallalimitadanicamentea
laspublicacionesincluidasenlalistamaestraderevistasdeThomsonISI.
7
Entre
stasnosecuentanlibros,captulosdelibros,disertaciones,tesis,documentosde
trabajos,informes,presentacionesencongresosyartculospublicadosenrevistas
noISI(Harzing,2007),textosusualmenteutilizadosenlacomunicacinde
resultadosporlascienciassocialesylashumanidadesyquefiguran
prominentementeenlascitasdealgunasdeestasdisciplinas(Nederhofetal,1989).
Incluso,lalistamaestraderevistasdeThomsonISI,lacualserenueva
peridicamente(Testa,2007),slocomprendeunapequeafraccindelasrevistas
cientficasdelmundo.Porejemplo,afinesdelosaos90elSCIcubraapenasun
2,54%deltotalmundialestimadoderevistascientficas(Seglen,1997).Adems,la
coberturaosea,elnmeroderevistasporreasocamposdisciplinarioses
desigual(Seglen,1997),perjudicandoadiversasdisciplinascomoreportala
(BrievayRuizdelSolaretal,2005),cienciasdelatierra(Aguirreetal,2005),cienciasdelmar(Castillay
Fernndezetal,2005).Fueradelmbitodelascienciasbsicasyaplicadas,existeunestudiosimilarparael
casodeeconomayadministracin(Contreras,EdwardsyMizala,2006).Ademsexistenestudiossobreel
posicionamientodeunarevistacientficachilenaenelJCR(Krauskopf,2003);laproductividaddelos
programasnacionalesdedoctorado(Krauskopf,1999);elestadodelaproduccincientficaenChiledurante
ladcadadelos70(KrauskopfyPessoa,1980)
6
Paraunarevisindelaliteratura,verBorgmanyFurner(2002).
7
Listadisponibleenhttp://scientific.thomson.com/mjl/.
7
literatura,porejemplo,paraelcasodelapaleontologa,lascienciasdela
comunicacinylascienciasdeldeporte(Steele,ButleryKingsley,2006);varias
disciplinasdelascienciassocialesyhumanidades,incluyendolainvestigacin
educacional;lascienciasdelacomputacin,lasartesyarquitecturayotras(Butler
2006a;REPP,2005).
ISIincluyesolounreducidonmeroderevistasenotrosidiomasdiferentesdel
ingls.Portantonocontabiliza,engeneral,citasapublicacionesenotrosidiomas.
MehoyYang(2007)reportanquelaWoSincluyesolamenteun1,14%decitasa
publicacionesenidiomasdistintosdelinglsyScopusun0,70%.Como
consecuencia,revistaspublicadasenalemnofrancsporejemplo(ylomismovale
paraaquellasenespaol),tienenunbajofactordeimpacto.Asuturno,losautores
queallpublicanincrementansuportafoliodeartculosperonosundicede
impacto.Unestudioarrojaclaraevidenciadequeelusoderevistasenidioma
alemnpuedellevaraunimpactomenorenalrededordeun25%.Luego,una
institucindeesepas,medianteelsimpleexpedientederemoverdelacontabilidad
laspublicacionesenaquellasrevistas,ycontarsloaquellasdondesus
investigadorespublicaneningls,podraincrementarsundicedeimpactohastaen
25%(vanRaan,2005).(Recuadro2).
Recuadro2
Coberturadepublicaciones
Unapremisamuybsicaquesoportaelreportecuantitativoesquelosindicadoresbibliomtricossonapropiadossolo
cuandolaspublicacionessonlosprincipalesvehculosdelconocimiento(VanRaan1993:152).Esesencialdeterminarla
proporcindeltotaldelaproduccinqueescubiertoporcualquierbasededatosutilizadaparaelanlisis.Sineste
conocimiento,nosepuedenrealizarjuiciossobreningnindicadorderivadodeestosdatos.
DadoquelasbasesdedatosISIsonlasdeusomsextensoparaelanlisisdereferencias,granpartedeladiscusinse
hacentradoenellas,sinembargolostpicossonequivalentesparacualquierbasededatos.LosndicesISIincluyen
slounaseleccindelaliteraturapublicada,centrndoseprincipalmenteenartculosderevistas.ISIdeclaraindexarel
ncleoderevistasdetodosloscamposdeinvestigacin,entregandounacoberturacomprehensivadelasrevistasms
importanteseinfluyentesdelmundo(ThomsonISI2004).Sucoberturadelaproduccinparalamayoradelas
disciplinasdelascienciasnaturalesesbuena,peroesmenoscomprehensivaparalascienciassocialesyhumanidades,
quedependenfuertementedepublicacionesnoindexadas,principalmentelibros,monografasycaptulosdelibros,
comomediosparadifundirlainvestigacin.Enlascienciasaplicadas,losreportesyartculosdeseminariosjueganun
rolimportante,ylamayoradeestoscaenfueradelacoberturadeISI(LePair1988;VanRaanyVanLeeuwen2002:
614).Inclusodentrodelascienciasnaturales,haydisciplinascomolataxonoma,matemticasycienciasdelatierra
quenoestnbienrepresentadas(MoedandHesselink1996:830;KorevaaryMoed1996).
Sehahalladoquelasrevistasdedisciplinaspequeas,camposorientadosenformalocalyaquellosnopublicadasen
inglsestnsubrepresentadas(Nederhof1988:203).Otroproblemaesquelasrevistasnuevassoloseincluyenenlas
basesdedatosISIdespusdedostresaosdeexistencia(Rinia2000:368).Estopuedecrearproblemasenla
evaluacindecamposderecientedesarrollo.Riniarecomiendaelusodemsdeunabasededatos(porejemploSCIy
ChemicalAbstracts)conelfindeincrementarlacobertura(ibid).
Fuente:REPP(2005:16).Verreferenciaseneltextocitado.
8
Porsulado,elfactordeimpacto(IF)delasrevistasempleadoporlamtrica
convencional(JCR)exhibeunabajacorrelacinconlascitasefectivasaartculos
individuales.Enefecto,segnmuestraSeglen(1997),artculosubicadosenlamitad
deartculosmscitadosdeunarevistasoncitados10vecesmsfrecuentemente
queaquellosubicadosenlamitaddeartculosmenoscitados.Deigualforma,hasta
lamitaddelostrabajosquesepublicanenrevistasdealtoimpactonosecitan
nunca;85%delascitasdeunarevistacorrespondea15%delosartculosquese
publicanyhasta80%delasreferenciasqueaparecenenunmanuscritosetranscribe
delalistadereferenciasqueposeenotrosartculos,loquesugierequemuchos
autorescitanmslostrabajosquesemencionanconmayorfrecuenciaenlalistade
otrosautores(LenSarmientoetal,2007).Enconcreto,sehasealadoqueelao
2004,un89%delascitasdelaprestigiosarevistaNaturefuegeneradoporun25%
delosartculospublicadosyque,enelcasodelasrevistasISI,unncleode2mil
revistasdacuentadel85%deltotaldeartculospublicadosyun95%delosartculos
citados(Steele,ButleryKingsley,2006:10).
8
Eltipodetemscontabilizadoporlamtricaconvencionaldecitasdalugaraserios
problemasenlamedicindeimpacto.Enefecto,AminyMabe(2000)concluyenque
deemplearseunadefinicinmuyestrictadelIF,segnlacualsedividieraslocitas
aunostiposseleccionadosdeartculosporelnmerodeesetiposeleccionadode
artculos,podransurgirconsiderablesdiferenciasrespectodelfactordeimpacto
publicitado.Encambio,lousualesincluirenelnumeradorcitasatodotipode
publicacionesconsideradascitables,entantoqueeneldenominadorslose
contabilizaciertotipodetemsdefinidosporISIcomoartculosdeinvestigacin,
notastcnicas,revisionesdeliteraturayproceedingspapers(TogiayTsigilis,2007).
Heaquunejemplo:Cuandoen1997LancetdecididividersusCartasen
CorrespondenciayCartasdeinvestigacinsiendoestasltimasrevisadaspor
8
Otroejemplo:Consideredosrevistasdesiquiatrapublicadasparaunaaudienciageneral:elAustralian
andNewZealandJournalofPsychiatry(ANZJP)yelCanadianJournalofPsychiatry(CJP).Aplicandolabase
dedatosdeISIWebofScience,podemosexaminarelsupuestovnculoentreelIF,citasyelvalordeun
artculoenparticular.Porejemplo,sicalculamoslaproporcindecitasdetodoslosartculosdecadarevista
originadoporel50%delosartculosmscitados,ciertopatrnemerge.EnelcasodeANZJP,el50%delos
artculosmspublicadosentre1990y1995dancuentadel94%(rango,91%[1992]a98%[1990])detodas
lascitasaartculosdeesarevista.CifrasparaCJPsonvirtualmenteidntica:94%(rango91%[1991]a96%
[1994]).Deaqulosautoresconcluyenlosiguiente:Unaconclusindeestoshallazgosesquelamitadde
losartculosdeambaspublicacionesvirtualmentenorecibencitas.Podemosconcluirdeestosdatos(yde
hallazgoscomparablesdeotraspublicaciones,comoaquellosencardiologa)quedeterminarelvalor
acadmicodeunartculoapartirdelIFdelapublicacinenqueaparece,eserrneoypuedellevara
engao(Walteretal,2003).
9
pares,yportantocitablesparaeldenominador,elincrementeneldenominador
llevaunacadaenelfactordeimpactodesdevalorescercanosa17(unnivelque
habamantenidoporcuatroaos)a11,79(Russel,2003).
Laestructuradeloscamposdeinvestigacin(disciplina)ysuorganizacinafectansu
IF.Enefecto,diferentescamposdisciplinariostienentambindiferentesprcticas
deproduccinycomunicacin,loqueensumomentollevaGarfield(1996)a
advertirquelosestudiosdecitasdebennormalizarseparadarcuentadevariables
decampo,odisciplina,yprcticasdecitacin.Elmismoalegatofuepresentado
vigorosamenteporSchubertyBraun(1996),quienessealan:unacosaessegura:
lameracontabilidaddepublicacionesocitassoncompletamenteinsuficientespara
medirelmritocientfico;slopuedenusarseparafinesevaluativosdespusdeuna
apropiadaestandarizacinonormalizacin.Porejemplo,sehamostradoquelos
factoresdeimpactosonengeneralmsaltosenlascienciasbsicasqueenlas
aplicadas(AminyMabe2000).Porelcontrario,camposdeinvestigacinpequeos
suelennotener,otenerpocas,revistasdealtoimpacto.Porelcontrario,camposde
investigacincuyaliteraturasevuelveprontamenteobsoletasehallanenventaja
(Seglen,1997).Engeneral,ydesdesuorigen,losindicadoresbibliomtricoshansido
utilizadosdepreferenciaenelcampodelascienciasnaturalesydelavida(Nederhof
etal,1898).
Lanaturalezadelasrevistas,ysurelacinconlasdinmicasdelcampodelcual
proceden,sontambinvariablesqueincidensobrelosresultadosbibliomtricos.
Porejemplo,revistasdecarcterinterdisciplinarioynaturalezageneralistatiendena
sermsfrecuentementecitadasquerevistasespecializadasconunfocoyaudiencias
msrestringidos(GlnzelyMoed,2002).Elnmerodeautoresquepublican
conjuntamenteincideenlafrecuenciamsfavorabledelascitasencomparacin
conlaspublicacionesdeautoresindividuales(Rousseau,1992).Asimismo,revistas
publicadasenintervalosmscortosdetiempo,oqueincluyentemsdeinters
actual,tiendenatenerunmayorIF(AminyMabe,2000).Algosimilarocurrecon
revistasqueincluyenartculosderevisindelaliteratura(estadosdelarte)oquese
dedicanpreferentementeaestafuncin(Seglen,1997).
Porltimo,existendiversosproblemastcnicosqueentrabanelanlisisdecitas.
VanRaan(2005)enumeravarios:erroresoruidoenelprocesodeaparejamiento
entrelapublicacinquecitaylapublicacincitada;equvocosdeatribucindelas
publicacionesydefiliacindelosinvestigadoresoequiposdeinvestigacin;
confusinenlaidentificacindelasunidadesdeorigendelaspublicacionescuando
10
ellassehallanubicadasenorganizacionescomplejas,etc.Otrosautoresagregan
diversoselementosadicionalesaestalista:elIFnohacedistincinentrecrticas
positivasynegativas();laventanadetiempodedosaosparaelclculodelIFes
arbitraria(Walteretal,2003)y,cuandosecambialaduracindedichaventana,se
alterantambinlosvaloresdelIF;lasbasesdedatoscienciomtricoshabitualmente
nocorrigenporelefectodeautocitacin(personal)ydecitacinentreartculosde
unamismarevista(inhouse).Finalmente,sehaobservadoqueexistenprcticas
manipulativasderevistaseinvestigadoresdestinadasainflarelIFdeaquellasyel
nmerodecitacionesalosartculosdestos.
9
Ensuma,comosealanWalterycoautores(2003)entreloscualeshaydosexeditores
delMedicalJournalofAustralialapresuncindeunvnculopositivoentrenmerode
citasycalidadeserrnea,enlamedidaquecitamosartculospordiversasrazones,
incluyendoreferenciasainvestigacinquejuzgamossospechosaopobre.
Alamisma
conclusinarribanotroscomovanRaan(2005),quienhaescritoquelosmotivospara
hacerreferencia(onohacerla)aunartculoenparticularpuedenvariar
considerablemente(Recuadro3).Y,msengeneral,dice,elntegroprocesopartiendo
conactividadesdeinvestigacinhastallegararesultadospublicables,preparacindeun
artculo,envodeste,supublicacinylascitasalmismovaraconsiderablementepara
diferentescamposdelacienciaydentrodeuncampo.
Recuadro3
Atributosdelosdocumentoscitados
Calidaddelcontenido:elcontenidodeldocumentoesdealtacalidad.
Sexodelautor:eldocumentocitadohasidoescritoporunautorhombre.
Nmerodeautores:eldocumentocitadohasidoescritoporunnmeroampliodecoautores.
Fuente:eldocumentocitadoesunartculoderevista.
Citacin:eldocumentocitadohasidocitadofrecuentemente(efectoMateo).
Tpico:eldocumentocitadoesrecienteenunreacaliente.
Enfoque:eldocumentocitadocontieneunarevisindelaliteraturaprevia.
Campo:eldocumentocitadoperteneceauncampodelascienciasbsicasantesquealasaplicadas.
Asimilacin:eldocumentocitadonocontienematerialquesehavueltodecomnentendimientoyportantohasido
obliteradoporasimilacin.
Fuente:BorgmanyFurner(2002:13).Verenestetextolasrespectivasreferenciasparacadaatributo.
9
Laseelsiguienteprrafo:En1996,lapublicacinLeukemiafueacusadademanipularsuIF,alhaber
circuladounacartaalosautoresdeartculosenviadosalarevista,solicitandoamablementequeagregue
referenciasaartculospublicadosenLeukemiaensuartculo.Ciertamente,laautocitacindelosautoresy
citacinentreartculosdeunamismarevistapuedeserlegtimaynecesaria,peropuedeserexcesivae
inflada.AlessandroFigTalamanca,enunaelocuenteylargacrticadelfactordeimpacto,publicadaen
2002enunarevistadeestomatologayodontologa,indicaqueunocitaautoresdelosqueesperaser
citado(Russel,2003).Asimismo,verSteele,ButleryKingsley(2006:610)yMonastersky(2007).
11
ElestatusdelainvestigacineducacionalenelmundoISI
Frentealasmtricasconvencionalesestoes,deltipoThomsonISIelcampodela
investigacineducacionalconfrontaseriosproblemasdereconocimientoyestatusanivel
internacional
10
,ascomodereconocimientoeinstitucionalizacinalinteriordelsistema
universitario.Variosfactoresexplicanladificultadenqueellaseencuentra,ylas
resistenciasqueofrece,parahacersepartedelprocesoquehemosdenominadode
ISIficacindelainvestigacinacadmica.Estosfactorespuedenexplicarsebajodos
rdenesdeconsideraciones.Unocorrespondeaconsideracionesdeordengeneraly,el
otro,concernientealainvestigacineducacionalenChile,aconsideracionesdeorden
nacional.Abordaremossucesivamenteambosaspectosenestaylasiguienteseccin.
Porlopronto,enelordendelasconsideracionesgenerales,yenlneaconlodichoenla
anteriorseccin,lasbasesdeThomsonISIcubrenslounlimitadonmeroderevistasde
ladisciplina,enlastrescategorasenquelascalifican:EducationandEducational
Research
11
,Education,Special
12
ambasenlaedicindelJCRdecienciassocialesy
Education,ScienceDisciplines
13
,incluidaenlaedicindecienciasdelJCR.Efectivamente,
mientrasqueelao2004elUlrichsPeriodicalsDirectoryregistrabaenladisciplinade
educacin1.226revistasacadmicasconevaluacindepares,lasbasesdeThompson,en
tanto,incluaneseaosolamente137(un11%);respectivamente91,26y20enlastres
categorasmsarribaenunciadas(TogiayTsigilis,2007).
Losmismosautoresmuestranqueelao2004,entrelas54categorasdisciplinariasque
distingueelJCRdecienciassociales,las91revistasincluidasdentrodelgrupode
10
Laanteriorafirmacinnoseaplicanecesariamentealainvestigacinoriginadaenalgunospases
anglosajones:EstadosUnidosdeAmrica,enprimerlugar,yprobablementetampocoaaquellaproducida
enelReinoUnidoyCanad.VerScienceMetrix(2004)yNederhofetal(2003).Unainteresantecoleccinde
documentossobrelaaplicacindeindicadoresbibliomtricosenlascienciassocialesyhumanidadesse
encuentraenelsitioResearchQualityFrameworkdelaUniversityofSouthAustralia,en:
http://www.unisa.edu.au/rqf/resources.asp#humanities.
11
Education&EducationalResearchcubrefuentesentodoelespectrodelaeducacin,desdeteoraa
aplicados,desdecuidadotempranohastaPh.D.Incluidaenestacategoraestnlosrecursosenpedagogay
metodologa,ascomohistoriadelaeducacin,lectura,estudiodecurrculos,polticaseducativas,yla
sociologayeconomadelaeducacin,ademsdelusodecomputadoresenlasaledeclases.SocialScience
CitationIndex,ScopeNotes,2007.Disponibleen:
http://scientific.thomsonreuters.com/mjl/scope/scope_ssci/
12
Education,Specialcubrefuentespreocupadasdelaeducacinyeldesarrollodelaspersonascon
necesidadesespeciales,incluyendoaaquellosconhabilidadesespecialesyaaquelloscondificultadde
aprendizaje.SocialScienceCitationIndex,ScopeNotes,2007.Disponibleen:
http://scientific.thomsonreuters.com/mjl/scope/scope_ssci/
13
Education,ScientificDisciplinescubretodoslosrecursosenlasdisciplinascientficas,incluyendobiologa,
farmacia,bioqumica,ingeniera,qumica,nutricinymedicina.ScopeNotes,ScienceCitationIndex,2005.
Disponibleen:http://scientific.thomsonreuters.com/mjl/scope/scope_ssci/
12
EducationandEducationResearchqueeslacategoraqueaquinteresaalcanzanun
factordeimpactopromediode0.525,ocupandoellugarnmero49,sloporencimade
estudiosderea(0.394),historia(0.329),historiadelascienciassociales(0.410),historiay
filosofadelasciencias(0.434)ytica(0.445).Estocomparadoconndicesmximos,para
elcasodelascienciassociales,superioresa2.500enelcasodepsiquiatra,yentre2.000y
1.500enloscasosdegerontologa,psicologa(biolgica)ypsicologa(clnica).Se
considerausualmentequerevistasconunIFinferioralaunidad(1.000)puedenser
caracterizadascomodebajoimpacto(CarryBritton,2003).Bajoesteconcepto,delas98
revistasdeeducacineinvestigacineducacionalregistradasen2005,85%deellassonde
bajoimpactoyslo14alcanzanunIFde1.0osuperior(conunmximode2.792enel
casodelJournalofLearningSciences)(JflyCN.net,2007).
14
Encuantoalosidiomasdelaspublicacionesdeeducacinregistradasenlasbasesde
ThomsonISI,cabrahablar,msbien,deunnicoidioma,ensingular.Puesdelas98
revistasqueseacabademencionarparaelao2005,slo1sepublicaenunidioma
diferentedelingls:larevistaalemanaZeitschriftFrPadagogik.Adicionalmentehaydos
otrasrevistasunachinayunarusaque,ademsdepublicarseensuidiomaoriginal,
aparecentambineditadaseningls:ChineseEducationandSocietyyRussianEducation
andSociety.
15
EnelmundoISIdelainvestigacineducacionalnoseincluye,portanto,
ningunarevistaenespaol.
16
Comodebieraesperarsedespusdelodichomsarribasobrelosidiomasdeorigendelos
artculosysuinfluenciasobreelIFdelasrevistas,lastrespublicacionesextranjeras
mencionadasposeenunreducido,casinulo,impacto:0.176enelcasodelarevista
alemana,0.098larevistachinay0.008larevistarusa,ocupandoellaselao2005,
respectivamente,loslugares91,97y98entrelas98revistasdeeducacinjerarquizadas
enlaescaladeimpacto(JflyCN.net,2007).
Pero,enrealidad,losasuntosdecoberturaeidioma,ylosdemsdecarctertcnicoy
metodolgicoqueafectanalasmtricasconvencionales,apenasrepresentanlasuperficie
delosproblemasconqueseenfrentalainvestigacineducacionalenelmundoISI.Msal
fondohaycuestionesdeestructura,produccinycomunicacinenestecampoque
14
VerApndice1.
15
ChineseEducationandSocietydisponiblesen:
http://mesharpe.metapress.com/link.asp?id=110902;
RussianEducationandSocietydisponibleen:
http://mesharpe.metapress.com/link.asp?id=110918
16
Recinelao2008fueincorporadalaRevistadeEducacindelMinisteriodeEducacin,PolticaSocialy
DeportedeEspaa.Disponibleen:
http://www.revistaeducacion.mec.es/
13
planteanobstculosdemayorgravitacin.Algunaliteraturabibliomtricaydelasciencias
sociales
17
,sehacencargodeestasdificultades,comoseveracontinuacin.
Efectivamente,diversosautoressehallanprontosaconcederquealgunasreas
acadmicas,disciplinasoespecialidadesenparticulardelascienciassocialesy
humanidades,incluyendolainvestigacineducacionalconfrontanseriasdificultadesala
horadesermedidasyevaluadasconlosmismosparmetrosquelasdemsdisciplinas
cientficas,especialmentelascienciasnaturales.
18
Cuandonosproponemosevaluarel
trabajoacadmicoenlascienciassocialesyhumanidades,escribeHicks(2005:2),nos
vemosrudamenteforzadosaabandonarlazonadeconfortynoshallamosexpuestosa
unconjuntodeliteraturafrancamenteconfuso.
Enelcasodelainvestigacineducacional
19
,estasdificultadesdeordengeneralsonde
variadanaturaleza.
a) Epistemolgicamente,setratadeuncampodeconocimientonopropiamente
disciplinarioniparadigmtico,enelcualcoexistenycompitendiversasescuelas
oenfoques(Bernstein,1975:PartII,7)queutilizandisparesteoras,metodologasy
estrategiasdeinvestigacin,todolocualresultaentrayectoriasnoacumulativas
deconocimientoyenunaintensaquerellaentornoalafundamentacindelos
distintosprogramasdeinvestigacinyalavalidezdelosprincipiosyprcticasde
validacindelconocimientoproducido.
17
Unainteresantecoleccindedocumentossobrelaaplicacindeindicadoresbibliomtricosenlasciencias
socialesyhumanidadesseencuentraenelsitioResearchQualityFrameworkdelaUniversityofSouth
Australia,en:http://www.unisa.edu.au/rqf/resources.asp#humanities.
18
VerporejemploMeho(2007);Hajjem,Harnard,Archambaultetal(2005);vanRaan(2005),las
mencionesalascienciassocialesylaeducacinenelartculodeHarzing(2005),AliagayOrellana(1999),
Line(1999).
19
Desdeelpuntodevistaqueaquinteresa,entendemosporinvestigacineducacional,igualcomohaceel
SocialScienceCitationIndex,aquellaquegeneralaspublicacionesreferidasalntegroespectrodela
educacin,desdetericaaaplicada,desdeeljardninfantilhastaelniveldedoctorado.Incluidasenesta
categorasehallanlaspublicacionessobrepedagogaymetodologa,aligualquesobrehistoriadela
educacin,lectura,currculo,polticaeducacional,sociologayeconomadelaeducacin,ascomotambin
elusodecomputadoresenlasaladeclases.VerSocialScienceCitationIndex,ScopeNotes2007,
disponibleen:http://scientific.thomsonreuters.com/mjl/scope/scope_ssci/.Dichaenumeracinpuede
complementarse,enelcasodeChile,conunalistadetpicosmsespecficos,como:equidadycalidad,
accesoycobertura,roldelEstado,centralizacinydescentralizacin,admisinyselectividad,proveedores
educacionales,mercadoeducacional,roldelEstado,profesindocente,gestindelasescuelas,
financiamientodelaeducacin,universidades,educacinsuperiornouniversitaria,investigaciny
desarrollorealizadoeninstitucionesacadmicasy,msespecficamente,publicacionessobreinvestigacin
educacional.Asimismo,incluyediversostipos,estilos,enfoquesytcnicasdeinvestigacin,desdela
construccindeteoraeducacionalaestudiosetnometodolgicos,desdeanlisiscuantitativoshasta
estudioscualitativos,desdeestadosdelarteaevaluacionesdeprogramaseducacionales.Sobre
investigacineducacionalverOECD(2007),FurlongyOancea(2005),McIntyre(1996).
14
b) Aloanteriorseagrega,enelmbitodeladivisinyorganizacindeltrabajo
acadmico,quelainvestigacineducacionalesunemprendimientotpicamente
transdisciplinario,quesehalladirigidoprincipalmentehaciaproblemaslocalesy,
porlomismo,altamentedependientedeloscontextosnacionalesdepolticas
sectorialesydelfuncionamientodelossistemasnacionalesdeeducacin.Gmez
yBordans(1996),porejemplo,planteanquemientraslacienciabsicaesla
cienciainternacional,lacienciaaplicada,entrelacualcabeincluirlainvestigacin
educacional,puedeencontrarunbuenvehculodetransmisinenlasrevistasde
carcternacional.Contodo,comosealalaliteratura,lostemaslocalesestn
infrarepresentadosenlasmtricasconvencionales,inclusocuandogeneran
investigacindecalidady/oaltoimpactosocial(AliagayOrellana,1999).Asu
turno,estafaltadeuniversalidadincideenunamsreducidacitabilidad
internacionaldelconocimientoproducido.Enefecto,laevidenciabibliomtrica
sugierequetantolosproductorescomolosconsumidoresdelascienciassociales
tienenunaorientacinpreferentementenacional(Hicks,2005).
c) Laanteriortesisdellocalismo/nacionalismoesintensamentediscutida.Enefecto,
labibliometraconvencionalpartedelsupuestodequelosresultadosde
investigacindebenserpublicadosenrevistasinternacionales,conevaluacinde
pares,comonicaformadeasegurarquedichosartculospuedensersujetosa
crticayverificacin(VanRaan,1996).Estoseraparticularmentenecesarioall
dondelascomunidadescientficassondereducidotamaoynoproporcionan
unamasacrticadeespecialistaslocalesqueestencondicionesdeejercerun
juiciodeconfirmacinorefutacin(Bernasconi,2007:15).Enbreve,lolocalno
deberaservirdeexcusaparasustraerlosresultadosdelainvestigacindelforo
pblicointernacional.Talargumentochoca,sinembargo,conelreconocimiento
porpartedelospropiospracticantesdelabibliometraconvencionalrespectode
loslmitesqueellapresentaparaabordardiversasreasdelascienciassocialesy
lashumanidades(Altbach,2006;Butler,2006a;REPP,2005;Hicks,2005;Powles
2005;VanRaan,1996;Nedershofetal,1989).
d) Porotrolado,estosmismosfactoresincidenenelhechodequelosprocesosde
produccindeconocimientoenestecampotiendanaadoptarlaformaquela
literaturaespecializadadenominaMP2(mododeproduccin2deconocimiento);
procesosorientadoshacialasolucindeproblemas,denaturalezahabitualmente
interdisciplinariaysujetos,encuantoalavalidacindesusresultados,nosloal
controlentreparessinotambinalcontrolporlaspartesinteresadasenel
problema(stakeholders)yporaudienciasnoespecializadasqueintervienenenla
arenapblica(Gibbons1998;Nowotny,Scott,Gibbons,2001).
e) Enlaesferadelacomunicacindelconocimientoproducido,elcampodela
investigacineducacional,aligualcomoocurreconvariasdisciplinasdelas
cienciassocialesyhumanidades,empleaunadiversidaddecanalesysoportesno
15
reconocidosporlosmediosconvencionalesderegistrodelaproduccincientfica,
deltipoThomsonISIylaWoS.
20
Dehecho,slounafraccinmenor,minsculaa
veces,delaspublicacionesprovenientesdeestecamposerealizanenrevistas
incluidasenelSocialSciencesCitationIndex(SSCI),adiferenciadeloqueocurreen
elcasodelaspublicacionesdecienciasnaturalesydelasalud.
21
Porelcontrario,
unapartesustancialdelaspublicacionesenelcampodelascienciassocialesy
humanidades,ylomismovaleparalainvestigacineducacional,serealizaatravs
delibrosycaptulosdelibros;revistasnacionalesyloquesuelellamarsela
literaturagris
22
,aunqueelgradoenqueelloocurrevaradependiendodelos
contextosnacionales,delasdiversasdisciplinasydeladisponibilidadderevistas
nacionales.Enunestudiosobrelaproduccindevariosdepartamentos
universitariosdelosPasesBajosendisciplinasdelascienciassocialesy
humanidades,seestablecequeentreun3%yun45%correspondealoquesus
autoresllamanliteraturadeesclarecimiento(oilustracin);estoes,textosde
divulgacineinformesexternos(Nedershofetal,1989).
f) Complementariamente,unainvestigacinllevadaacaboporungrupoaustraliano
(Steele,ButleryKingsley,2006;Butler,2006a),quecomprendeeltotaldela
produccinpublicadaporungrupodeuniversidadesdedichopasendiferentes
disciplinas,mostrquealcomparardichaproduccintotal(cuidadosamente
registrada)conaquellareconocidaporThomsonISI,aparecanresultados
fuertementedisparesentrelasdistintasdisciplinas.As,enunaprimerabanda
aparecendisciplinasrepresentadasconmsdeun75%desuspublicacionesenlos
registrosISI(qumica,cienciasbiolgicas,fsicaycienciasmdicasydelasalud).En
lasegundabandaseagrupanlasdisciplinasconmsdelamitadymenosdeun
75%reflejadaenlasrevistasISI(agricultura,cienciasdelatierra,matemticay
psicologa).Enlatercerabandaentre25%y50%decoberturaenISIaparecen
lasingenieras,filosofayeconoma.Porltimo,enlabandainferior(menosdel
25%decoberturaenrevistasISI)aparecen,enordendecreciente,cienciassociales
(general)(18,7%),cienciaspolticas(16,5%),cienciasdelacomputacin(15,9%),
historia(14,5%),administracin(12,6%),cienciasdellenguaje(11,4%),educacin
20
Paraunarevisindelaliteraturaenestepunto,vaseHicks(2005:27).
21
Lodichoesparticularmentevlidoenelcasodelaspublicacionescomunicadasenidiomasdistintosdel
ingls.
22
Laliteraturagrisesproducidaporagenciasdegobierno,organizacionesprofesionales,centrosde
investigacin,universidades,institucionespblicas,gruposdeinters,yasociacionesysociedadescuyo
objetivoesdiseminarinformacinactualaunaaudienciamsamplia.[]Enelambienteactualde
informacinelectrnica,Internetsehaconvertidoenlamayorfuentedediseminacinyobtencinde
literaturagris,yesusualquesirvacomointroduccininicialauntema.[]ComoJuliaGelfandindicaenun
artculopresentadoenlaConferenciaInternacionaldeLiteraturaGris(1997),lossitiosdecienciapoltica,
protocoloscientficos,yperiodismocientficosonejemplosdeliteraturagrisdisponibleenlaWebqueson
extremadamentevaliososparalacomunicacinentrecientficos.I.Weintraub,TheRoleofGreyLiterature
intheSciences.Disponibleen:
http://library.brooklyn.cuny.edu/access/greyliter.htm.Paraunarevisindelaliteraturabibliomtricasobre
estecanalnoacadmicodepublicacin,vaseHicks(2005:1316).
16
(9,7%),lasartes(9,5%),arquitectura(6,4%),derecho(5,4%),yperiodismoy
bibliotecologa(4,4%).Concluyenlosautoresdeesteestudioquelosindicadores
bibliomtricosconvencionalesoestndaresdebenjugarrolesdiferentesrespecto
delasdisciplinasagrupadasencadaunadeestasbandas.As,suaplicacinalas
disciplinasdelabanda1podraencontrargeneralaceptacin;enelcasodela
banda2,talesindicadorespodranofrecerinformacindeintersperodeben
aplicarseconcautela;enelcasodelasdisciplinasincluidasenlabanda3,aunque
estetipodeindicadorespuedeentregaralgunainformacindevalor,descansar
nadamsqueenellospodrallevaraserioserrores,entantoquesuutilizacinen
elcasodelabanda4nopuedesustentarse,desdeelmomentoquemenosdeun
quintodesuproduccinsehallaregistradaenrevistasISI.
g) Adicionalmente,sehaconstatadoquelasprcticasdeautoraycoautora,los
patronesdecitacinyeltiempoquetranscurreentrelaaparicindeuntextoyel
momentoenquesteempiezaasercitado,alcanzasupeakytiempoalolargodel
cualcontinasiendoobjetodecitas,difierengrandementeentrediferentes
disciplinas.Enelcasodelascienciassocialesylashumanidades,incluyendola
investigacineducacional,dichasprcticasypatronesadoptanpautasquetienden
areducirsupesoenlosregistroshabitualesdemedicindelaproduccinyel
impactodelconocimientocientfico.
23
ComohanobservadoNederhofetal(1989),
unaprcticadecitacindeamplioespectroypocofocalizadacomoeshabitual
enelcampodelainvestigacineducacionalfragmentalaliteraturaaunpuntotal
que,enloscasosextremos,nohayyalaposibilidaddeidentificarunancleo
comn,condicinquesueleentenderseimprescindibleparalaexistencia,
propiamente,deuncampodisciplinario.Enefecto,silasdisciplinasvienenaser
definidasporunncleoderevistas(ISIreconocidas)enquesuspracticantes
publicanysevinculanentresmediantecitas(SchubertyBraun,1996),entonces
camposconprcticasdecitacinnoconvencionales(dispersas,transdisciplinarias,
confrecuentereferenciaaautoresclsicosdeladisciplina,etc.)quedan
automticamenteexcluidosdelasmtricasdecorrienteprincipal.
Cabeagregarporltimoque,enelterrenodelagestinacadmicoinstitucional,la
investigacineducacionalcareceenparteporlasrazonesmencionadasmsarribade
lasuficientelegitimidadcomoparaserincluida,alladodelasdemsdisciplinas,enlas
redesinternasquevehiculizanlosrecursos,elpoderyelprestigiodentrodelacomunidad
cientficanacionaleinternacional.Estebajoestatusyreconocimientodelainvestigacin
educacionaltraeconsigounaseriedeefectosperversos,entreloscualespueden
mencionarselacrnicafaltadelegitimidaddelosinvestigadoresdeestecampo,su
dificultadparadisputaryobtenerrecursosencompetenciacondisciplinasmsfuertes,su
menorgradodeinternacionalizacin,sureducidacapacidadparalevantarprogramas
avanzadosdeformacindeinvestigadoresaniveldoctoralylaescasaatraccinrelativa
queelcampoposeeparareclutarajvenestalentoshacialaslaboresdeinvestigacin.
23
VaseaesterespectoBornmannandDaniel(2007),Butler,(2006,2006a),Hicks(2005)yVanRaan(2005).
17
Enestascondicionesseexplicatambinquelaproduccindeconocimientoproveniente
delcampodelainvestigacineducacionalgocedeescasoprestigioyencuentraserias
dificultadesparahacersevisibleenelmundoISI,entreotrasrazonespornohallarsesujeta
amedicionesdeproductividadeimpactoquepudieranserconsideradasvlidasporlas
demscomunidadesdisciplinariasyporlasagenciasdeapoyoalasciencias.Seinstalaas
uncrculoviciosodondeunabajaproduccindelcampoenelmundoISIhacequeella
pasedesapercibida,altiempoquelanoevaluacindesuproduccinefectiva(cuando
existe)lerestaoportunidadesdereconocimientoylamantieneenunestatutosemi
profesional.
LainvestigacineducacionalchilenaenelmundoISI
LainvestigacineducacionalposeeenChileunahistoriarelativamentelarga.Susorgenes
puedenremontarsealsigloXIX,teniendocomosusprimerospracticantesalos
inspectoresdeescuelasycomosusprimerosresultadoslosinformesadministrativos
presentadosporaquellos(Monsalve,1998).Suconsolidacincomocampointelectual,en
cambio,ocurreacomienzosdelsigloXX,configurascomoValentnLetelieryDaroSalas
(Brunner2008)yseexpresa,fundamentalmente,atravsdelapublicacindelibros,
ponenciaspresentadasenloscongresospedaggicosydeltrabajodelospedagogos
experimentales(Nuez,2002).Suinstitucionalizacinmoderna,propiamenteacadmica,
tienelugardurantelasegundamitaddelsigloXX,conlacreacindelInstitutode
EducacinfundadoporIrmaSalasyeltrabajopionerodeestainvestigadora(Nuez,
2001).Apartirdeestemomento,elcampodelainvestigacineducacionaltransitadesde
unafaseartesanalcaracterizadacomoelproductopocofrecuentedeunospocos
artesanoscalificadosquetrabajabanaisladamenteensusoficinas(Schieflebein,1990)
aunafasedegradualinstalacinydesarrolloorgnicodentrodelsistemaacadmico
nacional.
Desdeelcomienzo,estecamposeconstituyecomounespaciotransdisciplinario,conla
contribucindelascienciasdelaeducacinydediversasotrasdisciplinascomola
psicologa,lasociologa,laeconoma,lahistoria,lafilosofayelaportedelosenfoquesde
laadministracinpblicaylacienciapoltica.Suorientacinylasproblemticas
abordadassonesencialmentelocalnacionales,aunquelasreferenciasycitaslovinculan
conelcampointernacionaldesdecomienzosdelsigloXX(Brunner,2008).Laprogresiva
profesionalizacindelcamposeproduceporlavadeincorporarainvestigadorescon
formacinespecializadadeposgrado,dedicadosatiempocompletoaestaactividad,que
comunicandemaneracontinuasusresultados,formanentresuncolegioinvisible,se
relacionanconredesinternacionalesyobtienenrecursosatravsdelosfondos
18
concursablesnacionalesy/omediantelaparticipacinenproyectosconfinanciamiento
internacionaloprovenientedefuentesprivadaslocales.
Elconocimientoacumuladosobreeldesarrollodeestecampoesescasosinembargo.Ylo
mismosucedeconelconocimientorelativoasusmodalidadescontemporneasde
organizacin,produccin,prcticasdecomunicacineimpacto.Deallqueporel
momentoseainevitablerecurriradescripcionespuramenteimpresionistas.
24
Bajoeste
enfoque,qusepuededecirdelcampodesdeelpuntodevistadesuscapacidades,
estructuraycomunicacin,sinporahoraofrecerunajustificacinparatalesimpresiones?
Capacidades:unbajoniveldeinversinencomparacinconaquellasdisciplinasbien
establecidasenelsistemaacadmico;unescasonmerodeinvestigadoresactivoscon
produccincontinuaycitada(estoes,reconocidayutilizadaporlospares);unreducido
flujodenuevosinvestigadoresformadosenelnivelmsavanzadoseaenChileoenel
extranjero(pocasoportunidadesdeestudio,pocasbecas,pocaatraccindelcampo);un
escasonmerodeequipos,centrosoinstitutosdedicadosalainvestigacineducacionaly
unadbilestructuraderedeslocaleseinternacionales;ausenciadeproyectosde
envergadura,delargaduracinydecostomediano/alto.Ensuma,uncamposlo
dbilmenteinstitucionalizado.
Estructura:fuertesdisputasparadigmticasodeescuelasenelmarcodeunadbil
definicindisciplinaria;disputasmetodolgicassobrequcuentacomoevidencia;como
resultadodeunasyotrasdisputas,escasacapacidaddelospropiospracticantesde
establecercriteriosdecalidadyrelevanciaybajaincidenciadelcontrolporpares;
investigacindispersaentremltiplesfocos(educacinpreescolar,escolar,superior;sala
declases,alumnos,profesores,sostenedores,hogares;instituciones,gestin,
financiamiento;insumos,procesos,resultados,etc.),conescasaacumulacinde
conocimientosentornoacualquieradeellos;coexistenciademltiplesmodos,estilosy
formatosdeproduccindeconocimientoquehabitualmentenointeractannise
enriquecen(porejemplo:investigacinprimariadebasecuantitativayexperimental;
estudioscualitativoseinvestigacinaccin;anlisiscomparados;evaluacionesde
programasoexperiencias;anlisissintticosendiferentesniveles;investigacinorientada
ainfluirenlalaspolticas,laopininpblica,actoresdeterminadosodentrodela
academia,etc.).Ensuma,uncampodbilmenteestructuradodesdeelpuntodevista
acadmico.
24
Existesinembargounestudiopreliminarsobreestadodelartedelainvestigacineducacional,todavaen
procesodedesarrollo(CorvalnyRuffinelli,2007).
19
Comunicacin:inexistenciadecanalesdecomunicacinderesultadosreconocidoscomo
vlidosporlacomunidaddepares;ausenciaderevistasnacionalesreconocidas
acadmicamente;escassimapublicacinenrevistasinternacionales;bajo
aprovechamientodelcanaldigital;portodoesto,bajadisponibilidadpblicamente
accesibledelosresultadosdelainvestigacinyausenciadeinformacinsobre
productosysuimpacto(acadmicoodeotrotipo);dbilvinculacinentre
investigacin,polticapblicaeinnovacinenloscentroseducativos;bajonivelde
internacionalizacin(estoes,participacinenredes,proyectosycoautorade
publicaciones).Porelcontrario,losinvestigadoreseducacionalespublicanlosresultados
desutrabajodesordenadamente;empleanunaampliavariedaddemediosdeexpresin;
parecenleerseycitarseescasamenteentres;publicansucesivasversionesdesureflexin
ydescubrimientosamedidaqueprogresanenlaejecucindesusproyectosy,finalmente,
tiendenaformalizarsuspublicacionesalahoradedarleselformatodelibro.Ensuma,un
campocomunicacionalmenteanrquico,dondeesdifcilestablecerelvalorrelativodelos
diversosproductospuestosencirculacin.
Algunasdeestasimpresionespuedendesdeyacontrastarseyseraceptadaso
descartadasapartirdelaexiguainformacinqueexistesobreelfuncionamientodel
campo.
Porejemplo,delosdatosdepostulacinyasignacindeproyectosalFONDECYTdurante
losaos1999a2003,podrainferirsequeenlaactualidadexisten,gruesamente,
alrededorde250investigadoresenestecampo,aunqueseguramenteestacifra
sobrerepresentaelnmeroefectivodeinvestigadoresactivos(conproduccincontinua),
alincluiraunnmerodejvenesquesehallarecinaliniciodesucarreracomo
investigador.Enefecto,duranteelperodomencionado,losproyectosdelreade
educacinqueobtuvieronfinanciamientosuman125.Puedeestimarsequeenellos
participan,enpromedio,dosinvestigadores(unsenioryuninvestigadorjunior),loque
lleveelnmeroaunos250investigadores(sumandosenioryjuniors),aloscualescabe
sumarunporcentaje(digamos,entreun25%yun40%)deinvestigadoressenior(esdecir,
unnmerodeentre30y50)quepodranestardesarrollandoproyectosconfondos
distintosdelosotorgadosporFONDECYT.Ensuma,elcampoestaraintegradopor
alrededorde160investigadoressenioryunnmeroequivalentedejvenesque,al
menos,participanenlapresentacindeproyectos.
Decualquierforma,lacapacidaddeestacomunidaddeinvestigadoresdeobtener
recursosporvacompetitivanodifieredramticamentedelaqueexhibenotras
comunidadesdelascienciassocialesyhumanidades.Enefecto,siseconsideraelmonto
20
derecursosobtenidospordiferentesagrupacionesdisciplinariasdelascienciassociales
duranteelperodo19992003,yselodivideporelnmerodepostulantesqueconcursan
duranteelmismoperodo,lascifrasresultantesson:paraeducacin3,4millonesdepesos
porpostulante;paraeconomayadministracin,3,1millonesdepesos;paraderecho,4,3
millonesdepesosy,paraotrascienciassociales(general),4,9millonesdepesos.
25
Encambio,resaltacontodanitidezqueeneluniversoISIlainvestigacineducacional
chilenaprcticamentenoexiste.Enefecto,duranteelperododedosdcadas,entrelos
aos1984a2003,estecampoproduceunpromediode1,35artculosISIporao,conun
totalde27(el0.1%delaproduccincientficanacionalregistradaporISIyel0,05%dela
produccinmundialenelcampodelaeducacin).Tampocoseobservamayorcambioa
lolargodeltiempoenesteparmetro.Sielperodocompletosedivideencuatro
quinquenios,laproduccindepublicacionesISIduranteelprimeroesde5artculos,de7
enelsegundo,de8eneltercero,yde7enelcuarto.
26
Asuturno,elimpactoacumuladoporestamagraproduccin(nmerodecitasque
renenlosartculosdesdequefueronpublicadoshastaelao2003divididoporel
nmerodeartculos)esdeapenas0.70,comparadocon7.86enelcasodeeconomay
administracin;2.22enelcasodederecho;3.25enelcasodelascienciassociales
(general)yde3.75paraladisciplinadeeducacinanivelmundial.Encuantoasuimpacto
relativo(quemideelimpactoacumuladodeladisciplinaenelpasdivididoporelimpacto
deladisciplinaenelmundo),lainvestigacineducacionalchilenaalcanzaapenasa0.19,
comparadoconunndicede1.07enelcasodeeconomayadministracin;de0.36en
derechoyde0.61enlascienciassociales(general).
27
Ensuma,paracualquierefectodeanlisisbibliomtricoconvencional,lainvestigacin
educacionalchilenanotienepresencianiexisteenelmundoISI.
Loanteriornosignifica,sinembargo,queelcampocarezcadeproduccin.Estopuede
graficarse,anivelmicro,conlosdatosdepublicacionesparaunaodado(enestecaso,
ao2005),delaFacultaddeEducacindelaPUC,publicacionesquesedescomponende
lasiguienteforma(Tabla1).
28
25
BasadoenContreras,EdwardsyMizala(2006),Cuadro7.
26
BasadoenContreras,EdwardsyMizala(2006),Cuadros2y5.
27
BasadoenContreras,EdwardsyMizala(2006),Cuadro4.
28
Podranaadirseotroscasosdeproduccin;porejemplo,tomadosderevistasdeeducacinchilenas.Sin
embargo,aqunosetratadeofrecerunregistroexhaustivodepublicacionessinoslodeilustrar
ejemplarmenteelargumento.
21
Tabla1
FacultaddeEducacinPUCdeChile:Nmerodepublicacionesportipo,2005
Publicaciones Nmero
Libros 5
Captulosdelibros 8
Artculosenrevistasnacionales 31
Revistasinternacionales
IndizadasenISI 2
NoindizadasenISI 8
Ponenciasencongresos,simposios,
encuentros,seminariosenChileconponencia 65
Ponenciasencongresos,simposios,encuentros,
seminariosinternacionalesconponencia 34
Fuente:FacultaddeEducacin,PUC,CoordinacindeInvestigacinyPublicaciones,
PublicacionesyPonencias2005.Disponibleen:
http://www.puc.cl/educacion/publicaciones/publi_acad_2005.html
SegnpuedeobservarseenestaTabla,laproduccindeartculosISIrepresentanadams
queunminsculoporcentajedentrodelaproduccintotaldeestainstitucin.Almismo
tiempo,lacontabilidaddelosdiversostemscomplicacualquieraevaluacinbibliomtrica
convencional,puesnohaycriteriosclarosparadistinguirentrelasrevistasnacionales,
entrelasinternacionalesnoindizadasporISIyparaponderarladiversanaturalezadelas
ponenciaspresentadasendiferenteseventos,quepuedenincluirydehechoincluyen
enelcasodelaTabla1desdepresentacionesformalesencongresoscientficoshasta
charlasdeextensinapblicosnoespecialistas.Tampocoesfcilidentificar,aprimera
vista,lascaractersticasdeloslibrospublicadosodeaquellosenloscualesseincluyen
captulos:elprestigiodelaseditoriales,lanaturalezadelapublicacin,suextensin,el
estatusdelosdemsautoresparticipantesenunvolumencolectivo,etc.Porltimo,este
tipodeinformacinnopermiteconocerelimpactodelaspublicacioneslistadas,
cualquierasealaformaelegidaparasumedicin.BienvenidospuesalmundonoISI,con
todassuslimitacionesyconfusiones!
Lapregunta,claroest,essiacasoexistealgunaformadeabrirsecaminoenlyde
arribaramtricasalternativas,msajustadasalascaractersticasdelaproduccinde
conocimientoenelcampodelainvestigacineducacional.
29
29
Talvezelmayoresfuerzoqueserealizaenlaactualidadpararesponderaestapreguntasedenelmarco
delProyectoResearchEvaluationandPolicyProject(REPP)delAustralianResearchCouncil(ARC),que
estudiacmomedir,concriteriosmsampliosquelosdelabibliometraconvencional,laproductividadyel
impactodelasdisciplinasHASS(HumanitiesandSocialSciences)ydeotrassubrepresentadasenlosregistros
derevistasISI(REPP,2005).Asimismo,estudiaformasdeevaluarmsseriamenteaestasdisciplinasconel
objetodeapoyarlasmediantelapolticapblicayrecursos(CHASS,2005).
22
Propsitoydiseodelpresenteestudio
Conelpropsitoderesponderaestapreguntaygenerarunasmtricasmsajustadasa
lascaractersticasdelainvestigacineducacional,seutilizanaquindicadores
webomtricos
30
deproduccineimpactodelconocimientoproducidoenestarea,que
ofrecenunaprimeraaproximacincuantitativadelaproductividadeimpactodela
investigacineducacionalenChile.
Inicialmentesedacuentadelesfuerzoporcrearunabasededatoswebomtricossobreel
campodelainvestigacineducacionalchilenaincluyendolaidentificacindelos
investigadoresquelocomponen,suspublicacionesycitasapartirdelacualluegose
esbozaunacaracterizacinyseponeenmarchaelanlisisdelaproduccindelcampo.
30
Webometrics:Elestudiodelosaspectoscuantitativosdelaconstruccinyusodelosrecursosde
informacin,estructurasytecnologasenlaWeb,tomandoenfoquesbibliomtricoseinfomtricos.Ver
LennertBjrneborn,SmallWorldLinkStructuresacrossanAcademicWebSpaceaLibraryand
InformationScienceApproach,PhDDissertation,2004,enhttp://vip.db.dk/lb/phd/default.htm.Parauna
recienterevisindelaactividadyliteraturawebomtricapuedeconsultarseAndreaScharnhorstyPaul
Wouters,WebindicatorsanewgenerationofS&Tindicators?,Cybermetrics,Vol.10(2006),Issue1,
Paper6
23
Seleccindetecnologa
Primeroquetodo,sehaelegidolaplataformadeinformacinproporcionadaporGoogle
Acadmico(GA)(Recuadro4),conelfindeconstruirunabasededatosquesirvapara
dimensionareltamaodelcampoeidentificaralosinvestigadoresqueenlparticipan.
Recuadro4
GoogleAcadmico
GoogleAcadmicopermitebuscarbibliografaespecializadadeunamanerasencilla.Desdeunsolositioesposible
realizarbsquedasenungrannmerodedisciplinasyfuentescomo,porejemplo,estudiosrevisadosporespecialistas,
tesis,libros,resmenesyartculosdefuentescomoeditorialesacadmicas,sociedadesprofesionales,depsitosde
impresionespreliminares,universidadesyotrasorganizacionesacadmicas.
Cadaresultadodebsquedacontieneinformacinbibliogrficacomoelttulo,nombresdelosautoresypublicacin
original.UnconjuntodedatosbibliogrficosseasociaalatotalidaddeartculosrelacionadosyesloqueGAconsidera
comoartculorepresentativodelgrupo.Estainformacinbibliogrficasebasaenlainformacindelosartculosdel
grupo,ademsdecitasqueotrostrabajosacadmicosefectandeestosartculos.
1. TtuloVnculosalresumendelapiezaidentificaday,cuandoesposible,altextocompleto.
2. CitadoporIdentificaotrosdocumentosquecitanlapiezaidentificada.
3. ArtculosrelacionadosBuscapiezassimilaraldocumentoidentificado.
4. Vnculosdebiblioteca(sinconexinaInternet)Localizalasbibliotecasquetienenunacopiafsicadelapieza
identificada.
5. VersionesProporcionaotrasdireccionesparalamismapiezayenocasionesversionesdistintasdeella,por
ejemplopreviasalaimpresinfinal,resmenes,presentacionesenconferenciasuotrasadaptaciones.
6. BsquedaenlawebBuscainformacinadicionalsobrelapiezaidentificadaenGoogle(noacadmico).
Fuente:GoogleAcadmico.Disponibleen:http://scholar.google.es/schhp?hl=es
24
LasventajasdeemplearGAparaunanlisisbibliomtricodelainvestigacineducacional
chilenasonvarias:
(i) Suusoenrecientesestudioscienciomtricoshaprobadosuefectividadypermite
anticipareltipodedificultadesquetraeconsigosuutilizacin
31
;
(ii) Adiferenciadeotrasmquinasdebsqueda,GAentregasolamenteresultados
quecontienenpublicacionesacadmicas,registradasenbasesdedatosde
ciencias,deaccesoabiertoydeautoarchivamiento.Enocasionesincluyesin
embargopiezasodocumentosquesehallanenlosmrgenesoinclusofueradela
literaturagris,porejemplo,columnasdeopininaparecidasenlaprensa(pero
citadasenotrosdocumentosacadmicos),currculosdepersonas,bibliografasy
referenciassinelcuerpodeltextoaquecorresponden,descripcionesdeuncursoy
otroselementosqueconstituyenruidoentrminosdelacomunicacin.
(iii) Disponedeuninstrumentodebsquedaavanzadaquefacilitaaumentarla
precisinylaefectividaddelasbsquedas,aadiendo"operadores"quemejoran
lostrminosdebsquedatalescomobsquedasporautor,restringidapor
publicacin,conrestriccinporfecha,conexclusindetrminosdebsqueda,con
trminosdebsquedaincluidosenelttulodeldocumento,confraseexactaenel
texto,etc.
(iv) GAproporcionainformacinsobrelatotalidaddelaproduccinescritarelevante
delosinvestigadoresynoslosobresuspublicacionesenrevistasincorporadasal
SSCI;
(v) Incluye,porlomismo,publicacionesenespaol,idiomamayoritariamente
utilizadoporlosinvestigadoreschilenosenelcampodelainvestigacin
educacional;
(vi) GAbuscaconindependenciadelaclasificacindisciplinariaydeespecialidaddelas
publicacionesorevistasdondeellashayanaparecido,loqueseacomodaal
carctertransdisciplinariodelainvestigacineducacional;
(vii) Permiteaccederdirectamente,enlnea,alostextosdeunaproporcinsignificativa
delaspublicacionesy/oasusabstractsoresmenes;
(viii) Contabilizademanerasuficientementerobustalascitasrecibidaspordichas
publicacionesypermiteaccederalaspublicacionesdondeselocalizala
correspondientecitao,almenos,asuttuloyubicacin;
(ix) Generaautomticamenteunrankingdepublicacionesbasadoencriteriosde
relevanciaquetomanenconsideracineltextocompletodecadaartculo,as
31
SobreGAysufuncionamientocomobaseparaestudioswebomtricospuedeconsultarseHarzing(2007,
2007a),MayryWalter(2007),MehoyYang(2007),Bakkalbasi,Bauer,Glover&Wang,L.(2006),Smith
(2006),Bosman,Mourik,Rasch,Sieverts,Verhoeff(2006),Jacs(2006,2006a,2005),KoushayThelwall
(2006),YangyMeho(2006),Noruzi(2005),
25
comoelautor,dndefuepublicadoyconquasiduidadhasidocitadoenotras
fuentesespecializadas
32
;
(x) GAesunafuentedelibreacceso,loquereducedemanerasignificativaelcostode
estudioscomoelqueaqusepresenta.
Ensuma,segnconcluyenPaulyyStergiou(2005),
GoogleAcadmico(GA)puedesustituiraISI,quehastaahoratieneunmonopolio(con
laposibleexcepcindelamuycostosamquinadebsquedadeElsevier,Scopus).Esto
tienemuchasimplicanciasrelevantes[mencionadasanteriormente],paralapoltica
cientficayparalatica,emanadasprincipalmentedeldiferencialdeprecioentrelos
costososproductosISIylosreportesdeGA,quepresumiblementecontinuarnsiendo
gratis.
[]
PensamostambinqueellibreaccesoaestainformacinprovistoporGA,ofreceuna
vaparamayortransparenciaenlarevisindepuestosacadmicos,financiamientoy
otrostemasdepolticascientficas,puespermitecontarcitas,yapartirdeellogenerar
anlisisquepuedenserrealizadosyduplicadosporcualquiera.
Naturalmente,aligualcomosucedeconotrasplataformasdeinformacinsobre
publicacionesacadmicas,GApresenteunaseriedelimitaciones(Recuadro5).
Recuadro5
LimitacionesdeGoogleAcadmico
Noinformasobresucobertura,basesqueincluye,modalidadesdeidentificacin(automtica)de
publicacionesycitas,algoritmodeordenacindelosartculos,etc.Enestesentido,esunafuenteconsiderada
comodeunaltoniveldesecretismo;
Alcubrirunamplioyvariadoespectrodepublicacionesacadmicaspuedeincorporartextosquenoloson,
comodocumentosadministrativos,currculosdeinvestigadores,actasdesesionesdeorganismosacadmicos,
apuntesdeclase,etc.
Puederegistraraunmismoautorcondiversasformasdeidentificacindesunombre;contabilizarunmismo
artculoensusvariasversionesqueseencuentranenlaRed;computarcomodiferenteslasmismascitasen
distintasversionesdeldocumento,etc.
Puedenoincluirrevistasrelevantesdeuncampodisciplinario;
Noincluyelafiliacininstitucionaldelosinvestigadores;
Noseactualizaconlamismavelocidadquelohace,porejemplo,laWoS.
Cubresolamenteunafraccindelascitasapublicacionesantiguas(1925a1989).
Fuente:Harzing(2007),Jacs(2006,2006a,2005);PaulyyStergiou(2005)
32
GoogleAcadmico,AcercadeGoogleAcadmico.Disponibleen:
http://scholar.google.es/intl/es/scholar/about.html
26
Basededatos
Parapartir,serealizaronsucesivasbsquedasenGAcontrminosclavesdelcampotales
comoeducacin,educacinsuperior,escuelas,colegios,universidades,
alumnos,etc.acompaadosconespecificacionescomoChile,AmricaLatina,etc.,
conelobjetodegenerarunalistainicialdeinvestigadoresautoresdelcampodela
investigacineducacional.
33
Atravsdelasreferenciasycitasenalgunosdeestos
artculosseidentificunnmeroadicionaldenombres.Porltimo,paracompletarla
lista,seutilizaronregistrosdisponiblesenlaRed;porejemplo,demiembrosdeescuelasy
facultadesdeeducacinoqueaparecencomoautoresenrevistasdeaccesoabierto.
Especficamente,enelcasodelpresenteestudio,lasprincipalesdificultadesencontradas
alahoradeidentificarinvestigadoresautoresutilizandoGAhansidolassiguientes.
(i) Presenciadeinvestigadorescuyaproduccinprincipalcorrespondeaotroscampos
disciplinariosperoqueocasionalmentepublicansobretemasdeeducacin.Nohan
sidoincluidosenlalista.Porelcontrario,investigadoresquesintenerlaeducacin
comosulneaprincipaldeproduccindeconocimientosinembargopublicancon
regularidadenellaseincluyendeacuerdoalnmerodeartculosconque
aparecenenlabsqueda.Losinvestigadoresquepublicancentralmenteenel
campodelainvestigacineducacional,peroademsloshacenencampos
adyacentes,seregistrandeacuerdoalnmerodeartculosgeneradoporla
bsquedaconlostrminosdereferenciamencionadosmsarriba.
(ii) Presenciadeinvestigadoresextranjerosquepublicanconciertaregularidadsobre
laeducacinchilena.Nohansidoincluidosenlalista.
(iii) Presenciadeinvestigadoresenreaslimtrofesdelconocimiento
particularmenteelreadeestudiosdesaludrelacionadosconeducacinqueno
hansidoconsideradosaqucomopartedelcampodeinvestigacinbajoestudio.
(iv) Presenciadeautoresconunasolaodospublicacionesnocitadasporterceros.Han
sidoexcluidosdelalista.
(v) Erroresoconfusionesenlamaneradeescribirelnombre,apellidoy/oinicialesde
losautoresque,enocasiones,hacenaparecerdosomsautoresalldondeen
realidadsetratadelmismo.Estoserroresyconfusioneshansidocorregidos.
Juntoconidentificaralosinvestigadoresactivosenelcampo,sehaprocedidoalistarlas
publicacionesque,paracadauno,arrojaelGA,sinrestriccindetiempo(fechadela
publicacin)nidetipodepublicacin,asumiendoquetodasformanparte,gruesamente,
delaproduccinacadmicadelautor.Realizadoestecatlogodepublicacionesse
33
Lasbsquedassellevaronacaboenelmesdemarzode2008.
27
procedienseguidaahacerunaconsultaaunpanelseleccionadodeinvestigadores,con
elobjetodeconocersiellistadogeneradoporestemedioreflejabasuproduccin
individualacumuladaalolargodeltiempo.Enlamayoradeloscasoslarespuestafue
afirmativa,conun90%omsdeaciertos.Enuncaso,elporcentajedeaciertosfuemenor
(25%desubcontabilizacin).
Lasdificultadesqueentraaelejerciciorealizadoparagenerarlistasindividualesde
publicacionesdevarioscientosdeinvestigadoressonlassiguientes,enloprincipal:
(i) Duplicacindelosmismosttulospresentadosseparadamente;repeticinde
ttulosdesignadosdemaneralevementediferenteencadaocasin;inclusincomo
publicacionesseparadasdelasdiferentesversionesdeunmismoartculoo
edicionesdeunmismolibro;aparicindelmismoartculo,odeunaversin
distintadelmismo,endiferentesrevistas,etc.
(ii) Presencia,entrelaspublicacionesasociadasaunautor,dedocumentosquea
primeravistanosonpartedesuproduccinacadmica,comosuCVosu
participacineneldirectoriodeunorganismosoenunareuninadministrativade
lacualselevantacta;
(iii) Subregistrodepublicacionesrecientementeaparecidas(ao2007yposteriores);
(iv) Engeneral,coexistenciademuydiversostiposdepublicacionesque,sibien
presentandificultadesparalasmtricasconvencionalesdetipoISI,sinembargo
reflejanadecuadamentelaheterogeneidaddelaproduccindeconocimientoenel
campodelainvestigacineducacional.
Porltimo,conlamismametodologadescritaseprocediaregistrarlascitasacadauna
delaspublicacionesidentificadas,debiendoaquconsiderarselassiguientesdificultades:
(i) Duplicacindecitasreferidasaunmismotextoqueaparecerepetidoenlalistade
publicaciones;
(ii) Diversanaturalezadelascitasregistradas,tantoencuantoasucontenido,altipo
depublicacinenqueaparecenyalanaturalezadelacita(referenciagenrica,
destinadaaunaideaotextodelautorcitado,meroenlaceaunareferencia
contenidaeneltextocitado,etc.);
(iii) Autocitacin,estoes,referenciasporelolosautoresdeuntextoatextos
publicadospreviamenteporloellos.Aqusehaoptadopormantenerlas,loque
resultadecomnocurrencia(REPP,2005:24),vistoquelaautocitacinesuna
prcticaextendidaque,enelcasodelascienciassocialestienesubaseenelpropio
mododeproducirconocimientoyque,segnestimaciones,eldichasdisciplinas
28
alcanzasloaun6%delascitas,siendoestaciframsbajaenotrasreas
disciplinarias(SnyderyBonzi,1998).
34
(iv) Subregistro,porlodichomsarriba,delascitasatemspublicadosms
recientementeobiendecitasrealizadashacelargotiempo(porejemplo,previasa
1950).
Seleccindeindicadores
Conelobjetodemedirelimpactoacadmicodelaproduccindeconocimientoenel
campodelainvestigacineducacionalchilena,seutilizanenesteestudioalgunosndices
derecientedesarrolloperoquehanalcanzadorpidamenteunaampliaaceptacinenlos
estudiosbibliomtricosycienciomtricos.Enloprincipal,seutilizanaqudosndices:el
ndicehdeproduccin/impactodelconocimientoaplicadoalosinvestigadores
educacionaleschilenosyelndiceg.
Elndiceh,presentadoinicialmenteporHirsch(2005)profesordefsicaenla
UniversidaddeCalifornia,SanDiego,dequienderivasudenominacinpermite
determinar,demaneraquesehaprobadorobusta
35
,elimpactocumulativoyla
relevanciadelosresultadosdeinvestigacinpublicadosporunoomsindividuos
conjuntamente.Segnlodefinesuautor,uncientficotieneunndicehsihdesuN
p
paperstienealmenoshcitacionescadauno,ylosdems(N
p
h)paperstienennomsde
hcitacionescadauno.
Laideasubyacenteessencilla.Consisteentomarcadaunodelostrabajosdeunautory
ordenarlosenformadescendenteenfuncindelascitasrecibidas.Cadatrabajotiene,por
tanto,ademsdeunacantidaddecitasunnmerodeordenenelranking,alque
llamaremossimplementerango.Deestaformaconstruimosdoslistasdenmeros,una
ascendente(losrangos)yunadescendente(lascitas).Cuandolosvaloresdeambasse
cruzan,tenemoselndiceh.Elndicehesunamedidadeposicin,enconcreto,aquella
34
Unestudiorecientesealaensuabstract:Esteestudioinvestigaelroldelaautocitacinenla
produccincientficadeNoruega(19811996).Msde45.000publicacioneshansidoanalizadas.Usando
unaventanadecitasdetresaos,encontramosqueel36%detodaslascitasrepresentanautocitasdelos
autores.Sinembargo,esteporcentajecaecuandolaventanadecitasseexpande.Encontramoslamayor
proporcindeautocitasenlosartculosmenoscitados.Hayunafuertecorrelacinpositivaentreelnmero
deautocitasyelnmerodeautoresdelaspublicaciones.Sinembargo,slounapartemenordelaumento
generaldecitasenartculosdemltiplesautoresseexplicaporautocitas.Tambin,elporcentajedeauto
citasmuestravariacionessignificativasentredistintasdisciplinascientficas.Losresultadossonrelevantes
paraladiscusinconcernientealusodeindicadoresdecitasenevaluacionesdeinvestigacin(Aksnes,
2003).VerasimismoFowleryAksnes,2007
35
VerVanclay(2006),CroninyMeho(2006),NellyyJennions(2006),GrupoScimago(2006),Ball(2005),
BornmanyDaniel(2005)Moed(2005),
29
enlacualelvolumendecitasesmenoroigualalnmerodeordenqueocupaelartculo
enunadistribucindescendentedecitas(GrupoScimago,2006).
Ejemplo:
Unautorcon9publicaciones,citadascomoseindicaacontinuacin,tieneunndicehde4puestieneh=4artculos
conh=4omscitas,yNph=94=5artculoscon4menoscitas.
Artculo# 1 2 3 4 5 6 7 8 9
Nmerodecitas 11 9 7 6 4 2 2 1 1
ElndicepropuestoporHirschhasidorecibidocongranintersyconsideradocomo
extremadamenteelegantedesdeelpuntovistadelanavajadeOckham
36
,provocandono
slopositivasreaccionesdelacomunidadacadmica
37
sino,adems,suinmediata
aplicacinendiversospasescomoAustralia(Harzing,2005),Brasil(Batistaetal,2005),
Espaa(ImperialyRodrguezNavarro,2005),EstadosUnidos(Kinney,2007),Finlandia
(BjrkmanandBjrj,2007,ReinoUnido(Harnad,2007)yTurqua(Orbayertal,2007)y
paradistintasdisciplinasotpicosacadmicoscomoqumica(ChemistryWorld,2007),
cienciasdelacomputacin(Sidiropoulos,etal,2006),
informationsciences(Croniny
Meho,2006),ecologaybiologaevolutiva(KellyyJennions,2006),astronoma
(GrothkopfyStevensRayburn,2006),tpicosdeintersenlospasesendesarrollo
(Stimulate6Group,2007),yotros.Asimismo,hasidoincorporado,apartirdesuspropias
basesdedatos,porlosprincipalesproveedoresdelasmtricasconvencionales;estoes,
ThomsonScientific,comosesealantes,yScopus.Efectivamente,elndicehpresenta
unaseriedeventajasquehansidosubrayadasporlaliteratura(Recuadro6).
36
LanavajadeOckhamhacereferenciaauntipoderazonamientobasadoenunapremisamuysimple:en
igualdaddecondicioneslasolucinmssencillaesprobablementelacorrecta
(http://es.wikipedia.org/wiki/Navaja_de_Ockham).
37
VaseBallGlnzel(2006),Vanclay(2006),IglesiasyPecharromn(2005),ImperialyRodrguezNavarro
(2005),Braunetal2005.Naturalmente,estosautoresformulantambinalgunascrticasalapropuestade
Hirschysugierencorreccionesycomplementacionesalndiceporelpropuesto.Elimpactocausadoporla
aparicindelndicehllevaThompsonaincorporarloenelWoS,bajolacategoradecitationreport.Ver
WebofKnowledge,CitationReport,en
http://thomsonscientific.com/support/faq/wok3new/citationreport/.
Enotroterreno,inclusolaprensahasaludadolaaparicindelndiceh,comomuestraelsiguienteprrafo
extradodeunacolumnadeopininpublicadaporJuanImperialyAlonsoRodrguezNavarroeneldiario
espaolElPas(03/05/2006):Lointeresanteesqueelndiceh,aunquecreadoparaevaluaraloscientficos,
puedeaplicarseacualquiertipodeinstitucin,aunpasoaunareginparahacercomparaciones,siempre
quesehagandentrodeunamismadisciplina.Comoelndicehesmuyfcildecalcular,ahoralasociedad
civilpuedeevaluarasusuniversidadesyunestudianteesforzadopuedesaberqufacultadpuede
recompensarmejorsuesfuerzo.Disponibleen:
http://www.elpais.com/articulo/futuro/universidad/espanola/indice/h/elpfutpor/20060503elpepifut_6/Tes
Recuadro6
Ventajasdelndiceh
Entrelasventajasdelndiceh,laliteraturaespecializadaidentificalassiguientes:
Suextremasimplicidadyfcilcomprensin;
Elhechodequepuedeaplicarseacualquierniveldeagregacinpero,conespecialfacilidad,aldesempeode
investigadoresindividuales;
Elqueesteindicadorcombineunamedidadeoutput(contabilidaddepublicaciones),conlacontabilidadde
citas(v.gr.,elimpactodeesaspublicaciones);
Elqueseaunindicadoracumulativorelevante,enelsentidoqueaumentarelnmerodepublicacionesno
tieneefectosobreelndice,amenosquedichascontribucionesseancitadas;
Elhechoquemidaeldesempeocontinuodeuninvestigadorynosolosuspuntosmsaltos,reduciendoas
elpesoqueenotrosndicestienenlosartculosaltamentecitados
38
;
Elqueparasucomputacinpuedenincluirsetodotipodedocumentos,desdeelmomentoqueelndicehno
cambiaporagregarpapersodocumentosnocitados
39
,y
Elhechoqueelndicehsecorrelacioneconotrosindicadoresbibliomtricosderelevancia.
40
Fuente:Vernotas34y35eneltexto
Paraestablecerelndicehdelosinvestigadoreseducacionaleschilenosseutilizaaquel
programaPublishorPerish
41
(PoP),elcualbuscayanalizalainformacinrelevantepara
cadainvestigadorproporcionadapor(GA),yapartirdeall,ofreceunaseriedemtricas
basadasencitas,talescomoelndicehyotroscomplementarios.Enparticular,este
estudiohageneradolaestadsticanecesariaparaconstruircomplementariamentelos
siguientesotrosndices:
a) Elndiceg,queentregamayorponderacinalosartculosconunelevadonmero
decitas,hasidoformuladoas:Dadounconjuntodeartculosordenadossegnel
nmerodecrecientedecitacionesquereciben,elndicegeselnmero(nico)
mayordemaneratalquelosgartculossuperioresreciben(conjuntamente)al
menosg
2
citas.
42
b) Elndiceh
c
ocontemporneo,queagregaunaponderacinrelacionadaalaedad
decadaartculocitado,otorgandounmenorvaloralosartculosmsantiguos.Se
38
Enefecto,enestecasolacoladetrabajospordebajodehpuedesermuycortaomuylarga,sinqueel
indicadorseveaalterado.Delamismaforma,sitenemosunapublicacinextraordinariamentecitada(con
relacinalresto),sloocuparelprimerrangomanteniendoelhinalterado.Enciertamanera,elndiceh
tiendeavalorarunesfuerzocientficoprolongadoalolargodelavidaacadmica,frenteaverdaderos
pelotazospuntualesquepuedentenerunimpactomuyaltoperoclaramenteacotado.GrupoScimago
(2006).
39
VerBornmannyDaniel(2006)yGlnzel(2005)
40
SobreesteaspectoesencialvaseVanRaan,A.F.J.(2005a).
41
Disponibleenhttp://www.harzing.com/pop.htm
42
VerHarzing(2007b,2007c),Rousseau(2007)
31
estimaqueestendiceh
c
proporcionaunacomparacinmsjustaentre
investigadoressenioryjunioryentreinvestigadoresactivoseinactivos.
43
c) Elndiceh
norm
onormalizado,elcualdacuentadelasdiferenciasentrecientficos
ensuproduccintotaldeartculospublicados.Estepuedeexpresarsecomo:Un
investigadortieneunndicehnormalizadoh
n
=h/N
p
,sihdesusN
p
artculoshan
recibidoalmenoshcitascadauno,yelresto(N
p
h)artculosharecibidonomsde
hcitas
44
.
Conbaseenlainformacinreunidayprocesada,yapartirdelosndicesresultantes,se
hanelaboradounaseriedetablasygrficosquebuscancaracterizarinicialmentela
produccindelcampodeinvestigacineducacionalenChile.
Primerosresultadosdelaindagacin
Comosesealamsarriba,lainformacinpresentadaenestedocumentofuerecolectada
desdeGoogleAcadmicoatravsdelsoftwarePublishorPerish(versin16Febrero2008)
duranteelmesdeMarzode2008.Esteprogramaobtienelainformacindecitasparalas
bsquedasespecificadas,lasanalizaylaspresentaenformaordenadajuntoaalgunas
estadsticas.Esimportantesealarquelosconstantescambiosenlosresultadosque
arrojaGAparaunabsquedasobrelosmismostrminosdereferenciaobligana
considerarestasactualizacionesalmomentodereplicaroextenderesteestudio.
Elprocesodebsquedapermiteconformarlaproduccindelosautoresdelcampode
investigacineducacional,identificadosmedianteelprocesodescritoenlaseccinBase
dedatos.Paraefectosdeestedocumento,slosehaincluidoaautoresconalmenosuna
publicacincitada.Lacalidaddelainformacinobtenidaesvariada,puesmuchos
artculosaparecenmencionadosconnmerodecitasyautorcorrectamente,perosin
informacinsobrecoautores,aoolugardepublicacin.Elresultadooriginaldelas
bsquedascomprende6.326publicaciones,delascualesel20%notenainformacin
sobreaodepublicacin.Estainformacinfueagregadaenlamedidaquela
disponibilidaddelosartculoslopermiti
45
,yadems,fueroneliminadasalgunasentradas
queaparecanduplicadas.
43
VaseJin(2007),Sidiropoulos,Dimitrios,andManolopoulos(2006),Rousseau(2006),Harzing(2007b),
Egge,L.(2006)
44
VaseSidiropoulos,Dimitrios,yManolopoulos(2006)
45
Correccinhechaduranteabrilde2008.Todoslospaperscon3omscitashansidoincluidosenestabase
dedatos.
32
Deestamanera,losresultadosmostradosacontinuacindancuentadelaproduccinde
261autores,quienespublicaron5.260artculosentrelosaos1970
46
y2007.
46
Apartirde1970,cadaaofueronpublicados5omsartculos.
33
Evolucindelaproduccindelcampodeinvestigacineducacional
0
50
100
150
200
250
300
350
400
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
N
m
e
r
o
d
e
p
u
b
l
i
c
a
c
i
o
n
e
s
Ao
Publicacionesporaocitadasalmenos1vez(19702007)
Fuente:BaseAutoresMarzo2008.Consideratodaslaspiezasodocumentoscitadosconaodepublicacinigualoposteriora1970,
conalmenosunacita.
Entre1970y2007sepublicaron5.260artculoscitadosalmenosunavez.Estoequivalea
unpromedioanualde138publicaciones.Elmximodepublicacionesenunaoesde387
(2000).
Sinembargo,ladistribucindeestaspublicacionesnoeshomogneaatravsdeltiempo,
siendolasdcadasmsrecienteslasmsproductivasencantidaddeartculos.
Perodo Totalde
publicaciones
Promedio
anualde
publicaciones
1970a1979 156 15,6
1980a1989 777 77,7
1990a1999 2513 251,3
2000a2007 1814 226,8
Elaumentoenelnmerodepublicacionespuedeexplicarseporelaumentoenla
productividaddelosautores,olaincorporacindemsinvestigadoresalcampo.
Cabedestacarquemientrasmsantiguaeslapublicacin,existeunamenorprobabilidad
deestardisponibleonline.Sinembargo,esteefectoesmenorparapublicacionesantiguas
perodealtoimpacto.
La disminucin en el nmero de artculos posterior al ao 2000 puede explicarse por el
tiempoquetranscurreentrelafechadepublicacindeunartculoylaprimeravezquees
citado.
34
Aumentaelnmerodeautores,peronolaproduccinpromedio
Fuente:BaseAutoresMarzo2008.Consideratodoslosautoresdeobrascitadasconaodepublicacinigualoposteriora1970.
0
20
40
60
80
100
120
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
N
m
e
r
o
d
e
a
u
t
o
r
e
s
Ao
Nmerodeautores
Autores Artculosporautor(promedio)
Enelperodo19702007,261autorespublicaronalmenosunartculoenelcampode
investigacineducacional.
Elpromedioanualdeartculosporautorsemantienerelativamenteconstanteatravsdel
tiempo,alcanzandounmximode3,4publicacionesporautoren1999yunmnimode1,0
en1972.
Enconsecuencia,elaumentoenelnmerodepublicacionesatravsdeltiempopuede
explicarseporuncrecimientoenelnmerodeinvestigadores,ynoporunincrementoen
laproductividaddelosinvestigadores,ensuconjunto.
35
PerfildeproduccindelCEIparatodoelperodo
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
0
5
10
15
20
25
30
13579
1
1
1
3
1
5
1
7
2
0
2
2
2
4
2
7
2
9
3
1
3
3
3
5
3
7
4
0
4
6
5
1
5
4
6
0
6
4
6
8
7
0
7
4
8
0
8
5
9
7
1
0
2
1
1
1
1
3
9
1
6
7
%
a
c
u
m
u
l
a
d
o
s
o
b
r
e
t
o
t
a
l
d
e
p
u
b
l
i
c
a
c
i
o
n
e
s
N
m
e
o
d
e
A
u
t
o
r
e
s
NmerodePublicaciones
Autores %Acumulado
26autores(10,0%)
5
0
%
p
r
o
d
u
c
c
i
n
7
5
%
p
r
o
d
u
c
c
i
n
63autores(28,0%)
9
0
%
p
r
o
d
u
c
c
i
n
121autores(46,4%)
Fuente:BaseAutoresMarzo2008.Consideratodoslosautoresdeobrascitadasconaodepublicacinigualoposteriora1970.
Existeunagrandiversidadenlaproduccindelosautoresdelcampo,medidasegnel
nmerodepublicacionesenelperodo19702007.Encontramos140autorescondiezo
menospublicacionesenelperodo,mientrasqueslodiezautorestienenmsdecien
publicacionesenlamismaventanadetiempo.
Entrminosdevolumenproductivo,los26autoresmsprolficossonresponsablesdel
50%delaproduccindelcampo.Lossiguientes37autoresmsproductivosson
responsablesde25%delaspublicaciones,ylossiguientes58autoresrespondenpor15%
delaproduccin.
Enotraspalabras,laproduccinenelcampodeinvestigacineducacionalest
concentradaenunospocosautores,dondealrededordelamitaddelosautores(121,
correspondientesa46%deltotal)respondepormsdel90%delaspublicaciones.
36
PerfildeproduccindelCEIparalosperodos19912000y20012007
0
5
10
15
20
25
30
35
40
1 3 5 7 9 11 13 15 17 20 22 24 28 31 35 38 40 44 47 57 63 65 76 95 137
N
m
e
r
o
d
e
A
u
t
o
r
e
s
NmerodePublicaciones
Nmerodepublicacionesporautor(19912000)
Alobservarlossubperodos19912000y20012007,seencuentraelmismofenmeno:
muchosautoresconunaodospublicaciones,ypocosautoresconproduccinelevada.
Alrededordelamitaddelosautoressonresponsablesporel90%delaspublicacionesen
esteperodo:
Autoresmsproductivosnecesariospara
completar90%deltotaldelaproduccin
Perodo #Autores %
1991a2000 109 52%
2001a2007 107 52%
1970a2007 121 46%
0
5
10
15
20
25
30
35
40
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 18 19 20 21 23 24 27 28 29 30 32 36 37 38 39 40 46 59
N
m
e
r
o
d
e
A
u
t
o
r
e
s
NmerodePublicaciones
Nmerodepublicacionesporautor(20012007)
37
Nmerototaldecitasparatodoelperodo
0,0
1,0
2,0
3,0
4,0
5,0
6,0
0
200
400
600
800
1000
1200
1400
1600
1800
2000
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
Aodepublicacin
C
i
t
a
s
p
u
b
l
i
c
a
c
i
n
N
m
e
r
o
d
e
c
i
t
a
s
Citasporaodepublicacin
Citas citas/publicacin Lineal(citas/publicacin)
Losartculospublicadosentre1970y2007hanrecibidountotalde21.440citas.Esto
equivaleaunpromediode564,2citasporao,o4citasporpublicacin.
Losartculospublicadosen1971registranelmenornmerodecitas(11).Encambio,los
artculospublicadosen1999registran1839citas.
Labruscacadaenelnmerodecitasdelaspublicacioneshechasen2001enadelante,
puedeexplicarsedelamismamaneraquelacadaenelnmerodepublicaciones
registradas:poreldesfaseentrelafechadepublicacinylaprimeracita,rezagopropio
delcampoacadmico.
Elcampodeinvestigacineducacionalpresentauncrecimientomodestoparaelnmero
decitaspromedioporpublicacin.Esteindicadoraumentenslo1citaporartculo(de3
a4;crecimientode33%).
38
EvolucindelascitasdelCIEapartirde1970
0
0,1
0,2
0,3
0,4
0,5
0,6
0
5000
10000
15000
20000
25000
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
V
a
r
i
a
c
i
a
n
u
a
l
(
%
)
C
i
t
a
s
a
c
u
m
u
l
a
d
a
s
Ao
Crecimientodelnmerodecitas(19702007)
Citasacumuladas Variacinanual(%) Lineal(Variacinanual(%))
Elcampodeinvestigacineducacionalacumulahasta2007untotalde21.440citas.El
masivoaumentoenelnmerodepublicacioneshapermitidoelcrecimientodelimpacto
delCIE.
EltotaldecitasdelCIEen2007equivalea600veceslacantidaddecitasreportadaspara
1970.Aunqueestecrecimientohasidounaconstanteduranteesteperodo,hasidoa
tasasdecrecientes.
Elcrecimientoatasasdecrecientespuedeexplicarseporlarelacindirectaentreel
nmerodecitasylaantigedaddeldocumento.Deestamanera,sisuponemosdos
artculosdeidnticacalidadperocondistintafechadepublicacin,eslgicoesperarque
enciertoinstanteelmsantiguoestmscitado.
39
PerfildeimpactodelCEIparatodoelperodo
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
0
3
6
9
12
15
147
1
0
1
3
1
6
1
9
2
3
2
6
3
0
3
6
4
0
4
5
4
9
5
4
5
8
6
2
6
8
7
4
8
0
8
4
1
0
0
1
0
3
1
2
1
1
3
1
1
3
7
1
4
6
1
5
5
1
9
6
2
1
6
2
5
7
2
8
9
3
0
7
3
3
8
3
7
2
4
1
0
6
2
4
7
3
0
9
7
8
%
a
c
u
m
u
l
a
d
o
s
o
b
r
e
e
l
t
o
t
a
l
d
e
c
i
t
a
s
N
m
e
r
o
d
e
a
u
t
o
r
e
s
Totaldecitasdelautor
Autoresportotaldecitas
19autores(7,3%)
48autores(18,4%)
97autores(37,2%)
5
0
%
r
e
f
e
r
e
n
c
i
a
s
7
5
%
r
e
f
e
r
e
n
c
i
a
s
9
0
%
r
e
f
e
r
e
n
c
i
a
s
Elcampodeinvestigacineducacionalpresentagrandiversidadenelnmerodecitasde
losautoresqueloconforman.Deltotal,126autoreshanobtenido20omenoscitasporsu
produccin,mientrasque61autoresacumulan100omscitas.
LosautoresmscitadosconcentrangranpartedeltotaldecitasdelCIE,apesardeestar
ampliamentesobrepasadosennmeroporlosautoresmenoscitados.As,los19autores
mscitadoshanrecibidoel50%delasreferenciasdelcampo.Lossiguientes29autores
mscitadossonresponsablesdel25%delascitas.Finalmente,lossiguientes49autores
suman15%delascitasquepermitencompletarel90%delasreferenciasdelcampo.
Enresumen,deltotaldereferenciasdelcampodeinvestigacineducacional,el37,2%de
losautoressonresponsablesdel90%delascitas.
40
PerfildeimpactodelCEIparalosperodos19912000y20012007
0
2
4
6
8
10
12
14
16
18
147
1
0
1
3
1
6
1
9
2
4
2
8
3
2
3
5
4
0
4
4
4
8
5
5
5
9
6
8
7
5
8
0
8
6
9
7
1
1
4
1
2
3
1
4
8
1
6
0
1
7
5
2
2
1
3
9
2
4
2
4
4
8
7
1
0
2
4
N
m
e
r
o
d
e
a
u
t
o
r
e
s
Totaldecitasdelautor
Autoresportotaldecitas(19912000)
Losdatosobservadosdentrodelosperodos19912000y20012007confirmanlos
resultadosobtenidosparaelconjuntodelabasededatos:muchosautoresconmuypocas
citas,yunpequeogrupodeautoresqueobtienenunelevadonmerodereferencias.
Enefecto,enlosperodos19912000y20012007laconcentracindecitassedaenun
porcentajemenordeautores:
Autoresmscitadosnecesariospara
completar90%deltotaldecitas
Perodo #Autores %
1991a2000 80 36%
2001a2007 82 40%
1970a2007 97 37%
0
5
10
15
20
25
30
13579
1
1
1
3
1
5
1
8
2
0
2
2
2
4
2
6
2
9
3
1
3
4
3
7
4
2
4
8
5
1
5
3
6
3
6
7
7
3
8
1
8
5
9
7
1
0
5
1
2
0
1
2
9
1
3
3
1
5
1
1
9
8
2
1
4
2
7
8
2
9
7
N
m
e
r
o
d
e
c
i
t
a
s
Totaldecitasdelautor
Autoresportotaldecitas(20012007)
41
Impactodelaspublicaciones
Caracterizaremoselimpactodelosautoresdelcampodeinvestigacineducacionalysus
publicaciones,medianteelusodetresndicesdeimpacto
47
:ndiceh,ndicehcontemporneo,e
ndiceg.
Descripcin
ValoresparaelCIE
1970
2007
1991
2000
2001
2007
ndiceh UnautortendrunndicedehsihdesusNartculostienenh
citas,ylos(Nh)artculosrestantestienenmenosdehcitas
41 34 30
ndiceh
contemporneo(h
c
)
Enbasealndiceh,entregandomayorponderacinalascitas
deartculosrecientes
28 18 23
ndiceg Entregamayorponderacinalosartculosconunelevado
nmerodecitas
61 53 39
ndicehnormalizado
(h
n
)
Consideraelnmerodeartculospublicados,castigandoa
aquellosautoresconproduccinelevada
0,93 0,97 1
47
Paraunaexplicacindetalladadeestosndices,verseccinSeleccindeindicadores
42
Muchosautoresconbajoimpacto,pocosconaltoimpacto
0
10
20
30
40
50
60
70
80
90
100
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 23 25 30 31
N
m
e
r
o
d
e
a
u
t
o
r
e
s
ndicesdeimpacto
Nmerodeautoressegnndicesdeimpacto
ndiceh ndiceg ndicehc
Alclasificaralosautoresdelcampodeinvestigacineducacionalchilenosegnsundice
h,sepuedeobservarquelamayoradelosautores(53%)tieneunndicehinferiora2,y
queunpequeogrupoposeeunndicehdedosdgitos(4,5%).
Estosresultadossemantienensiseconsideranlosndicesh
c
ygcomomedidasdeimpacto
alternativas.
43
ElimpactodelCIEhaaumentadoenlasltimastresdcadas
0
5
10
15
20
25
30
35
40
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
n
d
i
c
e
s
d
e
i
m
p
a
c
t
o
Ao
Evolucindendicesdeimpacto(19702007)
ndiceh ndiceg ndicehc
LaevolucindelimpactodelCIEpuedeobservarseatravsdelosndicesasociadosalos
aosdepublicacindelosartculos.
Elcrecimientodelosndicesespersistenteentre1970y2000,aoapartirdelcuallos
registrosdecitasypublicacionesdecaen,productodelarelacinnaturaldelaedadde
unartculoyelnmerodecitasquerecibe.
Losdocumentospublicadosacomienzosdeladcadade1970obtenanunndicehde2.
Afinesdeladcadadel90,estevalorcrecidiezveces,hastaalcanzarunvalorde22enel
ao2000.Entonces,elimpactodelaspublicacionesdelcampo,medidoatravsdelndice
h,haaumentadosostenidamenteatravsdeltiempo.
Losndicesgyh
c
confirmanloobservadomedianteelcmputodelndiceh.
44
ElimpactodelCIEhaaumentadoenlasltimastresdcadas
0
0,05
0,1
0,15
0,2
0,25
0,3
0
5
10
15
20
25
1
9
7
0
1
9
7
1
1
9
7
2
1
9
7
3
1
9
7
4
1
9
7
5
1
9
7
6
1
9
7
7
1
9
7
8
1
9
7
9
1
9
8
0
1
9
8
1
1
9
8
2
1
9
8
3
1
9
8
4
1
9
8
5
1
9
8
6
1
9
8
7
1
9
8
8
1
9
8
9
1
9
9
0
1
9
9
1
1
9
9
2
1
9
9
3
1
9
9
4
1
9
9
5
1
9
9
6
1
9
9
7
1
9
9
8
1
9
9
9
2
0
0
0
2
0
0
1
2
0
0
2
2
0
0
3
2
0
0
4
2
0
0
5
2
0
0
6
2
0
0
7
n
d
i
c
e
h
n
n
d
i
c
e
h
Ao
ndiceh ndicehn
AcabamosdeobservaruncrecimientoenelimpactodelaspublicacionesdelCIEentre
1970y2000,medidoportresndicesdistintos.Sinembargo,sabemosademsqueel
nmerodepublicacionesalaohaaumentadomsde50vecesenelmismoperodo.
Cmopodemosintegrarestainformacin?Elndicehnormalizadocorrigeelvalordel
ndicedeHirschincorporandoelnmerodepublicacionesenelanlisis.
Entonces,siconsideramosesteaumentoenelnmerodepublicacionesenelaumentodel
impactoencontramosqueelimpactodelcamponoaumenta,sinoquemuestrauna
tendenciaalabaja.
Sepuedendesprenderdosinterpretacionesdeesteanlisis:
o Sehaincorporadoungrannmerodepublicacionesalcampodeinvestigacin
educacionalchileno,queenpromedionorecibenmuchascitas.Portanto,el
impactogeneraldelCIEhadecadoenlosltimos30aos.
o Elnmerodecitasdelosartculosesfuncindesuedad.Enconsecuencia,al
medirelndiceh
n
seestsubestimandoelnmerodecitasasociadasalos
artculosmsrecientespuestoqueansonjvenesypuedenrecibirmscitas
enelfuturo.
Encualquiercaso,esteresultadosugiereprudenciaalanalizarelcrecimientodelimpacto
delCIE.
45
Referencias
Aliaga,F.yN.Orellana(1999)LautilizacindelasbasesdedatosdelISIparalaevaluacindelacalidadde
laspublicacionessobreinvestigacineducativaenEspaa:argumentosparaundebate.Publicadoen
AIDIPE,Nuevasrealidadeseducativasnuevasnecesidadesmetodolgicas.Mlaga:CEDMA,1999Disponible
en:
http://www.uv.es/~aliaga/RevistasISI.html
Aksnes,D.W.(2003)Amacrostudyofselfcitation,Scientometrics,Volume56,Number2.Disponibleen:
http://www.springerlink.com/content/l57850224386851l/
Allendeetal(Eds.)(2005)AnlisisyProyeccionesdelaCienciaChilena2005.SantiagodeChile:Academiade
Ciencias,ConsejodxeSociedadesCientficasdeChile,ProgramaBicentenariodeCienciasyTecnologas
Aguirre,L.(2005)CienciasdelaTierra.EnAllendeetal(Eds.)(2005)
Altbach,P.G.(2006)TheTyrannyofCitations,InternationalHigherEducation,Number43.Disponibleen:
http://firgoa.usc.es/drupal/node/30339
Amin,M.yM.Mabe(2000)ImpactFactors:useandabuse,PerspectivesinPublishing,No.1Disponibleen:
http://www.elsevier.com/framework_editors/pdfs/Perspectives1.pdf
Archambault,E.,VignolaGagn,G.Ct,V.Larivire,andY.Gingras(2005)Welcometothelinguistic
warpzone:Benchmarkingscientificoutputinthesocialsciencesandhumanities.Disponibleen:
http://www.sciencemetrix.com/pdf/Linguistic_Warp_Zone_Benchmarking_SSH.pdf
Ball,P.(2005)Indexaimsforfairrankingofscientists,Nature436,900.Disponible(parasuscriptores)en:
http://www.nature.com/nature/journal/v436/n7053/full/436900a.html
Bakkalbasi,N.,K.Bauer,J.Glover&L.Wang,L.(2006)Threeoptionsforcitationtracking:GoogleScholar,
ScopusandWebofScience.Disponibleen:http://eprints.rclis.org/archive/00006080/
Batista,P.D.,M.G.Campiteli,O.KinouchiandA.S.Martinez(2005)Universalbehaviorofaresearch
productivityindex;UniversidadesdeSaoPaulo.Disponibleen:
http://arxiv.org/ftp/physics/papers/0510/0510142.pdf
Batista,P.D.,M.G.Campiteli,O.Kinouchi,A.S.Martinez(2005a)Anindextoquantifyanindividual's
scientificresearchvalidacrossdisciplines.Disponibleen:http://arxiv.org/abs/physics/0509048
Bernasconi,A.(2007)Elcarctercientficodeladogmticajurdica,RevistadeDerecho,Vol.XX,N1
Bernstein,B.(1975)Class,CodesandControl,Vol3,TowardsaTheoryofEducationalTransmissions.London
&Boston:Routledge&KeganPaul
Bjrkman,I.andBjrj,B.C.(2007)EstimatingtheResearchImpactfFinnishBusinessStudiesProfessors.
Disponibleen:
http://www.oacs.shh.fi/publications/Bjork_Bjorkman.pdf
Borgman,C.L.andJ.Furner(2002)ScholarlyCommunicationandBibliometrics.Preprintofanarticle
acceptedforpublicationinAnnualReviewofInformationScienceandTechnology,Vol.36
46
Bornmann,L.andH.D.Daniel(2007)WhatdoweknowaboutthehIndex?,JournaloftheAmerican
SocietyforInformationScienceandTechnology,58(9):13811385.Disponibleen:
http://www.lutzbornmann.de/icons/BornmannDanielHReview.pdf
Bornmann,L.andHD.Daniel(2005)Doesthehindexrankingofscientistsreallywork?,Scientometrics,
Vol.65,No.3.EnBraun,T.(Ed.)EvaluationsofIndividualScientistsandResearchInstitutions,PartI;
Budapest:AkadmiaiKiad,2006
Bosman,J,Mourik,I.van,Rasch,M.;Sieverts,E.,Verhoeff,H.(2006)Scopusreviewedandcompared.The
coverageandfunctionalityofthecitationdatabaseScopus,includingcomparisonswithWebofScienceand
GoogleScholar;UtrechtUniversityLibrary.Disponibleen:
http://igiturarchive.library.uu.nl/DARLIN/20061220200432/Scopusdoorgelicht&vergeleken
translated.pdf.
Braun,T.(Ed.)EvaluationsofIndividualScientistsandResearchInstitutions.Budapest:AkadmiaiKiad,
2006(PartsIandII)
Brieva,F.yJ.RuizdelSolar(coords.)etal(2005)Cienciasdelaingeniera.EnAllendeetal(Eds.)(2005)
Brunner,J.J.(2008)LosdebatesdelaRepblicaeducacional:19202010.EnFigueroa,M.yM.Vicua
(eds.)ElChiledelBicentenario.SantiagodeChile:EdicionesUniversidadDiegoPortales.Disponibleen:
http://mt.educarchile.cl/mt/jjbrunner/archives/2007/11/los_debates_de.html
Butler,L.(2006)MethodologyforCitationAnalysis;RQFPilotStudyProjectHistoryandPoliticalScience,
CouncilfortheHumanitioes,ArtsandSocialSciences(CHS),Australia.Disponibleen:
http://www.chass.org.au/papers/PAP20061102LB.php
Butler,L.(2006a)Researchassessment:movingbeyondjournaloutputs;SPRUUniversityofSussex.
Disponibleen:
http://www.sussex.ac.uk/Units/spru/events/ocs/viewabstract.php?id=96
Carr,J.E.andL.Britton(2003)Citationtrendsofappliedjournalsinbehavioralpsychology:19812000,
JournalofAppliedBahvioralAnalyisis36,Number1.Disponibleen:
http://seab.envmed.rochester.edu/jaba/articles/2003/jaba36010113.pdf
Castilla,J.C.yM.Fernndez(coords.)etal(2005)Cienciasdelmar.EnAllendeetal(Eds.)(2005)
CHASS(CouncilfortheHumanities,ArtsandtheSocialSciences),DepartmentofEducationScienceand
Training,Australia(2005)Measuresofqualityandimpactofpubliclyfundedresearchinthehumanities,
artsandsocialsciences;CHASOccasionalPaperNo.2
ChemistryWorld(2007)Hirschindexrankstopchemists.Disponibleen:
http://www.rsc.org/chemistryworld/News/2007/April/23040701.asp
47
Contreras,C.,G.EdwardsyA.Mizala(2006)LaProductividadCientficadeEconomayAdministracinen
Chile:UnAnlisisComparativo,CuadernosdeEconoma,vol.43,no.128.Disponibleen:
http://www.scielo.cl/scielo.php?script=sci_arttext&pid=S071768212006000200005&lng=es&nrm=iso
Cooper,T.etal(2005)Cienciasagronmicasyforestales.EnAllendeetal(Eds.)(2005)
Cronin,B.andL.I.Meho(2006)UsingtheHindextorankinfluentialinformationscientists.Journalofthe
AmericanSocietyforInformationScienceandTechnology57(9):pp.12751278.Disponibleen:
http://dlist.sir.arizona.edu/1717/
Egge,L.(2007)Dynamichindex:theHirschindexinfunctionoftime,JournaloftheAmericanSocietyfor
InformationScienceandTechnology,Volume58,Issue3(February2007)Disponibleen:
http://portal.acm.org/citation.cfm?id=1228986#abstract(soloabstract)
Egge,L.(2006)Animprovementofthehindex:thegindex.Disponibleen:
http://doclib.uhasselt.be/dspace/handle/1942/983
EuropeanScienceFoundation(2006)HighereducationinEuropebeyond2010:resolvingconflictingsocial
andeconomicexpectations.ProjectSummary.Disponibleen:
http://www.esf.org/index.php?id=701
Fowler,J.H.andD.W.Aksnes(2007)Doesselfcitationpay?,Scientometrics,Vol.73,Number2.
Disponibleen:
http://jhfowler.ucsd.edu/does_self_citation_pay.pdf
Furlong,J.andA.Oancea(2005)AssessingQualityinAppliedandPracticebasedEducationalResearch:A
FrameworkforDiscussion;OxfordUniversity,DepartmentofEducationalStudies.Disponibleen:
http://www.bera.ac.uk/pdfs/Qualitycriteria.pdf
Garfield,E.(2005)Theagonyandtheecstasy:thehistoryandmeaningoftheJournalImpactFactor.
Disponibleen:http://garfield.library.upenn.edu/papers/jifchicago2005.pdf
Garfield,E.(1996)FortnightlyReview:Howcanimpactfactorsbeimproved?,BMJ,313.Disponibleen:
http://www.bmj.com/cgi/content/full/313/7054/411.
Garfield,E.(1994)TheThomsonScientificImpactFactor.PublicadooriginalmenteenCurrentContents
printeditions,June20.Disponibleen:
http://thomsonreuters.com/business_units/scientific/free/essays/impactfactor/
Gargallo,L.etal(2005)CienciasQumicas.EnAllendeetal(Eds.)(2005)
Gibbons,M.(1998)Highereducationrelevanceinthe21stcentury;TheWorldBank.Disponibleen:
http://www
wds.worldbank.org/external/default/WDSContentServer/IW3P/IB/2000/07/19/000094946_9912220532351
/Rendered/PDF/multi_page.pdf
48
Glnzel,W.(2005)OntheopportunitiesandlimitationsoftheHindex.Disponibleen:
http://www.citebase.org/fulltext?format=application%2Fpdf&identifier=oai%3Aeprints.rclis.org%3A9535
Glanzel,W.,&Moed,H.F.(2002)Journalimpactmeasuresinbibliometricresearch,Scientometrics,53(2)
Gmez,C.yM.Bordans(1996)Limitacionesenelusodelosindicadoresbibliomtricosparalaevaluacin
cientfica,PolticaCientfica,N46
Grothkopf,U.andS.StevensRayburn(2006)IntroducingtheHIndexinTelescopeStatistics.Disponible
en:http://arxiv.org/abs/astroph/0610274
GrupoScimago(2006)ElndicehdeHirsch:aportacionesaundebate.EnElProfesionaldelaInformacin,
2006,julioagosto,v.15,n.4,pp.304306.Disponibleen:
http://www.scimago.es/file.php?file=/1/Documents/Epi1542006b.pdf
Hajjem,C.,S.Hartad,Y.Gingras(2005)Tenyearcrossdisciplinarycomparisonofthegrowthofopenaccess
andhowitincreasesresearchcitationimpact.Disponibleen:
http://sites.computer.org/debull/A05dec/hajjem.pdf
Harnad,Stevan(2007)OpenAccessScientometricsandtheUKResearchAssessmentExercise.(Preprintof
InvitedKeynoteAddressto11thAnnualMeetingoftheInternationalSocietyforScientometricsand
Informetrics,Madrid,Spain,2527June2007.Disponibleen:
http://arxiv.org/ftp/cs/papers/0703/0703131.pdf
Harzing,AW(2007)GoogleScholaranewdatasourceforcitationanalysis.Disponibleen:
http://www.harzing.com/resources.htm#/pop_gs.htm
Harzing,AW(2007a)ReflectionsonGoogleScholar.Disponibleen:
http://www.harzing.com/resources.htm#/pop_gs.htm
Harzing,AW(2007b)Reflectionsonthehindex.Disponibleen:
http://www.harzing.com/pophelp/hindex.htm
Harzing,AW(2007c)Reflectionsonnormsforthehindexandrelatedindices.Disponibleen:
http://www.harzing.com/resources.htm#/pop_norm.htm
Harzing,AW(2005)AustralianResearchOutputinEconomicsandBusiness:HighVolume,LowImpact?,
AustralianJournalofManagement,Vol.30,No.2.Disponibleen:
http://www.agsm.edu.au/~eajm/0512/pdf/PAPER1Harzing_AJM_Dec_2005.pdf
Hicks,D.(2005)Thefourliteraturesofsocialsciences,JournalofManagementandSocialSciences,Vol.1,
No.1
Hidalgo,C.yN.Inestrosa(coords.)etal(2005)Biologa.EnAllendeetal(Eds.)(2005)
Hirsch,J.E.(2005)Anindextoquantifyanindividualsscientificoutput,arXiv:physics/0508025v5.
Disponibleen:http://arxiv.org/abs/physics/0508025
49
Hood,W.W.andC.S.Wilson(2001)Theliteratureofbibliometrics,scientometrics,andinformatics.En
Braun,T.(Ed.)EvaluationsofIndividualScientistsandResearchInstitutions,PartI;Budapest:Akadmiai
Kiad,2006
Iglesias,J.E.C.Pecharromn(2005)ScalingthehindexfordifferentscientificISIfields.Institutode
CermicayVidrio,ConsejoSuperiordeInvestigacionesCientficas,Cantoblanco.Disponibleen:
http://arxiv.org/ftp/physics/papers/0607/0607224.pdf
Imperial,J.yA:RodrguezNavarro(2005)UtilidaddelndicehdeHirschparaevaluarlainvestigacinen
Espaa.Disponibleen:
http://www.bit.etsia.upm.es/Imperial_RodriguezNavarro.pdf
Inestrosa,N.(coord.)etal(2005)Publicacionesypatentes.EnAllendeetal(Eds.)(2005)
Israel,Y.etal(2005)Biomedicina.EnAllendeetal(Eds.)(2005)
Jacs,P.(2006)Openaccesstoscholarlyindexing/abstractinginformation,OnlineInformationReview,
Vol.30,No.4
Jacs,P.(2006a)OpenAccessScholarlyDatabasesABirdsEyeViewoftheLandscape.Keynoteaddress
oftheAsia&OceaniaSectionofDepartmentofIFLA,Seoul.Disponibleen:
http://www.ifla.org/IV/ifla72/papers/157Jacsoen.pdf
Jacs,P.(2005)GoogleScholar:theprosandthecons,OnlineInformationReview,Vol.29,No.2
JflyCN.net(2007)EducationJournalsImpactFactor20002005.Collectedfrom"Education&Educational
Research"CategoryofISIWebofKnowledgeJCR(JournalCitationReports)SocialSciencesEdition.
Disponibleen:
http://edujcr.jflycn.net/
Jin,B.(2007)TheARindex:complementingthehindex,ISSINewsletter,2007,3(1)p.6.Disponibleen:
http://users.pandora.be/ronald.rousseau/Jin_s_ARindex.pdf
KalinArroyo,M.etal(2005)Cienciasambientales.EnAllendeetal(Eds.)(2005)
Kelly,C.D.andM.D.Jennions(2006)Thehindexandcareerassessmentbynumbers,TRENDSinEcology
andEvolutionVol.21No.4April2006.Disponibleen:
http://www.anu.edu.au/BoZo/jennions/publications/Paper60.pdf
Kinney,A.L.(2007)NationalScientificFacilitiesandTheirScienceImpactonNonBiomedicalResearch,
NASA/GSFC.Disponibleen:
http://arxiv.org/ftp/arxiv/papers/0705/0705.1797.pdf
Kousha,K.andThelwall,M.(2006)GoogleScholarCitationsandGoogleWeb/URLCitations:AMulti
DisciplineExploratoryAnalysis.InProceedingsInternationalWorkshoponWebometrics,Informetricsand
Scientometrics&SeventhCOLLNETMeeting,Nancy(France).Disponibleen:
http://eprints.rclis.org/archive/00006416/
50
Krauskopf,Manuel(2003)Lafaltadeunadecuadoreconocimientodelascapacidadesexistentesafectael
desarrollocientficoenChile,BiologicalResearch,vol.36,No.2.Disponibleen:
http://www.scielo.cl/scielo.php?pid=S071697602003000200001&script=sci_arttext&tlng=en
Krauskopf,M.(2002)AScientometricviewofsomeBiologicaldisciplinesinChile,BiologicalResearch,vol.
35,No.1
Krauskopf,M.(1999)LosdoctoradosenChile.Perfilycapacidadcientficadelosprogramasenciencias
acreditadosenChile,EstudiosPblicos,N76.Disponibleen:
http://www.redhucyt.oas.org/ricyt/interior/biblioteca/2bkrauskopf.PDF
Krauskopf,M.yR.Pessoa(1980)Estudiopreliminarsobrepublicacionesyproductividadcientficaen
Chile,ArchivosdeBiologayMedicinaExperimentales,Santiago,Vol.13,No.2
LenSarmiento,F.D.,M.E.LeonS.,V.A.Contreras(2007)Elimpactodelfactordeimpacto:mitoo
realidad?,ColombiaMdica(aprobadoparapublicacin).Disponibleen:
http://colombiamedica.univalle.edu.co/Vol38No3/html/v38n3a8.html
Leydesdorff,L.(2007)CaveatsfortheUseofCitationIndicatorsinResearchandJournalEvaluations.
Disponibleen:
http://users.fmg.uva.nl/lleydesdorff/cit_indicators/cit_indicators.pdf
Line,M.B.(1999)Socialscienceinformationthepoorrelation,INSPEL33.Disponibleen:
http://www.ifla.org/VII/d2/inspel/993libm.pdf
Lpez,S.etal(2005)Astronoma.EnAllendeetal(Eds.)(2005)
Manasevich,R.etal(2005)Cienciasmatemticas.EnAllendeetal(Eds.)(2005)
Mayr,P.andAK.Walter(2007)AnexploratorystudyofGoogleScholar;GESIS/SocialScienceInformation
Centre,Bonn.Disponibleen:
http://eprints.rclis.org/archive/00011202/
McIntyre,D.(1996)TheProfessionofEducationalResearch;PresidentialaddresstotheBritishEducational
ResearchAssociationgivenattheAnnualConference,LancasterUniversity,September1996.Disponibleen:
http://www.bera.ac.uk/addressdownloads/McIntyre,%201996.pdf
Meho,L.I.andK.Yang(2007)ANewErainCitationandBibliometricAnalyses:WebofScience,Scopus,and
GoogleScholar,underreviewatJournaloftheAmericanSocietyforInformationScienceandTechnology.
Disponibleen:
http://dlist.sir.arizona.edu/1733/
Meho,L.I.(2007)Theriseandriseofcitationanalysis.(AcceptedforpublicationinPhysicsWorld).
Disponibleen:http://arxiv.org/ftp/physics/papers/0701/0701012.pdf
Moed,H.F.(2005)HirschIndexisacreativeandappealingconstructbutbecautiouswhenusingitto
evaluateindividualscholars;CWTSLeidenUniversity.Disponibleen:
http://www.cwts.nl/hm/Comments_on_Hirsch_Index_2005_12_16.pdf
51
Monastersky,R.(2007)Thenumberthatsdevouringscience,TheChronicleofHigherEducation,October
14.Disponibleen:
http://chronicle.com/free/v52/i08/08a01201.htm
Monsalve,M.(1998)IelSilencioComenzaReinar.DocumentosparalaHistoriadelaInstruccin
Primaria,18401920.SantiagodeChile:DIBAM,UniversidadCatlicaBlasCaas,CentrodeInvestigaciones
DiegoBarrosArana
Nederhof,A.J.etal(2003)InternationalbenchmarkingandbibliometricmonitoringofUKresearch
performanceinthesocialsciences;CWTSreportfortheUKEconomic&SocialResearchCouncil.Disponible
en:
http://www.esrcsocietytoday.ac.uk/ESRCInfoCentre/Images/Bibliometrics%20and%20the%20Benchmarking
%20of%20UK%20Research%20Performance%20in%20the%20Social%20Sciences_tcm618356.pdf
Nederhof,A.J.etal(1989)Assessingtheusefulnessofbibliometricindicatorsforthehumanitiesandthe
socialandbehaviouralsciences:acomparativestudy,Scientometrics,15,56.
Noruzi,A.(2005)GoogleScholar:thenewgenerationofcitationindexes.LIBRI55(4):pp.170180.
Disponibleen:
http://www.librijournal.org/pdf/20054pp170180.pdf
Nowotny,H.,P.Scott,M.Gibbons(2001)ReThinkingScience,KnowledgeandthePublicinanEraof
Uncertainty.Cambridge,OxfordandMalden:PolityPress
Nez,I.(2002)Lasjornadasdeexperimentacinpedaggicadeeducacinprimariade1950;Ponencia
presentadaalasVIIJornadasNacionalesdeHistoriadelaEducacinChilena,UniversidaddeBoBoy
SociedadChilenadeHistoriadelaEducacin,Chilln.Disponibleen:
http://historiaeducacion.tripod.com/sitebuildercontent/sitebuilderfiles/experimentacionpedagogicaenprim
aria1950inunez.doc
Nez,I.(2001)IrmaSalas,productoradeconocimientosobreeducacin(19301964).Disponibleen:
http://www.piie.cl/centrodedocumentacion/index.php?option=com_content&task=view&id=70&Itemid=2
OECD(2007)EvidenceinEducation.LinkingResearchandPolicy.Paris:OECD.
Orbay,M.,O.Karamustafaoglu,F.Oner(2007)!WhatdoesHirschindexevolutionexplainus?Acasestudy,
TurkishJournalofChemistry.Disponibleen:http://arxiv.org/abs/0704.1602
Pauly,D.andK.I.Stergiou(2005)Equivalenceofresultsfromtwocitationanalyses:ThomsonISIsCitation
IndexandGooglesScholarservice,EthicsinScienceandEnvironmentalPolitics(ESEP),December22
Powles,J.(2005)Measuresofqualityandimpactofpubliclyfundedresearchinthehumanities,artsand
socialsciences.CHASSOccasionalPapers#2.Disponibleen:
http://www.chass.org.au/papers/PAP20051101JP.php
REPP(ResearchEvaluationandPolicyProject,TheAustralianNationalUniversity)(2005)Quantitative
indicatorsforresearchassessmentaliteraturereview;REPPDiscussionPaper05/1
52
Rousseeau,R.(2007)NewdevelopmentsrelatedtotheHirschindex.Disponibleen:
http://eprints.rclis.org/archive/00006376/01/Hirsch_new_developments.pdf
Rousseau,D.(2006)Simplemodelsandthecorrespondinghandgindex.Disponibleen:
http://doclib.uhasselt.be/dspace/bitstream/1942/944/1/Rousseau%20Dalian.pdf
Rousseau,R.(1992)WhyIamnotcitedorwhyaremultiauthoredpapersmorecitedthanothers?
[Letter].JournalofDocumentation,48
Russel,W.(2003)Theimpactfactor:yourjobmaydependonitbutdoyouknowwhatitis?,
CancerFuturesVol2
Seglen,P.O.(1997)Whytheimpactfactorofjournalsshouldnotbeusedforevaluatingresearch,BMJ
1997,314.Disponibleen:
Schieflebein,E.(1990)LainvestigacineducativaenAmricaLatina:delafaseartesanalalafase
industrial,Perspectivas,vol.XX,N1
ScienceMetrix(2004)TheUseofBibliometricsintheSocialSciencesandHumanities.FinalReport.Prepared
fortheSocialScienceandHumanitiesResearchCouncilofCanada(SHRCC).Disponibleen:
http://www.sciencemetrix.com/pdf/ScienceMetrix_Use_Bibliometrics_SSH.pdf
Schubert,A.andT.Braun(1996)Crossfieldnormalizationofscientometricindicators,Scientometrics,Vol.
36,No.3.EnBraun,T.(Ed.)EvaluationsofIndividualScientistsandResearchInstitutions,PartI;Budapest:
AkadmiaiKiad,2006
Sidiropoulos,Katsaros,Manolopoulos(2006)GeneralizedhindexforDisclosingLatentFactsinCitation
Networks.Disponibleen:http://arxiv.org/PS_cache/cs/pdf/0607/0607066v1.pdf
Smith,A.G.(2006)GoogleScholarasacybermetrictool:acomparisonwiththeNewZealandPBRFresearch
assessment;Papertobepresentedat9thInternationalConferenceonScienceandTechnologyIndicators,
Leuven,Belgium,79Sept,2006.Disponibleen:
http://www.vuw.ac.nz/staff/alastair_smith/publns/GoogleScholarPBRF.pdf
Snyder,H.W.andS.Bonzi(1998)Patternsofselfcitationacrossdisciplines(19801989),Journalof
InformationScience,21.
Soto,L.,M.Zambra(coords.)etal(2005)Fsica.EnAllendeetal(Eds.)(2005)
Steele,C.,L.ButlerandD.Kingsley(2006)ThePublishingImperative:thepervasiveinfluenceofpublication
metrics.Disponibleen:
http://dspace.anu.edu.au/bitstream/1885/44486/1/Steele_The_Publishing_Imperative.pdf
Stimulate6Group(2007)TheHirschindexappliedtotopicsofinteresttodeveloping,FirstMonday,
volume12,number2.Disponibleen:
URL:http://firstmonday.org/issues/issue12_2/stimulate/index.html
Testa,J.(2007)TheThomsonScientificJournalSelectionProcess.Disponibleen:
http://www.thomsonreuters.com/business_units/scientific/free/essays/journalselection/
53
Togia,A.andN.Tsigilis(2007)Impactfactorandeducationaljournals:acriticalexaminationandanalysis,
InternationalJournalofEducationalResearch,45
UniversidadAlbertoHurtado/CIDE(2007)InformeFinaldelestudio:EstadodelartedelaInvestigaciny
DesarrolloenEducacinenChile;MinisteriodeEducacinyUniversidadAlbertoHurtado/CIDE
VanRaan,A.F.J(2005)Foryourcitationsonly?Hottopicsinbibliometricanalysis,Measurement,3(1),50
62.Disponibleen:
http://www.leaonline.com/doi/abs/10.1207/s15366359mea0301_7?cookieSet=1&journalCode=mea
VanRaan,A.F.J.(2005a)ComparisonoftheHirschindexwithstandardbibliometricindicatorsandwith
peerjudgmentfor147chemistryresearchgroups,arXiv:physics/0511206.Disponibleen:
http://arxiv.org/abs/physics/0511206
VanRaan,A.F.J.(1996)Advancedbibliomtericmethodsasquantitativecoreofpeerreviewbased
evaluationandforesightexercises,Scientometrcis,Vol.36,No.3.EnBraun,T.(Ed.)EvaluationsofIndividual
ScientistsandResearchInstitutions,PartI;Budapest:AkadmiaiKiad,2006
Vanclay,J.K.(2006)Ontherobustnessofthehindex,JournaloftheAmericanSocietyforInformation
ScienceandTechnology(accepted23October2006).Disponibleen:
http://arxiv.org/ftp/cs/papers/0701/0701074.pdf
Walter,G.,S.Bloch,G.HuntandK.Fisher(2003),Countingoncitations:aflawedwaytomeasurequality,
MedicalJournalofAustralia178(6).Disponibleen:
http://www.mja.com.au/public/issues/178_06_170303/wal10537_fm.html#i1082361
Yancey,R.(2005)Fiftyyearsofcitationindexingandanalysis,ThomsonKnowledgeLinkNewsletter,
August/September2005.Disponibleen:
http://scientific.thomson.com/news/newsletter/200508/8289803/
Yang,K.andL.I.Meho(2006)CitationAnalysis:AComparisonofGoogleScholar,Scopus,andWebof
Science.InGrove,Andrew,Eds.Proceedings69thAnnualMeetingoftheAmericanSocietyforInformation
ScienceandTechnology(ASIST)43,Austin(US).Disponibleen:http://eprints.rclis.org/archive/00008121/
54
Apndice:Listadeautores,nmerodepublicacionesendicesindividualesdeimpacto.
EstelistadofueelaboradoconbsquedasenGoogleScholarenMarzode2008,utilizandoPublish
orPerishversin2.5.Alintentarreplicarestosresultados,sedebeconsiderarqueGoogleScholar
esactualizadopermanentemente,yquePublishorPerishesactualizadoperidicamente.Estos
factorespuedenincidirenlaobtencindelistadosdeartculosdistintosalosqueaquse
presentan.
Abarca,G. 1 1 1 1,0
Abarza,Lorena 1 1 1 1,0
durizBravo,Agustn 2 2 2 1,0
Ahumada,Pedro 17 4 5 0,2
lamos,Pilar 8 2 3 0,3
Alcalay,Lidia 19 4 11 0,2
Allard,Ral 6 1 1 0,2
Allende,Jorge 17 2 4 0,1
Alliende,Felipe 32 5 9 0,2
Almaiga,Atilio 1 1 1 1,0
Almonacid,Claudio 4 1 2 0,3
lvarez,Carlos 7 2 3 0,3
lvarez,Edgardo 1 1 1 1,0
lvarez,Ricardo 2 1 1 0,5
Alvario,Celia 12 3 8 0,3
Amtmann,Carlos 6 2 3 0,3
Andrade,Margarita 23 4 6 0,2
Arancibia,Patricia 19 4 7 0,2
Arancibia,Violeta 68 7 12 0,1
Araneda,H. 3 1 2 0,3
Arellano,JosPablo 70 8 16 0,1
Arellano,M.Soledad 14 4 6 0,3
Argandoa,Carmen 1 1 1 1,0
Arnold,Rolf 2 1 2 0,5
Arriagada,Irma 88 14 23 0,2
Arriagada,Patricio 1 1 1 1,0
Arzola,Sergio 17 3 6 0,2
Assael,J. 30 4 7 0,1
Astroza,Vernica 3 1 1 0,3
Atria,Rodrigo 38 6 9 0,2
Augstin,Robert 7 3 4 0,4
valos,Beatriz 80 9 13 0,1
55
Babul,Jorge 4 2 2 0,5
Baeza,Jorge 3 2 2 0,7
Bahamonde,Claudia 3 3 3 1,0
Barrera,G. 46 11 16 0,2
Beas,J. 8 2 4 0,3
Bellei,Cristin 40 6 8 0,2
Bello,lvaro 19 7 13 0,4
Bello,Sergio 5 2 4 0,4
Bermeosolo,Jaime 8 3 4 0,4
Bernasconi,Andrs 37 4 5 0,1
Berner,H. 1 1 1 1,0
Beyer,Harald 35 8 14 0,2
Bitrn,M. 2 2 2 1,0
Bralic,E.S. 10 3 4 0,3
Braun,Matas 23 7 13 0,3
Bravo,David 127 9 11 0,1
Bravo,Luis 26 6 7 0,2
Briones,Guillermo 64 9 17 0,1
Brunner,JosJoaqun 343 20 30 0,1
Camacho,Alfonso 2 2 2 1,0
Camus,P. 1 1 1 1,0
Caulef,Eliseo 20 4 7 0,2
Cardemil,Cecilia 26 4 5 0,2
Crdenas,P. 3 2 2 0,7
Cariola,L. 19 4 4 0,2
Carlson,Beverly 19 4 6 0,2
Casassus,Juan 56 9 12 0,2
Castro,Eduardo 4 2 3 0,5
Castro,Pedro 1 1 1 1,0
Centrangolo,scar 78 9 14 0,1
Cerda,AnaMara 16 4 5 0,3
Cerri,M. 5 2 2 0,4
Clavel,Carlos 4 2 3 0,5
Condemarn,Mabel 60 9 14 0,2
Contreras,Dante 167 12 17 0,1
Cornejo,J. 1 1 1 1,0
Cornejo,Rodrigo 7 2 3 0,3
Corral,Luis 2 1 1 0,5
Corvaln,AnaMara 10 2 3 0,2
Corvaln,Javier 15 4 5 0,3
56
Courard,H. 12 4 6 0,3
Cox,Cristin 74 10 15 0,1
Cruz,Patricia 5 2 3 0,4
Dvila,scar 21 4 5 0,2
Descouvieres,Carlos 13 2 4 0,2
DazRomn,William 1 1 1 1,0
Dieguez,Eleonor 2 1 2 0,5
Domnguez,M.Paulina 3 2 2 0,7
Donoso,lvaro 9 2 2 0,2
Donoso,Roberto 10 2 3 0,2
Donoso,Sebastin 36 5 5 0,1
Durn,Teresa 26 3 4 0,1
Durson,John 97 11 25 0,1
Edwards,Vernica 20 5 10 0,3
Egaa,L. 14 2 2 0,1
Elacqua,Gregory 28 4 9 0,1
Errzuriz,MaraMargarita 6 1 3 0,2
Escudero,R.C. 2 2 2 1,0
Espndola,Ernesto 12 3 5 0,3
Espnola,Viola 48 7 9 0,1
Espinoza,scar 15 3 5 0,2
Esquivel,Juan 5 2 2 0,4
Etchegaray,Fernando 6 2 2 0,3
Eyzaguirre,Brbara 31 5 8 0,2
Fernndez,Francisco 3 2 2 0,7
Fernndez,G. 5 3 4 0,6
Fernndez,I. 8 3 3 0,4
FernndezDarraz,Enrique 1 1 1 1,0
fgallego.txt 56 9 17 0,2
Filp,Johanna 34 5 6 0,1
Flores,Lorena 2 2 2 1,0
Fontaine,Loreto 8 3 5 0,4
Franco,Rolando 26 7 17 0,3
Gajardo,Marcela 53 6 14 0,1
Garca,Mauricio 2 2 2 1,0
GarcaHuidobro,JuanEduardo 51 7 12 0,1
Ghiardo,Felipe 3 2 3 0,7
Godoy,Marcelo 3 2 2 0,7
Gmez,M.V. 16 2 5 0,1
Gonzlez,LuisEduardo 27 4 6 0,1
57
Gonzlez,Paula 35 7 10 0,2
Grossi,M.C. 4 2 3 0,5
Gubbins,Vernica 2 2 2 1,0
Guerra,AnaMara 1 1 1 1,0
Guerrero,G. 1 1 1 1,0
Guerrero,Patricia 3 2 2 0,7
Guzmn,I. 3 1 1 0,3
Guzmn,M.A. 3 2 2 0,7
Gysling,Jacqueline 19 5 7 0,3
Hawes,G. 33 4 6 0,1
Hepp,Pedro 36 4 7 0,1
Hernandez,J. 3 1 3 0,3
Herrera,MaraOlivia 19 2 3 0,1
Herrera,P. 13 4 7 0,3
Hevia,Renato 24 4 4 0,2
Himmel,Erika 38 5 5 0,1
Hopenhayn,Martn 155 17 31 0,1
Irigoin,MaraE. 14 2 2 0,1
Ivanovic,Daniza 1 1 1 1,0
Ivanovic,Rodolfo 31 6 8 0,2
Jacque,Sandra 1 1 1 1,0
Jadue,G. 10 3 3 0,3
Jara,scar 30 5 9 0,2
MoragaRujel,Jubel 1 1 1 1,0
Labarca,G. 36 7 9 0,2
Labarrere,Carlos 33 5 7 0,2
Lafuente,Montserrat 6 2 3 0,3
Lagos,Daniel 5 2 2 0,4
Lagos,Francisco 5 2 5 0,4
Lagos,MaraEster 2 2 2 1,0
Lagos,Ricardo 29 3 4 0,1
Larran,Trinidad 2 1 1 0,5
Larraaga,Osvaldo 98 12 19 0,1
Latorre,Carmen 10 2 2 0,2
Lavados,Hugo 1 1 1 1,0
Lavados,Ivn 9 2 2 0,2
Lavn,S. 20 3 4 0,2
LeFoulon,Carmen 19 3 6 0,2
Leiva,Boris 4 4 4 1,0
Lemaitre,MaraJos 61 5 8 0,1
58
Letelier,MaraEugenia 8 2 4 0,3
Lobato,Flix 2 2 2 1,0
Lpez,LuisEnrique 102 8 11 0,1
Macias,Vctor 4 2 2 0,5
Madriaza,Pablo 11 4 5 0,4
Magendzo,Abraham 73 7 12 0,1
Magendzo,Salomn 12 3 3 0,3
Mallea,John 19 5 6 0,3
Manzi,Jorge 30 3 4 0,1
Mariman,Pablo 12 3 5 0,3
Marinovic,Alejandra 6 3 6 0,5
Martnez,E. 1 1 1 1,0
Martinic,Sergio 81 6 8 0,1
Matte,Patricia 5 2 3 0,4
Medrano,Concepcin 27 3 6 0,1
Mella,J. 1 1 1 1,0
Mella,Orlando 17 3 5 0,2
Meller,Patricio 185 12 17 0,1
Mena,Blanca 30 5 7 0,2
Mena,MaraIsidora 4 2 2 0,5
Menke,Luis 4 2 2 0,5
Messina,Graciela 1 1 1 1,0
Meza,I. 1 1 1 1,0
Mililic,Neva 54 6 8 0,1
Milos,Pedro 16 3 4 0,2
Mizala,Alejandra 105 13 21 0,1
Montecinos,Carmen 15 6 10 0,4
Montes,T. 1 1 1 1,0
Mora,Olga 4 2 2 0,5
Morn,Cecilio 11 3 5 0,3
Muga,Alfonso 8 2 2 0,3
Muzzo,Santiago 85 8 11 0,1
Navarro,Luis 3 2 3 0,7
Nilo,Sergio 11 1 1 0,1
No,David 1 1 1 1,0
Nez,I. 88 5 7 0,1
Olivares,G. 5 4 5 0,8
Orellana,Eugenia 19 4 5 0,2
Osorio,Jorge 4 2 2 0,5
Oteiza,F.M. 2 1 1 0,5
59
Ow,Maili 2 1 1 0,5
Palma,Diego 26 3 6 0,1
Pascual,Enrique 7 2 2 0,3
Pavez,Anglica 11 4 5 0,4
Pavez,MaraMercedes 8 2 2 0,3
Peralta,M.Victoria 15 4 6 0,3
Prez,LuzMara 3 2 3 0,7
Persico,Pablo 10 2 3 0,2
Pinto,Rolando 4 2 2 0,5
Poblete,M.Pa 3 1 1 0,3
Pregnan,Carmen 1 1 1 1,0
Puentes,Esteban 9 3 4 0,3
Quilaqueo,Daniel 16 4 4 0,3
Quintanilla,Marcela 5 2 2 0,4
Quintriqueo,S. 11 3 3 0,3
QuirozNeira,Mario 1 1 1 1,0
Quiroz,Jorge 69 7 10 0,1
Raczynski,Dagmar 139 11 14 0,1
Ramrez,MaraJos 6 1 2 0,2
Recart,MaraOlivia 4 2 4 0,5
Redondo,Jess 15 3 6 0,2
Riffo,Antonio 1 1 1 1,0
Rittershausen,Sylvia 2 2 2 1,0
Riveros,Luis 68 6 7 0,1
Riveros,Marta 7 2 3 0,3
Rojas,K. 5 2 3 0,4
Rojas,Luis 3 2 2 0,7
Romagnoli,Claudia 2 2 2 1,0
Romaguera,Pilar 111 13 20 0,1
Romn,Marcela 4 2 2 0,5
Rossetti,Josefina 8 3 4 0,4
Salas,Vctor 6 2 3 0,3
Salazar,JosMiguel 2 1 1 0,5
Sancho,Antonio 3 2 3 0,7
Sanfuentes,Andrs 19 4 6 0,2
Sanhueza,Claudia 15 4 7 0,3
Santelices,L. 8 2 2 0,3
Sapelli,Claudio 66 9 13 0,1
Saragoni,Carla 2 1 1 0,5
Scalvini,E. 1 1 1 1,0
60
61