La diferencia entre los trabajos más citados y los trabajos premiados probablemente esté relacionada con los criterios por los cuales las personas los eligen. Para examinar este problema, miré a AAAI para ver cómo se seleccionaron los mejores artículos. Descubrí que había muchos tipos diferentes de premios, y miré los criterios para el premio en papel Sobresaliente y el premio en papel Clásico. Luego comparé esto con una comprensión teórica de cómo los artículos se vuelven más citados. Descubrí que la diferencia podría explicarse potencialmente debido a los diferentes criterios para usar estos documentos.
Criterios de premios en papel
De acuerdo con la página de AAAI Outstanding Paper Award:
- ¿Cuáles son los algoritmos más importantes que todo informático debe dominar?
- ¿Google Research es el 'Bell Labs' del siglo XXI? Por qué o por qué no ?
- ¿Cuáles son los principales problemas abiertos con respecto a los algoritmos?
- ¿Hay algún algoritmo en línea para la reducción de dimensionalidad no lineal?
- ¿Qué cursos de CS debo completar antes de intentar la investigación de pregrado?
La Conferencia Nacional de AAAI sobre Inteligencia Artificial rinde homenaje a documentos que ejemplifican los más altos estándares en contribución técnica y exposición. Durante el proceso de revisión a ciegas, los miembros del Comité del Programa recomiendan documentos a tener en cuenta para el Premio de papel excepcional. Un subconjunto del Comité Senior del Programa, cuidadosamente elegido para evitar conflictos de intereses, revisa todos los trabajos nominados y selecciona los trabajos ganadores.
Los documentos clásicos se seleccionan de la siguiente manera:
El premio AAAI Classic Paper rinde homenaje a los autores de los artículos considerados más influyentes, elegidos de un año de conferencia específico. Cada año, el período de tiempo considerado avanzará un año. El premio 2013 se otorgará a los trabajos más influyentes de la Duodécima Conferencia Nacional sobre Inteligencia Artificial, celebrada en 1994 en Seattle, Washington, EE. UU.
Los trabajos serán juzgados en función del impacto, por ejemplo:
- Comenzó una nueva (sub) área de investigación
- Llevado a aplicaciones importantes
- Respondió una pregunta / problema de larga data o aclaró lo que había sido turbio
- Hizo un gran avance que figura en la historia de la subárea
- Ha sido recogido como importante y utilizado por otras áreas dentro (o fuera de) AI
- Ha sido muy citado
Se alienta a todos los miembros de la comunidad de inteligencia artificial a presentar nominaciones para este premio. La candidatura no se limita a los miembros de AAAI, ni a las personas que siguen activas en inteligencia artificial. Se considerarán premios póstumos.
Papeles más citados
Los trabajos más citados se eligen simplemente contando las citas. Claramente, la diferencia entre los documentos que reciben premios y los documentos que más se citan tienen que ver con las razones por las cuales las personas citan los documentos.
No podemos saber por qué la gente cita documentos, excepto para inferir razones al leer los documentos en los que se citaron los artículos. Sin embargo, supongo que las personas en las conferencias buscan la excelencia general en un artículo, mientras que las personas que citan otras publicaciones tienen un trabajo más específico en mente. Están haciendo una revisión iluminada para su pregunta de investigación particular.
La pregunta de investigación determina la forma en que va la revisión iluminada. Los investigadores están buscando información sobre el tema, no solo los mejores trabajos disponibles.
Conclusión
Las conferencias buscan honrar los mejores trabajos, independientemente de su utilidad. En algunos casos, tienen en cuenta varias citas, pero también tienen otros criterios. Los investigadores están optando por citar documentos basados únicamente en su utilidad. Estos documentos pueden no ser los mejores, pero están en el tema.
En algunos casos, los mejores trabajos también son los más citados. Pero en otros casos, ciertamente la mayoría de los otros en la lista en esta pregunta, los trabajos más citados no son los galardonados.
Esta es una especulación adicional que puede interesarle. Cuando lo piensas, los temas más candentes son probablemente donde mucha gente está trabajando. Puede haber una competencia más intensa para publicar sobre estos temas. Como resultado, la calidad de estos documentos puede ser menor a medida que se apresuran a su publicación. Esto podría ser un factor en este fenómeno.
Al final, sin embargo, es probable que la razón de la diferencia se deba a los diferentes criterios para seleccionar los documentos. Los trabajos premiados son aquellos que son excelentes, independientemente del tema. Sin embargo, los documentos citados deben ser de utilidad para los investigadores que los citan.
