"Русский переплет" зарегистрирован как СМИ.
Свидетельство о регистрации в Министерстве печати РФ: Эл. #77-4362 от
5 февраля 2001 года. При полном или частичном использовании
материалов ссылка на www.pereplet.ru обязательна.
|
10.09.2010 01:29 |
Кто оценивает науку? Ученые показали, что процесс экспертной оценки научных работ - основной инструмент их "пропуска" в журналы - является крайне ненадежным в силу человеческого фактора. Свои наработки исследователи выложили в архив электронных препринтов Корнельского университета. Коротко работа описана на сайте Physics World.
В современной научной практике критерием для публикации статьи в научном журнале является ее оценка несколькими экспертами в соответствующей области - они читают присланные в редакцию работы и выносят решение, опубликовать их, отвергнуть или отправить на доработку. Эта система не считается идеальной (например, есть мнение, что ей не хватает открытости), однако большинство ученых полагают, что она является достаточно объективной и в целом работает удовлетворительно.
Авторы новой работы решили проверить, насколько система экспертной оценки устойчива к такому фактору как недобросовестные эксперты. Ученые разработали модель, в которую включили пять типов экспертов: правильные (отклоняют плохие работы и принимают хорошие), альтруисты и мизантропы (соответственно принимают или отклоняют все работы), рационалисты (отклоняют работы, которые могут отвести внимание от их собственных исследований) и случайные (принимают решения случайным образом из-за нехватки квалификации или времени).
Исследователи рассматривали схему, когда каждая новая работа направляется на рассмотрение двум экспертам, случайно выбранным из общего пула (внутри экспертного сообщества все типы экспертов представлены согласно гауссовскому, или нормальному, распределению). Работа считалась опубликованной, если оба эксперта давали ей положительную оценку. Если один был против, вероятность публикации принималась за 0,5.
После того как ученые "прогнали" модель для 1000 публикаций, они выяснили, что даже небольшой процент рационалистов и/или случайных экспертов способен существенно ухудшить качество отбираемых работ. Когда соотношение правильных, случайных и случайных экспертов в пуле составляло 1:1:1, статьи к публикации принимались фактически по случайному принципу.
Полученные результаты указывают, что адекватность экспертной оценки чрезвычайно сильно зависит от состава экспертов. Один из издателей физического журнала New Journal of Physics, ознакомившийся с результатами новой работы, заявил, что авторы недооценивают роль редакции журнала в процесс отбора публикаций. Именно редакция решает, кому из экспертов направить ту или иную работу, и старается избежать ситуаций конфликта интересов (хотя иногда - например, в случае узкой тематики - полностью исключить такой вариант нельзя).
Это не первая работа, в которой подвергаются сомнению существующие методы оценки значимости научных работ. Ранее ученые неоднократно высказывали претензии к системе, ранжирующей работы по их цитируемости (ссылки на статьи в статьях других авторов). Впрочем, на сегодняшний день более удобного и объективного способа оценки не существует.
|
10.09.2010 00:53 |
Нанотехнологии и мусульманские платки
Турецкий производитель текстиля из города Бурса впервые применил нанотехнологии для создания мусульманского платка. Владелец компании Озхан Бербероглу решил . . . |
10.09.2010 00:51 |
Космотрясения и Земля
По предположению ученых из Австрийского института космических исследований, так называемые космотрясения - это сотрясания магнитного поля Земли, вызванные . . . |
10.09.2010 00:42 |
Китайское средство против московских автомобильных пробок
Китайцы неутомимо ищут способы избавления от пробок. Очередное изобретение - автобуcы, которые частично работают на солнечной энергии. А главное - не занимают . . . |
10.09.2010 00:37 |
Регулярная чистка зубов продлевает жизнь
Регулярная и тщательная чистка зубов сохраняет здоровье и продлевает жизнь. К такому выводу пришли английские ученые из Бристольского университета, которые . . . |
10.09.2010 00:09 |
Через пять лет количество абонентов 3G-сетей достигнет 2,3 млрд
Как пишет Андрей Крупин на сайте www.3dnews.ru, компания J'son & Partners Consulting представила результаты обновленных исследований российского и мирового рынка сетей третьего . . . |
09.09.2010 21:40 |
Ученые научились предсказывать судьбу видов
Ученые показали, что вымирание популяции можно предсказать по некоторым внешним признакам задолго до того, как начнется критическое сокращение численности . . . |
09.09.2010 16:36 |
Центры обработки данных в системе высшего образования
Руководители центров обработки данных (ЦОД) в колледжах и университетах, как и их коллеги из коммерческих организаций, стремятся сократить расходы и одновременно . . . |
09.09.2010 15:45 |
Мобильный Интернет и новые возможности для бизнеса
Эш Даход (Ash Dahod), основатель компании Starent Networks, превратил свое детище в ведущего поставщика сетевых средств передачи данных для беспроводных телефонов. В прошлом . . . |
08.09.2010 18:44 |
Американцы создали искусственную почку
Американские ученые разработали диализный аппарат ("искусственную почку"), который можно имплантировать в организм пациента, сообщает Medical News Today. Новое . . . |
08.09.2010 18:32 |
Подключенное обучение Cisco в австралийских школах
Австралийский Департамент начального образования и развития детей (DEECD) утвердил проводные и беспроводные сетевые решения Cisco в качестве стандартной платформы . . . |
08.09.2010 00:34 |
Их нравы или чемпионы по обжорству
Сколько кусков пиццы может съесть обыкновенный человек? Четыре, пять, шесть. А любитель хорошенько покушать? Десять, двенадцать. А как насчет 41 куска вкусной . . . |
07.09.2010 17:14 |
Оперативность прогнозов "Росгидромета" повысят новые сети связи Cisco
Крупнейший российский системный интегратор <Техносерв> объявляет о завершении проекта по модернизации ведомственной сети связи и передачи данных Росгидромета . . . |
07.09.2010 17:11 |
Курсы самых современных сетевых технологий - в московских школах
С 2010-2011 учебного года 17 школ Юго-Восточного административного округа Москвы вводят в свою учебную программу (в режиме факультатива) курс CCNA Discovery, в России ранее . . . |
07.09.2010 17:08 |
Православный священник - инструктор Сетевых академий Cisco
У Сетевой академии Cisco при специализированной школе-интернате для сирот в городе Буча Киевской области есть уникальная особенность, которая отличает ее от . . . |
07.09.2010 17:05 |
Cisco на Facebook и "Вконтакте"
Ежегодная московская конференция Cisco Expo привлекает все больше ИТ-специалистов, каждую осень съезжающихся в столицу из разных, даже самых дальних уголков страны, . . . |
06.09.2010 19:18 |
В социальном музыкальном сервисе Apple уже миллион человек
К сервису Apple Ping присоединился миллионный пользователь, сообщается в официальном пресс-релизе компании. Сервис, который был анонсирован главой Apple Стивом Джобсом . . . |
06.09.2010 19:09 |
Найдены доказательства смены магнитных полюсов Земли
Магнитные полюса Земли могут менять свое положение с чрезвычайно высокой скоростью - до одного градуса в неделю. Такой вывод сделала группа ученых, статья которых . . . |
06.09.2010 08:22 |
Кто поможет отразить атаки хакеров?
24 августа 2010 года компания <Оверсан> отразила одну из самых мощных DDoS-атак в рунете мощностью 20 Гбит/с. Отражение атаки такой мощности стало возможным благодаря . . . |
04.09.2010 21:17 |
10 самых странных опытов в истории науки
История естествознания полна экспериментов, заслуживающих названия странных. Описанная ниже десятка выбрана целиком на вкус автора, с которым можно не . . . |