?

Log in

No account? Create an account

Previous Entry | Next Entry

Originally posted by seadevil001 at Вести с полей или Cat finally out of bag
http://www.reuters.com/article/2012/03/28/us-science-cancer-idUSBRE82R12P20120328

During a decade as head of global cancer research at Amgen, C. Glenn Begley identified 53 "landmark" publications -- papers in top journals, from reputable labs -- for his team to reproduce. Begley sought to double-check the findings before trying to build on them for drug development.

Result: 47 of the 53 could not be replicated. He described his findings in a commentary piece published on Wednesday in the journal Nature.

В течении десяти лет в качестве главы глобального отдела исследований рака в Амгене, Си Гленн Бигли отобрал 53 значительных публикации, в престижных журналах из лабораторий с хорошей репутацией. Его команда должна была воспроизвести описанные в статьях результаты, перед тем как начать разрабатывать лекарство основанное на проверяемой публикации.
Результат: Сорок семь статей из пятидесяти трех не удалось воспроизвести.

Удивляет лишь процент невоспроизводимых публикаций. Я, оценивал оный в 30-50%. А все гораздо хуже. Замечу также, что на проверку одной публикации Амген затрачивал примерно 20 человеко-лет!

Comments

( 166 comments — Leave a comment )
experiment8or
Mar. 30th, 2012 03:59 am (UTC)
Я умираю, хочу посмотреть, какие же это публикации!
Помните, вы где-то приводили статью о том, как эффект, первоначально описанный, со временем уменьшается?
overscience_mes
Mar. 30th, 2012 04:01 am (UTC)
ага, помню в ньюйоркере...
inadia
Mar. 30th, 2012 04:19 am (UTC)
Н-да...
А я думала, только у экономистов такая проблема.
Прав Доктор Хаус ))
overscience_mes
Mar. 30th, 2012 04:28 am (UTC)
люди гибнут за металл, а уж в этой денежной теме...
(no subject) - inadia - Mar. 30th, 2012 04:37 am (UTC) - Expand
prof_moriarty
Mar. 30th, 2012 04:25 am (UTC)
А насколько криворук этот проверяльщик?
overscience_mes
Mar. 30th, 2012 04:27 am (UTC)
20 человеко-лет!

Понимаете, это большой бизнес, и большая кампания большого бизнеса, одна из лучших, в принципе.
(no subject) - prof_moriarty - Mar. 30th, 2012 04:29 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:34 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 04:39 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:42 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 04:44 am (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 01:32 pm (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 01:34 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 01:41 pm (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 01:42 pm (UTC) - Expand
old_surehand
Mar. 30th, 2012 04:37 am (UTC)
Много раз видел, и сам сталкивался с тем, как то, что делается рутинно в одной лаборатории, абсолютно невоспроизводилось в другой.
Причем ни о каком о подлоге речи быть не может.
prof_moriarty
Mar. 30th, 2012 04:40 am (UTC)
как то вот главный постулат современной науки в том, что она занимаеццо воспроизводимыми явлениями.
а невоспроизводимые это там магия, религия и прочие фокусы
(no subject) - overscience_mes - Mar. 30th, 2012 04:43 am (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 04:51 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 04:54 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:55 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 04:57 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:00 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:03 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:06 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:08 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:14 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:19 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:21 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:24 am (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:24 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:28 am (UTC) - Expand
(no subject) - led_mist - Mar. 30th, 2012 05:41 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:42 am (UTC) - Expand
(no subject) - led_mist - Mar. 30th, 2012 05:56 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:57 am (UTC) - Expand
(no subject) - led_mist - Mar. 30th, 2012 06:06 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 06:07 am (UTC) - Expand
(no subject) - dimmel - Mar. 30th, 2012 09:33 am (UTC) - Expand
(no subject) - led_mist - Mar. 30th, 2012 09:38 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 03:42 am (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:46 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:48 am (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 03:53 pm (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 03:55 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 03:56 pm (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 03:58 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:55 pm (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:55 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 07:36 pm (UTC) - Expand
(no subject) - tryptophobe - Mar. 30th, 2012 01:15 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 04:57 pm (UTC) - Expand
(no subject) - tryptophobe - Mar. 30th, 2012 06:34 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 02:33 am (UTC) - Expand
(no subject) - tryptophobe - Apr. 3rd, 2012 02:54 am (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 01:31 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:45 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 07:25 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 07:37 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:58 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:01 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:57 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:02 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:05 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:06 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 04:41 am (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:02 am (UTC) - Expand
(no subject) - tryptophobe - Mar. 30th, 2012 01:18 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 30th, 2012 05:52 pm (UTC) - Expand
(no subject) - tryptophobe - Mar. 30th, 2012 06:36 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 02:55 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 02:58 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 31st, 2012 04:46 am (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 06:07 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 06:18 am (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 04:12 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:14 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:55 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 05:46 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 05:49 pm (UTC) - Expand
(no subject) - old_surehand - Mar. 31st, 2012 08:09 pm (UTC) - Expand
(no subject) - tryptophobe - Apr. 3rd, 2012 02:52 am (UTC) - Expand
(no subject) - overscience_mes - Apr. 3rd, 2012 02:58 am (UTC) - Expand
leolion_1
Mar. 30th, 2012 04:49 am (UTC)
(ведь собиралась до Пасхи тихо сидеть, а ты меня искушаешь больными темами:)
угу. ага. Я знала, да.
На самом деле, мы все знаем, если нормально работаем, сколько можно на гора значимо-честного выдавать, а сколько нельзя, и сколько возможных Вентеров реально существует в природе. Даже если сделать поправку просто на глупость или неумение правильно задавать экспериментальные условия. С точки зрения конечного результата это все равно не имеет значения. Это просто означает, что система стала толерантна к дуракам.
Мы морально разлагаемся быстрее, чем успеваем об этом подумать, а уж если умножить это на нежелание замечать...(я о сообществе в целом).
У меня уже некоторое время стойкое ощущение пассажира едущего под откос поезда.

overscience_mes
Mar. 30th, 2012 04:54 am (UTC)
хорошо, что твоя пасха уже скоро

а я верю в саморегуляцию, но после того, как пузырь лопнет, а он еще на три четверти надут только
(no subject) - leolion_1 - Mar. 30th, 2012 05:01 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:02 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 05:25 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:30 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:04 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 04:56 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 05:08 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:10 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:16 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:20 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:21 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:26 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 05:28 am (UTC) - Expand
(no subject) - prof_moriarty - Mar. 30th, 2012 05:29 am (UTC) - Expand
(no subject) - vls_777 - Mar. 30th, 2012 10:40 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 30th, 2012 05:16 am (UTC) - Expand
led_mist
Mar. 30th, 2012 05:40 am (UTC)
оооо...
как говорится, не лей мне чай на спину..
overscience_mes
Mar. 31st, 2012 03:45 am (UTC)
тебя температура не устраивает, или заварка? :)
zibot
Mar. 30th, 2012 07:32 am (UTC)
ну и как, теньюров со степенями уже много народу лишили? где видеозаписи казненных жуликов, многотысячные демонстрации обманутых налогоплательщиков?
seadevil001
Mar. 30th, 2012 01:34 pm (UTC)
Возможно, дойдет и до такого.
(no subject) - zibot - Mar. 30th, 2012 10:32 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 31st, 2012 02:12 am (UTC) - Expand
p2004r
Mar. 30th, 2012 07:36 am (UTC)
пока будут бомбить тестами данные и отбирать значимые результаты, так и будет. когда до людей дойдет что статтест это не метод увидеть зависимость, а метод подтвердить значимость найденного я не знаю :(
mfreidin
Mar. 30th, 2012 09:19 am (UTC)
Это жаль. Стало быть "лекарста от рака" мы еще не скоро дождемся.
overscience_mes
Mar. 31st, 2012 03:48 am (UTC)
да почему такой скепсис, вон заболела теннисистка раком, меньше чем через год уже опять выступает
многие виды уже успешно лечатся, но очень неприятно, приятных способов нет, пока по определению
seadevil001
Mar. 30th, 2012 01:34 pm (UTC)
overscience_mes
Mar. 31st, 2012 03:49 am (UTC)
хочется надеяться
shvarz
Mar. 30th, 2012 02:04 pm (UTC)
Прежде чем паниковать, надо бы поставить контрольный эксперимент. Выбрать 50 публикаций, которые считались landmark лет 20 назад и попробовать повторить их эксперименты. Если воспроизводимость будет намного лучше, то можно и паниковать. Но я подозреваю, что будет примерно такая же и поэтому паниковать не стоит.
leolion_1
Mar. 30th, 2012 07:15 pm (UTC)
Я бы предложила Вам пари, если был шанс на то, что кто-то потратится на такой контрольный эксперимент.
(no subject) - shvarz - Mar. 30th, 2012 07:16 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:19 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:20 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:29 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:42 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:47 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:54 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:57 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:59 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 08:02 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 03:56 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 31st, 2012 04:12 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:21 am (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:59 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 08:03 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 08:06 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 08:12 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 08:20 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 08:31 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 08:42 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 08:46 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 31st, 2012 02:19 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 02:31 am (UTC) - Expand
(no subject) - seadevil001 - Mar. 31st, 2012 02:36 am (UTC) - Expand
(no subject) - shvarz - Mar. 31st, 2012 09:43 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 03:58 am (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 07:33 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 07:42 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:46 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 07:48 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:54 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 07:55 pm (UTC) - Expand
(no subject) - shvarz - Mar. 30th, 2012 07:56 pm (UTC) - Expand
(no subject) - seadevil001 - Mar. 30th, 2012 07:57 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:00 am (UTC) - Expand
(no subject) - seadevil001 - Apr. 1st, 2012 04:34 am (UTC) - Expand
(no subject) - overscience_mes - Apr. 1st, 2012 04:37 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 03:51 am (UTC) - Expand
(no subject) - shvarz - Mar. 31st, 2012 09:46 am (UTC) - Expand
kratovskijyegor
Mar. 30th, 2012 06:51 pm (UTC)
WSJ про это тоже писал, да.

Моя биотехнологическая жена, когда ей говорят, что она занимается наукой, начинает матерно ругаться и говорить, что никакой науки там нет. А есть только подтасовки да жульничество. Преувеличивает, конечно. Но не совсем.
overscience_mes
Mar. 31st, 2012 04:01 am (UTC)
бывают и такие места, преувеличивает, но не совсем
creta
Mar. 30th, 2012 07:55 pm (UTC)
хе-хе, а вот не надо было выделять 50 самых-самых:) нужно было свалить инфу из всего, что опубликовано и отфильтровать. а потом подтверждать или опровергать гипотезу, причем своей собственной методикой, а не заниматься воспроизведением чужого.
shvarz
Mar. 30th, 2012 07:56 pm (UTC)
Во!
(no subject) - leolion_1 - Mar. 30th, 2012 08:01 pm (UTC) - Expand
(no subject) - creta - Mar. 30th, 2012 08:13 pm (UTC) - Expand
(no subject) - leolion_1 - Mar. 30th, 2012 08:26 pm (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:03 am (UTC) - Expand
(no subject) - seadevil001 - Mar. 31st, 2012 02:13 am (UTC) - Expand
(no subject) - overscience_mes - Mar. 31st, 2012 04:02 am (UTC) - Expand
(Anonymous)
Mar. 30th, 2012 10:34 pm (UTC)
mp
А сколько безвинного народа поувальняли за невоспроизводимость. Можно подумать про все ето никто не знал. Есть, конечно дураки профессора, но не все. Вообще, конечно, ето полныи позор. Теперь народ заорет, хрен ли етим ученым бабки давать, когда они там врут все.
overscience_mes
Mar. 31st, 2012 04:04 am (UTC)
Re: mp
да, общество реагирует предсказуемо... вон, реформаторы российской академии только того и добились, стали деньги давать не академикам а шутам гороховым...
( 166 comments — Leave a comment )

Latest Month

October 2017
S M T W T F S
1234567
891011121314
15161718192021
22232425262728
293031    
Powered by LiveJournal.com
Designed by Ideacodes