Авторы также заявляют, что у свиней, которых кормили ГМ кормом, в 2,6 раза чаще встречалось серьезное воспаление желудка (P = 0,004) по сравнению с контрольной группой. Если рассмотреть отдельно самцов и самок, эффект был статистически достоверным в случае обоих полов. У самцов серьезное воспаление случалось в 4 раза чаще (P = 0,041), а у самок в 2,2 раза чаще (P = 0,034). В ходе исследования независимо рассматривались патологии почек, сердца, печени, селезенки, кишечника, яичника, легочная пневмония, перикардит и абнормальные лимфатические узлы. Потребовалось разделение патологий на несколько групп: легкие, умеренные и серьезные воспаления желудка, эрозия и три типа язв. Причем такое разделение было важным для авторов, ведь если объединить случаи умеренного и серьезного воспаления желудка, достоверные отличия между группами свиней исчезают даже при пороге значимости а = 0,05.
В итоге было проведено как минимум 17 попарных сравнений. В лучшем случае исправленное значение а = 0,05/17 = 0,0029, и даже значение P = 0,004, полученное для серьезного воспаления желудка, оказывается статистически недостоверным. Любопытно, что авторы также измеряли 17 биохимических показателей, но никаких существенных отличий между группами свиней не обнаружили (то есть множественных сравнений было еще больше). Мы приходим к выводу, что исследователи не смогли продемонстрировать никаких достоверных отличий между свиньями, которые ели и не ели ГМ корм.
В 2014 году была опубликована статья, авторы которой сравнили содержание питательных веществ и микроэлементов в генетически модифицированной, обычной и “натуральной” (органической) сое155. Согласно их данным, в “натуральной” сое по сравнению с ГМ соей было больше белка (P = 0,003), неорганических соединений (P = 0,005), всех незаменимых аминокислот (P = 0,037) и из них в отдельности лизина (P = 0,002). Кроме того, в “натуральной” сое было больше аргинина (P = 0,04), бария (P = 0,00005) и цинка (P = 0,0002), но меньше пальмитиновой кислоты (P = 0,046), насыщенных жирных кислот (P = 0,001), линолевой кислоты (P = 0,01) и селена (P = 0,0003). Всего в работе приводилось 35 сравнений, которые необходимо учесть. После поправки уровень значимости а становится равным 0,05/35 = 0,00142, и остаются только четыре статистически достоверных отличия.
Во всех случаях достоверных отличий (и в целом) ГМ соя оказалась намного ближе к обычной сое, чем “натуральная". То есть мы говорим об отличиях между “натуральным” и обычным продуктом, а не об особых качествах ГМ сои. В “натуральной” сое по сравнению с ГМ и обычной соей больше бария. Этот достоверный результат в статье не обсуждается. Можно предположить, что барий не стали обсуждать в связи с некоторыми его сомнительными качествами. В высоких дозах этот элемент считается токсичным156, способным вызывать нарушения сердечного ритма157 и паралич158. Это происходит потому, что барий умеет нарушать работу клеточных каналов159, которые играют важную роль в работе нервных клеток. Впрочем, справедливости ради отметим, что количество бария в такой сое все равно невелико, поэтому едва ли подобные отличия имеют значение для потребителей. Как говорил Парацельс: “Все есть яд, и ничто не лишено ядовитости, одна лишь доза делает яд незаметным”.
В “натуральной” сое больше цинка, который тоже может быть токсичен в высоких концентрациях160, а еще в ней меньше селена, который, согласно некоторым исследованиям, полезен, так как имеет противораковые свойства161. Эти потенциально негативные качества органической сои в статье тоже не обсуждаются. Полезно ли употреблять продукт со сниженным содержанием насыщенных жирных кислот – вопрос, на который пока нет четкого ответа в научной литературе162, 163.
Поправка на множественные сравнения отсутствовала в еще одной работе, на которую часто ссылаются противники ГМО. В 2008 году Мануэла Малатеста164 и ее соавторы опубликовали статью о том, что у мышей, которые на протяжении двух лет (от рождения) ели ГМ сою, отмечены изменения в белковом составе печени по сравнению с контрольной группой. Все мыши, которые ели ГМО, дожили до конца эксперимента. Более того: никаких значительных патологий печени не было обнаружено ни у одной мыши.
Но авторы решили на этом не останавливаться и проанализировали содержание в печени более тысячи различных белков и еще несколько десятков других параметров. Сравнив некоторые проанализированные параметры, они нашли статистические отличия между группами (вплоть до P < 0,001). После поправки на множественные сравнения все эти различия перестают быть достоверными. Но даже если бы нашлись какие-то достоверные отличия между группами крыс – что с того? Допустим, состав пищи немного изменился, и печень, участвующая в обмене веществ, изменила характер своей работы. Сравните мышей, которые ели два сорта сои, и возможно, что без всяких ГМО вы получите куда большую разницу.
Работу Сералини я специально оставил напоследок. В данной работе авторы решили и вовсе пренебречь статистическим анализом. Зачем, если журналисты не будут читать статью дальше названия и аннотации? К чему порой приводит подобное пренебрежение, можно продемонстрировать следующим примером. Представьте, что у вас есть обычная монетка. Вы подкинули ее десять раз и увидели, что монетка выпала решкой два раза из десяти. После этого вы взмолились Тору, скандинавскому богу грома и бури, и попросили его, чтобы решка выпадала чаще. В следующем эксперименте решка выпала семь раз из десяти. И вот вы уже пишете научную статью, в которой заявляете, что молитва Тору в три с половиной раза увеличила шанс выпадения решки! Бог Тор не только существует и отвечает на молитвы, но и управляет монетками!
Никого не должно смущать, что обе серии бросков прекрасно вписываются в рамки предположения, что монетка в обоих случаях была одинаковая и абсолютно безупречная, а различия между сериями случайны. Ирония заключается в том, что логика в работе Сералини абсолютно аналогична! Разбор статьи Сералини будет излишне подробным. Но это, возможно, лучшая в истории науки демонстрация того, как не стоит проводить исследования.
Сералини взял 100 самцов и 100 самок крыс. Каждую сотню крыс случайным образом разбили на 10 групп по 10 крыс. Шесть групп каждого пола получали в своем рационе либо 11, либо 22, либо 33 % ГМ кукурузы, устойчивой к гербициду “Раундап” (Roundup). Им поливали при выращивании кукурузу, предназначенную в пищу трем из этих шести групп. Из оставшихся четырех групп три получали обычную кукурузу и воду с разной концентрацией “Раундапа”. В рацион крыс десятой, контрольной группы входила обычная кукуруза.
За животными наблюдали два года. В случае потери 25 % массы тела, развития больших опухолей (более 25 % массы тела) или кровоизлияний крыс досрочно усыпляли. При вскрытии изучались самые разные ткани и органы. Я перечислю все, чтобы можно было оценить количество сравнений: мозг, кишечник, сердце, почки, печень, легкие, яичники, селезенка, яички, надпочечники, придатки яичек, предстательная железа, вилочковая железа, матка, аорта, мочевой пузырь, кости, двенадцатиперстная кишка, пищевод, глаза, узлы подвздошной кишки, тощая кишка, лимфатические узлы, лимфоретикулярная система, молочные железы, поджелудочная железа, паращитовидная железа, пейеровы бляшки, гипофиз, слюнные железы, седалищный нерв, кожа, спинной мозг, желудок, щитовидная железа и трахея. Вроде ничего не забыл.
Авторы статьи пишут, что в контрольной группе средняя продолжительность жизни самцов составила 624 ±21 день, а самок – 701 ±20 дней, плюс 5 недель, которые составляли возраст животных на начало эксперимента, и еще 3 недели стабилизационного периода, когда крыс не подвергали экспериментальным воздействиям. Предполагается, что после этого “среднего" возраста крысы умирали от старости, а преждевременные смерти наступили из-за патологий. Здесь есть свои нюансы, но давайте считать, что до сих пор все сделано правильно.
До указанного “среднего" возраста погибло 30 % самцов и 20 % самок из контрольной группы. Но, пишут авторы, в некоторых группах крыс, которые ели ГМО, смертность достигала 50 % для самцов и 70 % для самок! Никакого статистического анализа, как уже упоминалось, в статье не приводится, поэтому мы сделаем его сами. Давайте подыграем Сералини и подберем группы так, чтобы разница между ними была наибольшая. Такая наблюдалась между самками из контрольной группы и группы, которая ела корм с 22 % содержанием ГМ кукурузы. Любопытно, что в группе, где корм включал 33 % ГМ кукурузы, смертность оказалась ниже. В контрольной группе умерли 2 крысы, 8 выжили. В группе с 22 % ГМ корма умерли 7 крыс, 3 выжили.
Для подсчета P-значения используем тест, который называется двусторонний тест Фишера (другие тесты дадут похожие результаты). Этот тест оценит вероятность по случайным причинам получить такие же или большие отличия при условии, что верна нулевая гипотеза: смертность в группах крыс одинаковая. Эта вероятность равна 0,0698 (P = 0,0698), а значит, даже по самым мягким статистическим критериям отвергнуть нулевую гипотезу на основании этих данных нельзя.
