Пользователь
0,0
рейтинг
26 ноября 2009 в 16:44

Что я нашёл интересного на почтовом сервере метеорологов

Все, конечно, слышали про утёкший в интернет архив метрологического почтового сервера, на хабре даже было обсуждение.

Когда у меня наконец выбрался свободный вечер я решил изучить содержимое этого архива, причём специально не искал аналогичных исследований, чтобы они не могли повлиять на ход моих рассуждений (да и не нашлось, по итогам).

Чего там внутри только нет, какие-то pdf, программы на фортране, юниксовые ELF-исполняемые файлы, русские имена/фамилии и даже кириллические комментарии внутри некоторых файлов. Так любопытно мне не было ни в одной компьютерной игре.

Первым делом меня заинтересовали каталоги в духе «yakutia», но остановился я на архиве mbh98-osborn.zip. Внутри него есть каталог TREE и уже в нём – VAGANOV, звучит дружелюбно, правда? Им я и заинтересовался вплотную.


Оговорюсь сразу, что разного рода далеко идущие выводы и моральный аспект вопроса или отложены в постскриптум или вынесены за рамки статьи и не рассматриваются вовсе. Туда же вынесены соображения о тоне переписки и вообще о её содержимом. Всякие любопытные мелочи, на которые я натыкался по ходу дела, я собрал в конце статьи, чтобы они не портили структуру изложения.

Итак архив mbh98-osborn.zip, каталог VAGANOV. Кроме каких-то странных файлов воде eof04.out (27 байт), пары программ на фортране и какого-то совсем мусора там был каталог с говорящим названием ORIG, с чем-то уже более осознанным внутри.

Файл 1.txt.gz
Содержит примерно следующее:

Хронология 1 (SCH)
Годы 0 1 2 3 4 5 6 7 8 9
1710 00  00 00 00  59 125 90 90 85 98
1720 76 140 87 79 133 152 103 143 142 122
1730 84 140 96 145 72 111 94 86 60 143
<...>
1980 81 113 133 122 100 75 84 111 95 113
1990 88 00   00  00  00 00 00 00  00  00


Это ж метеорологи, что первое в голову приходит? Конечно же это данные о температуре. Только не ясно какой: от 50 до 145, в фаренгейтах блин что ли? Было бы странно для Ваганова. В каждой строке явно закодированы данные за десятилетие. Таких файлов там от 1 до 61, все заканчиваются строкой про 1990, ничем другим кроме года это быть ну никак не может, тем более, что написано же по-русски: «Хронология».

Странным показалось то, что данные идут аж с 1700, чё-то рановато для ежегодных наблюдений за температурой, да ещё и в 61-м городе. Ещё непонятно что за код: на названия русских городов не очень похоже: SCH, KHA, KHD, JAH и так далее. Зато есть файл sib.dat, в котором по каждому файлу и соответствующему коду дано следующее:

1,SCH,69.17,66.49
2,KHA,69.5,67.12
3,KHD,69.54,67.07
4,JAH,70.58,67.25



Вот что такое 69.17 66.49? Похоже на широту и долготу. Места живописнейшие.

Собственно я уже не помню как, из каких-то сопроводительных файлов в соседних каталогах, я нашёл упоминания деревьев, колец и словосочетание «Dendroclimatic reconstruction». То есть, судя по всему, эти данные – измерение годовых колец деревьев, что может являться некой мерой оценки температуры в прошлом. Это вообще много чего объясняет, например то, что в некоторых файлах присутствуют данные аж за 15-й век.

Умозаключения на этот счёт я решил отложить, потому что уже давно в голове застряла мысль, разложить эти данные на плоскости и посмотреть их динамику, ведь самое интересное, что только бывает – это статистика. Первые попытки я сделал в Excel’е, из которых сразу следовало, что посмотреть будет на что. Поэтому я решил всё-таки загрузить все эти данные в СУБД и понастроить всевозможных графиков. Товарищ Ваганов или его коллеги упростили, кстати, задачу и специально для загрузки подготовили данные в файлах типа vag01.dat, где они даны в виде пар «год – значение», так что не понадобилось возиться с разбором этих матриц. Всего записей загружено: 26031.

Графики
Первый график это просто сырые данные из первого файла (ссылка ведёт на саму картинку).



Выглядит шумновато, особенно если пытаться выводить данные по нескольким файлам, поэтому далее я показываю усреднённые значения.



Далее период времени я сократил только до прошлого века, выглядит не менее показательно. Два графика рядом:


Сдвиг по вертикали между ними искусственный, просто чтобы не было тучи пересечений, порядок значений там совершенно одинаковый. Второе дерево, кстати, было взято недалеко от первого (69.5, 67.12). То, что графики похожи – очевидно, а с 1960-го года вообще практически совпадают. Это означает что расстояния между кольцами на разных деревьях (удалённых друг от друга на сотни километров) очень похожи и зависят от неких внешних условий. Упрощая – от климата, ещё упрощая – от температуры.

Строим график по десятку деревьев, все примерно в этом районе:


Наше дерево – первое снизу, и далее наверх. Если заглянуть в sib.dat, то деревья собраны примерно на одной широте, с последовательным продвижением на восток от 69.17 (нижний график) до 93.5 (верхний график). Конечно, есть разные отклонения, но и очевидная зависимость между графиками тоже присутствует. Второй и четвёртый так похожи, что я задумался, не ошибка ли это. Удивительно похожи между собой верхние пять графиков, особенно если вспомнить что это за данные.

Затем я дополнил картину ещё двумя графиками, красный – это среднее по всей выборке, зелёный – среднее по отображённому десятку графиков.


Как и следовало ожидать:
а) усреднённые графики более спокойные;
б) средний по всему региону наиболее пологий и не всегда отражает колебания отдельных графиков и даже колебания среднего по широте.

Уже в процессе написания отчёта пришла мысль взять половину выборки из другой части региона, что я и сделал:


Здесь пять первых деревьев, нижние, те же, что и на предыдущих рисунках, это долгота: 69.17 — 71.4. Другие пять с восточного края страны: 130.5 — 160.46.

Пункт первый: заметно, что первые пять графиков похожи между собой, так же как и вторые пять. Но вот явных зависимостей между графиками первой и второй пятёрок практически не заметно.

Пункт второй: Среднее, построенное по этому десятку графиков во-первых гораздо более пологое и во-вторых имеет явные черты среднего по всей выборке.

Сто одна мелочь
— в большей части файлов архива конец строки – 0x0a, значит какие-то юниксы;
— в файле с описанием мест сбора (sib.dat) данные даны в фиг вообще знает в каком порядке, хотя в итоге есть по всем пунктам;
— широту и долготу я поменял местами, иначе то африка, то океан оказываются, да и не бывает широт больше 90°;
— в нескольких файлах есть пересечения значений по датам, наткнулся на это при загрузке;
— файл с данными №55 – вообще отсутствует, хотя в sib.dat он упомянут и указывает туда;
— самая ранняя запись датируется 1325-м годом, это за двести лет до Ивана Грозного;
— очень похоже, что аналогичные данные доступны ещё по Канаде;
— я ведь возился практически с первым, что попалось под руку, всего там 60 Мб данных в архиве;
— в архиве содержится pdf с отображением оценки изменения температур за последние несколько веков (одна из диаграмм).

Типа выводы
Можно вернуться и посмотреть на первый-второй рисунки: явной тенденции к росту или падению на глаз не видно. Зато отлично видно, что разброс значений в рамках ста лет может быть такой бешеный, что даже явная тенденция в какую-либо из сторон в соседние, скажем, 10-20 лет совершенно ничего не значит и за ростом всегда идёт спад, а за спадом — рост. Кроме того, если посмотреть на график по пяти деревьям за 300 лет (картинка), то там можно чёрта в ступе найти. Например, при желании можно рассмотреть 10-20-ти или более крупные 50-ти летние циклы, свидетельства перемены динамики изменений температуры в последний век, аномалии в год падения тунгусского метеорита и следы присутствия марсиан.

Однако в процессе работы с этими данными я узнал, что с возрастом дерева, динамика зависимости ширины годовых колец от температуры изменяется. В какую сторону и каким образом – я пока не разобрался. Чтобы убрать это изменение существует некая процедура стандартизации данных (Regional Curve Standardization), про которую в интернете можно кое-что найти. Хотя бы по одной этой причине, совершенно очевидно, что никакие существенные выводы относительно температур и климата на основе этих данных делать нельзя. Ещё, например, надо понимать, что размер колец не означает среднегодовой температуры, даже среднюю температуру за лето отражает как-то нелинейно.

Главное, что из этой истории вынес лично я: имея доступ к архиву с такими данными надо не переписку изучать, и тем более не разбор этой переписки на форумах, а смотреть на сами данные, ведь это куда интереснее. Ещё 10-15 лет назад такой возможности ни у кого быть не могло, а сегодня я могу вечером, так вот запросто, посмотреть на данные от 1400-го года. Это же даже представить невозможно как из тех мест надо было добывать эти данные (о чём, кстати в переписке упоминается). И это сегодня, а завтра кто ещё знает чего там кто где добудет.
dug @dug
карма
428,2
рейтинг 0,0
Реклама помогает поддерживать и развивать наши сервисы

Подробнее
Реклама

Самое читаемое

Комментарии (122)

  • +10
    Ждемс продолжения анализов. Думаю вполне интересная тема. (Хотя и трудозатратная).
    • +23
      Раньше для проведения исследований за данными ходили на полевые испытания, а теперь, вот, на чужие сервера :)
  • НЛО прилетело и опубликовало эту надпись здесь
  • +1
    А если это вообще не координаты? :)
    • +7
      координаты, в переписке было вот такое:

      The file sib.dat contains the sequence numbers, three-letter site
      code, longitude and latitude for the 61 chronologies from Vaganov et
      al, comma-separated. As I typed thesein it would be wise to check
      that the three letter code is found in the first line of the file
      names sequence number.txt, e.g. 26.txt should be SOB, etc.

      это там кто-то кому-то объяснял про данные полученные «от русских»
      • +16
        есть мнение, что Vaganov — это ректор сибирского федерального университета.
        habrahabr.ru/blogs/popular_science/76482/
        Его публикации:
        www.cru.uea.ac.uk/cru/pubs/byauthor/vaganov_ea.htm
        Вот название одной из них:
        Briffa, K.R., Shishov, V.V., Melvin, T.M., Vaganov, E.A., Grudd, H., Hantemirov, R.M., Eronen, M. and Naurxbaev, M.M., 2007
        “Trends in recent temperature and radial tree growth spanning 2000 years across northwest Eurasia”
        Philosophical Transactions of The Royal Society B, doi:10.1098/rstb.2007.2119
        (keywords: climate change; Eurasia; tree-ring chronology; temperature)
        • +2
          первую ссылку не ту вставил.
          www.sfu-kras.ru/en/management/vaganov
        • +5
          а еще, если посмотреть сюда: www.cru.uea.ac.uk/cru/people/briffa/jgr2001/
          можно увидеть знакомые графики.
          • +2
            впечатляет там самый правый график
          • +1
            Особенно хорош график Plate 3

            Кривая наблюдений улетает после ~1980 года в небеса, но остальные кривые даже не пытаются за ней следовать.
            • НЛО прилетело и опубликовало эту надпись здесь
            • 0
              Насколько я понимаю, данные в научных работах основываются на методах, отличных от простого наблюдения за температурой (в работе по ссылке — на толщине колец деревьев, в остальных — не знаю). С одной стороны, природа может реагировать с некоторой задержкой, тем более когда используются некие методы усреднения и контроля шумов. С другой — данные наблюдений проверить сложнее, скорее всего температуры точно записывали только метеорологические агентства, тогда как деревьев в лесу еще полно.
            • +1
              Чем то напоминает котировки на валютном рынке с кучей анализаторов:)
          • +1
            Исходя из abstract, основные выводы статьи состоят в том, что использование некой новой статистической техники (age band decomposition) анализа для пересчета предыдущих выводов из измерений толщины колец деревьев в 9 регионах Северного полушария за последние 600 лет позволяет предположить, что климат в этих регионах в период измерений (насколько я понимаю, имеются ввиду именно старые наблюдения за 15-19 век) был несколько прохладнее, чем считалось ранее. Исключение составляет Северная Сибирь, где в 15ом веке лето было более теплое, чем сейчас.

            Ваганов (Евгений) отмечен как Institute of Forest, Akagemgorodok, Krasnoyarsk, Russia. Его соавтор Шиятов (Степан) отмечен как Institute of Plant and Animal Ecology, Ural branch of the Russian Academy of Sciences, Ekaterinburg, Russia.

            Традиционные для борцов с глобальным потеплением выводы живут вот в этом абзаце:



            (холодный 17ый век, потепление в начале 18ого, резкое похолодание в начале 19ого и не менее резкое потепление в 20 веке, дошедшее до общего уровня, который не встречался за последние 600 (и возможно 1000) лет.
  • +33
    Мужик. Голова.
    Верно подмечено что можно получить хоть потепление, хоть похолодание, а если очень надо то и конец света увидеть можно.
    • +10
      всё есть в архиве, экстраполируйте ;) в 2012м наверняка конец света :)
      • +33
        К сожалению хакеры были не настолько круты, чтобы спереть данные за 2012 год.
        • +3
          Термин «экстраполяция» вам ни о чем не говорит?
          • +1
            Говорит, но как верно отмечено в статье, из этих данных можно экстраполировать все что вам захочется.
            • +1
              Трактовать можно как угодно, а вот при экстаполяции получится плюс-минус такой же график, что и вернет нас на исходные позиции.
              • +2
                Пока не выявлено никакой закономерности, экстраполировать можно только случайным образом. То есть _как_угодно_ :)
                • +4
                  нужно трейдерам отдать, они точно что-то выжмут из графиков
                  ну или хотябы денег заработают ))
                  • +2
                    Да, заработают. На продаже прогнозов :)
        • 0
          Так ведь о еще не наступил
      • +1
        О! Это не простая задача сделать адекватный метод оценки среднегодовой температуры по кольцам деревьев.

        Экстраполяция полиномом здесь точно ничего не даст. Потому что интерполировать получиться скорее всего только бикубическим уравнением, а по формулам бикубическим нельзя экстраполировать.

        Экспоненциальное сглаживание? Скоринговые модели?

        Да и по этой статистике предсказать на 22 года вперёд с приемлимой вероятностью — думаю не получиться.
  • +5
    Вы очень большой молодец! Спасибо Вам!
  • +4
    > Это ж метеорологи, что первое в голову приходит? Конечно же это данные о температуре.

    Мне сразу пришло в голову, что это — осадки. Может быть такое?
  • +8
    Вы подорвали мою веру в мировой заговор метеорологов.
  • +1
    А не подкинете ссылку на архив? На мининове уже нет.
  • +3
    Огромный объем работы был проделан: с чувством, с толком, с расстановкой. Вызывает такое же огромное уважение!
  • 0
    Собственно, данные-то и не сказать, что секретные. Почему бы такие интересные обзоры не писать самим метеорологам.
    • +4
      Они там в переписке денег на билеты просят :( душераздирающее чтиво, я пока старался не вникать. Статьи и обзоры они пишут на нерусском языке, продраться через терминологию к смыслу мне пока не удалось :) Я про этот метод стандартидации читал.

      Ну и статьи и их графики это одно, а тут я сам взял и посчитал, совсем другое отношение к процессу и результатам.
  • +2
    Если обязать ученых публиковать такие статистические данные чтобы обычные люди могли поизводить анализ для себя (как показано выше) — будет много криков «мы все умрем!» или мир станет чуточку лучше и интереснее?
    • +1
      По-моему второе ;)

      Они может даже публикуют, просто никто не интересуется. Хотя я давно хочу уже на росстат подписаться и делать выводы, делать выводы. Я вообще для подкаста полез туда что-то найти интересное. У росстата наверняка полно всякой подобной ерунды про всякие опросы, которые толком никто не обозревает.
      • –1
        Осталось только определиться со степенью соответствия этих данных истинному положению дел. Их ведь потому и не обозревают, что веры им — ни на грош.
    • +1
      Кто вам мешает подписаться на профильные журналы?
      • 0
        Потому что журналы ныне содержат ту информацию, которая выгодна партииидее Глобального Потепления™
        • 0
          ну а вы читайте не МК, а нормальные журналы :) Там данные обычно приводятся. Но а если найдёте подгон, то затролли.
    • 0
      Я думаю, что крики будут те, которые кому-то выгодны. Согласитесь, не каждый человек сможет сделать подобный анализ. Те кто не смогут — будут верить на слово тем, кто может или говорит, что может.
    • +1
      В Архив такого добра каждый день сливается тонна. Только кто ж его читать будет, кроме специалистов? :)
      • +1
        ну вот я разве что специалист в разборе подобного барахла :)
  • –1
    1,SCH,69.17,66.49
    <....> Похоже на широту и долготу.

    Хм… а мне IP-адрес напомнило :) Только зачем он метеорологам, да еще в 18-м веке? :)

    ЗЫ. Я вначале не заметил запятую — думал точка :)
    • 0
      Эти данные получены в 21 веке :) а не в 18. Ну или в конце 20.

      З.Ы. Я тоже сначала про IP подумал.
    • –1
      Кокой IP — там запятая четко указанна. А это значит разные цыфры.
      • –1
        • –1
          Вы правы, в конце раб. дня лучше писать в Word или не писать вообще. Мозг отказывается работать.
          • –2
            А браузер не подсвечивает?
  • 0
    Подскажите, откуда архивчег скачать можно?
    • 0
      +1
      В оригинальной статье ссылка на torrent битая.
    • +2
      думаю можно так: thepiratebay.org/search/foi2009/0/99/0
  • 0
    Посту самое место в блоге «я безумный» =)
    • +4
      я колебался :)
  • 0
    Я так понимаю, что о глобальном потеплении нельзя судить только по температуре городов. Насколько мне известно, основная паника из-за того что тают ледники. Возможно, что на материках температура может даже немного понижаться, в суперпозиции, тем не менее, увеличиваясь.
    • 0
      ну о городах вроде вообще речи нет, деревья спилены, как говорят англичане, «посередине нигде» (ссылки на гуглмапс).

      и специально написал в выводах — конечно никаких выводов о климате.
    • 0
      Вы не совсем правы.
      Ледники тают, но это многолетние льды. Если посмотреть РЛС зондирование Северного Ледовитого океана, то можно увидеть, что однолетние льды наоборот становятся толще.
      Так, что и тут климатологи немного ошибаются.
      К тому же уже известно, о том, что Гольфстрим немного похолодел…
      Данные эти у меня из моего университета где я учился на кафедре экспереминтальной физики атмосферы.
      • 0
        Хм, в то же самое время мы наблюдали динамику сокращения площади арктических льдов чуть ли не в полтора раза. По тем же самым данным RSA.
        • +1
          ждём весны, тогда и получим свежие данные.
          в любом случае говорить о глобальном потеплении пока рано, как бы похолодание не началось.
          ещё кстати не плохо бы сопоставить солнечную активность по годам…
          • 0
            вот именно эта мысль первая пришла в голову. ну после канадских данных.
          • 0
            По ОРТ была передача о глобальном потеплении, в которой на основе такого вот сопостовления опровергалось глобальное потепление.
            www.youtube.com/watch?v=KUvRCEB28fs х.з. насколько можно доверять этой передаче, но там есть ссылки на ученых, к оторые делали эти исследования. Наверно стоит найти их публикации и почитать.
  • +1
    Прочитал, все до самого конца. Интересно почитать, а потом и подумать.
  • 0
    Интересная аналитика, спасибо.

    P.S. Можно попробовать на Oracle BI сделать отчетиков, привязать к карте. Долго, но результат будет стоить того:)
  • 0
    По-моему стОит попросить автора раздавать файлы сразу в формате, пригодном для загрузки в различные базы данных, которыми он сам пользуется, ну конечно по мере возможности человека. Сделан такой шаг в сторону доступности столь обширной мировой информации, на этом фоне маленькие неудобства кажутся раздражающими.
    • 0
      Так там и были файлы в виде пар значений год-значение, совсем чуточку грязные. Вот графики строить я не умею, хорошо как раз возился над статистикой для других своих проектов, было кое-что написано.
  • 0
    Автор, респект и уважуха!!! за исследование первоисточника, за научную работу, за то что вы любите свою работу!
  • 0
    Очень интересно, спасибо. А то что метеорологи денег на билеты просят это конечно очень жаль :( как обычно у нас получается что исследователи не оперируют большими суммами денег :(
  • НЛО прилетело и опубликовало эту надпись здесь
    • +1
      Эксель очень страшное стоит и неудобно в нём. У меня были кое-какие процедуры для работы как раз с похожими данными написаны на php, их и приспособил.
      • НЛО прилетело и опубликовало эту надпись здесь
      • +1
        Мсье знает толк в извращениях (с)

        Попробуйте GNUplot. Там такие ascii datники одной строчкой строятся. «plot 'sib.dat' u 1:2 w l»
        • 0
          Была задача: уметь рисовать графики по полупроизвольным условиям, это мне нужно для моих там персональных проектов. Возник массив данных, почему бы не воспользоваться наработками, вместо того чтобы тратить время на изучение гнуплота. Я про него слышал и мне даже эксперты его советовали… Вообще надо бы освоить какой-то инструмент для подобного именно интерактивного разбора статистики.
  • +1
    Боюсь вам скоро предложат новую работу. Настоятельно так предложат…
    • +1
      Пилить деревья на лесоповале? Некоторый опыт уже ведь есть :D
      • +1
        ага, и данные анализировать, анализировать ;)
  • +26
    А ведь если бы вот это всё рассказывалось на лекции по экологии или где-нибудь в газете «Наш дом — планета Земля» — в жизни бы никто из айтишников не читал. А если то же самое расшифровано хитрыми методами из спертого у ученых архива — это супер-интересная информация. :)
    • +1
      *Приз за Лучший комментарий*
  • 0
    На самом деле, и без усреднения всё хорошо видно. Через первый график замечательно проводится «прямая». А отклонения бывают вполне конкретные — у нас ведь графики на одной широте, а ось немного «двигается» (прецессия, нутация), вот и идут небольшие отклонения. Один период в 18.6 лет должен быть вообще хорошо заметен. Кстати, чтобы не «класть» всё на один график, можно отложить гео-координаты по третьей оси, а промежуток проинтерполировать.
    • 0
      была мысль на счёт гео-координат по вертикальной оси, но тогда нельзя было бы 2d график рисовать, а 3d во-первых сложнее во-вторых незачем в самом то деле
  • –2
    Вспомнил Знамение :)
    Крутой анализ :)
  • 0
    >>И это сегодня, а завтра кто ещё знает чего там кто где добудет.
    Архив переписки с марсианами =)
  • +2
    Теперь когда Ваганов будет выступать с этими данными на конференции его закидают тухлыми яйцами с криками баян!!!
  • +3
    кажется, я знаю чем занять хаброжителей на ближайшую ночь: найду в шкафах свою магистерскую, выкину текст, оставлю 70 страниц таблиц с результатами анализов непонятно (вам) чего и вывалю в сеть. посмотрим какой там у меня тайный смысл :)
    а ещё фильм «игры разума» на ум пришёл…
  • +1
    ну вобще там много русских.
    чего стоит только 0826209667.txt из mail

    From: «Tatiana M. Dedkova»

    Subject: schijatov

    I and Eugene…

    The best wishes to you and Phil.

    Yours sincerely Stepan Shiyatov
  • –2
    Самое плохое, что вот теперь когда метеорологи поднимут тревогу по действительно НАСТОЯЩЕЙ проблеме, то им уже никто не поверит :(
    • 0
      Следующей проблемой, очевидно, должно стать глобальное похолодание :)
    • НЛО прилетело и опубликовало эту надпись здесь
  • НЛО прилетело и опубликовало эту надпись здесь
  • +2
    Смотрю я на графики и вижу наводку 50Гц… :)
  • 0
    А много у нас в России деревьев с возрастом в 600 лет?
    • 0
      полагаю, что в тайге их достаточно… «посередине нигде» :)
      • 0
        В нашем климате деревья не живут столько, и погибшие не хранятся долго.
        • 0
          по деревьям из 15го века «консистентные», если я правильно помню, данные вот до 1996-го года, то есть это вот прям вчера спиленные
        • 0
          На гугльмап взгляните.
          Там не Ваш клиат :-)
          • 0
            Пермь?
            • 0
              Севернее Якутска :-)
        • НЛО прилетело и опубликовало эту надпись здесь
          • 0
            >— север Восточной Сибири

            ну так это там и есть
        • +1
          Сиби́рский кедр, или сосна́ сиби́рская кедро́вая (лат. Pínus sibírica) — один из видов рода Сосна; вечнозелёное дерево, достигающее 35—44 метров в высоту и 1,8 метра в диаметре ствола. Максимальная продолжительность жизни 800—850 лет.
  • +3
    Детский сад…
    Неужели Вы и впрямь считаете что способны сделать адекватные выводы без соответствующих знаний и такими школьными методами?
    Взяли какие-то цифры, толком даже не зная что это вообще такое, построили по ним красивые графики, добавили среднее для наукообразности и сразу же потрясающий вывод о глобальном потеплении!
    И туча восторженных коментов про «исследования» и «анализ»…
    Давайте еще бозон Хиггса «поисследуем» на основе данных с LHC. Достать их несложно и графики изумительнейшие будут.

    по теме
    читать раз: igorivanov.blogspot.com/2009/11/climate-hackers.html
    читать два: www.realclimate.org/index.php/archives/2009/11/the-cru-hack/
    • НЛО прилетело и опубликовало эту надпись здесь
      • –1
        Эта оговорка ничего не значит, там целый абзац про тенденции в температуре.

        Вывод из этого поста можно сделать один: автор хорошо умеет строить графики по данным из текстовых файлов и строить по ним среднее.
    • +1
      Да ради бога, у Вас как раз ровно ноль кармы — сделайте что-то и напишите об этом?
  • +3
    А с чего, собственно, вы взяли, что эти данные — температура или хотя бы пропорциональны ей? Это может быть все что угодно и ваше «исследование» абсолютно ни о чем не говорит.
    • НЛО прилетело и опубликовало эту надпись здесь
      • +1
        Тогда о чем статья? Можно было бы с тем же успехом взять случайные числа и построить кучу графиков. Сырые экспериментальные данные, как правило, требуют очень серьезной обработки.
        • НЛО прилетело и опубликовало эту надпись здесь
          • +1
            Ну, чуть шире: я ничего ни про какие кольца вообще не знал до этого. За вечер узнал и про кольца, и про дендроклиматологию и про стандартизацию данных, и вообще кучу всего. Но не потому что мне нравятся деревья или интересен климат. Просто интересно копаться в данных. Я как раз в этом ключе сейчас копаюсь в данных по своему проекту, потом может напишу отдельно, хотя вряд ли, конечно, такой отзыв получит.
  • 0
    Я в шоке. Чувствую себя приобщённым к детективной стори тако-о-о-о-го масштаба! )))
    Спасибо за по-настоящему новое и уникальное на Хабре!
    • 0
      там :) мегабайт (смайлик — это «60» набранное с шифтом) — там разве что писем от марсиан правда нету, я только призываю общественность к действию, а не обсуждению постов с цитатами на каких-то английских форумах.

      кстати наши СМИ я так смотрю вообще это дело проигнорировали
  • +1
    это дендрохронологические данные, есть такая наука дендрохронология
    Вам эти графики не дадут абсолютно ничего, ибо нет методики работы с ними, нет региональных поправок.

    На толщину годовых колец сильно влияет процент содержания СО2 в атмосфере, поэтому возникает масса региональных поправок
  • +1
    Так заинтриговали, что решила и сама посмотреть, что же ценного можна там получить. После того, как я в одном из файлов прочла такое:
    Dear Keith,
    enclosed are data concerning Yamal chronology.
    — 2 — general chronology (1248 BC — 1994 AD). I have some little
    doubt about 360 BC — may be it is false. It was found that
    in chronology I sent you before 155 BC was false ring;
    — у меня был шок ) откуда у них данные (даже если они приблезительные) за ТАКОЙ период?
    • +2
      дендрохронология дает достоверные результаты более чем на 5 000 лет
  • НЛО прилетело и опубликовало эту надпись здесь
    • 0
      О, второй приз за лучший комментарий. Чисто по времени второй.

      Очень, кстати, мило, я тоже на сто лет киваю в своих типавыводах, хотя конечно тонкостей формирования этих размеров колец не знаю.
  • 0
    Если помыслить и попараноить — можно подумать, что это толковый вброс.
    Хотя если посмотреть правде в глаза — сейчас такое время, что деньги выбивают из всего. Поэтому все это довольно правдоподобно. Действительно, сложно придумать кому выгодно делать такое кроме как хакеру ради удовольствия и просвящения общественности.
    В ящике, кстати, тоже пытались говорить, что ГП — вброс, но там это на корню задавлено… Спрос на потепление есть — будут снимать про потепление. А скоро должны будут снять про то, что потепление — вранье — тоже ведь прибыль!
  • 0
    Мощно :) Не знал, что по кольцам дерева можно судить о климате. Пойду скачаю себе, тоже покопаюсь.
    • 0
      это вроде еще Леонардо додумался до этого :)
  • +1
    Данные в каталоге ORIG принадлежат программе Microcal Origin, которую используют физики для построения сложных графиков. Скачайте версию постарше (актуальная, кажется 7, но общественность в силу некоторых предпочтений предпочитает Origin 4, 5 или 6).
    • 0
      Сомнительно. Может быть, у меня среди знакомых неправильные физики, но они любят R, или, на худой конец, Matlab.
  • 0
    Есть ложь, есть наглая ложь, а есть статистика (С)

    Хотя сам замечал что в чужих данных копаться гораздо интереснее, чем в своих или которые просто в открытом доступе лежат. Оживленность хабра как бе намекает.
  • +2
    «Смотрите как похожи графики» — ненаучно. Посчитайте, пожалуйста, коэффициент корреляции, раз уж в базу загрузили.

    Для того чтобы говорить о циклах (50-летних, скажем), требуется провести Фурье анализ. Так как мы имеем дело со случайным процессом, то нужную нам информацию даст преобразрвание Фурье корреляционной функции.

Только зарегистрированные пользователи могут оставлять комментарии. Войдите, пожалуйста.