Цель (проект) - Target (project)

Цель
Место расположенияУниверситет Гронингена, Нидерланды
УчредилЯнварь 2009
ФинансированиеФинансируется Европейский фонд регионального развития и партнеры
Интернет сайтковрик.nl/цель

Цель это название совместного исследовательского проекта в большое количество данных переработка и управление в северных Нидерландах.[1] Это государственно-частное сотрудничество, начатое в 2009 году и поддерживаемое государственными субсидиями.[2] Он управляется консорциумом из десяти академических и компьютерных партнеров, координируемых Гронингенский университет, и исследует управление данными научных проектов в области астрономии, наук о жизни, искусственного интеллекта и медицинской диагностики.

В проекте Target участвуют различные подразделения Университета Гронингена, его медицинский центр, IBM, Oracle, АСТРОН и голландские ИТ-компании Elkoog /Heeii и Nspyre.

Вычислительный центр Target находится в Центре информационных технологий, вычислительном центре Университета Гронингена, и состоит из более чем 10 петабайт хранилища.[3][4] на основе IBM с GPFS технология хранения,[5] а высокопроизводительные вычисления кластер и сетка кластера, который является частью Европейская грид-инфраструктура.

Центр обработки данных Target находится в Центре информационных технологий Дональда Смитса, расположенном в Гронингенский университет, Нидерланды

История

Проект был инициирован с целью передачи опыта астрономов в области обработки массивных данных в другие области науки. Target основывается на распределенной вычислительной среде Astro-WISE.[6][7] Сама система Astro-WISE возникла как инициатива рабочей группы OPTICON Wide Field Imaging, которая была создана для рассмотрения стандартизированной европейской геодезической системы для облегчения исследований, обработки и анализа данных с использованием данных с нового поколения широкоугольных обзорных камер. [8] Проект Target стартовал в 2009 году после получения 32 миллионов евро.[9] финансирования сроком на пять лет от Европейский фонд регионального развития, Министерство экономики Нидерландов (проект «Пикен-ин-де-Дельта») и провинции Гронинген и Дренте. Проект реализуется под эгидой Альянса провинций Северных Нидерландов (SNN) и муниципалитета Гронингена.

Технологические выводы

В начале проекта одной из целей была разработка единой интегрированной системы обработки, состоящей из файловой системы в масштабе нескольких петабайт.[10] и несколько различных типов сеток и вычислительных кластеров.[11] В первые годы стало очевидно, что требования к разным электронная наука дисциплины разные. В некоторых областях требуются огромные усилия по потоковой передаче данных, как в Лофар. В астрономии количество объектов данных может исчисляться миллиардами с ограниченным количеством столбцов данных.[12] В геномика, количество строк невелико, но количество столбцов может быть огромным, исчисляемым сотнями тысяч. Другие области, такие как визуальный поиск текста в системе поиска исторических рукописей Monk, занимают промежуточное положение с сотнями миллионов строк и тысячами измерений. Кроме того, приложения для геномики часто требуют строгого контроля доступа,[13] тогда как другие дисциплины не имеют проблем с конфиденциальностью. Следовательно, различные подпроекты в рамках Target приняли прагматический подход к тому, какие аспекты технологии WISE и компоненты аппаратной инфраструктуры Target применимы к их области.

Проекты

Target участвует в ряде научных проектов в области астрономии, требующих больших объемов данных, Большое количество данных визуализация (сотрудничество с центром eScience в Амстердаме),[14] распознавание рукописного текста алгоритмы, медицинские исследования здорового старения, разработка диагностических инструментов для болезни Паркинсона и многое другое.

Долгосрочный архив LOFAR

Target разработала и поддерживает ЛОФАР Долгосрочный архив.

Большая часть данных из ЛОФАР телескоп хранится, доступ к нему и архивирование в долгосрочном архиве LOFAR, разработанном АСТРОН и Target.[15][16][17] Данные будут размещены в дата-центре Target и нескольких других европейских центрах.

Монах

Скриншот страницы из архива кабинета голландской королевы (KdK), на которой Монах обнаружил слово Groningen.

Monk - это система, разработанная проф. Шомакер и его группа в Институте искусственного интеллекта (ALICE) в Гронингенский университет. Он использует алгоритмы распознавания образов и машинного обучения для распознавания рукописного текста в различных существующих архивах.[18][19][20] В настоящее время в Monk попало несколько книг из Национального архива Нидерландов, а также более 70 международных исторических коллекций, от западных, средневековых до рукописных китайских рукописей. В системе применяется непрерывное («24/7») машинное обучение через Интернет, что дает фундаментальные результаты.[нечеткий ][21] Система MONK использует вычислительные ресурсы и ресурсы хранения Target. Недавно он стал частью сотрудничества под руководством профессора Поповича с кафедры теологии и религиоведения Гронингенский университет кто будет использовать комбинацию методов углеродного датирования, палеографии и распознавания текста / изображений, чтобы попытаться определить авторов популярных Свитки Мертвого моря рукописи.[22]

LifeLines

LifeLines - это долгосрочный медицинский исследовательский проект, осуществляемый Университетский медицинский центр Гронингена (UMCG). Массив данных о генотипах и фенотипах будет собираться у 165000 человек один раз в пять лет в течение 30 лет. Накопленные данные будут использоваться исследователями и медицинскими специалистами, чтобы получить представление о процессах, связанных со старением, и понять, почему ухудшение здоровья, связанное с возрастом, так сильно различается.[23] Target предоставляет LifeLines инфраструктуру для хранения, доступа и обработки данных. Данные LifeLines, а также SURFsara и Целевая инфраструктура использовались в проекте Genome of the Netherlands, осуществляемом консорциумом UMCG, LUMC, Эразмус МС, UMCU, Свободный университет Амстердама. Результаты проекта с использованием полногеномного секвенирования для определения структуры населения и демографической истории голландского населения были опубликованы в июне в Природа Генетика журнал.[24][25]

ПРОБЛЕМЫ

Управляет доктор К. Линдерс, профессор неврологии UMCG, GLIMPS - это исследовательский проект, целью которого является поиск более быстрых и надежных инструментов диагностики болезни Паркинсона.[26] GLIMPS исследует возможности использования сложных алгоритмов на основе изображений и ПЭТ-сканирования для раннего выявления болезни Паркинсона.[нужна цитата ] Чтобы проверить эффективность таких алгоритмов, GLIMPS создает большую базу данных ПЭТ-сканирований, доставленных многочисленными больницами в Нидерландах. Target отвечает за создание и поддержку базы данных GLIMPS, а также за обеспечение бесперебойной работы алгоритмов, основанных на изображениях, на своих вычислительных средствах.

Другие

Кроме того, Target участвует в управлении данными для других астрономических проектов, таких как астрономическая съемка KiDs / VIKING.[27][28] с помощью OmegaCAM,[29][30] в ESO МУЗА[31] прибор (установлен на Очень большой телескоп ) и MICADO (устанавливается на E-ELT ). Кроме того, ориентированный на данные подход к управлению данными, предложенный Target, был принят ЕКА Миссия евклида.[32] Дочерняя компания Target Holding B.V. также управляет рядом коммерческих проектов с частным бизнесом на севере Нидерландов.[33]

Работа с общественностью и образование также являются частью компетенции проекта, и Target организовала множество общественных мероприятий.[34] Театр Infoversum 3D[35][36] является побочным продуктом проекта Target и предоставляет возможность визуализации и объяснения научных данных для больших групп.

Рекомендации

  1. ^ "Nederlands project kan 1,5 петабайт verwerken en opslaan" [Нидерландский проект может обрабатывать и сохранять 1,5 петабайта]. nu.nl (на голландском). 2 сентября 2010 г.
  2. ^ Эдельман, Питер (2 июня 2009 г.). "Miljoenensubsidie ​​voor North-Nederlands программа сбора данных" [Миллионы субсидии для программы сбора данных в Северных Нидерландах]. Биты и чипы.
  3. ^ Витольд, Кепинский (19 ноября 2010 г.). "Gronings ICT-проект за петабайты данных" [Проект ИКТ Гронингена готов к петабайтам данных]. Вычислимый (на голландском).
  4. ^ Хейсман, Зандер (27 мая 2011 г.). «Aprycus breidt Capsuiteit Target-project uit» [Aprycus увеличивает емкость Целевого проекта]. Вычислимый (на голландском).
  5. ^ Примеры использования IBM, демонстрация историй клиентов IBM. «Университет Гронингена открывает новые возможности для научных исследований». www-03.ibm.com/software/businesscasestudies/us/en/corp?OpenDocument&Site=corp&cty=en_us.
  6. ^ Бегеман, Кор; А. Н. Беликов; D.R. Boxhoorn; Е. А. Валентийн (январь 2013 г.). «Информационная система Astro-WISE, ориентированная на данные». Экспериментальная астрономия. 35 (1–2): 1. arXiv:1208.0447. Bibcode:2013ExA .... 35 .... 1B. Дои:10.1007 / s10686-012-9311-4.
  7. ^ Mwebaze, Джонсон (2012). Экстремальная линия данных в специальной обработке астрономических данных (Кандидат наук). Университет Гронингена. ISBN  9789036757591.
  8. ^ Гилмор, Джеральд (январь 2001). "ОПТИКОН: оптическая инфракрасная координационная сеть ЕС для астрономии". Организации и стратегии в астрономии. Библиотека астрофизики и космических наук. 2: 83–102. arXiv:astro-ph / 0105562. Дои:10.1007/978-94-010-0666-8_6. ISBN  978-0-7923-7172-4.
  9. ^ Эдельман, Питер (20 июля 2009 г.). "Miljoenensubsidie ​​voor Noord Nederland Dataminingprogram" [Миллионы субсидий для программы датамайнинга Северных Нидерландов]. Биты и чипы (на голландском). п. 45.
  10. ^ Jain, R; Sarkar, P .; Субхравети, Д. (2013), "GPFS-SNC: файловая система корпоративного кластера для больших данных", Журнал исследований и разработок IBM, 57 (3/4): 5:1, 5:10, Дои:10.1147 / JRD.2013.2243531
  11. ^ Бегеман, Кор; Бегеман, К. Г .; Беликов, А. Н .; Боксхорн, Д. Р .; Dijkstra, F .; Валентийн, Э. А .; Vriend, W. J .; Чжао, З. (2010), «Объединение сетевых технологий», Журнал грид-вычислений, 8 (2): 199–221, Дои:10.1007 / s10723-010-9147-у
  12. ^ Лури, X .; Palmer, M .; Arenou, F .; Masana, E .; De Bruijne, J .; Antiche, E .; Babusiaux, C .; Borrachero, R .; Sartoretti, P .; Julbe, F .; Isasi, Y .; Martinez, O .; Робин, А. С .; Reylé, C .; Jordi, C .; Карраско, Дж. М. (2014). "Обзор и звездная статистика ожидаемого Гайя Каталог с использованием Гайя Объект Генератор". Астрономия и астрофизика. 566: A119. arXiv:1404.5861. Bibcode:2014A & A ... 566A.119L. Дои:10.1051/0004-6361/201423636.
  13. ^ Малин, Б .; Лукидес, G .; Benitez, K .; Клейтон, Э. У. (2011). «Идентифицируемость в биобанках: модели, меры и стратегии смягчения». Генетика человека. 130 (3): 383–392. Дои:10.1007 / s00439-011-1042-5. ЧВК  3621020. PMID  21739176.
  14. ^ «Проекты центра электронной науки». esciencecenter.nl.
  15. ^ Беликов, А.Н.; Бегеман, К .; Боксхорн, Д.Р .; Dijkstra, F .; Holties, H .; Meyer-Zhao, Z .; Аренда, G.A .; Valentijn, E.A .; Вринд, В-Дж. (2011). «Информационная система ЛОФАР». Proc. ADASS XXI, ASP Conf. Серии. arXiv:1111.6443. Bibcode:2012ASPC..461..693B.
  16. ^ Бегеман, К .; Boxhoorn, D .; Dijkstra, F .; Holties, H.A .; Вринд, В.-Дж (2011). «Задача для долгосрочного архива LOFAR: архитектура и реализация». Компьютерные системы будущего поколения. 27 (3): 319–328. Дои:10.1016 / j.future.2010.08.010.
  17. ^ Holties, H.A; van Diepen, G .; и другие. (2012). «Анализ данных в долгосрочном архиве LOFAR». Серия конференций ASP. 461, Программное обеспечение и системы анализа астрономических данных XXI: 536.
  18. ^ ван дер Зант, Т; Schomaker, L.R.B .; Зингер, С .; ван Ши, Х. (2009). «Где находятся поисковые системы для рукописных документов?». Междисциплинарные научные обзоры. 34 (2–3): 224–235. Дои:10.1179 / 174327909X441126.
  19. ^ ван дер Зант, Т; Schomaker, L.R.B .; Valentijn, E .; Б.А. Яникоглу; К. Беркнер (28 января 2008 г.). Яникоглу, Беррин А; Беркнер, Катрин (ред.). «Масштабная параллельная обработка документа-изображения». Proceedings of Document Recognition and Retrieval XV, IS&T / SPIE International Symposium on Electronic Imaging. Распознавание и поиск документов XV. 6815: 68150N. Дои:10.1117/12.765482.
  20. ^ Schomaker, L.R.B .; Б.А. Яникоглу; К. Беркнер (28 января 2008 г.). «Поиск слов в рукописной коллекции с редкими пометками». Proceedings of Document Recognition and Retrieval XV, IS&T / SPIE International Symposium on Electronic Imaging: 6815–6823.ван дер Зант, Т; Schomaker, L.R.B .; Хаак, К. (2008). «Определение рукописных слов с использованием биологически вдохновленных особенностей». IEEE Transactions по анализу шаблонов и машинному анализу. 30 (11): 1945–1957. Дои:10.1109 / тпами.2008.144. PMID  18787243.
  21. ^ van Oosten, J.-P .; Шомакер, Л. (2014). «Разделимость против прототипичности в поиске рукописного слова и изображения» (PDF). Распознавание образов. 47 (3): 1031–1038. Дои:10.1016 / j.patcog.2013.09.006. HDL:11370 / ca3dd93d-fbd9-4ae3-bfac-90bb148ea1dd.
  22. ^ RUG News. «Престижный стартовый грант ERC для Младена Поповича». Rijksuniversiteit Groningen. Получено 19 января 2015.
  23. ^ Столк, Рональд П.; Росмален JG; Postma DS; де Бур Р.А.; Navis G; Slaets JP; Ормель Дж; Wolffenbuttel BH (январь 2008 г.). «Универсальные факторы риска многофакторных заболеваний: LifeLines: популяционное исследование трех поколений». Европейский журнал эпидемиологии. 23 (1): 67–74. Дои:10.1007 / s10654-007-9204-4. PMID  18075776.
  24. ^ Франциоли, Лоран; Менелау, Андроники; и другие. (29 июня 2014 г.). «Вариации последовательности всего генома, структура населения и демографическая история голландского населения». Природа Генетика. 46 (8): 818–825. Дои:10.1038 / нг.3021. PMID  24974849.
  25. ^ ван Вейнгаарден, Аренд (30 июня 2014 г.). "Genoom Nederlandse volk ontrafeld". Dagblad van het Noorden.
  26. ^ Теуне, Лаура Класке (2013). Особенности метаболизма глюкозы при нейродегенеративных заболеваниях головного мозга. Кандидатская диссертация.
  27. ^ Jong, J.T .; J.T. де Йонг; G.A.V. Kleijn; К.Х. Kuijken; E.A. Валентийн (2013). «Килоградусный обзор». Экспериментальная астрономия. 35 (1–2): 25–44. arXiv:1206.1254. Bibcode:2013ExA .... 35 ... 25D. Дои:10.1007 / s10686-012-9306-1.
  28. ^ Нидерланды, Исследовательская школа астрономии (NOVA). «Годовой отчет NOVA 2011-2011-2012» (PDF). новая астрономия. НОВАЯ ЗВЕЗДА.
  29. ^ Шиллинг, Говерт (8 июня 2011 г.). «Прямой успех встретился с суперкамерой» [Немедленный успех с супер камерой]. De Volkskrant (на голландском).
  30. ^ "Superscherpe hemelfotos vanaf Chileense berg" [Сверхчеткие фотографии неба с чилийских гор]. NRC Handelsblad (на голландском). 9 июня 2011 г.
  31. ^ Вайльбахер, Питер; Питер М. Вайльбахер; Оле Штрайхер; Таня Уррутия; Орелиен Ярно; Арлетт Пеконталь-Руссе; Роланд Бэкон; Петра Бём (сентябрь 2012 г.). Радзивилл, Николь М; Киоцци, Джанлука (ред.). «Дизайн и возможности программного обеспечения и конвейера обработки данных MUSE». Proc. SPIE. Программное обеспечение и киберинфраструктура для астрономии II. 8451: 84510B. Дои:10.1117/12.925114.
  32. ^ Пазиан, Фабио; Фабио Пазиан; Джон Хоар; Марк Соваж; Кристоф Дабен; Морис Понсе; Ориана Мансутти (сентябрь 2012 г.). Радзивилл, Николь М; Киоцци, Джанлука (ред.). «Наземный научный сегмент миссии Евклида ЕКА». Proc. SPIE. Программное обеспечение и киберинфраструктура для астрономии II. 8451: 845104. Дои:10.1117/12.926026.
  33. ^ Хейсман, Зандер (31 января 2013 г.). "Target-project levert vier nieuwe bedrijven op" [Целевой проект поставляет четыре новые компании]. Вычислимый (на голландском).
  34. ^ Ветер, Майке (12 мая 2014 г.). "Rapportage Big Data: De man met én been en vijf kinderen" [Отчет о больших данных: одноногий мужчина и пятеро детей]. Дагблад ван Хет Норден (на голландском). п. 2.
  35. ^ Ветер, Майке (19 июня 2014 г.). "Театр Infoversum open voor publiek" [Театр Infoversum открыт для публики]. Гронингер Гезинсбоде (на голландском). п. 19.
  36. ^ "Инфоверсум". De Telegraaf (на голландском). 4 июля 2014 г.