Проект здравого суждения - The Good Judgment Project
Проект здравого суждения (GJP) - это проект, «использующий мудрость толпы для прогнозирования мировых событий». Он был создан в соавторстве с Филип Э. Тетлок (автор Суперпрогнозирование и из Экспертная политическая оценка: насколько она хороша? Как мы можем узнать?), специалист по решениям Барбара Меллерс, и Дон Мур, все профессора Пенсильванский университет.[1][2][3] Был участником Агрегированная условная оценка (ACE) программы Деятельность в области перспективных исследовательских проектов разведки (IARPA) в Соединенные Штаты.[4][5] Прогнозы оцениваются с использованием Brier оценки.[6] Ведущие прогнозисты GJP «по имеющимся сведениям на 30% лучше, чем офицеры разведки, имея доступ к актуальной секретной информации».[7]
История
Проект «Хорошее суждение» начался в июле 2011 года в сотрудничестве с IARPA-ACE.[8] Первый конкурс начался в сентябре 2011 года.[9][10] GJP был одним из многих участников турнира IARPA-ACE и неоднократно становился победителем турнира.[5] С лета 2013 года участники GJP получили доступ к Интегрированная система раннего предупреждения конфликтов.[6]
Люди
Соруководители GJP включают Филип Тетлок, Барбара Меллерс и Дон Мур.[1] На веб-сайте перечислены в общей сложности около 30 членов команды, включая соруководителей, а также Давид Будеску, Лайл Унгар, Джонатан Барон, и предприниматель рынков предсказаний Эмиль Серван-Шрайбер.[11] Консультативный совет включал Даниэль Канеман, Роберт Джервис, Дж. Скотт Армстронг, Майкл Мобуссен, Карл Шпецлер и Джастин Вулферс.[12] В исследовании приняли участие несколько тысяч человек в качестве прогнозистов-добровольцев.[13] Используя тесты на личностные черты, методы и стратегии обучения, исследователи GJP смогли выбрать участников прогнозирования с меньшими когнитивными предубеждениями, чем средний человек; по мере продолжения конкурса прогнозов исследователи смогли далее отбирать этих людей в группы так называемых сверхпрогнозисты. В прошлом сезоне GJP приняли участие 260 суперпрогнозистов.
Исследование
Значительный объем исследований был проведен людьми, участвовавшими в проекте «Хорошее суждение».[14][15] Результаты показывают, что сочетание статистики, психологии, обучения и различных уровней взаимодействия между отдельными прогнозистами позволяет стабильно давать лучший прогноз в течение нескольких лет подряд.[13]
Хорошее суждение открыто
Коммерческая Дополнительная выгода проекта Good Judgment Project начал работать в Интернете в июле 2015 года под названием Good Judgment Inc. Начиная с сентября 2015 года Good Judgment Inc проводит открытый турнир по прогнозированию на сайте Good Judgment Open. Как и в проекте Good Judgment Project, в Good Judgment Open есть вопросы о геополитических и финансовых событиях, хотя в нем также есть вопросы о политике, развлечениях и спорте США.
Освещение в СМИ
GJP неоднократно обсуждалась в Экономист.[9][10][16] GJP также был освещен в Нью-Йорк Таймс,[3] Вашингтон Пост,[5][17][18] и Ко.[19] энергетический ядерный реактор 2 апреля 2014 года выпустил в эфир отрывок из проекта «Хорошее суждение» под названием «Итак, вы думаете, что вы умнее агента ЦРУ».[7] В Financial Times опубликовала статью о GJP 5 сентября 2014 года.[20] Вашингтонский опубликовал статью, в которой упоминался GJP 8 января 2015 года.[21] В BBC и Вашингтон Пост опубликовали статьи о GJP соответственно 20, 21 и 29 января 2015 г.[22][23][24]
В Альманах Menlo Park опубликовал статью о GJP 29 января 2015 года.[25] Статья о GJP появилась на портал Philadelphia Inquirer, Philly.com, 4 февраля 2015 г.[26] Книга Разумнее: выйти за рамки группового мышления, чтобы сделать группы умнее есть раздел, в котором подробно описывается участие GJP в турнире, проводимом IARPA.[27] Психология сегодня опубликовал в сети короткую статью, обобщающую статью Меллерса, и другие., что завершает основные выводы GJP.[28][29]
В рамках проекта в 2015 году вышла книга Тетлока, в соавторстве с Дэном Гарднером. Суперпрогнозирование - искусство и наука прогнозирования, в котором представлены основные результаты исследования, проведенного с использованием данных GJP.[30] Соавтор Гарднер уже опубликовал книгу в 2010 году, в которой цитировалось предыдущее исследование Тетлока, положившее начало усилиям GJP.[31] Рецензия на книгу в печатном издании журнала от 26 сентября 2015 г. Экономист обсуждаются основные концепции.[32] А Wall Street Journal статья описывает это как: "Самая важная книга по принятию решений со времен Дэниела Канемана Мышление, быстро и медленно.[33] В Harvard Business Review соединил это с книгой Как не ошибиться: сила математического мышления к Джордан Элленберг.[34]30 сентября 2015 года в эфире NPR был показан эпизод Колин Макинрой Шоу сосредоточившись на GJP и книге Суперпрогнозирование; гостями на выставке были Тетлок, директор IARPA Джейсон Матени, и суперпредсказатель Элейн Рич.[35]
Смотрите также
- Мудрость толпы
- Агрегированная условная оценка
- Деятельность в области перспективных исследовательских проектов разведки
- SciCast
Рекомендации
- ^ а б "Добро пожаловать в проект здравого смысла". Проект здравого суждения. Получено 5 мая, 2014.
- ^ "Кто есть кто в проекте" Хорошее суждение ". Проект «Хорошее суждение». 27 июля 2011 г.. Получено 5 мая, 2014.
- ^ а б Брукс, Дэвид (21 марта 2013 г.). "Прогнозирующая лиса". Нью-Йорк Таймс. Получено 5 мая, 2014.
- ^ "Проэкт". Проект «Хорошее суждение». Архивировано из оригинал 6 мая 2014 г.. Получено 5 мая, 2014.
- ^ а б c Горовиц, Майкл (26 ноября 2013 г.). «Хорошее суждение в прогнозировании международных отношений (и приглашение на 3 сезон)». Вашингтон Пост. Получено 5 мая, 2014.
- ^ а б Дикенсон, Мэтт (12 ноября 2013 г.). «Предсказание и здравое суждение: может ли ICEWS информировать прогнозы?». Предиктивная эвристика. Получено 24 мая, 2014.
- ^ а б Шпигель, Аликс. «Значит, вы думаете, что вы умнее агента ЦРУ». NPR.org. Получено 2014-08-18.
- ^ "Идея проекта" Хорошее суждение ". Проект «Хорошее суждение». 27 июля 2011 г. Архивировано с оригинал 6 мая 2014 г.. Получено 5 мая, 2014.
- ^ а б «Опасности предсказания: Приключения у ученых мужей». Экономист. 2 сентября 2011 г.. Получено 6 мая, 2014.
- ^ а б «Денежно-кредитная политика: насколько вероятна дефляция?». Экономист. 13 сентября 2011 г.. Получено 6 мая, 2014.
- ^ "Команда". Проект здравого суждения. Получено 5 мая, 2014.
- ^ «Фрикономика». Запишитесь на турнир по прогнозам. 2011-08-04.
- ^ а б Меллерс, Барбара; Ангар, Лайл; Барон, Джонатан; Рамос, Хайме; Гурчай, Бурку; Финчер, Катрина; Scott, Sydney E .; Мур, Дон; Атанасов, Павел; Свифт, Сэмюэл А .; Мюррей, Терри; Стоун, Эрик; Тетлок, Филип Э. (2014-05-01). «Психологические стратегии для победы в турнире по геополитическому прогнозированию». Психологическая наука. 25 (5): 1106–1115. Дои:10.1177/0956797614524255. ISSN 1467-9280. PMID 24659192.
- ^ Ангар, Лайл; Меллерс, Барбара; Satopää, Ville; Барон, Джон; Тетлок, Филип Э.; Рамос, Хайме; Свифт, Сэм. «Проект« Хорошее суждение: крупномасштабная проверка различных методов объединения экспертных прогнозов ». Ассоциация развития искусственного интеллекта.
- ^ Ульфельдер, Джей (27 марта 2014 г.). Использование «мудрости (экспертов) толпы» для прогнозирования массовых зверств (отчет). Дои:10.2139 / ssrn.2418980. SSRN 2418980.
- ^ «Международный: Кто умеет делать прогнозы? Как отличить лучшее от остальных». Экономист. 18 ноября 2013 г.. Получено 6 мая, 2014.
- ^ Игнатий, Дэвид (1 ноября 2013). «Больше болтовни, чем нужно». Вашингтон Пост. Получено 6 мая, 2014.
- ^ Бендер, Джереми (3 апреля 2014 г.). «Огромный эксперимент показывает, что обычные люди предсказывают мировые события лучше, чем агенты ЦРУ». Business Insider. Получено 6 мая, 2014.
- ^ «Удивительная точность краудсорсинговых прогнозов относительно будущего. Вы знаете, получит ли Турция новую конституцию? Оказывается, да: группа хорошо информированных граждан может предсказывать будущие события чаще, чем любой эксперт по внешней политике или аналитик ЦРУ». Компания существует. 21 апреля 2014 г.. Получено 6 мая, 2014.
- ^ Харфорд, Тим (05.09.2014). «Как заглянуть в будущее». Financial Times. ISSN 0307-1766. Получено 2014-09-05.
- ^ Гамильтон, Киган. «Как агентства США используют Интернет, чтобы выбирать наши мозги». Вашингтонский. Получено 2015-01-24.
- ^ Бертон, Тара (2015-01-20). «Могли бы вы быть« супер-прогнозистом »?». BBC Future. Получено 2015-01-21.
- ^ Дженсен, Натан (21 января 2015 г.). «Эксперты видят в республиканском сенате и ускоренном порядке полномочий Обамы ключи к новым торговым соглашениям». Вашингтон Пост. ISSN 0190-8286. Получено 2015-01-21.
- ^ Меллерс, Барбара; Майкл С. Горовиц (29 января 2015 г.). «Кто-нибудь делает точные геополитические прогнозы?». Вашингтон Пост. ISSN 0190-8286. Получено 2015-01-30.
- ^ «Репортаж: Боб Сойер из Woodside обнаруживает свой скрытый талант прогнозирования». Получено 2015-03-17.
- ^ Дриббен, Мелисса; Штатный писатель Inquirer (04.02.2015). «Гадание: толпы превосходят ученых мужей». Philly.com. Получено 2015-02-06.
- ^ Санстейн, Касс Р.; Хасти, Рид (2014-12-23). Разумнее: выйти за рамки группового мышления, чтобы сделать группы умнее. Издательство Harvard Business Review Press. ISBN 978-1-4221-2299-0.
- ^ «Кто лучше всего умеет предсказывать будущее? (И как стать лучше)». Психология сегодня. Получено 2015-07-11.
- ^ Меллерс, Барбара; Стоун, Эрик; Мюррей, Терри; Минстер, Анджела; Рорбо, Ник; Епископ, Михаил; Чен, Ева; Бейкер, Джошуа; Хоу, юань; Горовиц, Майкл; Ангар, Лайл; Тетлок, Филипп (01.05.2015). «Выявление и развитие суперпрогнозистов как метод улучшения вероятностных прогнозов». Перспективы психологической науки. 10 (3): 267–281. Дои:10.1177/1745691615577794. ISSN 1745-6916. PMID 25987508.
- ^ Тетлок, Филип Э .; Гарднер, Дэн (2015-09-29). Суперпрогнозирование - искусство и наука прогнозирования. Нью-Йорк: Корона. ISBN 978-0-8041-3669-3.
- ^ Гарднер, Дэн (2010-10-12). Будущий лепет: почему ошибочные прогнозы экспертов - и почему мы им все равно верим. Макклелланд и Стюарт.
- ^ «Безоблачное зрение». Экономист. 2015-09-26. ISSN 0013-0613. Получено 2015-09-24.
- ^ Цвейг, Джейсон. «Видите ли вы будущее? Наверное, лучше, чем профессиональные прогнозисты». Журнал "Уолл Стрит. Получено 25 сентября, 2015.
Я думаю, что книга Филипа Тетлока «Суперпрогнозирование: искусство и наука прогнозирования» ... самая важная книга по принятию решений после книги Дэниела Канемана «Мышление, быстро и медленно».
- ^ Фрик, Уолтер. «Вопрос уверенности». Harvard Business Review. Получено 2015-09-26.
- ^ Макинрой, Колин; Волк, Хион. "Шоу Колина Макинроя". WNPR. Национальное общественное радио. Получено 1 октября, 2015.