Метoд дельфи относят к группе – Метод Дельфи – в чем заключается, достоинства и недостатки, как его эффективно использовать?

Метод Дельфи — принятие решений на основе экспертных оценок

На сегодняшний день существует множество разных методов, позволяющих выбрать и оценить эффективность решений. Одним из наиболее известных и популярный является метод Дельфи, который по-другому еще называют дельфийским методом или методом дельфийского оракула. Его можно с успехом использовать не только в менеджменте или другой профессиональной сфере, но и в повседневной жизни. Давайте разберемся, что же он собой представляет и как можно его использовать.

Что такое метод Дельфи?

Он представляет собой метод, позволяющий быстро находить решения той или иной задачи. Эти решения генерируются в процессе мозгового штурма, который проводится группой специалистов. Целью методики является выбор наилучших решений, которые впоследствии можно применить на практике. Отбор решений осуществляется методом экспертных оценок.

В ходе использования методики можно собрать индивидуальные оценки экспертов, обобщить и обработать их и в итоге получить надежное и достоверное общее мнение. Работа осуществляется путем проведения мозговой атаки, интервью и опросов. Считается, что независимые эксперты могут более эффективно оценить результат, нежели специально структурированная группа. Поскольку независимые эксперты, как правило, незнакомы друг с другом, риски личных влияний исключаются.

Метод Дельфи был разработан в середине прошлого века в США. Он создавался с целью прогнозирования влияния технологических достижений будущего на методы ведения войны. Метод был основан американским стратегическим исследовательским центром «RAND». Авторство приписывают главным его разработчикам – Олафу Хэлмеру, Норману Дэлки и Николасу Решеру. Название произошло от имени Дельфийского оракула.

Со временем этот метод широко распространился во многих западных странах. На его примере были разработаны и другие, не менее эффективные методики. Многие компании стали использовать дельфийский метод для проведения стратегического планирования. В России же он применяется довольно редко, потому что нет специалистов, которые могут внедрить его.

Как применяется метод Дельфи на практике?

Для проведения методики необходимы две группы участников. Первая группа представляет собой экспертов, которые высказывают свое мнение по рассматриваемому вопросу. Вторая группа состоит из аналитиков, призванных изучить мнения экспертов и на основе их вычленить оптимальное решение задачи. Метод Дельфи проводится в несколько этапов. Рассмотрим каждый из них.

Первый этап – подготовительный

На этом этапе необходимо собрать экспертную группу. Количество участников может быть любое, однако специалисты рекомендуют приглашать в группу не более 20 человек. Это количество считается оптимальными.

Второй этап – основная работа

После того как экспертная группа сформирована, перед ней ставится задача, которую необходимо решить. Эксперты должны ознакомиться с основной задачей и разбить ее на несколько более мелких. Аналитикам необходимо провести отбор самых актуальных вопросов и на их основе составить опросник.

Готовый опросник снова передается экспертной группе. Изучив его, участники могут предложить добавить что-то еще, внести в него дополнительные данные. В результате должно получиться 20 подробных ответов (по числу участников экспертной группы). После этого аналитики должны составить другой опросник, который опять предоставляют экспертам.

Эксперты изучают новый опросник и предлагают варианты решения поставленной задачи. На этом этапе оценивается эффективность, наличие ресурсов для решения вопроса, способы решения. Изучив мнения экспертов, аналитикам необходимо вычленить основные и постараться найти их точки соприкосновения. Варианты, не вписывающиеся в общую концепцию, озвучиваются экспертам, после чего они могут пересмотреть свои мнения.

Эти этапы повторяются до тех пор, пока эксперты не придут к единому мнению. Расхождения во мнения помогают аналитикам обнаружить некоторые нюансы в решении проблемы и учесть их. В конце аналитики должны вынести общую оценку и на ее основе предложить план решения поставленной изначально задачи.

Третий этап – аналитический

После того как основная работа выполнена, необходимо проверить согласованность мнений экспертов, исследовать и проанализировать полученную информацию и придумать наилучший способ решения проблемы.

Особенности метода Дельфи

Отличительными чертами дельфийского метода является то, что он проводится анонимно, заочно и является многоуровневым.

Анонимное и заочное проведение процедуры позволяет исключить влияние мнения наиболее авторитетных участников экспертной группы на мнение остальных ее членов. Опрос можно проводить экстерриториально, используя специальные опросники, которые можно отправить обычной или электронной почтой. Многоуровневые опросы обеспечивают объективность и высокую надежность результата.

Эффективное использование метода Дельфи предполагает обязательное выполнение некоторых условий:

• вопросы в опроснике должны быть составлены таким образом, чтобы их нельзя было понять двояко; четкость и однозначность обязательна;
• эксперты должны иметь возможность записывать ответы не только словами, но и в виде чисел;
• участникам экспертной группы должна быть предоставлена вся необходимая информация, позволяющая им понять суть задачи;
• каждый свой ответ эксперты должны обосновывать;
• важна стабильность экспертной группы и оптимальная численность ее членов;
• промежутки между этапами опросов не должны превышать одного месяца;
• необходимо провести столько этапов опроса, сколько требуется для того, чтобы каждый эксперт смог вникнуть в суть проблемы и провести качественную оценку;
• необходимо проводить систематический отбор экспертов;
• важно иметь четкую формулу, по которой будет проводиться согласование оценок.

Как уже было сказано выше, в процедуре участвуют две группы – экспертная и аналитическая. Первая группа занимается генерацией идей, вторая – их анализом и критикой. Организаторы должны постараться сделать обсуждение более масштабным, чтобы добиться наилучшего результата. В ходе обсуждения разрешается любая критика.

Процесс обсуждения проходит под руководством ведущего. Ведущий должен располагать к себе членов группы. Важно, чтобы он относился ко всем участникам одинаково и непредвзято. Также он не должен склонять ход обсуждения в какую-то определенную сторону, не навязывать своего мнения, чтобы не вносить искажения. Основная цель – получить наиболее достоверные данные.

Недостатки метода

Несмотря на свою эффективность и множество достоинств дельфийский метод обладает рядом недостатков, которые должны учитываться желающими его провести. Сюда можно отнести следующие трудности:

• Полномочия организаторов процедуры значительно превышают полномочия экспертов, что ставит их в неравное положение.
• Групповое мнение далеко не во всех случаях является правильным.
• Аналитики, как правило, отбрасывают нестандартные предложения по решению поставленной задачи, хотя зачатую именно такие решения позволяют достичь наилучшего результата.
• Нет возможности провести краткий оперативный анализ, поскольку заключительный этап процедуры требует большого промежутка времени: каждый этап анализа обычно длится не более суток.
• Участники экспертной группы будут неосознанно стремиться присоединиться к мнению большинства.
• Организаторы могут влиять на экспертов, манипулируя ими.

Эти недостатки были подмечены сразу же после появления метода Дельфи. Специалисты предложили устранить их при помощи ряда действий:

• в число организаторов должны входить люди, принадлежащие к разным слоям социума и сферам деятельности;
• для того чтобы получить наиболее достоверные данные, необходимо провести мероприятие по решению одной и той же проблемы в нескольких группах;
• не стоит отбрасывать нестандартные решения, их тоже нужно рассмотреть, хотя бы в качестве дополнительных вариантов.

Учитывая эти рекомендации, можно существенно повысить эффективность методики.

Дельфийский метод можно применять не только в прогнозировании или в принятии управленческих решений, но и в обычной жизни, для решения тех или иных проблем. Если вы хотите решить найти решение какого-либо вопроса и оценить его эффективность, можете попробовать воспользоваться предложенным методом.

newgoal.ru

Метод Дельфи и его применение

Среди имеющихся на сегодняшний день инструментов, предназначенных для выбора и оценки эффективности решений, особое место занимается дельфийский метод или, как его ещё называют, метод Дельфи. Он является очень эффективным как в повседневной жизни, так и в профессиональной сфере деятельности, ведь он позволяет учитывать мнения всех людей, которые имеют отношение к какому-либо вопросу, посредством последовательного объединения соображений, предложений и выводов, а затем прийти к конкретному соглашению. Дельфийский метод удобен в применении, и использовать его может любой человек или группа людей, важно только знать, как это делается.

Метод Дельфи

Метод Дельфи разрабатывался в 50-60-е годы XX века в США. Основной его задачей было прогнозирование воздействия научных разработок будущего на методы ведения военных действий. Разрабатывался метод американским стратегическим исследовательским центром «RAND», а его авторами принято считать Олафа Хэлмера, Нормана Дэлки и Николаса Решера. Кстати говоря, название произошло от имени Дельфийского Оракула.

Особенности и суть метода Дельфи

Учитывая то, что метод Дельфи представляет собой метод экспертного оценивая, основными его особенностями являются анонимность, многоуровневость и заочность. Базовой предпосылкой служит идея о том, что если должным образом произвести обобщение и обработку индивидуальных оценок экспертов по поводу конкретной ситуации, можно получить общее мнение, которое будет обладать максимальной степенью надёжности и достоверности.

Смысл же метода состоит в том, чтобы при помощи комплекса определённых действий, таких как мозговые штурмы, интервью и опросы, найти способ определения верного решения. Зиждется метод том, что некоторая группа независимых экспертов гораздо лучше может оценить и предсказать результат, нежели структурированная группа людей. Беря во внимание и то, что независимые эксперты могут даже не знать друг о друге, можно исключить столкновение различных позиций, а также коллективное влияние, обусловленное совместной работой и конформизмом. Плюс к этому, метод может осуществляться где угодно, независимо от места нахождения участников.

В процессе использования Дельфийского метода принимают участие две группы людей:

• Первая группа – это эксперты, представляющие свою точку зрения на исследуемую проблему
• Вторая группа – это аналитики, приводящие мнения экспертов к единому знаменателю

Сам же метод Дельфи подразумевает несколько этапов.

Этапы метода Дельфи

Всего различают три этапа – это предварительный этап, основной этап и аналитический этап.

Предварительный этап

На первом этапе производится подбор экспертной группы. В неё может входить любое количество человек, однако рекомендуется формировать группу из 20 человек и не более.

Основной этап

На втором этапе выполняются следующие шаги:

• Ставится проблема – эксперты получают основной вопрос, а их задачей является разбиение его не несколько более мелких. Аналитики производят отбор самых распространённых вопросов и составляют общий опросник.
• Полученный опросник вновь представляется экспертам. Они должны сообщить, следует ли ещё что-то добавить, хватает ли данных, нет ли какой-то дополнительной информации по проблеме. Таким образом, получается 20 ответов (зависит от количества экспертов) с подробной информацией. Аналитики составляют ещё один опросник.
• Новый опросник снова предоставляется экспертам. Теперь им нужно предложить свои способы решения проблемы и изучить альтернативные позиции остальных экспертов. Здесь производится оценка эффективности, наличия ресурсов, актуальности способов решения. Аналитики выделяют основные мнения экспертов и стараются их сблизить. Если чьи-то мнения идут в разрез с мнением большинства, эти мнения озвучиваются экспертам. В итоге, эксперты могут изменить свои позиции, после чего данный шаг снова повторяется.
• Шаги повторяются снова и снова до тех пор, пока эксперты не придут к консенсусу, и не будет установлено единого мнения. А исследование аналитиками расхождений во мнениях членов экспертной группы может указать на незамеченные до этого тонкости проблемы. В конце концов, выносится общая оценка, и составляются практические рекомендации по решению проблемы.

Аналитический этап

И уже на третьем этапе проверяется согласованность мнений экспертов, анализируются полученные выводы и разрабатываются окончательные рекомендации.

Наряду с представленной структурой Дельфийского метода, существуют и другие модификации. Самая распространённая из них включает в себя бесструктурный этап. Используется данная модификация в том случае, если исследование направлено на поиск чего-либо конкретного, а организаторы исследования не способны сразу же представить проблему в форме специализированных вопросов. В этом случае уже на этапе формулировки проблемы привлекают экспертную группу.

Другая модификация метода Дельфи направлена на то, чтобы сократить время, которое будет затрачено на осуществление аналитического этапа – он называется «Экспресс-Дельфи». С учётом того, что традиционный метод со всеми его достоинствами является довольно трудозатратным и требует для своего применения значительного количества времени, экспресс-метод позволяет сохранить все основные элементы методики при том, что всю процедуру можно осуществить в течение нескольких часов, однако требуется специальная техническая база.

Каждый член экспертной группы на протяжении отведённого временного периода находится за компьютером. Все компьютеры объединены одной общей сетью, которая замыкается на руководителе мероприятия. После того как эксперты предлагают свои решения в ускоренном режиме, аналитики точно так же должны как можно быстрее произвести оценки. Огромную роль в этом процессе играет оперативность в обработке и систематизации материала.

Но у метода Эспресс-Дельф есть и один существенный недостаток: если сравнивать его с классическим методом, эксперты не имеют возможности надлежащим образом обдумать поставленную перед ними задачу, а также объективно оценить точки зрения и доводы других участников. Помимо этого, сложность состоит и в предоставлении специального оборудования. По этой причине, специалисты советуют прибегать к применению обычной вариации Дельфийского метода.

Несмотря на удобство применения метода Дельфи и его эффективность, следует отметить и некоторые его недостатки, не учитывать которые нельзя.

Недостатки метода Дельфи

Во-первых, важно сказать о том, что уже с самого своего появления, т.е. с начала 60-х годов минувшего столетия, метод Дельфи был подвергнут довольно серьёзной критике. В частности, говорилось о том, что:

• Организаторы мероприятия обладают чрезмерно большими полномочиями, по сравнению с экспертами, а значит, экспертов можно считать беззащитными в некотором смысле
• Коллективное мнение далеко не во всех случаях является верным
• Аналитики отбрасывают креативные решения, имеющие наименьшее количество сторонников, а эти решения могут быть самыми эффективными
• Невозможен оперативный анализ, т.к. для осуществления последнего этапа требуется много времени: каждый этап анализа может занимать минимум до 24 часов
• Эксперты склонны проявлять конформизм, испытывая желание и стремясь присоединиться к мнению большинства
• Организаторы имеют возможность манипулировать экспертной группой

Представленные недостатки также предлагалось устранить при помощи следующих средств:

• Организаторы должны подбираться из различных структур и относиться к разным социальным и научным направлениям
• Одну и ту же проблем нужно прогонять через разные группы
• Необходимо учитывать даже самые альтернативные и креативные варианты решения проблемы, хотя бы в качестве дополнения

Метод Дельфи получил широкое распространение на Западе – в своей деятельности его начали применять многие компании, в которых уделяется огромное внимание вопросам стратегического планирования. В частности, это компании, занятые преимущественно в области технологических разработок, бизнеса и футурологии. В России же метод применялся и применяется крайне редко, т.к. во-первых, в стране не существует такой традиции и специалистов по данному методу, нет независимых аналитических структур, а сама аналитическая деятельность на протяжении долгого времени носила централизованный характер, другими словами, эксперты стремились подстроиться под мнение большинства.

Однако это ни в коей мере не умаляет достоинств Дельфийского метода, и если вам в вашей жизни и деятельности необходимо узнать, при помощи какого способа можно решить какую-либо проблему и оценить эффективность этого способа, вы можете смело использовать метод Дельфи. Ко всему прочему, его можно считать не только эффективным, но и креативным подходом к решению любых проблем.

 

4brain.ru

Метод Дельфи

Метод Дельфи – это метод быстрого поиска решений, основанный на их генерации в процессе «мозговой атаки», проводимой группой специалистов, и отбора лучшего решения, исходя из экспертных оценок.

Метод Дельфи используется в тех случаях, когда требуется оценка эффективности решений. Он применим, как в повседневной жизни, так и в профессиональной сфере деятельности.

Метод Дельфи позволяет учитывать мнение разных людей, имеющих отношения к тому или иному вопросу, с помощью последовательного объединения соображений, предложений и результатов.

Вследствие всех этих действий становится возможным прийти к какому-либо конкретному соглашению.

Авторами данного метода считаются Олаф Хэлмер, Николас Решер и Норман Дэлки, работавшие в стратегическом исследовательском центре «RAND». Он был разработан в 50-60-е годы 20 века в США.

Главной задачей Дельфийского метода было прогнозирование воздействия научных разработок будущего на способы ведения военных действий. Свое название метод получил в честь известного Дельфийского оракула.

Особенности метода Дельфи

Помня о том, что этот метод позволяет проводить экспертное оценивание, главными его особенностями является анонимность, заочность и многоуровневость.

Основной предпосылкой служит идея о том, что если соответствующим образом проанализировать индивидуальные оценки экспертов, в том или ином вопросе, можно получить общее мнение, которое окажется предельно надежным и достоверным.

Мораль метода Дельфи заключается в том, что при помощи определенных приемов, таких как мозговые штурмы, опросы или интервью, удается отыскать способ для определения правильного решения.

То есть группа независимых друг от друга экспертов может гораздо лучше дать оценку той или иной ситуации, нежели структурированная группа людей. Поскольку участники могут даже не знать о существовании друг друга, – это полностью исключает столкновение их интересов и мнений.

Еще одной положительной стороной метода Дельфи является то, что он может проводиться где угодно, независимо от местонахождения его участников.

В ходе использования данного метода принимают участие две группы людей:

• 1-я группа – это эксперты, имеющие свою точку зрения по какому-то вопросу.
• 2-я группа – это аналитики, приводящие все мнения к единому знаменателю.

Этапы метода Дельфи

Дельфийский метод состоит из нескольких этапов. Рассмотрим их по порядку.

Предварительный этап

На этом этапе происходит отбор экспертной группы. Он может состоять из разного количества людей, но лучше всего, если их количество не будет превышать 20.

Основной этап

• Постановка проблемы. Экспертам предоставляют на рассмотрение главный вопрос, а их задача заключается в том, чтобы разбить его на несколько более мелких. Аналитики отбирают наиболее распространенные вопросы и составляют общий опросник.
• Сформированный опросник снова представляется на рассмотрение экспертам. Им следует подумать, что можно добавить в него или, как можно еще дополнить информацию в отношении проблемы. В результате этого получается 20 ответов (в том случае если было 20 экспертов) с подробной информацией. Затем аналитики составляют еще один опросник.
• Новый опросник заново предоставляется на рассмотрение экспертам. На этом этапе они должны предоставить свои способы решения поставленной перед ними задачи и проанализировать мнение своих коллег. В случае если чьи-то мнения расходятся с мнением большинства, – они должны быть озвучены. В результате этого, эксперты вполне могут изменить свое мнение, после чего данный этап повторяется вновь.
• Такие шаги повторяются до тех пор, пока экспертная группа не придет к какому-то единому мнению. В это время аналитики тщательно следят за размышлениями экспертов, и при необходимости могут указывать на какие-либо ошибки или недочеты с их стороны. В самом конце подводится итог и составляются практические рекомендации по решению поставленной задачи.

Аналитический этап

На третьем этапе проверяется согласованность мнений каждого отдельно взятого эксперта. Анализируются полученные результаты и разрабатываются окончательные рекомендации.

Экспертные методы Дельфи

Помимо основного принципа действия метода Дельфи, существуют и другие его модификации. Самая известная из них включает в себя бесструктурный этап.

Она полезна в том случае, если исследование направлено на поиск чего-то конкретного, а авторам исследования не удается сразу увидеть проблему в форме специализированных вопросов. В этом случае уже на этапе формирования задачи привлекают экспертов.

Также существует «Экспресс-Дельфи». Этот метод используется для того, чтобы сократить время, затраченное на осуществление аналитического этапа.

То есть, в таком случае получается сохранить основополагающие элементы методики, и одновременно с этим завершить весь процесс в течение нескольких часов. Правда для этого требуется специальная техническая база.

Каждый эксперт на протяжении определенного времени находится за своим компьютером. При этом все компьютеры подчинены руководителю мероприятия.

После того, как эксперты предлагают свои решения в ускоренном режиме, аналитикам, как и раньше, необходимо быстро оценивать действия экспертной группы. Важную роль в таком процессе играет скорость обработки материала.

Однако у метода «Экспресс-Дельфи» есть и свои недостатки. Из-за оперативности всех действий, экспертам не предоставляется возможности хорошо обдумать поставленную перед ними проблему, а также оценить мнение своих коллег.

Недостатки метода Дельфи

Невзирая на то, что метод Дельфи очень эффективен в своем роде, у него есть некоторые недостатки.

После того как он был разработан в 60-х годах прошлого века, его сразу же подвергли серьезной критике. Вот некоторые из основных претензий критиков:

• У организаторов мероприятия, по отношению к экспертной группе, гораздо больше полномочий. Из-за этого эксперты в каком-то смысле остаются беззащитными.
• Мнение коллектива далеко не всегда является правильным.
• Аналитики могут отвергнуть некоторые креативные решения, имеющие меньшее количество сторонников, а ведь они в свою очередь могут быть наиболее эффективными.
• Исключен оперативный анализ, поскольку для осуществления последнего этапа, необходимо много времени. Каждый этап анализа может занимать около суток.
• Эксперты могут поддаваться давлению группы, что в свою очередь может лишить их собственного мнения.
• Организаторы могут манипулировать экспертами.

Выявив перечисленные недостатки метода Дельфи, специалистами были предложены разные варианты из устранения:

• Организаторы должны принадлежать к разным социальным и научным направлениям.
• Одну и ту же задачу нужно рассматривать с разными группами.
• Важно не забывать о креативных вариантах решения задач.

Метод Дельфи очень популярен на Западе, в то время как в России он применялся крайне редко. В основном его используют крупные организации, в которых уделяется серьезное внимание вопросам стратегического планирования.

Метод Дельфи способен помочь решить разные вопросы, как в жизни отдельно взятого человека, так и какой-либо организации. С его помощью можно добиться оригинального решения абсолютно любых проблем и задач.

Теперь вы знаете, что такое метод Дельфи, и как он работает. Если вам понравилась данная статья – поделитесь ею в социальных сетях.

Если же вам вообще нравится психология, интересные факты и развитие личности – подписывайтесь на сайт InteresnyeFakty.org. С нами всегда интересно!

Понравился пост? Нажми любую кнопку:

Интересные факты:

interesnyefakty.org

Метод Дельфи, его практическое применение

Метод Дельфи, его практическое применение

Введение

Метод «Дельфи» — метод быстрого поиска решений, основанный на их генерации в процессе мозговой атаки, проводимой группой специалистов, и отбора лучшего решения исходя из экспертных оценок. Дельфийский метод используется для экспертного прогнозирования путем организации системы сбора и математической обработки экспертных оценок.

Метод Дельфи (другие названия: «Дельфийский метод», «Метод дельфийского оракула») появился в 1950-1960 годы в США для исследования военно-стратегических и военно-технических проблем. Разработан корпорацией RAND, авторами являются О. Хелмер, Т. Гордон, Н. Долки.

Метод Дельфи является методом экспертных оценок.

Метод экспертных оценок — метод анализа и оценки экономических процессов, выработки управленческих решений на основе мнения квалифицированных экспертов. Включает генерацию идей в процессе обсуждения, проводимого группой специалистов, и отбора лучшего решения исходя из экспертных оценок. Метод используется для экспертного прогнозирования. Этот метод применяется при неопределенности значимости факторов.

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и чаще всего используется в технологическом прогнозировании, данные которого применяются потом в планировании производства и сбыта продукции.

Суть метода Дельфи

Целью метода Дельфи является получение согласованной максимально достоверной информации для принятия правильного решения.

Метод Дельфи — способ выбора и оценки решения по проблемам, по которым ощущается недостаток информации.

Метод Дельфи позволяет учесть независимое мнение по обсуждаемому вопросу всех участников группы экспертов и прийти к единому решению, последовательно объединяя идеи, предложения и выводы.

Данный метод заключается в последовательном осуществлении процедур, направленных на формирование группового мнения по различным вопросам.

Метод Дельфи основывается на принципе, гласящем, что независимые эксперты (в большинстве случаев несвязанные и даже не знающие друг о друге) могут гораздо лучше оценить и предсказать результат, нежели чем специально организованный коллектив.

Выявление преобладающих суждений с помощью метода Дельфи позволяет сблизить точки зрения экспертов. Вместе с тем учитывается, что, несмотря на сближение оценок, различие будет существовать и в конце опроса.

Этапы

дельфи мозговой атака экспертный

Метод Дельфи осуществляется в несколько этапов:

.Предварительный. На этом этапе формируют группу экспертов, состоящую из специалистов, компетентных в обсуждаемом вопросе, и организационную (рабочую, аналитическую) группу для сбора и обобщения мнений экспертов.

.Основной. На этом этапе экспертам рассылается вопрос и предлагается разделить его на подвопросы. Организационная группа отбирает наиболее часто встречающиеся, таким образом составляется общий опросник, который рассылается экспертам. Далее экспертам предлагается ответить на вопросы: можно ли добавить ещё что-то; достаточно ли информации; есть ли дополнительная информация по вопросу. В итоге на основе их ответов, где есть дополнительные аспекты, запрос информации, предоставленная информация, составляется следующий опросник, который вновь рассылается экспертам, для того, чтобы они дали свой вариант решения и рассмотрели наиболее крайние точки зрения, высказанные другими экспертами. Эксперты должны оценить проблему по аспектам: эффективность, обеспеченность ресурсами, в какой степени соответствует изначальной постановке задачи. Таким образом выявляются преобладающие суждения экспертов, сближаются их точки зрения. Всех экспертов знакомят с доводами тех, чьи суждения сильно отличаются от мнения большинства. После этого все эксперты могут менять мнение, а процедура повторяется до тех пор, пока не достигается согласованность между экспертами, или не устанавливается отсутствие единого мнения по проблеме. При изучении причины расхождений в оценках экспертов выявляются незамеченные ранее аспекты проблемы, и фиксируется внимание на вероятных последствиях развития анализируемой проблемы или ситуации. Обычно проводится три этапа, но если мнения сильно расходятся — то больше.

.Аналитический. На этом этапе проводится проверка мнений экспертов, анализ полученных выводов, обработка результатов статистическими методами, обобщаются экспертные заключения, разрабатываются и выдаются конечные практические рекомендации по поставленной проблеме.

Схематически процедуру экспертного оценивания опроса по методу Дельфи можно изобразить следующим образом:

Особенности метода Дельфи

Особенностями метода Дельфи являются анонимность и заочность регулируемая обратная связь и многоуровневость, групповой ответ.

Анонимность и заочность процедур, используемых в методе Дельфи, обеспечивают отсутствие влияния наиболее авторитетных участников опроса на ответы остальных экспертов, исключает групповое влияние мнения большинства, даёт возможность проводить опрос экстерриториально, с помощью применения специальных вопросников, электронной или обычной почты, обеспечения контактом экспертов с ЭВМ.

Многоуровневые опросы дают более надежный и объективный результат. Регулируемая обратная связь уменьшает влияние индивидуальных и групповых интересов, не связанных с решаемыми проблемами с помощью многократности опросов и обработки результатов статистическими методами и сообщения их экспертам. С помощью статистических методов определения группового ответа можно уменьшить статистический разброс индивидуальных оценок и получить групповой ответ, в котором правильно отражено мнение каждого эксперта.

При проведении опроса по методу Дельфи необходимо соблюдать несколько условий:

-формулировки анкеты должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы;

-поставленные вопросы должны допускать возможность выражения ответа в виде числа;.

-эксперты должны располагать достаточной информацией для того, чтобы дать оценку;

-ответ на каждый вопрос (оценка) должен быть обоснован экспертом;

-группы экспертов должны быть стабильными и численность их должна удерживаться в благоразумных рамках;

-время между турами опросов должно быть не более месяца;

-число туров должно быть достаточным, чтобы обеспечить всех участников возможностью ознакомиться с причиной той или иной оценки, а также и для критики этих причин;

-должен проводиться систематический отбор экспертов;

-необходимо иметь самооценку компетенции экспертов по рассматриваемым проблемам;

-нужна формула согласованности оценок, основанная на данных самооценок.

Практическое применение метода Дельфи

Метод Дельфи широко используется в стратегическом планировании, применим практически в любой ситуации, требующей прогнозирования. Данный метод исследования применяется в планировании в таких областях, как техника, бизнес, футурология, исследование космоса и др. Таким образом, можно сделать вывод о том, что метод Дельфи наиболее часто используется именно в областях, связанных с научно-техническим прогрессом.

Пример 1

Политическая сфера

Задача: дать максимально достоверный прогноз о том, какие шансы на лидерство в результате выборов депутатов Государственной думы Федерального собрания Российской Федерации VI созыва будут у политической партии Единая Россия.

Решение методом Дельфи:

.Формирование группы экспертов из 10 человек, которые являются представителями самых разных областей политической сферы (политические советник, журналист, политический публицист, партийный функционер, специалист в области избирательных технологий, независимый аналитик и т.д.), что делает исследование более объективным. Формирование аналитической группы.

.Экспертам по электронной почте рассылается первый вариант анкеты с вопросом «какие шансы на лидерство в результате выборов депутатов Государственной думы Федерального собрания Российской Федерации VI созыва будут у политической партии Единая Россия» и базовая информация по этой проблеме. Шансы партии нужно представить в виде цифр в диапазоне от 0 до 100.

.Эксперты дают себе индивидуальную самооценку в баллах в диапазоне от 0 до 10 и отвечают на вопрос, и отправляют свои ответы аналитикам. Экспертиза показала, что разброс ответов слишком велик. На основе полученных ответов рабочая группа составляет новую расширенную анкету.

.В течение 2 последующих туров эксперты отвечают на вопросы, запрашивают информацию, составляют дополнительные подвопросы, знакомятся с противоположными мнениями. Таким образом формируется окончательный вариант анкеты, с наименьшим разбросов в ответах экспертов. Ответы таковы:

№ эксперта12345678910Индивидуальная самооценка109789510978Шансы Единой России1001008090100801008090100

.Далее аналитическая группа обобщает мнения экспертов с помощью формулы:

где i=1…m — номера экспертов, m — число экспертов;i — оценка (в баллах), выставленная i-м экспертом данному элементу;

Yi — индивидуальная самооценка i-го эксперта.

медиана (Me) служит характеристикой группового ответа, при четном количестве элементов ранжированного ряда определяется как средняя арифметическая величина, которая рассчитывается из двух смежных величин. Me=(100+90):2=95;

область доверительности (предпочтительный интервал квартилей) — показатель разброса индивидуальных оценок — рассчитается следующим образом:

определяется минимальная и максимальная оценка из набора экспертизы — 80 и 100 соответственно, определяется квартиль (25% от начала и конца ряда) — 5, т.е. верхний квартиль (Qверх.) — верхняя граница области доверительности — равен 100- Qверх.=95, а нижний (Qниж.) — нижняя граница области доверительности — равен 100- Qниж.=85, отрезок Qверх. Qниж. — область доверительности, медиана Me — групповой ответ.

.Область доверительности заняла небольшой интервал, что указывает на то, что разброс во мнениях экспертов очень мал. И аналитическая группа, и группа экспертов довольны результатом, и его принимают как окончательный. Итоговое обобщенное мнение является основой для максимально достоверного прогноза о том, какие шансы на лидерство в результате выборов депутатов Государственной думы Федерального собрания Российской Федерации VI созыва будут у политической партии Единая Россия: шансы высоки, а именно 95 баллов (по стобальной шкале).

Пример 2

Духовная сфера

С помощью опроса по методу Дельфи сотрудники Нижегородского государственного художественного музея могут приблизительно узнать, насколько интересна будет нижегородцам предстоящая выставка литографий Сальвадора Дали из частной итальянской коллекции, какие группы населения она привлечет.

Пример 3

Экономическая сфера

На Сормовском хлебозаводе решено производить новый диетический хлеб. Метод Дельфи поможет определить, насколько велик будет спрос на этот товар и какой доход он принесет.

Пример 4

Социальная сфера

Минздравсоцразвитию необходимо составить список бесплатных лекарств для обеспечения ими населения. Анализ по методу Дельфи поможет узнать в каких лекарствах нуждается большинство людей, какие наиболее эффективны и т.д.

Заключение

Метод Дельфи — это систематический способ обобщения оценок экспертов.

Метод Дельфи — это групповой метод, при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет, исключая личные контакты экспертов и коллективные обсуждения, т.е. анонимно. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Среди достоинств метода Дельфи можно выделить следующие: этот метод способствует выработке независимости мышления членов группы и обеспечивает спокойное и объективное изучение проблем, которые требуют оценки.

В тоже время, проведение опроса по методу Дельфи требует достаточно много времени и организационных усилий, а также наблюдается некоторая субъективность оценок.

Источники и литература

Монографии

Авдулов П.В., Гойзман Э.И., Кутузов В.А. и др. Экономико-математические методы и модели для руководителя. — М.: Экономика, 1984. — 232 с.

Агафонов В.А. Анализ стратегий и разработка комплексных программ. — М.: Наука, 1990. — 216с.

Бешелев С.Д., Гурвич Ф.Г. Математико-статистические методы экспертных оценок. 2-е изд., перераб. и доп. — М.: Статистика, 1980. — 264 с.

Математические методы в планировании отраслей и предприятий / Под ред. И.Г. Попова. — М.: Энергия, 1973. — 376 с.

Учебники и учебные пособия

Бобровников Г.Н., Клебанов А.И. Прогнозирование в управлении техническим уровнем и качеством продукции: Учеб. пособие. — М.: Изд-во стандартов, 1984. — 232с.

Электронные ресурсы

Энциклопедия Экономиста. Web: #»justify»>Кузьмин А.М. Метод Дельфи. Электронный ресурс // Inventech, Центр креативных технологий. — М. Web: http://inventech.ru/pub/methods/metod-0013.

diplomba.ru

Метод Дельфи

МИНИСТЕРСТВО ЭКОНОМИЧЕСКОГО РАЗВИТИЯ И ТОРГОВЛИ РОССИЙСКОЙ ФЕДЕРАЦИИ

НИЖЕГОРОДСКИЙ КОММЕРЧЕСКИЙ ИНСТИТУТ

Реферат на тему:

МЕТОД «ДЕЛЬФИ»

Выполнила:

Студентка 4-1ЭФ гр.

Мальцева Я.В.

Проверила:

Желонкин В.В.

Нижний Новгород

Введение

Метод Дельфи — многоэтапный метод, предусматривающий первоначальное изолированное вынесение экспертами своих суждений и дальнейшую многократную их корректировку на базе ознакомления каждого эксперта с суждениями других экспертов до тех пор, пока величина разброса оценок не будет находиться в рамках заранее устанавливаемого желаемого интервала варьирования оценок.

Получаемые посредством данных методик оценки носят статичный и одноразовый характер, в результате чего возникает необходимость повторного обращения к экспертам при составлении прогноза доли рынка на последующие периоды. Кроме того, метод внутреннего и внешнего экспертного прогнозирования характеризуется определенной степенью субъективности.

Надежность метода «Дельфи» считается высокой при прогнозировании на период как от 1 до 3 лет, так и на более отдаленный период времени. В зависимости от цели прогноза для получения экспертных оценок может привлекаться от 10 до 150 экспертов.

Качественный подход позволяет оценить специфику каждой конкретной ситуации. В некоторых случаях внимательное исследование различных специфических элементов, определяющих ситуацию, может быть более важным, чем проведение систематической количественной оценки. Большим недостатком этого метода является чрезмерная субъективность оценок. Старые стереотипы иностранного общества могут сыграть роковую роль при принятии решений. Дж. Саймон оценил этот подход как “спорадический, основанный на селективном, неконтролируемом восприятии или идеологических и личностных пристрастиях”.

Область применения экспертных методов.

Методы экспертных оценок нашли широкое применение в прогнозировании и перспективном планировании, там, где отсутствуют достаточно достоверные статистические данные об изучаемом вопросе, где имеется несколько вариантов решений и необходим выбор наиболее предпочтительного из них. Также эти методы применяются при разработке новых программ в отраслях промышленности, подверженных сильному влиянию новых открытий в фундаментальных науках.

При анализе и прогнозировании экономической ситуации возникает ряд трудностей:

-невозможность точного предсказания последствий принимаемых решений;

-неповторяемость и невозможность экспериментальной проверки предполагаемого хода и результатов решения;

-наличие факторов, которые не поддаются контролю со стороны принимающего решения;

-наличие нескольких возможных путей решения и необходимость выбора одного из них;

-неполнота исходной информации, на основе которой приходится формировать проблему и принимать решение (часто исходная информация имеет качественный характер и не поддается количественному измерению).

Предпосылками использования экспертизы являются:

-недостаточность и недостоверность информации о состоянии тех или иных условий, в которых осуществляется создание и развитие продукции;

-стохастический (вероятностный) характер объекта информации;

-сложность и новизна проблем.

Организация экспертизы проводится в несколько этапов:

1.Определение целей и задач экспертизы.

2.Выбор процедуры проведения экспертизы.

3.Отбор и формирование группы экспертов.

4.Организация самой процедуры экспертизы;

5.Обработка информации.

6.Принятие решения по результатам экспертизы.

Определение целей и задач экспертизы

Сначала ставится проблема – определяется предыстория, рассматриваются доводы в пользу ее решения, происходит обсуждение со всеми заинтересованными лицами. Главное здесь – распознать мнимые проблемы. Поэтому при постановке проблемы необходима гласность и обсуждение.

После того как проблема обоснована определяются границы ее существования, совокупность внутренних и внешних факторов, влияющих на проблему. Для этого выделяется центральный вопрос и расщепляется на подвопросы. При этом пытаются ограничить поле только теми вопросами, без которых нельзя получить ответ на центральный вопрос. Далее формулируются цели и задачи реализации выбранной проблемы. Таким образом, выбираются главные события, факторы, центральные и второстепенные вопросы.

Необходимо иметь в виду – с увеличением детализации – увеличивается точность экспертизы, НО снижается согласованность мнений экспертов.

Организаторы проведения экспертизы выбирают процедуру осуществления экспертизы. Известны различные подходы к этому вопросу. Можно проводить

—индивидуальный или групповой опрос,

-очный или заочный;

-открытый или закрытый.

Индивидуальный опрос заключается в интервьюировании эксперта и позволяет максимально использовать способности и знания каждого эксперта.

Групповой – при этом методе эксперты могут обмениваться мнениями, могут учесть упущенный момент каждым из них, скорректировать свою оценку. Недостаток группового мнения заключается в сильном влиянии авторитетов на мнения большинства участников экспертизы, в трудности публичного отказа от своей точки зрения, психологической несовместимости некоторых участников экспертизы.

Из методов группового опроса используют:

различные модификации метода Дельфи.

Методы Дельфи характеризуются следующими чертами:

· анонимность мнений экспертов;

· регулируемая обработка, связь, которая осуществляется аналитической группой за ряд туров опроса, причем результаты каждого тура сообщаются экспертам;

· групповым ответом, который получается с помощью статистических методов и отображает обобщенное мнение участников экспертизы

Метод Дельфи является наиболее формальным из всех методов экспертного прогнозирования и наиболее часто используется в технологическом прогнозировании, данные которого используются затем в планировании производства и сбыта продукции. Это групповой метод при котором проводится индивидуальный опрос группы экспертов относительно их предположений о будущих событиях в различных областях, где ожидаются новые открытия или усовершенствования.

Опрос проводится с помощью специальных анкет анонимно, т.е. личные контакты экспертов и коллективные обсуждения исключаются. Полученные ответы сопоставляются специальными работниками, и обобщенные результаты снова направляются членам группы. На основе такой информации члены группы, по-прежнему сохраняя анонимность, делают дальнейшие предположения о будущем, причем этот процесс может повторяться несколько раз (так называемая многотуровая процедура опроса). После того как начинает появляться совпадение мнений, результаты используются в качестве прогноза.

Применение метода Дельфи можно проиллюстрировать на следующем примере №1 : компания, занимающаяся морским нефтяным промыслом хочет получить информацию о том, когда можно будет использовать роботов вместо водолазов для проверки платформ под водой. Для начала прогнозирования по этому методу компания должна войти в контакт с рядом экспертов. Эти эксперты должны быть представителями самых разных областей данной отрасли промышленности, включая водолазов, инженерно-технических работников из нефтяных компаний, капитанов кораблей, инженеров по техобслуживанию и конструкторов роботов. Им объясняется стоящая перед компанией задача, и каждого эксперта спрашивают, когда по его мнению можно будет заменить водолазов роботами. Первые ответы дадут, вероятно, очень большой разброс данных, например, от 2000 до 2050 года. Эти ответы обрабатываются и возвращаются экспертами. При этом каждого эксперта просят пересмотреть свою оценку в свете ответов других экспертов. После повторения этой процедуры несколько раз мнения могут сблизиться, так что около 80% ответов даст срок от 2005 до 2015 года, что будет достаточным для целей планирования производства и реализации роботов.

Метод Дельфи назван в честь дельфийского оракула в Древней Греции. Он разработан Олафом Хельмером, видным математиком из корпорации “РЭНД”, и его коллегами и вероятно поэтому, по сравнению с другими творческими подходами, дает достаточную точность прогноза.

Метод Дельфи относится к классу количественных методов групповых экспертных оценок. Опрос экспертов проводится в 3-4 тура, состоящих из серии анкет, вопросы конкретизируются от тура к туру. Для проведения этого метода необходимо также создать аналитическую группу, которая после каждого тура производит статистическую обработку полученной информации.

Прежде всего, аналитики определяют область предпочтительных количественных значений объектов.

После такой проверки проводится очередной тур. Процедуру экспертного опроса по методу «Дельфи» можно выделить в несколько этапов.

ЭТАП 1. ФОРМИРОВАНИЕ РАБОЧЕЙ ГРУППЫ

Задача рабочей группы заключается в организации процедуры экспертного опроса.

ЭТАП 2. ФОРМИРОВАНИЕ ЭКСПЕРТНОЙ ГРУППЫ.

В соответствии с методом «Дельфи» группа экспертов должна включать 10-15 специалистов в данной области. Компетентность экспертов определяется путем анкетирования, анализом уровня реферирования (количества ссылок на работы данного специалиста), использованием листов самооценки.

ЭТАП 3. ФОРМУЛИРОВАНИЕ ВОПРОСОВ

Формулировки вопросов должны быть четкими и однозначно трактуемыми, предполагать однозначные ответы.

ЭТАП 4. ПРОВЕДЕНИЕ ЭКСПЕРТИЗЫ

Метод «Дельфи» предполагает повторение нескольких шагов проведения опроса.

ЭТАП 5. ПОДВЕДЕНИЕ ИТОГОВ ОПРОСА

mirznanii.com

Метод дельфи (примеры)

От эффективной маркетинговой деятельности во многом зависит процветающее будущее предприятия. Метод дельфи представляет собой один из наиболее популярных методов экспертных оценок, позволяющих осуществлять качественное прогнозирование. [contents] [ads_top]

Стоит отметить, что все прогнозы базируются на экспертных мнениях участников, которые обладают профессиональным, практическим или же научным опытом.

Метод Дельфи был разработан такими американскими исследователями, как Т. Гордон и О.Хелмер, и впервые был применен компанией «Райд корпорейшен» в конце 50-х годов прошлого века с целью спрогнозировать технологическое развитие. По принципу действия данный подход напоминает знаменитый Дельфийский Оракул, откуда метод позаимствовал такое название.

Метод дельфи

Сущность метода заключается в осуществлении индивидуальных опросов, которые характеризуются многоуровневой структурой. Стоит отметить, что выбранные эксперты должны заполнить специально разработанные анкеты-опросники, которые будут обработаны в электронном режиме. Таким образом, после серий экспертных действий создается обобщенное мнение, которое отличается большей эффективностью и правильностью, нежели отдельное мнение каждого участника.

Какие преимущества метода?

Наиболее формальный метод из всех способов экспертного прогнозирования обладает рядом преимуществ:

• Гарантирует абсолютную анонимность экспертных мнений.
• Обеспечивает оперативную обработку оценок участников благодаря статическим методам.
• Предоставляет возможность регулировать обработку результатов каждого из туров опроса.

Следует учесть, что результаты опросов сообщаются экспертам после проведения каждого тура. Наиболее высокая надежность метода прослеживается, когда прогнозирование осуществляется на период от одного до трёх лет. Учитывая разнообразие возможных целей прогноза, к исследованию могут привлекаться большое количество экспертов, начиная от десяти человек и заканчивая стапятидесятью. Однако, несмотря на существенные преимущества, метод Дельфи обладает таким недостатком, как субъективность экспертных мнений участвующих.

Преимущества метода

Независимость экспертов является ключевой особенностью данного подхода, позволяя изначально исключить социопсихологическую составляющую. По этой причине окончательные выводы формируются не на эмоциях, а на рациональных данных. Специфика проведения позволяет предотвратить возникновение авторитетного давления, внутренних споров, а также стремления принять сторону большинства.

Какие существуют этапы проведения метода?

Стоит отметить, что для метода Дельфи является характерным прохождение следующих этапов:

1. Первый этап заключается в подборе экспертной группы.
2. Второй этап включает в себя следующие шаги:

• Благодаря рассылке, осуществленной организационной группой, каждый из участников получает тему вопроса и возможность разработать план исследования, вследствие чего возникают многочисленные вопросники, которые составили различные эксперты.
• Затем организационная группа составляет список из пунктов, которые чаще всего встречались в вопросниках.
• Каждый эксперт получает готовый список. Теперь всем участникам следует оценить его и составить собственное мнение, касающееся полноты плана и уровня его оптимальности.
• Получив результаты от участников, группа составляет второй опросник в соответствии с экспертными рекомендациями.
• Затем эксперты должны проанализировать проблему с учетом готового плана и сформировать собственные выводы.
• После этого организационная группа проводит работу, чтобы свести воедино все результаты, вследствие чего выбираются точки зрения, которые встречаются чаще всего и которые максимально отличаются.

Стоит отметить, что механизм действий будет повторяться до того времени, пока не сформируется единое мнение всех участников. В конце проведения метода Дельфи все результаты будут оформлены, а окончательные выводы сделаны. Также возможно выдвижение рекомендаций. Данный подход к прогнозированию представляет собой поэтапное формирование самого лучшего и единого экспертного мнения среди участников.

marketing-now.ru

Метод Дельфи · Loginom Wiki

Разделы: Математические алгоритмы

Один из широко используемых методов прогнозирования, основанный на групповых экспертных оценках. Представляет собой ряд последовательных процедур, направленных на подготовку и обоснование прогноза, которые характеризуются анонимностью (независимостью ответов экспертов) опроса, регулируемой обратной связью между результатами опроса предыдущего этапа и подготовкой их нового варианта, а также групповым характером ответа.

Регулируемая обратная связь осуществляется путем проведения нескольких туров опроса, на каждом из которых ответы обрабатываются с применением математико-статистических методов и результаты сообщаются анонимно. Групповой ответ формируется путем обработки и анализа результатов ответов экспертов. Критерием окончания процесса разработки прогноза, как правило, служит «близость» мнений экспертов.

В первом туре они дают ответы на поставленные вопросы, как правило, без аргументации. Ответы обрабатываются, определяются их статистические характеристики (среднее, среднеквадратическое отклонение, минимальное и максимальное значения ответов), и результаты обработки сообщаются экспертам. После этого проводится второй тур опроса, в ходе которого эксперты должны объяснить, почему они изменили или не изменили своего мнения.

Данные обработки результатов второго тура опроса и аргументация ответов с сохранением анонимности снова сообщаются экспертам перед проведением третьего тура опроса. Последующие туры осуществляются по такой же схеме. Подобная организация экспертизы позволяет экспертам учесть в своих ответах новые для них обстоятельства и в то же время избавляет их от давления при отстаивании своей позиции.

Как правило, на практике оказывается достаточным проведение четырех туров опросов. После чего мнения всех экспертов либо сближаются, либо образуют две (или больше) группы существенно различающихся мнений. В первом случае достигнутый результат со значительной степенью обоснованности может быть рассмотрен в качестве прогнозного решения, во втором — необходимо продолжить исследование проблем развития объекта с учетом выдвигаемой различными группами аргументации.

Несомненным преимуществом метода по сравнению с методами, основанными на обычной статистической обработке результатов индивидуальных опросов, является то, что он позволяет уменьшить колебания по всей совокупности индивидуальных ответов, ограничивает колебания внутри групп. При этом, как показывают проводимые эксперименты, наличие малоквалифицированных экспертов оказывает менее сильное влияние на групповую оценку, чем простое усреднение результатов ответов, поскольку ситуация помогает им исправить ответы за счет получения новой информации от своей группы.

Существует несколько модификаций метода Дельфи, в которых основные принципы организации экспертизы имеют много общего. Различия связаны с попытками усовершенствовать метод за счет более обоснованного отбора экспертов, введения схем оценки их компетентности, улучшенных механизмов обратных связей и т.п. Для удобства обработки информации все модификации, как правило, предполагают возможность выражения ответа в виде числа, количественной оценки.

Некоторые недостатки метода Дельфи связаны с нехваткой времени, которое отведено эксперту на обдумывание проблемы. В этом случае эксперт может согласиться с мнением большинства, чтобы уйти от необходимости объяснения, в чем заключается отличие его решения от остальных вариантов. Эти недочеты устраняются совершенствованием организации экспертиз путем создания автоматизированных систем обработки результатов опроса.

Техническая реализация такой системы основана на использовании вычислительной техники, которая обеспечивает представление вопросов экспертам, сбор и обработку результатов ответов, запрос и выдачу аргументации и другой необходимой информации для подготовки ответов.

wiki.loginom.ru