Тема 3. Современные методы прогнозирования 


Мы поможем в написании ваших работ!



ЗНАЕТЕ ЛИ ВЫ?

Тема 3. Современные методы прогнозирования



Задание 5. Классификация методов прогнозирования.

Методические указания:

1. Под методами прогнозирования следует понимать совокупность приемов и способов мышления, позволяющих на основе анализа ретроспективных данных, экзогенных (внешних) и эндогенных (внутренних) связей объекта прогнозирования, а также их измерений в рамках рассматриваемого явления или процесса вывести суждения определенной достоверности относительно его (объекта) будущего развития.

Рисунок 4 – Основные методы прогнозирования

Задание 6. Методы индивидуальных экспертных оценок

Условия задания: Дайте экспертную оценку проблемной ситуации с использованием методов индивидуальных экспертных оценок. Необходимо выявить наиболее важный показатель для повышения эффективности природоохранных мероприятий на основе экспертной оценки с учетом профессионализма экспертов. Рассчитайте меру согласованности экспертов.

Методические указания: 1. Методы индивидуальных экспертных оценок предполагают, что каждый эксперт дает свою личную оценку вероятности события. Такие оценки используются при решении узких научных или практических проблем. Их дают эксперты независимо друг от друга.

2. Различают следующие методы индивидуальных экспертных оценок:

2.1 Интервью. Это частная беседа организатора прогнозной деятельности с экспертом. Организатор заранее разрабатывает программу в виде вопросов по перспективному развитию прогнозируемого объекта. Эксперт экспромтом должен дать заключение по самым разным вопросам.

2.2 Аналитические записки. При использовании этого метода эксперт индивидуально проводит все необходимые на его взгляд разработки по анализу и прогнозированию объекта. Он может иметь доступ к необходимой информации, справочной литературе, результатам различных исследований. Свои результаты в виде основных доказательных выводов эксперт направляет организатору разработки прогнозов в форме аналитической записки.

2.3 Анкетирование. При использовании данного метода необходима разработка анкеты и формирование вопросов в виде системы, к которой предъявляются следующие требования: применение стандартизированной терминологии; отсутствие смысловой неопределенности в формулировке вопросов; целевое соответствие объекту прогнозирования; удобство для автоматической обработки; обеспечение достижения цели прогнозирования. В анкете могут быть закрытые и открытые вопросы. Из анкет делается репрезентативная выборка, что позволяет после их обработки иметь выводы по проблеме.

2.4 Построение сценариев. Метод основан на определении логики процесса или явления во времени при различных условиях. Метод предполагает установление последовательности событий, развивающихся при переходе от существующей ситуации к будущему состоянию объекта. Подготовка сценария поручается высококвалифицированному эксперту, который, в свою очередь, использует метод объединения независимых прогнозов и метод согласования мнений экспертов. Если понимать сценарий как описание картин будущего с учетом правдоподобных предположений, то для объективного прогноза необходимо иметь несколько сценариев развития событий (оптимистический, пессимистический, средний). Наиболее вероятным или ожидаемым является средний сценарий.

2.5 Дерево целей (прогнозный граф). Метод позволяет разбивать основную задачу прогнозирования на подзадачи и создавать систему «взвешенных» по экспертным оценкам связей. Для этой цели может быть использована математическая теория графов. Граф – это фигура, состоящая из точек (вершин) и соединяющих их отрезков (ребер). Дерево целей – это граф-дерево, выражающее отношение между вершинами - этапами или проблемами достижения цели. Каждая вершина представляет собой цель для всех исходящих из нее ветвей. Метод предполагает выделение нескольких структурных или иерархических уровней. Каждая цель верхнего уровня должна быть представлена в виде подцелей следующего уровня таким образом, чтобы объединение понятий подцелей полностью определяло понятие исходной цели.

Решение: 1.Необходимо сформировать экспертную группу для выявления наиболее важного показателя для повышения эффективности природоохранных мероприятий на основе экспертной оценки с учетом профессионализма экспертов. Общее число экспертов, которое может пригласить аналитик, составляет 120 человек (таблица 6).

2. Определяется потенциально возможное число экспертов Nn, как верхняя граница численности групп:

, чел.  

2. Определяется минимально допустимая численность группы, которая должна зависеть от числа оцениваемых событий (10 показателей):

,  

где m – число событий.

чел.

Таблица 6 – Потенциальное количество экспертов и их характеристика

Категории экспертов

Численность, чел.

В том числе

с высшим образованием имеющие стаж свыше 5 лет
Научные работники 15 15 12
Специалисты консалтинговых агенств 15 15 11
Руководители предприятий 10 10 9
Руководители предприятий - конкурентов 10 10 8
Менеджеры 70 60 40

3. Среди потенциально возможных экспертов выделяется группа специалистов Nk требуемой квалификации для оцениваемого класса событий:

. Руководство предприятия считает обязательным для экспертов высшее образование и стаж работы в области брендинга не менее 5 лет, тогда численность группы специалистов требуемой квалификации составит: _________________________________  

4. Из группы Nk исключаются те эксперты, чьи потенциально возможные цели могут противоречить целям получения объективных результатов:

.  

Руководство предприятия считает, что цели конкурентов могут протии-воречить целям получения объективных результатов: ___________________

5. Из группы Nц – формируется группа так, чтобы в ней обеспечивалось равночисленное представительство разных направлений. Определяется максимально возможное число представителей каждого направления:

.  

Среди экспертов присутствуют представители трех типов руководителей: новаторы, осторожные последователи и консерваторы, тогда:  _______________________________________________________________________________________________________________________________________

6. Определяется направление с наименьшим числом экспертов , которое входит в группу Nц. Определяется общая численность группы:

.  

Фактическое число специалистов-новаторов в рассматриваемой группе 39 человек, последователей 4 человека, консерваторов 29 человек, тогда: ________________________________________________________________________________________________________________________________________

7. Проверяется соотношение . Если оно не удовлетворяется, то необходимо выяснить возможность ослабления приведенных выше ограничений. Общая численность группы будет равна:  _____________________________________________________________

Полученная численность больше минимально допустимого значения (12>10), таким образом, общая рассчитанная численность группы удовлетворяет всем заданным условиям и может быть принята для дальнейших исследований.

8. Определяем степень компетентности экспертов, учитывая их опыт и квалификацию. Оценка строится на основе определенной шкалы, каждый балл которой определяется с помощью выбора соответствующих характеристик, оценивающих квалификацию эксперта: уровень квалификации эксперта в узкой области специализации, его практический опыт и широта кругозора. Эти показатели лучше оценивать по 10-балльной шкале. Полученные характеристики сводят в один показатель , который определяется как средняя арифметическая оценка балла.

Таблица 7 - Результаты экспертной оценки

Эксперт

Оценка события, балл

Анкета для оценки компетентности экспертов

Объективная оценка – ho

Субъективная оценка – hc

Занимаемая должность Баллы Уровень образова- ния Баллы Общий стаж работы Баллы Стаж работы  по проблеме Баллы Степень участия в решении данной проблемы Баллы
1 7 Руководитель организации 10 Доктор наук   >10   >10   Эксперт специали-зируется по данному вопросу  
2 5 Зам. руководителя 8 Кандидат наук   5-10   5-10   Эксперт участвует в практич/ решении вопроса  
3 6 Руководитель подразделения 6 Высшее   <5   <5   Вопрос входит в сферу, тесно связанную со специали-зацией эксперта  
4 8 Зам.руководи- теля подраз- деления 4 Среднее   <5   <5   Вопрос не входит в сферу узкой специа-лизации эксперта  
5 7 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
6 4 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
7 6 Менеджер 3 Высшее   <8   <5   Вопрос не входит в сферу узкой спец-ции  
8 7 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
9 5 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
10 6 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
11 8 Менеджер 3 Высшее   <5   <5   Вопрос не входит в сферу узкой спец-ции  
12 9 Специалист консалтинга 7 Высшее   <7   <5   Вопрос входит в сферу узкой спец-ции  

2.  - субъективный показатель, который получают следующим образом: для каждого вопроса или группы вопросов, по которым считается необходимым оценить компетентность эксперта, в таблице экспертных оценок предусматривается шкала «относительная самооценка эксперта». Эксперту предлагается поставить себе балл по 10-балльной оценке.Значения баллов:

10 – эксперт специализируется по данному вопросу, имеет по нему законченные теоретические и практические разработки;

8 – в практическом решении этого вопроса эксперт участвует, но этот вопрос не входит в сферу его узкой специализации;

5- вопрос входит в сферу тесно связанного с его узкой специализацией

направления (смежная прикладная дисциплина, смежная область

практической деятельности);

3- вопрос не входит в сферу тесно связанного с его узкой специализацией

направления (смежная прикладная дисциплина, смежная область

практической деятельности);

3. Определяется компетентность эксперта по данному вопросу по формуле:

 ________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________

  

Таблица 8 - Оценка профессионализма экспертов

Эксперт 1 2 3 4 5 6 7 8 9 10 11 12
Оценка профессионализма, балл                        

 

4. Определяется групповая экспертная оценка для первого фактора по формуле:

,

где aij – оценка событий, определенная каждым экспертом nj (njÎ N)

hj – степень компетентности экспертов

i = 1, 2 …, m – число событий

j = 1, 2 …, p – число экспертов

ai = _______________________________________________________________ _______________________________________________________________________________________________________________________________________

При равной компетентности эта формула принимает вид средней оценки:

 ;

  4. Для того, чтобы учитывать различия в компетентности экспертов, им могут быть приписаны различные «веса», которые учитываются при определении групповых оценок. Для целей данного исследования применяется объективная (должность, образование, стаж) и субъективная оценка компетентности. В результате выявлено, что 1 эксперт обладает наибольшей компетентностью по проблеме, а 4-й – наименьшей. Поэтому мнению 1 эксперта придается больший вес, чем оценкам остальных экспертов.

Таблица 9 - Результаты экспертной оценки

Направления

Оценки экспертов

Ср.

балл

1 2 3 4 5 6 7 8 9 10 11 12
1. Объем токсичных отходов производства 7 5 6 8 7 4 6 7 5 6 8 9 6,34
2. Величина кап. вложений в природоохранные мероприятия                          
3. Уровень организации природоохранных мероприятий                          
4. Уровень обеспеченности квалифицированными кадрами                          
5. Уровень загрязнения окружающей среды транспортом                          
6. Уровень кооперирования региона с другими по вопросам охраны природы                          
7.                          
8.                          
9.                          
10.                          

5. Определяем коэффициент конкордации (меру согласованности) при ранжировании 10 событий тремя экспертами (упрощенный пример).В результате экспертной оценки получены ранги 10 событий:

Таблица 10- Результаты ранжирования событий

События, i P №1 №2 №3 №4 №5 №6 №7 №8 №9 №10

Ранги

Эксперт А 1 4 2 4 3 7 6 9 7 10
Эксперт В 2 1 2 4 4 8 9 6 10 6
Эксперт С 2 1 3 3 3 3 7 7 7 10

 

1. При ранжировании события располагаются в порядке возрастания или убывания какого-либо признака Х, количественно не измеримого. Ранг ai указывает то место, которое занимает i -тое событие среди других m событий, ранжированных в соответствии с признаком Х. Когда ранги повторяются, то для получения нормального ранжирования необходимо приписать событиям, имеющим одинаковые ранги, ранг, равный среднему значению мест, которые эти события поделили между собой.

2. По оценке эксперта А события № 2 и № 4 поделили между собой 4 и 5 место, поэтому им присваивается ранг ; события № 6 и № 9 поделили 7 и 8 места, тогда ранг будет   

 

Таблица 11 - Расчет суммарного среднеквадратичного отклонения S

P

Нормальное ранжирование событий

Эксперт А                    
Эксперт В                    
Эксперт С                    
                   
                   
                   

3. Для расчета показателя d необходимо определить среднее значение a

_____________________________________________________________________________________________________________________________________

1. Определяется суммарное среднеквадратичное отклонение S суммарных событий от среднего значения по формуле:

Получив значение d 2, определяют суммарное среднеквадратическое отклонение S:

______________________________________________________________

5. Производится расчет совпадения рангов оценки событий для каждого эксперта по формуле:

,

где  - число повторений каждого ранга в j-м ряду

 - число повторяющихся рангов в j- ряду

____________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________

6. Рассчитывается коэффициент конкордации по формуле:

 ;

____________________________________________________________________________________________________________________________________________________________________________________________________________

Выводы и предложения: Если W=0, то согласованности в оценках нет, поэтому для получения достоверных оценок следует уточнить исходные данные о событиях или изменить состав группы экспертов. Если W=1, согласованность мнений экспертов полная, при этом не всегда можно считать полученные оценки объективными, так как иногда оказывается, что все члены экспертной группы заранее договорились, защищая свои общие интересы. Если W=0,5, то действия экспертов более согласованы, чем не согласованы. Если W<0,5, то полученные оценки нельзя считать достоверными, следует повторить опрос заново. Расчетный коэффициент конкордации составил 0,828, следовательно, действия экспертов согласованы.

 

Задание 7. Метод «дерева целей»

Условия задания: Руководство компании решает, создавать ли для выпуска новой продукции крупное производство, малое предприятие или продать патент другой фирме. Размер прибыли зависит от конъюнктуры рынка. Необходимо принять решение о размерах строящегося предприятия с точки зрения максимизации прибыли,  используя метод «дерево целей»

Таблица 12 – Возможная доходность различных направлений бизнеса

Стратегия бизнеса

Прибыль, д.ед.

При благоприятной конъюнктуре При неблагоприятной конъюнктуре
Строительство крупного предприятия 200000 -180000
Строительство малого предприятия 100000 -20000
Продажа патента 10000 10000

Перед принятием решения руководство должно определить, заказывать ли дополнительное исследование рынка, которое обойдется в 10000 д.ед. Прог-нозы консультационной фирмы оправдываются с некоторой вероятностью:

Таблица 13 – Точность прогнозов консультационной фирмы

Прогноз фирмы

Фактическая ситуация

Благоприятная конъюнктура Неблагоприятная конъюнктура
Благоприятная конъюнктура 0,78 0,22
Неблагоприятная конъюнктура 0,27 0,73

Фирма, которой заказали прогноз состояния рынка, утверждает:

- ситуация будет благоприятной с вероятностью 0,45;

- ситуация будет неблагоприятной с вероятностью 0,55.

Оценить необходимость проведения рыночных исследований.

 

 

Рисунок 5 - Дерево решений

Методические указания: 1. Строится дерево решений, которое включает все рассматр. альтернативы с учетом вероятностного характера развития событий.

2. Осуществляется последовательная оценка альтернатив в каждой вершине дерева решений, начиная от последней вершины и заканчивая первой. Оцен-ка и выбор альтернатив проводится по критерию максимум ожидаемого дохода с учетом вероятностного характера развития событий по формуле:

, (4)

где OD – ожидаемый доход от реализации исследуемой стратегии;

Db – доход от реализации исследуемой стратегии бизнеса при благоприятной конъюнктуре;

Pb – вероятность наступления благоприятной ситуации;

Dn - доход от реализации исследуемой стратегии бизнеса при неблагоприятной конъюнктуре;  Pn - вероятность наступления неблагоприятной ситуации.

3. Формулируются выводы и предложения.

Решение: 1. Строится дерево решений (рисунок 5):

2.2 Вершина №4.

________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________ Выводы и предложения: При принятии управленческого решения возможную выгоду от получения дополнительной информации необходимо сопоставлять с затратами на организацию исследовательской работы. В рассмотренном примере конъюнктурный прогноз снижает неопределенность окружающей среды функционирования предприятия и позволяет принять более рациональное управленческое решение.

 

Задание 8. Метод сценариев. Определение эффективности и устойчивости проекта методом анализа чувствительности проекта к изменению основных факторов среды

 Условия задания: В ходе оценки проекта выявлены три возможных варианта развития событий: пессимистический, ожидаемый и оптимистический сценарии. Ставка дисконта по проекту 15% годовых. Рассчитать показатели эффективности и устойчивости проекта к изменению следующих факторов: спрос, цена, переменные затраты, постоянные затраты.

 

 

Таблица 14 - Планируемые доходы и расходы фирмы

Показатели

Ед. измер.

Нулевой год

С 1-го по 10-й год

Пессимистический сценарий Ожидаемый сценарий Оптимистический сценарий
1. Начальные инвестиции Руб. 99 млн. - - -
2. Продано единиц Шт. - 150000 200000 250000
3. Цена за единицу Руб. - 4000 5000 6000
4. Постоянные издержки Руб. - 180 млн. 130 млн. 80 млн.
5. Переменные издержки Руб. - 190 млн. 150 млн. 110 млн.
6. Амортизация Руб. - 100 млн. 100 млн. 100 млн.
7. Налоги (от валов. дохода) % - 50 50 50

Методические указания: 1. Определяются доходы и расходы фирмы по проекту за рассматриваемый период.

2. Рассчитывается показатель чистой дисконтированной стоимости: 

NPV = PV – инвестиции,

где PV – дисконтированная стоимость

Кэш - флоу = чистый доход + амортизация

r – ставка дисконта n – количество лет в рассматриваемом периоде

3. В расчеты вводится фактор изменений и определяется чистая дисконтированная стоимость по пессимистическому и оптимист. сценарию.

4. Делаются выводы и предложения.

Решение: 1  Рассчитываются доходы и расходы фирмы по проекту при ожидаемом сценарии развития:

Таблица 15 - Доходы и расходы фирмы

Показатели Ед. измер. Нулевой год С 1-го по 10-й год
1. Начальные инвестиции Руб. 99 млн. -
2. Продано единиц Шт. -  
3. Цена за единицу Руб. -  
4. Выручка Руб. -  
5. Постоянные издержки Руб. -  
6. Переменные издержки Руб. -  
7. Амортизация Руб. -  
8. Всего затрат (стр5+стр6+стр7) Руб. -  
9. Валовой доход (стр4-стр8) Руб. -  
10. Налоги (50% от стр9) Руб. -  
11. Чистый доход (стр9-стр10) Руб. -  
12. КЭШ-флоу (стр7+стр11) Руб. -  

 

2. Определяется дисконтированная стоимость по формуле (66):

PV = ______________________________________________

Чистая дисконтированная стоимость составит:

NPV = __________________________________________

Если NPV>0, то в стабильных условиях при отсутствии изменений проект эффективен.

Аналогично рассчитывается чистая дисконтированная стоимость при различных изменениях факторов, влияющих на осуществление проекта:

Таблица 16 - Вспомогательная таблица для расчета NPV

Показатели

Изменение переменных

Спрос

Цена

ПР

ПЕ

п о п о п о п о
1. Начальные инвестиции, млн. руб. 99 99 99 99 99 99 99 99
2. Продано единиц, тыс. шт.                
3. Цена за единицу, тыс. руб.                
4. Выручка, млн. руб.                
5. Постоянные издержки, млн..                
6. Перемен издержки, млн. руб.                
7. Амортизация, млн. руб. 100 100 100 100 100 100 100 100
8. Всего затрат, млн. руб.                
9. Валовой доход, млн. руб.                
10. Налоги, млн. руб.                
11. Чистый доход, млн. руб.                
12. КЭШ-флоу, млн. руб.                
13. Дисконтир. стоимость, млн. руб.                
14. NPV, млн. руб.                

Результаты расчетов сводятся в таблицу 17:

Таблица 17 - Изменение чистой дисконтированной стоимости в связи с воздействием ключевых факторов

Величина каждой переменной по альтернативному сценарию

Проектируется NPV по каждому сценарию, млн. руб.

Переменная Пессимистический сценарий Ожидаемый сценарий Оптимистический сценарий Пессимис- тический Ожидае-мый Оптимисти- ческий
Спрос 150000 200000 250000      
Цена 4000 5000 6000      
Постоянные издержки 180 млн. 130 млн. 80 млн.      
Переменные издержки 190 млн. 150 млн. 110 млн.      

Выводы и предложения:

________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________

 

 

  Задание 9. Методы коллективных экспертных оценок

Методические указания:

1. Методы коллективных экспертных оценок предполагают работу специалистов группой и получение суммарной и средней оценки прогноза, которые правомерно назвать комплексными оценками.

2. Различают следующие методы коллективных экспертных оценок:

2.1 Метод комиссий (круглых столов). В этом случае назначается или выбирается комиссия, которая наделяется правом предварительного или окончательного заключения, то есть комиссия организует «круглый стол», в рамках которого будут согласовываться мнения экспертов с целью выработки единого мнения.

2.2 Метод мозговой атаки (мозгового штурма).   Это метод коллективного решения проблемы на основе спонтанной лавинообразной генерации новых идей и определения возможных вариантов развития событий. Для этого формируется группа экспертов, оптимальный состав которой 10-15 человек, во главе с ведущим. Если в состав группы входят участники одного ранга, то допускается знание экспертов друг друга. Если группа формируется из экспертов разного ранга, то желательно, чтобы они не были между собой знакомы, т.е. им просто присваиваются номера. Генерация идей начинается с того, что ведущий раскрывает содержание проблемной записки. Ведущий концентрирует внимание участников на правила проведения мозговой атаки:

- высказывания участников должны быть четкими и сжатыми;

- критика предыдущих экспертов не допускается;

- каждый из участников имеет право выступать много раз, но не подряд;

 - не разрешается зачитывать список идей, который может быть подготовлен участниками заранее.

Активная деятельность ведущего предполагается только в начале «мозговой атаки», он концентрирует внимание участников на основном вопросе. После того, как участники достаточно возбудились, процесс выдвижения идей идет самопроизвольно. Оценка идей на этом этапе не дается. Продолжительность работы экспертов – от 20 до 60 минут в зависимости от активности участников. Запись высказываемых идей целесообразно вести на диктофон, чтобы не пропустили ни одну идею для последующего их анализа и систематизации.

Систематизацию идей группа анализа проблемной ситуации осуществляет в следующей последовательности:

- составляется номенклатурный перечень всех высказанных идей;

- каждая из идей формулируется в общеупотребительных терминах;

- определяются дублирующие и дополняющие идеи;

 - дублирующие и дополняющие идеи объединяются и формулируются в виде одной комплексной цели;  

- выделяются признаки, по которым идеи могут быть объединены;

- идеи объединяются в группы согласно выделенным признакам;

- составляется перечень идей по группам: от более общих к частным.

2.3  Метод деструктивной отнесенной оценки (ДОО)   . Суть метода состоит в активизации творческого потенциала при «мозговой атаке» проблемной ситуации, реализующей вначале генерацию идей и последующее деструирование (разрушение, критику) этих идей с формулированием контридей. Этапы метода ДОО:

1. Формирование группы участников мозговой атаки (10-15 человек).

2. Составление проблемной записки участника мозговой атаки.

Она составляется группой анализа проблемной ситуации и включает описание метода ДОО и описание проблемной ситуации.

3. Генерация идей.

4. Систематизация идей.

5. Деструирование (разрушение) систематизированных идей.

Каждая идея рассматривается только с точки зрения препятствий на пути к ее осуществлению, то есть участники атаки выдвигают доводы, опровергающие идею. Группа участников мозговой атаки этого этапа состоит из высококвалифицированных специалистов в обсуждаемой области, численность ее достигает 20-25 человек (создается новая экспертная комиссия), а продолжительность работы экспертов – 1,5 часа. Процесс деструирования продолжается до тех пор, пока каждая из систематизированных идей перечня не подвергнется критике. Высказанные критические замечания и контридеи записываются на магнитофон.

6. Оценка критических замечаний и составление списка практически применяемых идей.



Поделиться:


Читайте также:




Последнее изменение этой страницы: 2020-03-26; просмотров: 212; Нарушение авторского права страницы; Мы поможем в написании вашей работы!

infopedia.su Все материалы представленные на сайте исключительно с целью ознакомления читателями и не преследуют коммерческих целей или нарушение авторских прав. Обратная связь - 3.15.143.181 (0.135 с.)