МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ ГОУ ВПО «ЧЕРЕПОВЕЦКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ»
Понятие БОУ
Применение БОУ
Ошибки при применении БОУ
Сопоставление возможностей методов БОУ и анкетирования
Сопоставление возможностей методов БОУ и анкетирования
Сопоставление возможностей методов БОУ и анкетирования
Сопоставление возможностей методов БОУ и анкетирования
Три условия соблюдения принципа триангуляции
Схема триангуляции
Компоненты технологии БОУ
Участники группы
Состав группы
Компоненты технологии БОУ
Источники информации
Компоненты технологии БОУ
Основные задачи БОУ заключаются в выяснении следующих вопросов:
Полуструктурированное интервьюирование
Интервью
В процессе проведения ПСИ исследовательской группе необходимо соблюдать следующие правила:
В процессе проведения ПСИ исследовательской группе необходимо соблюдать следующие правила:
Ошибки при проведении ПСИ в БОУ-исследованиях:
Особенность ПСИ
Групповая дискуссия
Групповая дискуссия
Специфика дискуссии
Особо важно
Особо важно
Ранжирование мнений
Инструментарий групповых дискуссий
Завершающий этап БОУ
Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума:
Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума:
Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума
Технология проблемного колеса
Первый этап
Второй этап
Второй этап
Список использованной литературы:
5.92M
Категория: СоциологияСоциология

Методика БОУ и проблемного колеса. Возможности их применения в социологической практике

1. МИНИСТЕРСТВО ОБРАЗОВАНИЯ И НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ ГОУ ВПО «ЧЕРЕПОВЕЦКИЙ ГОСУДАРСТВЕННЫЙ УНИВЕРСИТЕТ»

КАФЕДРА СОЦИОЛОГИИ И СОЦИАЛЬНЫХ ТЕХНОЛОГИЙ
1
Методика БОУ и
«Проблемного колеса» и
возможности их
применения в
социологической практике
Череповец 2013
методика БОУ
06.11.16

2. Понятие БОУ

2
БОУ – аббревиатура, составленная из начальных
букв трех первых слов полного названия данной
исследовательской методики, – быстрая оценка
участниками дискуссии проблем микросоциума .
методика БОУ
06.11.16

3. Применение БОУ

3
Из полного наименования этого метода явствует, что
его следует применять:
• во-первых, не во всех случаях исследовательской
практики, а только при анализе актуальной
проблематики социальных микрогрупп (семей,
соседских общностей, первичного трудового
коллектива, пенсионеров определенного микрорайона,
многодетных матерей села, лиц, стоящих на учете в
бирже труда и т.п.);
• во-вторых, в ситуациях, когда требуется оперативное
вмешательство в жизнедеятельность микросоциума, а
потому быстрая оценка его проблем;
• в-третьих, таким образом, чтобы обследуемые люди
прямо и непосредственно участвовали в выработке
научных оценок социальных проблем микрогруппы,
членами которых они являются.
методика БОУ
06.11.16

4. Ошибки при применении БОУ

4
С сожалением приходится констатировать случаи попыток
применения метода БОУ для изучения макросоциальных процессов,
например, тенденций электорального поведения населения городов.
Такого рода исследования не могут быть валидными, так как метод
БОУ имеет иное предназначение.
Не меньшую ошибку допускают те исследователи, которые не
используют данный метод тогда, когда именно он наиболее уместен.
Известно, что социологически малограмотные социальные работники
и социальные педагоги, предпочитают выяснять проблемы своих
клиентов методом анкетирования. Поскольку этим грешат многие
начинающие исследовательскую деятельность специалисты
социогуманитарного профиля (маркетологи, менеджеры,
конфликтологи и др.), сравним эвристические возможности БОУ и
анкетирования
методика БОУ
06.11.16

5. Сопоставление возможностей методов БОУ и анкетирования

5
Основания
сопоставления
Продолжительность
исследования
БОУ
Анкетирование
Короткая
Длительная
Глубина исследования:
а) специфичных проблем
микросоциума
б) объективных тенденций
общественной жизни
Повышенная
Пониженная
Пониженная
Повышенная
Направленность
исследования
Снизу вверх
Сверху вниз
Гибкая
Жесткая
Организация
исследования
методика БОУ
06.11.16

6. Сопоставление возможностей методов БОУ и анкетирования

6
Основной
исследовательский
инструмент
Полуструктурированное
интервью
Структурированная анкета
Другие инструменты сбора «Корзина» инструментов
информации
Отсутствуют
Методики измерения
изучаемых явлений
Качественные с
использованием
количественных
показателей
Только количественные
Техники анализа
полученной информации
"Батарея" техник
Математикостатистический анализ
Степень формализации
исследовательских
методик
Низкая
методика БОУ
Высокая
06.11.16

7. Сопоставление возможностей методов БОУ и анкетирования

7
Мера учета
индивидуальных случаев
Проведение основной
аналитической работы
Финансовые затраты
Требования к
профессиональным
навыкам исследователей
Междисциплинарная
интеграция
исследователей
методика БОУ
Высокая, взвешенная
Отсутствует
На месте и в ходе
проведения БОУ
В лаборатории (кабинете)
после полевого этапа
Низкие
От средних до высоких
Высокие
От средних до низких
Повышенная
Пониженная
06.11.16

8. Сопоставление возможностей методов БОУ и анкетирования

8
Возможности
применения для
мониторинга проблем
микросоциума
методика БОУ
Максимальные
Минимальные
06.11.16

9. Три условия соблюдения принципа триангуляции

9
Создание особой исследовательской группы;
Использование разнообразных источников
информации;
Применение специфичного набора конкретных
исследовательских методик, составляющих их
"батарею", и инструментов, образующих особую
"корзину".
методика БОУ
06.11.16

10. Схема триангуляции

10
методика БОУ
06.11.16

11. Компоненты технологии БОУ

11
Компонент I . БОУ – междисциплинарный метод
социогуманитарных наук. Наибольший эффект он дает
при условии включения в исследовательскую группу
представителей разных (но смежных) отраслей знания
и практической деятельности. Конкретный состав
команды, проводящей БОУ, зависит, естественно, от
объекта, предмета, цели и задач исследования.
методика БОУ
06.11.16

12.

12
Рамки оптимальной численности
исследовательских групп, работающих по методу
БОУ, как показывает практика, колеблются в
узком пределе от 5 до 7 человек. При меньшей и
большей численности эвристические потенции
БОУ заметно снижаются.
методика БОУ
06.11.16

13. Участники группы

13
Кроме специалистов в проведении БОУ обязательно участвуют
представители изучаемого микросоциума, причем, не случайно
избранные, а специально отобранные исследователями люди.
Они должны максимально адекватнее представлять
наличествующие в этом микросоциуме социальные, возрастные,
половые, профессиональные и иные группы, а также категории
населения, отличающиеся друг от друга по уровню материального
достатка и недовольства условиями жизни.
При соблюдении правила репрезентативности появляется
возможность подобрать таких представителей микросоциума,
которые способны выражать наиболее распространенные в нем
потребности, интересы, настроение, установки и прочие важные
для решения исследовательских задач характеристики.
методика БОУ
06.11.16

14. Состав группы

14
Желательная численность репрезентирующей
микросоциум группы его представителей
исчисляется, как правило, 12-15 человеками.
Это не исключает возможности, а иногда и
необходимости, обследовать методом БОУ более
многочисленные группы.
При этом, однако, следует иметь в виду, что по мере
отступления численности реально обследованных
людей от оптимальной (как в большую, так и
меньшую стороны) валидность БОУ-исследования
снижается.
методика БОУ
06.11.16

15. Компоненты технологии БОУ

15
Компонент II. Метод БОУ предполагает
использование разнообразных источников
информации. На этапе подготовки к БОУ важное место
занимают вторичные источники , роль которых играют
ранее зафиксированные научные данные, относящиеся
к предмету исследования. Речь идет о статистических
сведениях, научных публикациях, диссертациях,
докладах, картах населенных пунктов, текстах законов,
распоряжений органов власти и прочих документах.
методика БОУ
06.11.16

16. Источники информации

16
Источниками первичной создаваемой методом
БОУ информации выступают, с одной стороны,
наблюдаемые исследователями события
(явления и процессы), происходящие в
обследуемом микросоциуме, а с другой – оценки
этих событий членами этого социума, их мнения,
высказывания, невербальные реакции и т.д.
методика БОУ
06.11.16

17. Компоненты технологии БОУ

17
III компонент БОУ состоит из трех наборов
специальных процедур, инструментов и техник, с
помощью которых получается и анализируется как
первичная, так и вторичная информация
Инструментальная "корзина" БОУ наполнена
разнообразными исследовательскими
документами. Большая часть их, естественно, в
незаполненном виде, заготавливается до начала
полевого этапа БОУ.
методика БОУ
06.11.16

18. Основные задачи БОУ заключаются в выяснении следующих вопросов:

18
Какие внешние признаки изучаемого объекта
поддаются наблюдению?
Насколько позволительно по этим признакам судить
о качественных характеристиках микросоциума?
Чего нельзя узнать о нем с помощью наблюдения?
Какие гипотезы можно сформулировать на основе
предварительного наблюдения?
Каким должно быть конкретное содержание
инструментария последующего наблюдения?
методика БОУ
06.11.16

19. Полуструктурированное интервьюирование

19
Полуструктурированное интервьюирование (ПСИ)
отличается от прочих видов собеседований
исследователей с респондентами, прежде всего, тем,
что первые имеют жесткую "домашнюю заготовку"
лишь по части вопросов, предполагают, что в ходе
интервью возникнут другие темы и необходимость их
обсуждения.
методика БОУ
06.11.16

20.

20
При этом может получиться так, что заранее
продуманные вопросы отодвинутся на второй (или
даже третий) план.
Если ПСИ используется в качестве чисто
количественного метода, то нарушение
запланированной логики беседы не допускается.
Но когда ПСИ выступает в роли составляющей
комплекс операций методик БОУ, то лучше не
прерывать непредвиденный ход разговора, ибо в
нем может обнаружиться какое-то важное качество
обследуемого объекта.
методика БОУ
06.11.16

21. Интервью

21
ПСИ как составная часть метода БОУ может проводиться
как беседа:
интервьюера с одним респондентом;
интервьюера с группой респондентов;
группы интервьюеров с группой респондентов;
группы интервьюеров с одним респондентом.
Выбор той или иной формы ПСИ зависит от многих
обстоятельств, прежде всего, предмета исследования,
свойств объекта, особенностей респондентов. Чаще
всего при БОУ-исследованиях используются три
первых формы.
методика БОУ
06.11.16

22. В процессе проведения ПСИ исследовательской группе необходимо соблюдать следующие правила:

22
четко выполнять закрепленные за каждым
исследователем функции (модератора, т.е. основного
ведущего ПСИ, его помощников, в т.ч. стенографистов,
протоколистов, кинооператоров, наблюдателей);
установить доверительные отношения между
исследователями и опрашиваемыми ими людьми;
задавать вопросы, обращаясь к тем участникам БОУгруппы, которые хорошо видны всем остальным;
формулировать вопросы предельно четко и в такой
форме, чтобы стимулировать дискуссию;
продуманно и осторожно подводить респондентов к
наиболее важным и сложным вопросам;
методика БОУ
06.11.16

23. В процессе проведения ПСИ исследовательской группе необходимо соблюдать следующие правила:

23
давать возможность каждому респонденту сказать
все, что он хочет, не прерывать его ответов даже в
тех ситуациях, когда кажется, что они уводят
обсуждение проблемы в сторону;
чутко реагировать на поведение респондентов,
особенно на их экспрессивные проявления;
управлять ходом беседы, экспромтно
корректировать постановки вопросов с учетом
реакций респондентов;
демонстрировать искреннюю заинтересованность в
узнавании мнений каждого респондента по всем
вопросам, внимательность и уважительность к
ним;
проводить индивидуальное интервью не дольше
35-40 минут, а групповое – не более полутора
часов.
методика БОУ
06.11.16

24. Ошибки при проведении ПСИ в БОУ-исследованиях:

Ошибки при проведении ПСИ в БОУисследованиях:
24
неумение внимательно слушать интервьюируемых и верно
оценивать их ответы;
повторение одних и тех же формулировок вопросов, неспособность
переформулировать их;
постановка нетактичных вопросов, обидных для респондентов;
недоучет значимости жестов, выражения лица, телодвижений,
тона и тембра голоса респондентов, дающих ключ к верной
интерпретации их ответов;
выдвижение вопросов по несущественным проблемам;
подсказки ответов со стороны исследователей;
уделение повышенного внимания ответам отдельных лиц,
недооценка мнений других;
игнорирование ответов, не соответствующих идеям и концепциям
интервьюера;
неполнота записей интервью.
методика БОУ
06.11.16

25. Особенность ПСИ

25
Особенность ПСИ как методики БОУ проявляется еще и
в том, что здесь опрашиваемые лица играют роль не
только и не столько традиционных респондентов,
сколько экспертов.
Они более других компетентны в тех проблемах,
которые являются предметом БОУ.
При использовании ПСИ в БОУ-исследованиях
возникает особая научно-исследовательская задача –
как согласовать мнения экспертов, интегрировать их
оценки?
методика БОУ
06.11.16

26.

26
Чаще всего в БОУ-исследованиях прибегают к помощи
картографических тестов, т.е. заданий,
предполагающих "очерчивание" испытуемыми
пространственных границ изучаемого микросоциума
(мест массового проживания его представителей,
скажем, пенсионеров, инвалидов, безработных, какихто групп риска и т.п.).
Такие тесты позволяют решать задачи не только
определения уровня компетентности респондентовэкспертов, но и итогового картографирования объекта,
осуществляемого исследователями
методика БОУ
06.11.16

27. Групповая дискуссия

27
Групповая дискуссия как составная часть метода
БОУ может проводиться в виде фокус-группы,
"мозгового штурма", ИПИД (индуцирования
психоинтеллектуальной деятельности) и в других
формах.
Выбор конкретного способа и проведения
дискуссии в БОУ-группе определяется в
зависимости от меры сложности обсуждаемой
проблемы, степени компетентности участников и
овладения исследователями техникой реализации
этих методик.
методика БОУ
06.11.16

28. Групповая дискуссия

28
Проведение групповых дискуссий в любой форме
предполагает тщательную подготовку
исследователей к ней, разработку ее
концептуально-логической схемы, в которой
предусмотрены разные модели ее возможного
хода, выделены основные варианты
детализирующих их вопросов,
сформулированные с учетом ожидаемых реакций
аудитории.
методика БОУ
06.11.16

29. Специфика дискуссии

29
Специфика дискуссии, используемой в БОУ,
заключена в том, что она должна стать
органическим следствием ПСИ. Если
полустандартизированное интервьюирование не
привело к дискуссии, то это свидетельствует о
существенном браке в работе исследовательской
группы. Чтобы исключить такую возможность,
необходимо выполнить не только
вышеотмеченные рекомендации по проведению
ПСИ, но и ряд дополнительных техник
методика БОУ
06.11.16

30. Особо важно

30
Избегать такой постановки вопросов, которая
наталкивает на однозначные ответы в форме "да"
или "нет" и не стимулирует развитие дискуссии.
Не злоупотреблять вопросами, начинающимися
на слова "Почему", т.к. это может побудить
отвечающего занять оборонительную позицию,
замкнуться в себе, остановить приток нужной
исследователям информации.
методика БОУ
06.11.16

31. Особо важно

31
Исключить знаки недоверия к мнениям участников
дискуссии (обмен скептическими улыбками между
исследователями, критические замечания в адрес
говорящего и т.п.).
Помогать выступающему высказываться до конца,
поощрять его к этому соответствующими фразами и
жестами.
Не подменять содержания высказываний
участников дискуссии своими суждениями, не
завершать начатых ими предложений своими
словами, не перефразировать их мысли
методика БОУ
06.11.16

32.

32
Исключить нравоучения в адрес любого
дискутирующего, поддержку одного и осуждение
другого, иные способы "одергивания"
выступающих.
Использовать разнообразные приемы разрядки
напряженности, как правило, возникающей в
ходе острой дискуссии (умные анекдоты и
притчи. пословицы и поговорки, "стоп-технику",
насмешки над собой, но не над участниками
дискуссии и т.п.).
методика БОУ
06.11.16

33. Ранжирование мнений

33
Ранжирование мнений и оценок обследуемых
лиц, используемое в БОУ (и иных качественных
методах), осуществляется по другой технике,
нежели в количественных исследованиях.
В последнем случае оно делается на основе
"жестких" критериев, сформулированных в
текстах анкет, стандартах интервью, бланках
(карточках) наблюдателя и т.п. инструментах.
методика БОУ
06.11.16

34. Инструментарий групповых дискуссий

34
При использовании качественных методов,
сопряженных с проведением групповых
дискуссий, в ходе которых мнения обследуемых
лиц, как правило, в чем-то меняются, требуется
особый инструментарий, дающий возможность
зафиксировать:
исходные мнения, обнаруженные с помощью
ПСИ;
сдвиги во мнениях, происходящие в ходе
дискуссии;
итоговые оценки, сформировавшиеся к концу
БОУ-исследования.
методика БОУ
06.11.16

35. Завершающий этап БОУ

35
Паспортизирование и картографирование
обследованного социального объекта –
завершающий этап исследования по методу
БОУ, самый трудоемкий и сложный в
аналитическом отношении.
Паспорт обследованного микросоциума –
специальный научный документ, отражающий
те его характеристики, которые важны как для
теоретического осмысления его проблем, так и
для практического их решения.
методика БОУ
06.11.16

36. Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума:

Паспорт обследованного микросоциума должен содержать
следующие характеристики микросоциума:
36
количественные (численность, скажем, пенсионеров
микрорайона);
демографические (соотношение между разнополыми
и разновозрастными группами микросоциума);
медико-социальные (показатели состояния здоровья
и учреждений здравоохранения в микросоциуме);
социально-экономические (дифференцированность
микросоциума по имущественному положению и
потребности в материальной помощи);
социально-психологические (отражающее состояние
и тенденции психического здоровья членов
микросоциума, их нужду в психологической
поддержке);
методика БОУ
06.11.16

37. Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума:

Паспорт обследованного микросоциума должен содержать
следующие характеристики микросоциума:
37
Нередко в паспорт микросоциума включают его
территориально-географические признаки. Иногда эти
признаки представляются главным и основным
компонентом социального паспорта. В таких случаях
реально речь идет о картографировании микросоциума
как либо части паспортизирования, либо подмене
паспортизирования картографированием.
Чем более информативен паспорт микросоциума
(трудового коллектива, соседской общности и т.п.), тем
больше свидетельств успешности БОУ-исследования,
его практической полезности и теоретической
ценности.
методика БОУ
06.11.16

38. Паспорт обследованного микросоциума должен содержать следующие характеристики микросоциума

Паспорт обследованного микросоциума должен
содержать следующие характеристики микросоциума
38
конфликтологические (степень недовольства
микросоциума своим положением, формы и
массовость социального протеста,
проявляемого его членами);
духовно-культурные (господствующие в
микросоциуме духовные ценности и
культурные установки);
идейно-политические (приверженность
микросоциума (его частей) определенным
идеологиям и политическим партиям);
проблемно-когнитивные (степень
осознанности проблем микросоциума его
членами, господствующие в нем мнения о
путях и способах их решения).
методика БОУ
06.11.16

39.

39
"ПРОБЛЕМНОЕ
КОЛЕСО"
методика БОУ
06.11.16

40. Технология проблемного колеса

40
Технология зависит от того, проблемы какого
социального субъекта и в контексте какой научной
дисциплины изучаются.
она характеризуется:
во-первых, пятиэтапностью;
во-вторых, многошаговостью, как минимум,
трехшаговостью, т.е. выявлением трех кругов проблем
изучаемого субъекта;
в-третьих, комбинацией различных количественных и
качественных методик сбора и анализа социальной
информации; в-четвертых, вычеркиванием особых схемкартограмм проблем исследуемого социума.
методика БОУ
06.11.16

41. Первый этап

41
Первый этап имеет предварительный
(подготовительный) характер.
Он предполагает изучение содержания,
характера и остроты проблем, испытываемых
изучаемой группой людей.
Эти проблемы могут быть выявлены путем анкетирования,
телефонного, прессового, экспертного или иного опроса,
биографического, фокус-группового или другого качественного
метода.
Итогом первого этапа является определение наиболее важной и
актуальной потребности изучаемого субъекта, удовлетворение
которой явно затруднено
методика БОУ
06.11.16

42. Второй этап

42
Суть первого шага – выяснение и ранжирование
ответов людей, представляющих изучаемый субъект, на
вопрос: "Почему возникла та проблема, которая
предстает важной, актуальной и трудно решаемой?"
Данная задача решается в одних случаях методом
интервьюирования (как правило,
полустандартизированного) или фокус-группового
обсуждения.
Результатом первого шага выступает определение
первого круга проблем , от решения которых зависит
удовлетворение ранее выявленной острой потребности.
методика БОУ
06.11.16

43. Второй этап

43
Второй шаг делается для выявления второго
круга проблем. Для этого вновь задается вопрос
"почему", но уже в отношении каждой из
выявленных в первом круге причин,
осмысливаемых как отдельные проблемы. Таким
образом выстраиваются ареалы причин –
проблемы второго уровня.
методика БОУ
06.11.16

44.

44
Третий шаг устанавливает третий круг проблем
исследуемого микросоциума, производных от
каждой проблемы второго круга.
Аналогично делаются четвертый, пятый и
последующие шаги.
При этом проблемы предыдущего уровня
осмысливаются основой конструирования
детализирующих их проблем последующего
круга.
методика БОУ
06.11.16

45.

45
второй и все последующие шаги, составляющие
второй этап методики "проблемное колесо",
реализуются в виде групповой дискуссии,
строящейся по принципу "фокус-группы" или
других способов "мозгового штурма".
методика БОУ
06.11.16

46.

46
Третий этап исследования, осуществляемого по
характеризуемой методике, – оценка выявленных
проблем всех кругов в контексте реальности их
решения. На нем необходимо определить те причины
проблем каждого круга, которые:
не подвластны субъекту, на которые он повлиять не
может;
поддаются контролю со стороны социального субъекта;
в полной мере зависят от субъекта, на которые он
может повлиять решающим образом, меняя
сложившуюся проблемную ситуацию.
методика БОУ
06.11.16

47.

47
Второй и третий этапы сопровождаются
вычерчиванием каждым исследователем особой
картограммы – схематичного изображения
кругов проблем
методика БОУ
06.11.16

48.

48
методика БОУ
06.11.16

49.

49
Четвертый этап призван
решить две следующих задачи:
во-первых, разработку согласованной всеми
исследователями картограммы кругов проблем;
во-вторых, определение в этой картограмме
проблем, которые: а) следует принять как
данность, не зависящую от изучаемого субъекта;
б) можно и должно контролировать ; в) на
которые субъект может влиять .
методика БОУ
06.11.16

50.

50
Пятый этап – итоговая аналитическая работа
исследовательской группы, разработка ею
системы практических рекомендаций по
решению проблем обследованного
микросоциума.
методика БОУ
06.11.16

51. Список использованной литературы:

51
Кравченко А.И.. Социология: Общий курс: Учебное пособие для вузов. /
А.И.Кравченко. - М.: ПЕРСЭ; Логос,- 2002.- 640 с.
Самойленко Е.Н. Социология: методы социологического исследования. / Е.Н.
Самойленко. – Киев, КНУСА,- 2005. – С.125.
Социология: Курс лекций / Под ред. А.В. Миронова, В.В. Панферовой, В.М.
Утенкова. - М.: Социал.-полит. журн.,- 1996. – С.255.
Фролов С.С. Социология. Учебник. Для высших учебных заведений. / С.С.
Фролов. - М.: Наука,- 1994 - 256 с.
Харчева В.Г. Основы социологии: Учеб. для студентов сред. спец. учеб.
заведений. / В.Г. Харчева.- М.: Логос,- 2000. – 302 с.
Ядов В.А. Стратегия социологического исследования / В.А. Ядов. - М: Добросвет,1998. – 595 с.
Ядов В.А. Социологическое исследование: Методология. Программа. Методы /
В.А. Ядов. - М: Изд-во ИНФРА-М,- 2002. – 328 с.
методика БОУ
06.11.16

52.

52
Благодарю за
внимание!
методика БОУ
06.11.16
English     Русский Правила