Электронная библиотека » Валентин Фурсов » » онлайн чтение - страница 7


  • Текст добавлен: 16 октября 2020, 18:37


Автор книги: Валентин Фурсов


Жанр: Прочая образовательная литература, Наука и Образование


Возрастные ограничения: +12

сообщить о неприемлемом содержимом

Текущая страница: 7 (всего у книги 9 страниц)

Шрифт:
- 100% +
2.3. Научно-методические рекомендации по повышению эффективности комплексных мониторинговых исследований в области образования

В качестве примера рассмотрим общие принципы и алгоритм комплексного мониторинга подготовки педагогических кадров [93].

Качественная подготовка педагогических кадров является одной из наиболее значимых задач для столичного образования. Решение этой задачи лежит не только в педагогической области – это комплексная задача, включающая в себя ярко выраженный управленческий аспект. На ее решение оказывает воздействие комплекс внешних и внутренних факторов. Государственная среднесрочная программа развития столичного образования причисляет к числу внешних факторов следующие7979
  Государственная программа города Москвы на среднесрочный период (2012 – 2016 гг.) Развитие образования города Москвы («Столичное образование»). Режим доступа: URL: [битая ссылка] http://www.mgpu.ru/tree.php?rubric=3952, с. 28


[Закрыть]
:

экономические факторы: темп инфляции, стабильность национальной валюты, динамика роста цен и тарифов на товары и услуги, изменение среднемесячных заработков в экономике;

законодательный фактор: изменения в законодательстве Российской Федерации и города Москвы, ограничивающие возможность реализации предусмотренных Программой мероприятий;

политический фактор: изменение приоритетов государственной политики в сфере образования;

социальные факторы: изменение социальных установок профессионального педагогического сообщества и населения, обусловливающие снижение необходимого уровня общественной поддержки предусмотренных Программой мероприятий.

К перечисленным можно добавить и нижеследующие внешние и внутренние факторы, без которых учет влияния на развитие образования был бы не полон:

– духовно-нравственное и культурное состояние общества, уровень его образованности и наличие национальной идеи (духовно-нравственный фактор);

– содержание и структура социального заказа (потребностей общества) к уровню подготовки и профессиональной компетенции педагогических кадров (фактор социального заказа);

– разработанность задачи подготовки педагогических кадров на концептуально-философской основе (концептуальный фактор);

– состояние и уровень развития системы образования (ситуационный фактор);

– демографическая ситуация (демографический фактор);

– наличие и состояние сформированной системы подготовки кадров (системный фактор);

– состояние нормативно-правового поля в области образования и смежных областях;

– размеры капиталовложений, предусмотренных бюджетом на решение указанных задач (присутствует);

– дидактическая обеспеченность системы подготовки педагогических кадров (дидактический);

– состояние материально-технического обеспечения и финансирования (присутствует);

– обеспеченность системы подготовки педагогов кадровыми ресурсами и их качество (присутствует);

– востребованность и статус профессии учителя и педагога в обществе (присутствует);

– наличие организованной системы мониторинга и контроля в области образования (мониторинговый);

– уровень социального взаимодействия в системе «общество-образование» и другие (присутствует).

В качестве примера можно предложить следующий алгоритм реализации задачи увеличения эффективности подготовки педагогических кадров, который можно представить в виде следующих блоков:

1.Формирование стратегии, политики и целей в области подготовки педагогических кадров – разработка матрицы целей и задач, связанных с подготовкой педагогических кадров, учитывающих как вечные общечеловеческие приоритеты, так и общественно-государственные потребности в области качества, уровня и содержания образования, которые должны быть реализованы столичной образовательной системой в соответствии с требованиями времени.

2.Определение матрицы внешних и внутренних факторов, воздействующих на процесс подготовки педагогических кадров к решению поставленных задач – на этом этапе определяются все факторы политического, экономического, материально-технического, социального, педагогико-психологического и иных характеров, объективно воздействующих на качественную и количественную стороны подготовки педагогических кадров.

3.Формирование (модернизация) структуры организации и управления процессом подготовки и повышения квалификации педагогических кадров – на этом этапе формируется организационно-управленческая структура системы непрерывной подготовки, предназначенная для наиболее быстрого достижения поставленных целей и наиболее эффективного решения связанных с этим задач.

4.Планирование и постоянное улучшение системы подготовки и повышения квалификации педагогических кадров, обеспечивающее планирование процесса и процедур, их поддержание и постоянное улучшение.

5.Практическое управление структурой и процессом подготовки (переподготовки, повышения квалификации) педагогических кадров – обеспечение процессов жизненного цикла образовательной деятельности всеми видами ресурсов: финансовыми, материальными, человеческими, информационными; управление основными (обучение, воспитание, экспериментальная и инновационная деятельность, дополнительное образование и др.) и обеспечивающими (хозяйственная деятельность, управление персоналом и др.) процессами.

6.Определение критериев, показателей и методов оценки эффективности процесса подготовки и деятельности педагогических кадров заключается в научно-методическом обеспечении мониторинга и контроля эффективности процесса подготовки педагогических кадров.

7.Непрерывный мониторинг и контроль – измерение и оценка по специально разработанным методикам на научной основе параметров и характеристик (показателей) рабочих процессов и результатов, их научно-управленческий анализ и выработка рекомендаций, включающих в себя:

– оценку качества первичной подготовки педагогических кадров,

– оценку качества переподготовки и повышения квалификации действующих педагогических кадров,

– оценку конечного результата деятельности педагогических кадров (по результатам обучения и воспитания учеников и выпускников школ,

– комплексную оценку эффективности деятельности системы подготовки педагогических кадров,

Вышеуказанная оценка осуществляется через:

– измерение выбранных социальных параметров общества;

– тестирование уровня профессиональной подготовки педагогических кадров;

– проведение измерений основных показателей деятельности системы образования;

– проведение социологических исследований и изучение общественного мнения;

– анализ госстатотчетности;

– оценку качества результатов образовательной деятельности,

8. Выработка управленческих рекомендаций, реализация управленческих решений, принятых на их основе и мониторинг их эффективности.

2.4. Научное прогнозирование в образовании

Далее следует коснуться вопросов научного прогнозирования. Фундаментальными исследованиям в области прогностики посвятили свои работы А. Н. Аитов, Т. М. Дридзе, А. С. Панарин, Ж. Т. Тощенко, В.А.Ядов и др. авторы. Социально-педагогическая прогностика как научное направление появилось относительно недавно и этой теме посвящено не так много работ. Среди авторов, которые занимались этим направлением можно перечислить Б. С. Гершунского, В. И. Загвязинского, И. А. Липского, Л. И. Лурье, В. А. Рождественского, М. Ю. Сорокина и др.

Актуальность подобных исследований в образовательной сфере высока, о чем свидетельствуют свежие диссертационные исследования в области педагогики (А. В. Пылев, МГПУ)8080
  Пылев, Владимир Александрович. Социально-педагогическое прогнозирование в управлении региональной образовательной системой: дис… канд. пед. наук. – Самара: СФ МГПУ, 2009. – с. 151.


[Закрыть]
.

Гершунский8181
  Гершунский, Борис Семенович. Педагогическая прогностика: Методология. Теория. Практика /Б. С. Гершунский. – Киев: Вища шк., 1986. – с. 111—120.


[Закрыть]
дает следующую классификацию методов прогнозирования:

По степени формализации:

– Интуитивные;

– Формализованные.

Интуитивные целесообразно применять, если объект слишком прост, и в этом случае достаточно индивидуальных экспертных оценок, либо, наоборот, слишком сложен и учет чрезмерно большого числа факторов имеющимися в наличии средствами невозможен. Формализованные методы прогнозирования связаны с привлечением соответствующего математического аппарата (корреляционный и регрессивный анализы, метод группового учета аргументов, факторный анализ, вариационное исчисление, спектральный анализ, математические методы, используемые в теории распознавания образов, теории игр и т.п.). Использование этих методов возможно при достаточно жесткой качественной и количественной определенности параметров прогнозируемых объектов и критериев оценки их оптимального состояния.

По способу применения:

– сингулярные (одиночные, простые);

– комплексные (используется несколько дополняющих друг друга методов).

Гершунский утверждает, и автор с ним полностью согласен, что в виду сложности реальных образовательных объектов и необходимости многофакторного учета, сингулярные методы здесь мало подходят для прогнозирования. В комплексном прогнозировании образовательных систем оптимально сочетание следующих методов:

– Методы экспертных оценок;

– Методы экстраполяции тенденций;

– Методы моделирования;

– Публикационный метод прогнозирования;

– Морфологический анализ.

Разумеется, в зависимости от целей и задач исследований, удельный вес каждого из них в отдельности может быть разным. Только мониторинговые исследования позволяют отслеживать развитие исследуемой системы в динамике и получать распределение измеряемых параметров во времени. Полученные такими измерениями данные дают возможность выявить не только тенденции изменения значения соответствующего индикатора на уровне «больше-меньше», «улучшилось-ухудшилось», но и осуществлять достаточно точные численные интерпретации закономерностей, и выражение их математическим языком. Аппарат, позволяющий изучать социальные явления в динамике, разработан учеными, специализирующими на использовании количественных методов в экономических исследованиях – эконометрии и только сравнительно недавно начали создаваться математические модели в социальных науках (трендовые модели)8282
  Шляпентох, Владимир Эммануилович. Проблемы качества социологической информации: достоверность, репрезентативность, прогностический потенциал. – М.: Центр социального прогнозирования, 2006. – с. 547 – 548.


[Закрыть]
.

Методы решения указанных задач берут начало в прикладной математике, и в частности, в разделе, который называется «численные методы». Численные методы находят широкое применение в естественных науках, поскольку позволяют интерполировать (т.е. привести к описываемым математическим языком закономерностям) данные, полученные в результате экспериментальных измерений и, что особенно важно, обрабатывать их с использованием ЭВМ.

Философской предпосылкой трендовых моделей является т.н. «связь времен», представляющая собой причинно-следственную связь прошлого, настоящего и будущего, определяющую возможность предугадывания будущего на основании знания ретроспективы событий в прошлом и состояния настоящего. Поскольку будущее – это прямое и непосредственное продолжение прошлого. Тогда динамика соответствующего социального процесса будет определятся функцией одного или нескольких показателей от времени


(6)


либо величины этого показателя (показателей) в предшествующие периоды.

Такие зависимости, а соответственно и выражаемые ими процессы могут носить линейный и нелинейный характер. Линейные процессы могут быть выражены формулой

Y=at+b (7)

а нелинейные – более сложными функциями.

Мониторинговые исследования, осуществляемые в образовании, позволяют получать данные, доступные такой обработке, а значит, последние можно интерполировать в математические зависимости. А это уже начало моделирования, поскольку математическая формула уже является моделью выраженного ей процесса.

При этом следует учитывать, что полученные зависимости будут носить приближенный характер. Их точность и достоверность будут зависеть от количества исходных измерений. Измерения должны производиться по единообразной (унифицированной) методике. Критерии и индикаторы (измеряемые показатели) должны быть идентичны. Необходимо учитывать цикличность измеряемых процессов. Желательно, чтобы ежегодные мониторинговые исследования осуществлялись в одно и то же время, каждый год, в соответствии с динамикой учебного и административного процессов. Следует отметить, что для получения более или менее достаточной точности и достоверности интерполяций такие измерения по единообразной методике нужно проводить не менее трех лет подряд.

В рамках описанного в настоящей работе мониторингового исследования некоторые показатели исследовались на протяжении достаточного количества лет подряд8383
  Рябов В. В., Пищулин Н. П., Фурсов В. В. и др. Общественная мониторинговая оценка деятельности образовательных учреждений и учебных округов в 2006 году: критерии, методики, результаты. – М.: МССО МГПУ, 2007. – с. 48


[Закрыть]
. Как уже говорилось, результаты этого исследования заслужили высокую оценку, несмотря на то, что в его рамках прогностика была выражена ограниченно. Тем не менее, до сих пор эта работа остается самым масштабным и полным общественно-государственным мониторинговым исследованием системы общего (полного) среднего образования г. Москвы.

Следует отметить, что проблемой является то, что исследований, удовлетворяющих указанным требованиям в области образования вообще, и московского в частности, катастрофически мало. Это не значит, что проводится мало мониторинговых исследований как таковых – мало таких, результаты которых можно интерполировать друг с другом, т.е. получить достоверный результат посредством объединения данных.

Прогностическая часть этого исследования строилась интуитивным методом в сочетании с методом экспертных оценок, основанном на ожиданиях респондентов. Однако материалов этого исследования достаточно для того, чтобы использовать более совершенные методы научного прогнозирования, такие как метод экстраполяции и моделирования, что можно продемонстрировать на следующем примере. В данной работе приводится ретроспектива изучение мнений родительской общественности на предмет оценки профессионализма учительского состава по учебным округам протяжении четырех лет подряд. Результаты этого измерения приведены в имеющейся в работе таблице8484
  Там же.


[Закрыть]
.

Данные из этой таблицы можно представить графически в двухмерном пространстве по округам социальных координат, где по оси Y отложить степень профессионализма (в относительных единицах), а по оси X – время в годах (Диаграмма №1).


Диаграмма №1


Для большей наглядности точки на диаграмме можно соединить линиями (Диаграмма №2).


Диаграмма №2


Анализируя данные, приведенные на этих диаграммах, можно сделать вывод, что по мнению родительской общественности, профессионализм учительского состава растет. А исходя из того, что на протяжении четырех лет наблюдения профессионализм, в общем и целом, постоянно рос, используя метод интуитивного прогнозирования, можно сделать предположения, что в целом по Москве в последующий годы, два или три, он также будет расти. Однако, как видно из графика, не все округа вносят одинаковый вклад в общую динамику по Москве. Некоторые из них (Зеленоградский, Центральный, Западный, Юго-восточный) на протяжении этих лет не проявляли устойчивой динамики, а значит, вносили неоднозначный вклад в общую динамику показателя по мегаполису. Кроме того, если эти округа не демонстрировали устойчивого развития на протяжении всего изученного периода, значит, нельзя однозначно прогнозировать там ситуацию в будущем, а также вклад, которые они внесут в общую картину. Вот, пожалуй, и все выводы, которые можно сделать, не применяя более сложных аналитических и прогностических методов. Чтобы получить более ясную аналитическую картину, необходимо прибегнуть к более сложным, но эффективным, формализованным методам.

Для этого на основании имеющихся данных необходимо вычислить среднее значение показателя по г. Москве и провести интерполяцию для того, чтобы получить формулы математических зависимостей в целом по городу и для выбранных округов.

Результаты этих действий представлены на диаграмме №3. Здесь мы при помощи общедоступных программных (MS EXEL) средств произвели вычисление средних показателей по г. Москве, осуществили интерполирование методом полиномов третьего порядка, который дает в нашем случае наиболее точные результаты, построили соответствующие линии трендов и определили математическое выражение функции зависимости профессионализма учительского состава от времени в среднем по Москве (черная толстая линия) и для отдельно взятого (Центрального) округа (сиреневая).


Диаграмма №3


Рассчитанная компьютером формула соответственной математической зависимости в среднем по Москве выглядит следующим образом:

Y = 3,5x3 – 21056x2 +4E+07x – 3E+10 (8)

Соответствующая формула для Центрального округа будет выглядеть так:

Y = -11,167x3 +67187x2 – 1E+08x +9E+10 (9)

Таким образом, мы получили необходимые нам математические зависимости, которые дают нам возможность применять широкий спектр аналитических и прогностических методов, включая моделирование и экстраполяцию.

Получение математических формул (функций) предоставляет новые уникальные возможности анализа данных, полученных в результате проведения мониторинговых исследований. Методами дифференциального и интегрального исчисления можно оценить скорость течения выбранных социальных процессов, их ускорение, влияние внешних и внутренних движущих сил, величину работы, которую необходимо провести для того, чтобы привести нужный социальный показатель к желаемому значению, а также подсчитать комплексные энергозатраты (затраты материальных и нематериальных ресурсов), необходимые для реализации тех или иных управленческих задач. Детальное рассмотрение этих вопросов – предмет отдельного научного исследования. В рамках настоящей работы автор считает нужным лишь обозначить возможность дальнейшего развития теоретической части настоящей работы.

Как уже упоминалось выше, сопоставление мониторинговых данных, получаемых разными исследователями, является непростой задачей. Причиной тому – отличие методик соответствующих социологических опросов, включая построение анкет. Очевидно, что даже разные редакции формулировки одного и того же вопроса могут вызвать разную реакцию респондентов. Но еще более серьезной проблемой является расхождение в критериях оценки мнения анкетируемых, представляющих из себя варианты ответов на формализованные вопросы, предлагаемые респондентам. Обычно используемые ответы, построенные по принципу «да», «нет», «затрудняюсь ответить» или «да», «нет», «скорее да, чем нет», «скорее нет, чем да», «удовлетворен в значительной степени», «мало удовлетворен» и тому подобные, выстраивают социометрические шкалы, отличающиеся чрезмерно высокой степенью неопределенности.

Если не говорить о том, что возможность сопоставления таких шкал между собой весьма проблематична, эти критерии, сами по себе, могут вызывать весьма различное понимание и истолкование анкетируемых, что не может не отразиться на достоверности результатов опроса и затрудняют выявление действительного мнения людей относительно поставленных вопросов.

А. Д. Гетманова8585
  Гетманова, Александра Денисовна. Классическая и неклассические логики – необходимый компонент науки и современного образования. / А. Д. Гетманова; Департамент образования г. Москвы, Гос. об-разоват. учреждение высш. проф. образования г. Москвы «Моск. гор. пед. ун-т» (ГОУ ВПО МГПУ), Общеунив. каф. философии. – М.: МГПУ, 2010. – 95 с.


[Закрыть]
обнаружила в этом серьезную логическую неопределенность и предложила использовать для решения этой проблемы многозначные логики с различными значениями истинности, в частности, 6-, 8-, 9– или 12-значные логики с дробными значениями критериев от единицы до нуля, например: 1, 15/16, 7/8, ¾, ½, ¼, 1/8, 1/16, 0. Очевидно, такая последовательность задает вполне определенную шкалу, но имеет один существенный недостаток, такой как трудность восприятия существенной частью анкетируемых, по тем или иным причинам, испытывающих трудности в вычислении дробей. Однако, существует простое и удобное решение этой проблемы. Автор считает значительно более эффективным, и предлагает в качестве универсальной социометрической шкалы последовательность, основанную на непрерывном ряде натуральных чисел, содержащую нечетное число элементов, например: 0, 1, 2, 3, 4, 5, 6 или 0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, представляющих собой соответственно 7-значные и 11-значные линейные шкалы.

Еще более подходящей в исследованиях, связанных с анкетированием образовательной общественности (школьников, родителей, педагогов) автор считает хорошо известную пятибалльную систему: 1, 2, 3, 4, 5, которая легко воспринимается и идентифицируется абсолютным большинством респондентов. В этом случае формализованный вопрос будет строиться следующим образом: «Оцените по пятибалльной шкале [индикатор]», либо «Какую Вы дали бы оценку по пятибалльной шкале [индикатор]». В случае использования при анкетировании, исследования, построенные на предлагаемой системе критериев, будут лишены указанных выше недостатков, их результаты будут хорошо сопоставимыми с аналогичными, повысится их анализируемость средствами высшей математики.

ЗАКЛЮЧЕНИЕ

В настоящее время мониторинг не используется в системе образования в полную силу своих возможностей. Причиной этому является пробел в его социально-философском осмыслении как достаточно универсального и высокоэффективного метода научного познания. Настоящая работа впервые позволяет восполнить пробел философско-методологического анализа оснований мониторинга образования.

Основываясь на своем научном опыте участия в широкомасштабных мониторинговых исследованиях системы общего (полного) среднего образования города Москвы, автор в настоящей работе обосновывает свое социально-философское видение общественно-государственного социально-управленческого мониторинга образования как когнитивной системы и предлагает научно-методические рекомендации повышения эффективности мониторинговых исследований.

Нами доказано, что мониторинг общего (полного) среднего образования должен представлять целостную комплексную научную социально-управленческую когнитивную систему, базирующуюся на принципах общественно-государственного подхода. Система образования – один из общественных институтов, целенаправленно сформированный сложнейшей когнитивной системой, которой является общество. Институты гражданского общества выражают консолидированные потребности различных социальных групп в области образования, являются заказчиками образовательных услуг. В виду этого степень использование обратной связи «государство-общество» является ключевым показателем комплексного развития системы образования в общественных интересах. Мониторинг системы образования, в основу которого заложен комплексный общественно-государственный подход, наилучшим образом отвечает интересам решения задач, органически стоящих перед системой образования и представляет собой самостоятельный высокоэффективный метод социально-философского научного познания в системе образования.

При этом, систему образования можно рассматривать как многомерное социальное пространство с тем, чтобы описывать динамику находящихся в нем объектов и происходящих в нем процессов максимально достоверно и точно. Это задача требует более точного понимания социальной мобильности и может быть решена только с использованием естественнонаучного инструментария и синергетической методологии.

Комплексный общественно-государственный социально-управленческий мониторинг образовательных учреждений и учебных округов является информационно-аналитическим методом, позволяющим не только выяснить состояние конкретного образовательного учреждения с точки зрения эффективности возложенных на него функций, но и с достаточной степенью точности и достоверности прогнозировать развитие образовательных систем в реальном пространственно-временном измерении. Для этого, мониторинг общего (полного) среднего образования должен представлять собой целостную комплексную научную когнитивную систему, интегрированную в социально-управленческую практику. В этом случае, мониторинг позволит не только исследовать и определять закономерности общественного развития образовательных систем, но и прогнозировать последствия управленческих решений на качественно новом уровне, снижая управленческие риски. Регулирование управленческих рисков – еще одна задача, решению которой способствует настоящая работа.

Перевод закономерностей социальной динамики на язык высшей математики делает возможным моделирование и прогнозирование в образовании. С помощью существующих математических методов возможно создавать математические модели происходящих в образовательной среде процессов, и на этой основе осуществлять достаточно точное прогнозирование. Прогнозирование – важнейший способ повысить эффективность управленческой деятельности.

Необходимо широкое использование в практике управления системой общего (полного) среднего образования мониторинговых технологий общественно-государственной оценки, предусматривающих соединение государственных статистических показателей и результатов социологических опросов мнений образовательной общественности в лице учащихся, их родителей, педагогов и руководителей средних учебных заведений. Это позволит значительно увеличить эффективность деятельности образовательных учреждений и учебных округов по реализации возложенных на них функций и обеспечить устойчивое развитие системы столичного образования.

Для достижения наибольшей эффективности мониторинг в системе образования должен быть неразрывно вплетен как в СТРУКТУРУ, так и в ДЕЯТЕЛЬНОСТЬ системы управления образованием разных уровней в структурном, функциональном и коммуникационном аспектах в виде когнитивной системы сквозного мониторинга, действующей на принципах общественно-государственной оценки. Такая система представляется оптимальной для реализации консолидированного общественно-государственного заказа. Она должна быть многоуровневой и пронизывать систему образования насквозь снизу доверху, с тем, чтобы наилучшим образом осуществлялась двусторонняя связь между государством и обществом в образовательной сфере. Такой принцип целесообразно реализовать в качестве не только управленческой политики, но и организационной системы. Необходима разработка, внедрение и непрерывное совершенствование социально-управленческих мониторинговых методов системного изучения, оценки эффективности деятельности учреждений столичного образования по реализации целей и решению совокупности объективных задач, ставящихся перед ней современным российским обществом.

В течение ряда лет в Москве проводились смотры образовательных округов в форме общественно-государственной мониторинговой оценки, осуществлялись изучение и учет мнений основных категорий участников образовательного процесса. Целесообразно возродить такую практику, которая может стать важной составляющей механизма ежегодного подведения итогов реализации столичной образовательной политики.

Внедрение в управленческую практику общественно-государственного мониторинга позволит поддерживать оптимальную «обратную связь» государство-общество в системе управления и строить конструктивный диалог между субъектами и объектами управления в социальной сфере, органами власти и обществом. Необходимо унифицировать систему критериев и показателей общественно-государственной оценки образования, с тем, чтобы добиться сопоставимости результатов мониторинговых исследований в области образования, осуществляемых разными исследовательскими коллективами. Автором предложена оптимальная для исследования системы образования линейная универсальная бальная шкала критериев мониторинговой оценки, разработанная в соответствии с принципами многозначной логики А. Д. Гетмановой. Внедрение этой шкалы позволит существенно повысить достоверность и анализируемость мониторинговых данных, а значит, эффективность их использования, повысить их прогностический потенциал.

Ограниченный объем данной книги не позволяет охватить весь спектр вопросов, связанных с затронутой в работе проблематикой. Целесообразно продолжение исследований в заданном направлении, в особенности в том, что связано с вопросами моделирования и прогнозирования социальных процессов в образовании, обработки и математического анализа мониторинговых данных.


Страницы книги >> Предыдущая | 1 2 3 4 5 6 7 8 9 | Следующая
  • 0 Оценок: 0

Правообладателям!

Это произведение, предположительно, находится в статусе 'public domain'. Если это не так и размещение материала нарушает чьи-либо права, то сообщите нам об этом.


Популярные книги за неделю


Рекомендации