Электронная библиотека » Виктор Мельников » » онлайн чтение - страница 9


  • Текст добавлен: 30 мая 2023, 13:22


Автор книги: Виктор Мельников


Жанр: Прочая образовательная литература, Наука и Образование


Возрастные ограничения: +12

сообщить о неприемлемом содержимом

Текущая страница: 9 (всего у книги 17 страниц)

Шрифт:
- 100% +

Некоторые опасения на этот счет отмечаются и в Стратегии развития ИИ, где говорится о том, что отсутствие понимания того, как искусственный интеллект развивается и достигает конечных результатов, является одной из причин низкого уровня доверия к современным технологиям искусственного интеллекта и может стать препятствием для их развития. Кроме того, в Стратегии подчеркивается, что создание сильного универсального искусственного интеллекта, способного, подобно человеку, решать различные задачи, мыслить, взаимодействовать и адаптироваться к изменяющимся условиям, является сложной научно-технической проблемой, решение которой находится на пересечении различных сфер научного знания – естественно-научной, технической и социально-гуманитарной. Решение этой проблемы может привести не только к позитивным изменениям в ключевых сферах жизнедеятельности человека, но и к негативным последствиям, вызванным социальными и технологическими изменениями, которые сопутствуют развитию технологий искусственного интеллекта.

Илон Маск говорил: «Полагаю, что Искусственный Интеллект рано или поздно прикончит всех нас!»

Так ли это?

Время, конечно, покажет…

По моему скромному мнению, этого не будет очень долго или не произойдет вовсе никогда, и вот почему:

– Рассмотрим вопрос с научной точки зрения. В нашем головном мозге порядка 86—100 млрд нейронов (нейронных клеток), которые меняют свое состояние до 50 раз в сек. Число возможных состояний нашего мозга = 10 1 000 000 (количество возможных комбинаций возбуждения или торможения нейронов). Для сравнения количество атомов во Вселенной = 10 80. Таким образом современная наука и техника сегодня и в ближайшие десятилетия не в состоянии будет создать суперкомпьютер, носитель и искусственный интеллект подобный нашему с вами мозгу.

– Мы с вами находимся еще в самом начале пути, практически в отправной его точке. И именно сейчас закладываются основы для дальнейшего развития и применения искусственного интеллекта, включая рассматриваемую нами Стратегию, которая преследует своей целью создать условия для эффективного взаимодействия государства, организаций, в том числе научных, и граждан в сфере развития искусственного интеллекта, что в свою очередь должно позволить российским технологиям искусственного интеллекта занять лидирующие позиции на мировом рынке.

– Несомненно и то, что над задачей создания и развития ИИ необходимо работать. Его применение в различных отраслях экономики уже сейчас бесспорно является необходимым. Если рассматривать этот вопрос с позиции государства, наличие универсального (сильного) искусственного интеллекта – это стратегическое преимущество в обороноспособности, экономике, политике, и т. д.

В дополнение отметим, что несмотря на все имеющиеся противоречия, внутреннюю борьбу и серьезные опасения Илон Макс не только не отказался от идеи ИИ, но и финансирует организацию OpenAI, которая занимается разработкой управляемого и безопасного Основного Искусственного Интеллекта (artificial general intelligence, AGI). В 2019 году в OpenAI разработали и запустили свой Искусственный Интеллект, который назвали GPT2. Особенностью данной системы является то, что она способна писать не просто предложения, но и целые романы, поддерживать дискуссию с людьми, а также полностью заменить собой целые новостные агентства, а также способна формировать и управлять общественным мнением.


Как отмечается в Национальной стратегии развития искусственного интеллекта на период до 2030 года, стремительное развитие технологий искусственного интеллекта сопровождается существенным ростом как государственных, так и частных инвестиций в их развитие, а также в разработку прикладных технологических решений на основе искусственного интеллекта.



Рисунок 9. Количество компаний, принимавших участие в разработках технологии ИИ с разделением по странам


По оценкам международных экспертов, инвестиции в технологии искусственного интеллекта выросли с 2014 по 2017 год в три раза и составили около 40 млрд. долларов США. В 2018 году мировой рынок технологических решений, разработанных на основе искусственного интеллекта, составил 21,5 млрд. долларов США и, по прогнозам экспертов, к 2024 году достигнет почти 140 млрд. долларов США.

Российский рынок решений в сфере искусственного интеллекта к 2024 году, как ожидается российскими экспертами, вырастет в 80 раз с 2 миллиардов рублей в 2018 году до 160 миллиардов рублей [5252
  .Дорожная карта развития «сквозной» цифровой технологии «нейротехнологии и искусственный интеллект». [Электронный ресурс] // digital.gov.ru URL: https://digital.gov.ru/uploaded/files/07102019ii.pdf


[Закрыть]
].


По некоторым оценкам, среди лидеров патентования в области ИИ присутствуют компании из США, Кореи, Германии, Японии и другие [5353
  .Токарев Б. Е., Токарев Р. Б. Анализ рынка искусственного интеллекта: динамика патентования технологий. Практический маркетинг №1 (275).2020. [Электронный ресурс] // cyberleninka.ru URL: https://cyberleninka.ru/article/n/analiz-rynka-iskusstvennogo-intellekta-dinamika-patentovaniya-tehnologiy


[Закрыть]
]. Тем не менее, на сегодняшний день такие китайские гиганты как Baidu, Tencent и Alibaba по портфелю патентов в области финтеха, аэрокосмической, оборонной промышленности, автомобилестроении, производстве, которые используют облачные технологии и решения на базе ИИ превосходят Facebook, Apple, Microsoft, Google и Amazon [5454
  .Китай доминирует по количеству патентов в сфере ИИ. [Электронный ресурс] www.iot.ru URL: https://iot.ru/promyshlennost/kitay-dominiruet-po-kolichestvu-patentov-v-sfere-ii


[Закрыть]
].



Рисунок 10. Топ-10 организаций мира по количеству заявок на изобретения и полезные модели в области искусственного интеллекта за период 2015—2019 гг.


Теперь дадим определение термину «технологии искусственного интеллекта»:

Технологии искусственного интеллекта – это технологии, основанные на использовании искусственного интеллекта, включая компьютерное зрение, обработку естественного языка, распознавание и синтез речи, интеллектуальную поддержку принятия решений и перспективные методы искусственного интеллекта.


К передовым направлениям исследований в области искусственного интеллекта в этих компаниях можно отнести следующие группы технологических задач [5555
  .Мировые лидеры в области искусственного интеллекта по публикационной и патентной активности. [Электронный ресурс] // www.нтр.рф URL: https://нтр.рф/upload/iblock/9be/Мировые%20лидеры%20в%20области%20искусственного%20интеллекта.pdf


[Закрыть]
]:

– IBM: автоматизация рутинных задач, прогнозирование результатов обоснованных решений на основе данных; технологии нейролингвистического программирования; машинное обучение; проектирование нейронных сетей.

– Samsung: cбор и управление данными о пользователях, разработка системы безопасности для обнаружения и идентификации уязвимостей сервисов.

– Microsoft: машинное обучение, интеллектуальный анализ изображений, понимание речи, прогнозирование на основе данных и имитации интеллектуальных возможностей человека.

– Google: машинное обучение, идентификация языка, распознавание изображений, текста, выражений лиц, проверка переводов.

– Guangdong Oppo Mobile Telecommunications: распознавание лиц, изображений, создание систем улучшения визуальных объектов и фотографий.

– Toyota: автоматизация движения транспортных средств, идентификация передвижения пешеходов, соседних автомобилей, определение привычек и предпочтений водителя.

– LG: повышение качества изображения и звука; анализ контента, предпочтений пользователя; обработка и понимание естественного языка для перевода текста и ответов на запросы.

– Intel: разработка бесконтактных интерфейсов, компьютерное зрение, машинное обучение.

– Tencent Technology: распознавание лиц, медицинская диагностика, беспилотные автомобили.

– BOE Technology: идентификация пользовательской информации, анализ потребностей потребителя.


В свою очередь, в Стратегии развития ИИ делается упор на то, что фундаментальные научные исследования должны быть направлены, прежде всего, на создание принципиально новых научных результатов, в том числе на создание универсального (сильного) искусственного интеллекта, включая реализацию следующих приоритетов:

– Алгоритмическая имитация биологических систем принятия решений, в том числе распределенных коллективных систем, таких как пчелиный рой или муравейник.

– Автономное самообучение и развитие адаптивности алгоритмов к новым задачам.

– Автономная декомпозиция сложных задач, поиск и синтез решений.


В мире происходит ускоренное внедрение технологических решений, разработанных на основе искусственного интеллекта, в различные отрасли экономики и сферы общественных отношений.



Рисунок 11. Распределение долей размеров портфелей патентов по заявленным сегментам применения


Согласно Стратегии, использование технологий искусственного интеллекта в отраслях экономики должно носить «сквозной» характер и способствовать созданию условий для улучшения эффективности и формирования принципиально новых направлений деятельности хозяйствующих субъектов, в том числе за счет:

– Повышения эффективности процессов планирования, прогнозирования и принятия управленческих решений (включая прогнозирование отказов оборудования и его превентивное техническое обслуживание, оптимизацию планирования поставок, производственных процессов и принятия управленческих и финансовых решений).

– Автоматизации рутинных часто повторяющихся производственных операций.

– Использования автономного интеллектуального оборудования и робототехнических комплексов, интеллектуальных систем управления логистикой.

– Повышения безопасности сотрудников при выполнении бизнес-процессов (включая прогнозирование рисков и неблагоприятных событий, снижение уровня непосредственного участия человека в процессах, связанных с повышенным риском для его жизни и здоровья).

– Повышения лояльности и удовлетворенности потребителей (в том числе направление им персонализированных предложений и рекомендаций, содержащих существенную информацию).

– Оптимизации процессов подбора и обучения кадров, составления оптимального графика работы сотрудников с учетом различных факторов.


По оценкам экспертов, ожидается, что благодаря внедрению таких решений рост мировой экономики в 2024 году составит не менее 1 трлн. долларов США, что обусловлено следующими факторами:

– Общий («сквозной») характер применения прикладных технологических решений, разработанных на основе искусственного интеллекта.

– Высокая степень влияния технологических решений, разработанных на основе искусственного интеллекта, на результативность деятельности организаций и человека, в том числе связанной с принятием управленческих решений.

– Высокая доступность инструментов для разработки на основе искусственного интеллекта технологических решений.

– Потребность в обработке больших объемов данных, создаваемых как человеком, так и техническими устройствами, для повышения эффективности экономической и иной деятельности.


Как отмечается далее в Стратегии, Российская Федерация обладает существенным потенциалом для того, чтобы стать одним из международных лидеров в развитии и использовании технологий искусственного интеллекта и этот потенциал строится прежде всего на ВУЗах, которые работают в данном направлении:



Рисунок 12. Топ-20 российских организаций, публикующих результаты научных исследований в области искусственного интеллекта в международных базах научного цитирования


В свою очередь российские компании и те из них, которые ориентируются на документ «Дорожная карта развития «сквозной» цифровой технологии «нейротехнологии и искусственный интеллект», работающие в сфере информационных технологий, решения которых пользуются высоким спросом и занимают лидирующие позиции на российском рынке и рынке Евразийского экономического союза ведут активную работу по следующим направлениям:

– Компьютерное зрение – класс решений, которые находят, отслеживают и классифицируют объекты, а также синтезируют видео и изображения.

– Обработка естественного языка – класс решений, направленных на понимание языка и генерацию текста, несущего смысл, а также общение на естественном языке при взаимодействии компьютера и человека.

– Распознавание и синтез речи – класс решений, позволяющих осуществлять перевод речевого запроса в текстовый вид, в том числе анализ тембра и тональности голоса, распознавание эмоций, а также синтезировать речь.

– Рекомендательные системы и интеллектуальные системы поддержки принятия решений – класс решений, обеспечивающий выполнение процесса без участия человека, поддержку в выборе решений, а также предсказание объектов, которые будут интересны пользователю.

– Перспективные методы и технологии в ИИ – методы и технологии, развитие которых влияет на все вышеперечисленные, а также на создание новых сквозных цифровых технологий в области ИИ.


Согласно данным ТАСС, в конце 2019 года Президиум Правительственной комиссии по цифровому развитию, использованию информационных технологий для улучшения качества жизни и условий ведения предпринимательской деятельности одобрил семь дорожных карт по «сквозным» цифровым технологиям. Согласно дорожным картам, их реализация потребует в целом 1,15 трлн рублей, в том числе порядка 247 млрд рублей бюджетных средств.

Дорожная карта развития «сквозной» цифровой технологии «нейротехнологии и искусственный интеллект» – самая дорогая в плане реализации среди всех семи дорожных карт по «сквозным» цифровым технологиям. Согласно ей, на развитие ИИ и нейротехнологии необходимо потратить в общей сложности 425 млрд рублей, из которых 56,8 млрд рублей – бюджетные средства, 334,9 млрд рублей – внебюджетные, 33,2 млрд рублей пойдут отдельно на преодоление барьеров развития ИИ.

Реализация дорожных карт по «сквозным» цифровым технологиям предусмотрена федеральным проектом «Цифровые технологии» нацпроекта «Цифровая экономика». Финансирование всего федерального проекта «Цифровые технологии» в 2019—2024 годах составляет 451,8 млрд рублей, включая 282,2 млрд рублей из федерального бюджета [5656
  .Рынок искусственного интеллекта в России к 2024 году может вырасти до 160 млрд рублей. [Электронный ресурс] // tass.ru URL: https://tass.ru/ekonomika/6996017


[Закрыть]
].


В Стратегии развития ИИ выделяют следующие основные принципы развития и использования технологий искусственного интеллекта, соблюдение которых обязательно:

– Защита прав и свобод человека: обеспечение защиты гарантированных российским и международным законодательством прав и свобод человека, в том числе права на труд, и предоставление гражданам возможности получать знания и приобретать навыки для успешной адаптации к условиям цифровой экономики.

В документе также отмечается, что для стимулирования развития и использования технологий искусственного интеллекта необходимы адаптация нормативного регулирования в части, касающейся взаимодействия человека с искусственным интеллектом, а также выработка соответствующих этических норм. Кроме того, подчеркивается необходимость создания правовых условий и установление четких процедур, которые бы ограничивали возможности принятия искусственным интеллектом отдельных решений, которые, в свою очередь, могли бы ущемлять права и законные интересы граждан.

И вот тут мы с вами сталкиваемся с неким, возможным, противоречием. С одной стороны, Стратегия хочет ограничить возможности искусственного интеллекта, предупредив нарушение прав и свобод человека. С другой стороны, Стратегия однозначно определяет необходимость создания универсального (сильного) искусственного интеллекта, использование которого, например, в интересах защиты нашей страны от внешних угроз может существенно нарушить права и свободы людей, живущих не только в РФ, но и в других государствах.

Тут есть над чем подумать…

– Безопасность: недопустимость использования искусственного интеллекта в целях умышленного причинения вреда гражданам и юридическим лицам, а также предупреждение и минимизация рисков возникновения негативных последствий использования технологий искусственного интеллекта.

– Прозрачность: объяснимость работы искусственного интеллекта и процесса достижения им результатов, недискриминационный доступ пользователей продуктов, которые созданы с использованием технологий искусственного интеллекта, к информации о применяемых в этих продуктах алгоритмах работы искусственного интеллекта.

– Технологический суверенитет: обеспечение необходимого уровня самостоятельности Российской Федерации в области искусственного интеллекта, в том числе посредством преимущественного использования отечественных технологий искусственного интеллекта и технологических решений, разработанных на основе искусственного интеллекта.

– Целостность инновационного цикла: обеспечение тесного взаимодействия научных исследований и разработок в области искусственного интеллекта с реальным сектором экономики.

– Разумная бережливость: осуществление и адаптация в приоритетном порядке существующих мер, направленных на реализацию государственной политики в научно-технической и других областях.

– Поддержка конкуренции: развитие рыночных отношений и недопустимость действий, направленных на ограничение конкуренции между российскими организациями, осуществляющими деятельность в области искусственного интеллекта.


К основным механизмам развития искусственного интеллекта в Стратегии относят:

– Обеспечение роста предложения конкурентоспособных в мире российских продуктов и услуг, созданных и оказываемых с использованием искусственного интеллекта.

– Обеспечение роста спроса со стороны российских граждан, организаций и государственных органов на продукты и услуги, созданные и оказываемые с использованием искусственного интеллекта.


Систематизировав данные по каждому их разделов, к основным показателям оценки эффективности реализации Стратегии и ее основных задач развития искусственного интеллекта в РФ можно отнести следующие:

– В части поддержки научных исследований:

– К 2024 году основным показателем должен стать существенный рост: количества и индекса цитируемости в ведущих мировых научных изданиях, количества зарегистрированных результатов интеллектуальной деятельности, количества разработанных на основе результатов интеллектуальной деятельности в области искусственного интеллекта прикладных технологических решений, используемых в практической деятельности.

– В части разработки и развития программного обеспечения:

– К 2024 году должен существенно повыситься уровень участия российских специалистов в международном обмене знаниями, их вклад в создание открытых библиотек искусственного интеллекта. Российскими специалистами должны быть созданы широко применяемые в мире открытые библиотеки (координируемые российскими исследователями и научным сообществом) и программное обеспечение, в которых используются технологии искусственного интеллекта.

– К 2030 году должно быть разработано программное обеспечение, в котором используются технологии искусственного интеллекта, для решения задач в различных сферах деятельности. Российские организации, разрабатывающие такое программное обеспечение, должны войти в группу лидеров на мировом рынке.

– В части повышения доступности и качества данных:

– К 2024 году российским организациям должны быть доступны наборы данных, которые соответствуют методологиям их сбора и разметки и хранятся на общедоступных платформах. При этом персональные и иные данные, доступ к которым ограничен федеральными законами, должны быть надежно защищены, их обработка должна соответствовать международным обязательствам Российской Федерации в этой области.

– К 2030 году объем опубликованных на общедоступных платформах наборов данных должен быть достаточным для решения всех актуальных задач в области искусственного интеллекта, в том числе за счет публикации звуковых, речевых, медицинских, метеорологических, промышленных данных и данных систем видеонаблюдения.

– В части повышения доступности аппаратного обеспечения:

– К 2024 году должна быть создана инфраструктура поддержки отечественных организаций, осуществляющих деятельность в области искусственного интеллекта, включая создание высокопроизводительных центров обработки данных. Также должны быть разработаны российские микропроцессоры, не уступающие мировым аналогам по скорости и энергоэффективности.

– К 2030 году на российском и международном рынках должны быть широко представлены функционирующие образцы микропроцессоров с комплектом соответствующего программного обеспечения. Должны быть открыты специализированные центры обработки данных на основе российских микропроцессоров. Интеллектуальные устройства, в которых используются такие микропроцессоры, должны быть введены в обращение на соответствующем товарном рынке. Кроме того, должны быть разработаны принципиально новые типы архитектур вычислительных систем и зарегистрированы интеллектуальные права на них.

– В части повышения уровня обеспечения российского рынка технологий искусственного интеллекта квалифицированными кадрами и уровня информированности населения:

– К 2024 году должно существенно увеличиться число граждан, имеющих компетенции в области искусственного интеллекта и в смежных областях его использования, в том числе аспирантов и специалистов в области искусственного интеллекта, имеющих ученую степень. Российская Федерация должна стать привлекательной для трудоустройства квалифицированных специалистов в области искусственного интеллекта, в том числе в связи с высоким уровнем заработной платы и созданием благоприятных условий для работы.

– К 2030 году в России должны реализовываться образовательные программы мирового уровня для подготовки высококвалифицированных специалистов и руководителей в области искусственного интеллекта. Российские образовательные организации высшего образования должны занимать лидирующие позиции в мире по направлениям в области искусственного интеллекта. Дефицит специалистов в этой области должен быть устранен, в том числе за счет привлечения ведущих иностранных специалистов, имеющих ученую степень.

– В части создания комплексной системы регулирования общественных отношений:

– К 2024 году должны быть созданы необходимые правовые условия для достижения целей, решения задач и реализации мер, предусмотренных Стратегией.

– К 2030 году в Российской Федерации должна функционировать гибкая система нормативно-правового регулирования в области искусственного интеллекта, в том числе гарантирующая безопасность населения и направленная на стимулирование развития технологий искусственного интеллекта.


***

А еще, чуть ранее Герман Оскарович задал очень правильный вопрос: «… как направить развитие этой мощнейшей технологии, которую сегодня все называют главной технологией XXI века, во благо людям?»

Я же, в свою очередь, развивая тему книги и поднимаемых в ней проблем, хочу поддержать его в этом вопросе и дополнить его следующими вопросами: «Как Вы считаете, как изменится наша с вами жизнь в тот момент, когда технологии четвертой промышленной революции, включая развитие и повсеместное внедрение искусственного интеллекта, заработают в полную силу? Какое место мы с Вами будем занимать в этом новом мире?»

Рано или поздно, человек возложит ответственность за управление и обеспечение своей жизнью на «продукт своего творчества», а именно на роботов и искусственный интеллект. А если даже смотреть шире, на ряд роботизированных и автоматизированных систем, управляемых и обслуживаемых сотнями искусственных интеллектов, а не людьми. Возможно, мы станем с вами свидетелями событий, когда начнется война корпораций и их «продуктов творчества» – различных систем искусственного интеллекта в киберпространстве, а может быть и в повседневной реальности.

Говоря о внедрении искусственного интеллекта на конференции Artificial Intelligence Journey, Президент Республики Казахстан Токаев Касым-Жомарт Кемелевич отметил: «Возможно, сейчас эта задача выглядит утопической, а для кого-то наивной, но в конце концов когда-то, когда была создана Организация Объединённых Наций, была подготовлена и подписана Декларация о правах граждан, а до начала Второй мировой войны подобный документ также казался несбыточным и фантастическим».

Как отметил наш Президент Путин В. В.: «Наши планы повсеместного внедрения искусственного интеллекта, цифровой трансформации по глубине изменений во всех сферах, аналогов, безусловно, не имеют. Нет таких аналогов. Собственно говоря, их и нигде нет и нигде не было. Они действительно затронут каждого человека, каждую семью, каждую отрасль экономики и социальной сферы, каждую организацию и предприятие. И каждый уровень власти, каждый уровень управления, всю систему государственного управления».

В своей книге «Технологии четвертой промышленной революции» Клаус Шваб высказывает следующее мнение: «Проблема негативных и непредвиденных последствий становится особенно острой с учетом мощи технологий Четвертой промышленной революции и неопределенности ее долгосрочных воздействий на сложные социальные и экологические системы. Наибольшие опасения вызывает риск внезапного и непоправимого ущерба биосфере в процессе геоинженерных работ, а также развитие искусственного интеллекта, цели которого могут не соответствовать человеческим.» [5757
  .Шваб К. Технологии четвертой промышленной революции: монография: пер. с англ. М.: «Издательство «Эксмо», 2018. 320 с.


[Закрыть]
].


Но еще более интересные задачи нас с Вами ждут в ближайшем будущем, связанные с обсуждением и решением вопросов прав и свобод роботов, а также границ применения искусственного интеллекта в них.


Хочется сделать еще одно небольшое отступление и обратить внимание читателя на еще одну немаловажную проблему.

Вы никогда не задумывались над вопросом: «Кто те люди, которые работают над созданием искусственного интеллекта?» Вы не задумывались, что очень многие из людей не в состоянии решить собственные проблемы, не говоря о том, чтобы решать проблемы человечества!

В той ситуации, которая сформировалась в нашем обществе сегодня, когда средства массовой информации и социальные сети манипулируют людьми, разрушая в них такие понятия как «любовь к Матери и Отцу», «любовь к близкому», «любовь к Родине» и «любовь к Богу», навязывая им так называемые «блага общества», когда люди не знают где работать и как прокормить себя и детей, образование и здравоохранение претерпевают не лучшие времена, многие «специалисты» рассуждают о безоблачном «цифровом» будущем, а какая-то часть из них, находясь в нашей «суровой» реальности, работает над созданием искусственного интеллекта.

Может ли человек, в котором разрушены система ценностей и мораль, думающий о «куске хлеба», создать нечто совершенное и прекрасное?

Ответ очевиден…


Нельзя не согласиться с Президентом Российской Федерации Путиным В. В. в том, что «Искусственный интеллект – это, безусловно, основа очередного рывка вперёд всего человечества в своем развитии», но мне бы совсем не хотелось разделить мнение Илона Маска о том, что: «Искусственный Интеллект рано или поздно прикончит всех нас» или мнение британского физика Стивена Хокинга о превосходстве искусственного интеллекта над человечеством.

Мне кажется, сегодня, как никогда, необходимо создать условия для воспитания гармонично развитой и социально ответственной личности на основе духовно-нравственных ценностей, с учетом исторических и национально-культурных традиций.

Подводя итог, еще раз хочу вернуться к словам Протоиерея Константина Волкова, которые он написал в своей книге «Тишина и свет в суете мирской»: «Наш ум может быть великолепным Божественным инструментом души, поскольку он обладает огромным духовным потенциалом».


Мы с вами еще в самом начале пути…


Страницы книги >> Предыдущая | 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 | Следующая
  • 0 Оценок: 0

Правообладателям!

Это произведение, предположительно, находится в статусе 'public domain'. Если это не так и размещение материала нарушает чьи-либо права, то сообщите нам об этом.


Популярные книги за неделю


Рекомендации