ІГРОВА ПРОГРАМА ДЛЯ РОЗВИТКУ ДІТЕЙ З ОСОБЛИВИМИ ПОТРЕБАМИ

Анотація

Використовуючи мови програмування Python, JavaScript, HTML та CSS, в крос-платформному середовищі розробки PyCharm створено додаток у вигляді веб-сайту для покращення розвитку дітей з особливими потребами, насамперед – дітей з аутизмом та вадами слуху. Для реалізації цього завдання обрано найкращий та найефективніший метод подання інформації для дітей – гра.

При розробці потрібних для розвитку дитини ігор були використані як останні досягнення педагогічної та психологічної наук, так і можливості сучасної комп’ютерної техніки. В результаті, створений додаток містить ігри декількох різних типів. Зокрема, для розвитку дітей з проблемами аутизму створена гра, рішення в якій приймаються на основі використання експертних знань, а навчання дитини тут здійснюється через візуалізацію відповідних карток з зображеннями. Для дітей з порушеннями слуху може бути використаний набір ігор з запам’ятовуванням мови жестів через перегляд відео, які класифікуються за темами, а також через пошук слів чи літер алфавіту, що вивчаються, з їх представленням шляхом показу відповідних картинок. В основу гри, в якій вивчаються літери алфавіту, покладена ідентифікація ключових точок тіла дитини, що відповідають конкретній позі, яку вона приймає при своєму русі; з кожною з таких поз пов’язана певна літера абетки. Така гра допомагає покращити як координацію рухів, так і розумову активність дитини.

Перевірка вивченого та покращення результату навчання досягається з використанням технологій розпізнавання голосу.

При створенні додатку та для організації його роботи застосовані деякі підходи, що використовуються в системах штучного інтелекту. Зокрема, використовуються експертні знання та розпізнавання образів на основі комп'ютерного зору, а також технології розпізнавання голосу. Бази даних та знань, необхідні для роботи програми, створені в JavaScript, а управління цими додатками реалізується за допомогою фреймворку Django. При своїй роботі програма також використовує можливості спеціалізованих комп'ютерних бібліотек, у тому числі PoseNet (методу комп’ютерного бачення, який дозволяє оцінювати фігури людей на зображеннях та відео і визначає, де знаходяться ключові точки тіла людини) та p5.js (бібліотеки JavaScript із особливим акцентом на обробці зображень, яка надає користувачу набір функцій для малювання та дозволяє створити велику кількість варіантів відображення інформації – від статичних зображень для друку до анімованих схем та веб-формату).

Створений застосунок може бути використаний для розвитку дітей як з особливими потребами, так і без таких.

Ключові слова: JavaScript, PoseNet, p5.js, Django, веб-додаток, комп’ютерні ігри.