Разработка методики мониторинга и оценки контента веб-сайтов общеобразовательных организаций для повышения их информационного наполнения

ВВЕДЕНИЕ

Ранее, в ходе диссертационного исследования, авторы в работах [1][2] анализировали влияние современных интернет-изданий на общество. В рамках этого исследования была предложена концепция для отслеживания и анализа данных электронных новостных ресурсов. В материалах указанных публикаций представлены общая архитектура и алгоритм функционирования разрабатываемой системы. В статье [3] продемонстрировано моделирование данной системы с применением методов модельно-ориентированного системного инжиниринга. В настоящей работе представлена методика мониторинга и оценки контента для программного комплекса, направленная на повышение качества наполнения школьных веб-ресурсов.

Законодательством Российской Федерации закреплено определение – информационная открытость, а также структура официального сайта образовательной организации в информационно-телекоммуникационной сети Интернет и формат представления информации [4][5].

Под информационной открытостью подразумевается обеспечение доступности сведений о деятельности образовательной организации для широкой общественности, включая родителей, обучающихся, сотрудников и других заинтересованных сторон.

Информационная открытость законодательно регламентирует, какую информацию образовательные организации должны публиковать на своих сайтах в обязательном порядке. Разработаны Приказы, Распоряжения, Методические указания и прочие документы, в которых расписаны перечни разделов сайта общеобразовательной организации, перечни обязательных к публикации документов. Информационная открытость контролируется надзорными органами, поэтому образовательные организации обеспечивают своевременное размещение обязательной информации на своих сайтах.

Иная ситуация сложилась с информацией, которая не является законодательно-обязательной к публикации, но востребована пользователями.

Информационное наполнение (контент) – это поддержание информационного наполнения сайта в актуальном состояние, отслеживание наличия разделов, востребованных у пользователей, популярности размещенных материалов, количества посетителей сайта, времени проведения пользователями на сайте, количества просмотренных страниц за один визит (глубина просмотра).

Эффективное информационное наполнение веб-сайта должно полностью отражать его цели и соответствовать базовым информационным запросам аудитории. Согласно ожиданиям пользователей, ресурс должен предоставлять данные, максимально ориентированные на их конкретные задачи и ключевые потребности. При необходимости недостающая информация может быть доступна через гиперссылки на внешние веб-платформы, где она размещена [6][7].

Ключевыми словами в определении термина информационное наполнение, в отличие от термина информационная открытость, являются: соответствие ожиданиям пользователей, информационные потребности (то есть важность информации для учеников, родителей и сотрудников школы). Можно выделить «неформальное» отличие информационной открытости от информационного наполнения. Первое направлено на официальную, законодательно обязательную для размещения информацию, а второе, в большей степени, на информацию, которая должна привлекать пользователей на сайт за счет популярности материалов, интересностью, актуальностью и достоверностью.

В табл. 1 показаны сравнительные характеристики информационной открытости и информационного наполнения сайтов школ. 

Для решения задачи повышения информационного наполнения сайтов школ востребованной информацией необходимо разработать классификацию такой информации с целью использования ее в методике для автоматизированного мониторинга и оценки с помощью программного комплекса.

МАТЕРИАЛЫ И МЕТОДЫ

Для формирования классификации сайтов, включающей информацию, не закрепленную законодательно, но востребованную среди пользователей, был выполнен анализ выборки школьных сайтов (более 300 ресурсов в различных регионах РФ). В результате исследования выделен ориентировочный список разделов, используемых в качестве критериев оценки информативности сайтов. Общее количество таких параметров составило 70. Фрагмент данной классификации приведен в табл. 2. 

Методика мониторинга и оценки информационного обеспечения сайтов общеобразовательных организаций разработана с учетом пользовательского подхода, ориентированного на анализ потребностей и ожиданий целевых аудиторий (обучающихся, родителей, педагогических работников), которые определены как ключевые критерии оценки школьных веб-ресурсов.

В разделе «Общие положения» методики сформулированы: объект мониторинга, его предмет, практическая значимость, а также источники собираемых данных.

Задача исследования состоит в том, чтобы:

– выявить проблемы информационного взаимодействия образовательных учреждений с внешней средой;

– рассмотреть перспективы их цифрового развития;

– оценить, насколько школьные сайты способны эффективно отвечать на информационные запросы пользователей и улучшать качество онлайн-коммуникаций.

Проведение мониторинга сайта общеобразовательной организации осуществляется в два этапа (рис. 1):

1. Cамообследование, мониторинг сайта общеобразовательной организацией на основании приказа руководителя: октябрь, май и размещение результатов на сайте общеобразовательной организации.
2. Мониторинг сайта межшкольным методическим центром:

– промежуточный мониторинг сайтов, оценка сайта, с целью оказания методической помощи, в течение года;

– контрольный мониторинг сайтов 2 раза в год: в начале и в конце учебного года.

Методика расчета интегрированного показателя информационного наполнения школьных сайтов основана на параметрах оценки информативности по классификации разделов сайта, представленных в табл. 2. Показатель формируется как совокупность:

– сводного рейтинга мониторинга сайта по классификации разделов – комплексного интегрального индикатора, объединяющего результаты, по наличию или отсутствию разделов;

– весов наполненности разделов, то есть заполнен или нет раздел, присутствующий на сайте.

Для информативности используется средневзвешенное значение оценок параметров сводного рейтинга и весов.

Расчет интегрированного показателя. Коэффициент наличия раздела на сайте школы (R_n = да – 1, нет – 0). Значение коэффициента при анализе сайта с помощью таблицы 2 составляет 0–70 баллов (как сумма имеющихся разделов). Однако следует отметить, что наличие раздела на сайте не означает, что он заполнен или информация на нем не потеряла актуальность. Поэтому необходимо применять корректировочные веса (W_n = от 0 до 1) к коэффициенту каждого имеющегося на сайте раздела. Если раздел заполнен (имеется хотя бы один подраздел из указанных в таблице 2 курсивом или заполнен основной раздел), W_n = 1, если не заполнен, W_n = 0. Тогда показатель рейтинга информационного наполнения сайта I_{informativnost} будет вычисляться как средневзвешенная сумма набранных коэффициентов, умноженных на их веса по формуле (1). Максимальное значение I_{informativnost} = 1.

, (1)

где:

R_n – коэффициент наличия на сайте n-го раздела из таблицы 2 по направлению «Информативность» (да – 1, нет – 0);

W_n – вес раздела (заполнен – 1…, не заполнен – 0);

n – количество имеющихся разделов (0–70).

РЕЗУЛЬТАТЫ И ИХ ОБСУЖДЕНИЕ

Разработанный интегрированный показатель информационного обеспечения сайтов школ, который принимает значение от 0 до 1, позволяет сформировать таблицу классификации сайтов школ по информационному наполнению (табл. 3). 

Для апробации методики и проверки корректности интегрированного показателя информационного обеспечения сайтов школ был проведен мониторинг сайтов из общероссийского рейтинга образовательных сайтов (https://rating-web.ru), получивших наибольший балл за 2024 г.

С помощью сервиса similarweb.com, предоставляющего сведения о посещаемости сайтов, времени пребывания посетителей на сайте, глубине просмотра страниц и проценте отказа от просмотра сайтов, были отобраны данные о 100 школьных сайтах (внешние независимые показатели). Фрагмент таблицы представлен на рисунке 2.

Данные показатели можно применить в корреляционном сравнении с интегрированным показателем информационного обеспечения.

Для получения показателя I_{informativnost} была проведена «ручная» оценка 11 сайтов по параметрам информативности чек-листа таблицы 2 (рис. 3).

Проведем оценку корреляции интегрированного показателя с показателями глубины просмотра страниц сайтов и времени нахождения посетителя на сайте по методу Пирсона и Спирмена.

Коэффициент корреляции Пирсона (r) рассчитывается по формуле (2):

(2)

где:

x и y – две сравниваемые переменные (интегрированный показатель и глубина просмотра страниц);

n – количество точек данных (количество сайтов);

∑xy – сумма произведения парных оценок (x и y);

∑x ² и ∑y ² – суммы квадратов для каждой переменной.

Рассчитаем коэффициент корреляции по формуле Пирсона:

Коэффициент корреляции Пирсона – это показатель, который демонстрирует силу и направление линейной зависимости между двумя непрерывными переменными. Его значение может находиться в диапазоне от –1 до 1.

С помощью этого коэффициента можно определить, насколько данные на диаграмме рассеяния приближаются к прямой линии регрессии:

Если коэффициент равен +1, то это означает наличие идеальной положительной линейной зависимости: при увеличении одной переменной другая также строго увеличивается.

Если коэффициент равен –1, то это указывает на идеальную отрицательную линейную связь: при увеличении одной переменной другая пропорционально уменьшается.

Если коэффициент равен 0, то это говорит об отсутствии линейной корреляции между переменными: их изменения не связаны прямо пропорциональной зависимостью.

Стоит отметить, что коэффициент Пирсона не учитывает нелинейные связи и не подразумевает наличия причинно-следственной связи между переменными.

Получившийся коэффициент 0,5 говорит о 50-процентной зависимости просмотра сайта от его наполняемости.

Тем не менее следует провести второй расчет по ранговой корреляции Спирмена, которая исключает линейную зависимость данных.

Чтобы рассчитать коэффициент, нужно выполнить следующие шаги:

Сначала нужно упорядочить признаки по возрастанию, то есть распределить их в порядке от меньшего к большему. Каждому признаку присваивается порядковый номер – ранг. Если два признака имеют одинаковые значения, им присваивается одинаковый ранг, который равен среднему арифметическому от их порядковых номеров.

Затем для каждой пары сопоставляемых значений необходимо определить разность рангов по указанной формуле (3):

(3)

Возведение в квадрат разность d_i и нахождение общей суммы, ∑d ².

Вычисление коэффициента корреляции рангов по формуле (4):

(4)

где d ² – квадрат разностей между рангами; n – количество признаков, участвовавших в ранжировании.

Коэффициент ранговой корреляции Спирмена обладает следующими свойствами:

1. Нормируемость: значение коэффициента корреляции рангов варьируется в пределах от –1 до +1. Если p= 1, это может указывать на наличие прямой связи между рядами. Если p = –1, это может свидетельствовать о наличии обратной связи.
2. Независимость: для получения адекватного результата не требуется, чтобы коррелируемые ряды подчинялись нормальному закону распределения.

Было выполнено (рис. 4):

1. Значения А и В были проранжированы, их ранги внесены в колонки «Ранг А» и «Ранг В».
2. В колонке dбыла рассчитана разница между рангами А и В.
3. В колонке d² каждая разница d была возведена в квадрат.
4. Затем была найдена сумма квадратов.
5. Далее был выполнен расчет коэффициента ранговой корреляции r_sс использованием формулы.
6. В завершение были определены критические значения. 

Результат: r_s = 0.584.

Коэффициент Спирмена показал больший результат, подтверждающий корреляцию между данными просмотра сайтов и наполняемостью их контентом.

ЗАКЛЮЧЕНИЕ

Разработанная методика мониторинга и оценки информационного обеспечения, позволяющая провести классификацию сайтов школ по значениям интегрированного показателя информационного наполнения, составляет основу для разработки программного комплекса для автоматизации мониторинга и оценки информационного наполнения школьных сайтов.