Knowledge Relative Assessment System
 
Перевод этой страницы:

Методика

Дистанционная аттестация

ответственных за энергосбережение в организации

Модернизация Российской экономики, обусловила [ 1, стр. 28, пункт 9 ] необходимость подготовить и аттестовать в 2011 - 2020 годах не менее 450 тысяч специалистов федеральных органов исполнительной власти, органов исполнительной власти субъектов Российской Федерации и органов местного самоуправления, ответственных за энергосбережение и повышение эффективности организаций с участием государства и муниципальных образований, а также специалистов организаций. Аттестацию такого количества специалистов могут осуществлять лишь, относительно, небольшое количество инженеров, обладающих соответствующей квалификацией. Даже в этом случае неизбежно возможны конфликтные и стрессовые ситуации [ 2 ], связанные с производственной загрузкой аттестуемых специалистов, а также с возможной разницей в квалификации проверяющих и проверяемых в пользу последних. На сегодня в процессе аттестации, в основном, используются два основных типа оценки знаний [ 3 ]: «объективная» (на основе тестов, состоящих из закрытых вопросов с вариантами ответов) и «субъективная» (на основе собеседования в виде открытых вопросов и личного суждения проверяющего о правильности и полноте ответов). Оба варианта имеют ряд существенных недостатков, с точки зрения аттестации высококвалифицированных специалистов:

  1. «Объективные» методы оценки
    1. Тесты быстро устаревают, например, вместе с изменением действующего законодательства.
    2. Сложность вопросов может существенно меняться, например, после публикации ключей теста в открытом доступе
    3. Уровень знаний тестируемых может превосходить уровень знаний авторов теста.
    4. Существенное влияние психофизического состояния тестируемого в момент проведения собеседования
    5. Стресс, вызванный ограничением времени ответа на вопрос.
    6. Стресс, вызванный невозможностью пользоваться справочной литературой, привычной в обычной деятельности.
  2. «Субъективные» методы оценки
    1. Уровень знаний тестируемых может превосходить уровень знаний авторов теста.
    2. Во время краткого собеседования сложно выяснить уровень знаний тестируемого по всем разделам
    3. Существенное влияние психофизического состояния проверяющего в момент проведения собеседования
    4. Существенное влияние психофизического состояния тестируемого в момент проведения собеседования
    5. Стресс, вызванный ограничением времени ответа на вопрос.
    6. Стресс, вызванный невозможностью пользоваться справочной литературой, привычной в обычной деятельности.

Так же, необходимо учитывать, что аттестации подлежат сотрудники организаций, из регионов географически удаленных друг от друга на большие расстояния, это дополнительно затрудняет аттестацию, увеличивая временные и финансовые затраты: для проведения аттестации отвлечение работников от выполнения повседневной деятельности, сопряженное с длительными переездами. Современные информационные технологии позволяют проводить оценку уровня знаний через сеть Интернет, что, в свою очередь, позволяет экономить средства и время на переездах, а также обеспечивает комфортное участие в тестировании специалистов, находящихся на территориях с существенной разницей во времени. На сегодня существует большое количество решений обеспечивающих проведение дистанционной оценки уровня знаний, они разделяются на платные (adobe.com, dimdim.com, yugma.com, skype.com, gotomeeting.com) и бесплатные (google.com, facebook.com, skype.com, oovoo.com, moodle.org, 15-51.com,) сервисы. Большинство услуг предоставляемых платными сервисами также представлено в составе бесплатных порталов. Таким образом, для внутреннего использования, в условиях сокращенного бюджета нет смысла расходовать средства на платные версии сервисов, намного эффективнее использовать эти средства на подготовку и проведение дистанционной аттестации. К сожалению, абсолютный лидер среди бесплатных средств дистанционного образования и оценки уровня знаний Moodle.ORG, использует для «объективного» тестирования системы, обладающие описанными недостатками, поэтому рассмотрим пример проведения дистанционной аттестации с использованием бесплатной системы 15-51.com, лишенной вышеперечисленных недостатков.

Сценарий проведения дистанционной аттестации

На базе Системы относительной оценки знаний (15-51.com), внутрикорпоративного портала учебно-аттестационного центра (УАЦ) и аттестационной комиссии УАЦ.

Портал 15-51.com использует инновационную методику относительной оценки знаний [ 4 ], позволяющую получить выборку участников тестирования по одной теме или набору тем, отсортированную по уровню знаний относительно друг друга. Использование портала бесплатно. При оценке уровня знаний (участие в тестирование) тестируемым разрешается использовать справочную литературу, нет ограничений по времени ответа на один вопрос, возможно, использовать справочные материалы и подсказки коллег, участники тестирования могут задавать свои вопросы другим участникам тестирования, тем самым повышая свой рейтинг, пропорционально сложности заданных вопросов и сложности верно отвеченных вопросов. В случае неверного ответа, участнику тестирования показывают верный ответ с объяснением и ссылкой на источник, чем дополнительно повышают его уровень знаний. Портал позволяет участникам тестирования не публиковать свои персональные данные. Также портал позволяет проводить относительную оценку знаний внутри создаваемых пользователями закрытых групп

Внутрикорпоративный портал УАЦ будет использован для публикации внутренних инструкций по проведению дистанционной аттестации, обсуждения хода проведения дистанционной аттестации, а также для публикации персонализированных результатов и подведения итогов; аттестационная комиссия УАЦ выполняет свои основные функции по организации дистанционной аттестации.

  1. Аттестационная комиссия в соответствии с порядком, принятым в УАЦ вырабатывает и утверждает внутреннее положение о проведения дистанционной аттестации и доводит это положение до организаций, заказчиков УАЦ, чьи специалисты подлежат аттестации.
  2. Организации, заказчики УАЦ, подают списки сотрудников, подлежащих аттестации.
  3. Аттестационная комиссия получает списки сотрудников организаций и проверяет достоверность указанных в них сведений.
  4. Аттестационная комиссия определяет набор тем для проведения относительной оценки уровня знаний. Обычно это набор основополагающих знаний в области энергосбережении, включая разделы:
    1. Основы энергосбережения (Основные термины и понятия, структура энергопотребления и потенциал энергосбережения),
    2. Нормативно-правовая база энергосбережения (Энергетическая стратегия России на период до 2020 года, Федеральный закон Российской Федерации от 23 ноября 2009 года № 261-ФЗ «Об энергосбережении и о повышении энергетической эффективности и о внесении изменений в отдельные законодательные акты Российской Федерации», Государственная программа Российской Федерации «Энергосбережение и повышение энергетической эффективности на период до 2020 года» от 27 декабря 2010 г. № 2446-р),
    3. Энергоэффективное использование отходов местных производств (по отраслям)
    4. Энергоэффективная утилизация твердых бытовых отходов
    5. Энергетическое обследование (энергоаудит) зданий и сооружений
    6. Источники финансирования энергосбережения (бюджетные, внебюджетные, иностранные инвестиции и гранты)
    7. ТГВ,
    8. ВК,
    9. Электротехника,
    10. Градостроительное планирование
    11. и т.д.
  5. Подготавливается набор вопросов закрытого типа (с вариантами ответов), по каждой теме, выбранной в пункте 1. Как правило, от 60 до 300 вопросов. Вопросы вводятся в систему 15-51.com по мере подготовки.
  6. На внутрикорпоративном портале УАЦ публикуются правила проведения дистанционной аттестации (Приложение).
  7. Публикуется расписание дат окончания формирования групп для дистанционной аттестации и расписание подведения итогов в группах.
  8. На портале 15-51.com идет регистрация участников тренинга и разбиение по группам (соответственно заявкам поданным организациями заказчиками УАЦ)
  9. На портале 15-51.com проводится первый этап дистанционной аттестации.
  10. На внутрикорпоративном портале УАЦ подводятся итоги первого этапа, в соответствии с расписанием.
  11. Назначается расписание выборочных собеседований членов аттестационной комиссии с участниками дистанционной аттестации.
  12. По итогам собеседования составляется акт о проведении аттестации.
  13. На портале 15-51.com, при необходимости проводится следующий этап аттестации.

Предлагаемая методика обеспечивает внутреннюю конкуренцию в процессе проверки знаний, устойчива к публикации (обнародованию) ключей тестов, снижает влияние психофизического состояния тестируемых и членов аттестационной комиссии на результаты тестов, снижает стрессовое воздействие аттестации, существенно уменьшает количество рабочего времени, необходимого сотрудникам организаций заказчиков УАЦ на прохождение аттестации, экономит бюджет УАЦ за счет использования бесплатных ресурсов сети Интернет.

Примечания

Не следует назначать окончание регистрации в группах и подведение итогов аттестации менее чем с двух недельным интервалом – это увеличивает влияние психофизического состояния тестируемых на результаты тестов (средняя продолжительность больничного в РФ, среди ИТР, не превосходит 5 рабочих дней), а так же может нарушить сложившийся в организациях-заказчиках УАЦ график отпусков (средняя продолжительность отпуска в РФ, среди ИТР, не превосходит 14 календарных дней), и вызвать дополнительный стресс тестируемых.

Не следует назначать слишком высокую стоимость разового участия в дистанционной аттестации, так как большинство специалистов будет проходить ее по нескольку раз, а слишком высокая стоимость аттестации, будет способствовать, поиску дополнительных способов уклониться от ее прохождения.

Не следует увеличивать количество аттестованных сотрудников в рамках одной группы более 30% - это, как показала мировая практика, существенно снижает среднее качество знаний аттестованных.

Литература

  1. Государственная программа «Энергосбережение и повышение энергетической эффективности на период до 2020 года» (№ 417505-4), Министерство экономического развития Российской Федерации, М. 2011, утверждена распоряжением Правительства РФ от 27 декабря 2010 г. № 2446-р http://www.gosbook.ru/sites/default/files/documents/2011/04/21/Gosudarstvennaya_programma_Energosberezhenie_i_povyshenie_energeticheskoy_effektivnosti_na_period_do_2020_goda.pdf
  2. «Комментарии по теме: Саморегулируемые организации», «Видеоблог Дмитрия Медведева» М. 2011, blog.kremlin.ru
  3. “Educational Assessment”, Wikipedia.ORG
  4. «Knowledge relative assessment system», 15-51.org

Прочтите также

ru/examples/energy_manager_assessment.txt · Последние изменения: 2011/10/21 06:27 — sadmin
 
Recent changes RSS feed Donate Powered by PHP Valid XHTML 1.0 Valid CSS Driven by DokuWiki