Knowledge Relative Assessment System
 
Перевод этой страницы:

Методика

Дистанционная аттестация

главного инженера проекта (главного архитектора проекта) в саморегулируемой организации

Стремительное развитие в РФ саморегулируемых организаций, специализирующихся на проектных работах, обусловило [ 1, пункт 1.6 ] необходимость аттестации более 45 тыс. главных инженеров проекта (главных архитекторов проекта). Должность ГИП (ГАП) является одной из самых ответственных и требующей наивысшей профильной квалификации, среди участников процесса проектирования. Таким образом, аттестацию специалистов такого уровня могут осуществлять лишь небольшое количество инженеров и архитекторов, обладающих соответствующей квалификацией. Даже в этом случае неизбежно возможны конфликтные и стрессовые ситуации [ 2 ], связанные с высокой производственной загрузкой аттестуемых специалистов, а также с возможной разницей в квалификации проверяющих и проверяемых в пользу последних. На сегодня в процессе аттестации, в основном, используются два основных типа оценки знаний [ 3 ]: «объективная» (на основе тестов, состоящих из закрытых вопросов с вариантами ответов) и «субъективная» (на основе собеседования в виде открытых вопросов и личного суждения проверяющего о правильности и полноте ответов). Оба варианта имеют ряд существенных недостатков, с точки зрения аттестации высококвалифицированных специалистов:

  1. «Объективные» методы оценки
    1. Тесты быстро устаревают, например, вместе с изменением действующего законодательства.
    2. Сложность вопросов может существенно меняться, например, после публикации ключей теста в открытом доступе
    3. Уровень знаний тестируемых может превосходить уровень знаний авторов теста.
    4. Существенное влияние психофизического состояния тестируемого в момент проведения собеседования
    5. Стресс, вызванный ограничением времени ответа на вопрос.
    6. Стресс, вызванный невозможностью пользоваться справочной литературой, привычной в обычной деятельности.
  2. «Субъективные» методы оценки
    1. Уровень знаний тестируемых может превосходить уровень знаний авторов теста.
    2. Во время краткого собеседования сложно выяснить уровень знаний тестируемого по всем разделам
    3. Существенное влияние психофизического состояния проверяющего в момент проведения собеседования
    4. Существенное влияние психофизического состояния тестируемого в момент проведения собеседования
    5. Стресс, вызванный ограничением времени ответа на вопрос.
    6. Стресс, вызванный невозможностью пользоваться справочной литературой, привычной в обычной деятельности.

В настоящее время членами СРО, часто являются, организации из регионов географически удаленных друг от друга на большие расстояния, что дополнительно затрудняет аттестацию, увеличивая временные и финансовые затраты: для проведения аттестации отвлечение работников от выполнения повседневной деятельности, сопряженное с длительными переездами. Современные информационные технологии позволяют проводить оценку уровня знаний через сеть Интернет, что, в свою очередь, позволяет экономить средства и время на переездах, а также обеспечивает комфортное участие в тестировании специалистов, находящихся на территориях с существенной разницей во времени. На сегодня существует большое количество решений обеспечивающих проведение дистанционной оценки уровня знаний, они разделяются на платные (adobe.com, dimdim.com, yugma.com, skype.com, gotomeeting.com) и бесплатные (google.com, facebook.com, skype.com, oovoo.com, moodle.org, 15-51.com,) сервисы. Большинство услуг предоставляемых платными сервисами также представлено в составе бесплатных порталов. Таким образом, для внутреннего использования, в условиях сокращенного бюджета нет смысла расходовать средства на платные версии сервисов, намного эффективнее использовать эти средства на подготовку и проведение дистанционной аттестации. К сожалению, абсолютный лидер среди бесплатных средств дистанционного образования и оценки уровня знаний Moodle.ORG, использует для «объективного» тестирования системы, обладающие описанными недостатками, поэтому рассмотрим пример проведения дистанционной аттестации с использованием менее распространенной бесплатной системы 15-51.com, лишенной вышеперечисленных недостатков.

Сценарий проведения дистанционной аттестации

На базе Системы относительной оценки знаний (15-51.com), внутрикорпоративного портала СРО и аттестационной комиссии СРО

Портал 15-51.com использует инновационную методику относительной оценки знаний [ 4 ], позволяющую получить выборку участников тестирования по одной теме или набору тем, отсортированную по уровню знаний относительно друг друга. Использование портала бесплатно. При оценке уровня знаний (участие в тестирование) тестируемым разрешается использовать справочную литературу, нет ограничений по времени ответа на один вопрос, возможно, использовать справочные материалы и подсказки коллег, участники тестирования могут задавать свои вопросы другим участникам тестирования, тем самым повышая свой рейтинг, пропорционально сложности заданных вопросов и сложности верно отвеченных вопросов. В случае неверного ответа, участнику тестирования показывают верный ответ с объяснением и ссылкой на источник, чем дополнительно повышают его уровень знаний. Портал позволяет участникам тестирования не публиковать свои персональные данные. Также портал позволяет проводить относительную оценку знаний внутри создаваемых пользователями закрытых групп

Внутрикорпоративный портал СРО будет использован для публикации внутренних инструкций по проведению дистанционной аттестации, обсуждения хода проведения дистанционной аттестации, а также для публикации персонализированных результатов и подведения итогов; аттестационная комиссия СРО выполняет свои основные функции по организации дистанционной аттестации.

  1. Аттестационная комиссия в соответствии с порядком, принятым в СРО вырабатывает и утверждает внутреннее положение о проведения дистанционной аттестации и доводит это положение до членов СРО, чьи специалисты подлежат аттестации.
  2. Члены СРО подают списки сотрудников, подлежащих аттестации.
  3. Аттестационная комиссия получает списки сотрудников организаций членов СРО и проверяет достоверность указанных в них сведений.
  4. Аттестационная комиссия определяет набор тем для проведения относительной оценки уровня знаний. Обычно это набор основополагающих знаний в области проектирования и градостроительного планирования.
  5. Подготавливается набор вопросов закрытого типа (с вариантами ответов), по каждой теме, выбранной в пункте 1. Как правило, от 60 до 300 вопросов. Вопросы вводятся в систему 15-51.com по мере подготовки.
  6. На внутрикорпоративном портале СРО публикуются правила проведения дистанционной аттестации (Приложение).
  7. Публикуется расписание дат окончания формирования групп для дистанционной аттестации и расписание подведения итогов в группах.
  8. На портале 15-51.com идет регистрация участников тренинга и разбиение по группам (соответственно заявкам поданным организациями членами СРО)
  9. На портале 15-51.com проводится первый этап дистанционной аттестации.
  10. На внутрикорпоративном портале СРО подводятся итоги первого этапа, в соответствии с расписанием.
  11. Назначается расписание выборочных собеседований членов аттестационной комиссии с участниками дистанционной аттестации.
  12. По итогам собеседования составляется акт о проведении аттестации.
  13. На портале 15-51.com, при необходимости проводится следующий этап аттестации.

Предлагаемая методика обеспечивает внутреннюю конкуренцию в процессе проверки знаний, устойчива к публикации (обнародованию) ключей тестов, снижает влияние психофизического состояния тестируемых и членов аттестационной комиссии на результаты тестов, снижает стрессовое воздействие аттестации, существенно уменьшает количество рабочего времени, необходимого сотрудникам организаций членов СРО на прохождение аттестации, экономит бюджет СРО за счет использования бесплатных ресурсов сети Интернет.

Примечания

Не следует назначать окончание регистрации в группах и подведение итогов аттестации менее чем с двух недельным интервалом – это увеличивает влияние психофизического состояния тестируемых на результаты тестов (средняя продолжительность больничного в РФ, среди высоко квалифицированных ИТР, не превосходит 5 рабочих дней), а так же может нарушить сложившийся в организациях членах СРО график отпусков (средняя продолжительность отпуска в РФ, среди высоко квалифицированных ИТР, не превосходит 14 календарных дней), и вызвать дополнительный стресс тестируемых.

Не следует назначать слишком высокую стоимость разового участия в дистанционной аттестации, так как большинство специалистов будет проходить ее по нескольку раз, а слишком высокая стоимость аттестации, будет способствовать, поиску дополнительных способов уклониться от ее прохождения.

Не следует увеличивать количество аттестованных сотрудников в рамках одной группы более 30% - это, как показала мировая практика, существенно снижает среднее качество знаний аттестованных.

Литература

  1. «Справка. О результатах публичных консультаций с субъектами предпринимательской и иной деятельности по проекту федерального закона «О внесении изменений в Градостроительный кодекс Российской Федерации и отдельные законодательные акты Российской Федерации» (№ 417505-4), Министерство экономического развития Российской Федерации, М. 2011, www.economy.gov.ru
  2. «Комментарии по теме: Саморегулируемые организации», «Видеоблог Дмитрия Медведева» М. 2011, blog.kremlin.ru
  3. “Educational Assessment”, Wikipedia.ORG
  4. «Knowledge relative assessment system», 15-51.org

Прочтите также

ru/examples/engineering_assessment.txt · Последние изменения: 2011/10/26 04:46 — sadmin
 
Recent changes RSS feed Donate Powered by PHP Valid XHTML 1.0 Valid CSS Driven by DokuWiki