ГОСТ Р ИСО 10667-1-2015 Предоставление услуг по оценке. Процедуры и методы оценки работы персонала и организационной среды. Часть 1. Требования к заказчику.
ГОСТ Р ИСО 10667-1-2015
НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ
ПРЕДОСТАВЛЕНИЕ УСЛУГ ПО ОЦЕНКЕ. ПРОЦЕДУРЫ И МЕТОДЫ ОЦЕНКИ РАБОТЫ ПЕРСОНАЛА И ОРГАНИЗАЦИОННОЙ СРЕДЫ
Часть 1
Требования к заказчику
Assessment service delivery. Procedures and methods to assess people in work and organizational settings. Part 1. Requirements for the client
ОКС 03.080.30
Дата введения 2016-10-01
Предисловие
1 ПОДГОТОВЛЕН Открытым акционерным обществом "Всероссийский научно-исследовательский институт сертификации" (ОАО "ВНИИС") на основе собственного перевода на русский язык англоязычной версии международного стандарта, указанного в пункте 4
2 ВНЕСЕН Техническим комитетом по стандартизации ТК 342 "Услуги населению"
3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ
4 Настоящий стандарт идентичен международному стандарту ИСО 10667-1:2011* "Предоставление услуг по оценке. Процедуры и методы оценки работы персонала и организационной среды. Часть 1. Требования к заказчику" (ISO 10667-1:2011 "Assessment service delivery - Procedures and methods to assess people in work and organizational settings - Part 1: Requirements for the client", IDT)
5 ВВЕДЕН ВПЕРВЫЕ
6 ПЕРЕИЗДАНИЕ. Март 2020 г.
Правила применения настоящего стандарта установлены в . Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.gost.ru)
Введение
0.1 Общие требования
ИСО 10667 представляет доказательную, измеримую перспективу в области предоставления услуг по оценке, применяющуюся в международном масштабе. Стандарт позволит организациям стать более эффективными пользователями оценочной системы, принимать обоснованные решения по подбору персонала и повышению потенциала организации, способствовать росту благосостояния и созданию такого объединения, которое бы удовлетворяло всех работающих. Данное руководство будет стимулировать предоставление стандартизированных, обоснованных и отвечающих интересам той и другой стороны услуг по оценке работы персонала. Оно предоставит возможность надзорным органам, другим органам власти и обществу в целом с большим доверием относиться к процедурам оценки.
ИСО 10667 устанавливает четкие и конкретные указания поставщикам услуг по оценке и заказчикам, что позволит всем заинтересованным сторонам реализовать потенциальные преимущества правильного предоставления услуг по оценке. Это достигается за счет:
- выбора эффективного применения процедур и методов оценки;
- обеспечения беспристрастности к процессу применения процедур и методов оценки;
- включения соответствующих показателей качества предоставляемых услуг по оценке.
Возможно, что пользователи ИСО 10667 будут иметь различный уровень компетенции, понимания и знания понятий, связанных с разработкой стандартизированных процедур и методов оценки отдельных лиц, групп и организаций в профессиональной сфере. В связи с этим в целях упрощения условий применения стандартов данной серии разными лицами, а также предоставления рекомендаций относительно применяемого ИСО 10667, данное введение содержит основную информацию о предназначении и структуре ИСО 10667.
0.2 Функция ИСО 10667
ИСО 10667 применим при предоставлении услуг по оценке работы отдельных лиц, групп и организаций. ИСО 10667 способствует содействию в продвижении эффективной практики и стимулированию четкого документирования трудовых отношений между заказчиками и поставщиками услуг. Настоящий стандарт является практическим руководством как для заказчиков, так и для поставщиков услуг, участвующих в проведении оценки. В настоящем стандарте установлены область ответственности и обязанности всех заинтересованных сторон до начала, в период и по окончании процесса оценки. В нем также определены права и обязанности участников оценки и других лиц, вовлеченных в эту процедуру, включая потребителей результатов оценки. На представлена схема возможного взаимодействия различных сторон в процессе оценки.
|
 |
Примечание - Разные стороны, участвующие в процессе оценки, выполняют различные функции и взаимодействуют друг с другом в процессе оценки. Кроме того, одна сторона может выполнять несколько функций. Например, участник может быть заказчиком, поставщик услуг также может быть заказчиком. При проведении консультаций по вопросам профессиональной деятельности участник оценки может приобретать услуги и таким образом выступать также в роли заказчика. Аналогично команда по связям с общественностью может оказывать услуги внутри организации и пользоваться услугами, предоставляемыми внешними поставщиками.
Рисунок 1 - Функции в процессе оценки
0.3 Предполагаемые пользователи ИСО 10667
ИСО 10667 предназначен для заказчиков и поставщиков услуг, которые должны работать как последовательно, так и совместно для обеспечения эффективности предоставления услуг по оценке. Настоящий стандарт устанавливает требования к заказчику. В ИСО 10667-2 установлены требования к поставщику услуг. Заказчики должны знать и следовать требованиям настоящего стандарта при инициировании запроса в отношении услуг по оценке, включая полное описание требований, относящихся к оценке и реализации требований ИСО 10667. Однако если поставщик услуг узнает, что потенциальный заказчик не информирован о стандарте ИСО 10667 или не пользуется им, он должен поставить его в известность о современных методах работы и стимулировать действия заказчика в соответствии с настоящим стандартом с точки зрения всего процесса оценки.
К поставщикам услуг относятся те, кто занимается предоставлением услуг по оценке работы персонала и организационной среды, включая как сотрудников заказчика внутри организации, так и работающих по договору. Заказчики - это лица, которые нуждаются в услугах по оценке самих себя, или организации, которым требуются эти услуги для оценки работы отдельных лиц или групп внутри организации, или самой организации.
ИСО 10667 направлен на продвижение передового опыта и открытого документирования трудовых отношений между заказчиками и поставщиками услуг. В обеих частях ИСО 10667 в установлены права и обязанности участников оценки касательно оценки.
0.4 Другие заинтересованные стороны
Кроме поставщиков услуг, заказчиков и участников процесса оценки к заинтересованным сторонам относятся следующие:
a) конечные пользователи информации об оценке внутри организации, которые принимают стратегические и/или оперативные решения, например руководители по найму персонала в случае оценки для их отбора, руководители кадровых служб для успешного планирования или организаторского таланта, касающегося управления, исполнительные руководители в случае слияния и поглощения компаний;
b) независимые посредники или косвенные пользователи, к которым относятся, но не ограничиваясь только ими:
1) разработчики и дистрибьюторы процедур оценки;
2) сотрудники агентств по найму, инструкторы и консультанты;
3) организации, проводящие оценку с целью лицензирования и аттестации персонала;
4) эксперты по оценке учебных программ или программ профессионального образования;
5) лица, определяющие политику, например, руководители кадровых служб для выработки оценки организационной среды, профсоюзы, участвующие в проведении методов оценки, внешние управленцы, такие как профессиональные организации, регулирующие органы и другие лица, которые используют в своей работе результаты оценки.
0.5 Виды оценки, которые рассматриваются в ИСО 10667
ИСО 10667 устанавливает процедуры и методы для следующих видов оценки:
a) оценка индивидуального уровня. Примерами такой оценки являются интервью, профориентация, всестороннее инструктирование руководителя высшего звена, саморазвитие, выбор, планирование преемственности;
b) оценка группового уровня. Примерами такой оценки являются повышение морального духа команды и оценка эффективности деятельности, направленные на повышение производительности работы команды в целом;
c) оценка уровня организации. Примерами такой оценки являются удовлетворенность сотрудников (данные, представленные на уровне организации), изменение культуры вследствие слияния или поглощения, уровни занятости сотрудника в структурных подразделениях организации.
ИСО 10667 распространяется на услуги по оценке персонала на протяжении всего жизненного цикла занятости.
Аспекты жизненного цикла занятости можно описать как:
- набор и отбор персонала;
- карьера/профессиональное обучение;
- карьерный рост людей среднего возраста или возвращение в трудовой коллектив;
- самосовершенствование и участие в тренингах;
- продвижение по службе и планирование преемственности;
- трудоустройство и планирование выхода на пенсию.
0.6 Структура ИСО 10667
В целях создания эффективного стандарта, полезного как для заказчика, так и для поставщика услуг, процесс оценки разделен на четыре этапа:
- согласительные процедуры;
- процедуры, предшествующие оценке;
- проведение услуг по оценке;
- проверка после оценки.
В настоящем стандарте устанавливаются требования к заказчику, который определяет потребность в проведении одной или более оценок, используемых в жизненном цикле трудовой занятости, а затем старается получить от поставщика такие услуги по оценке, которые он сам выберет. ИСО 10667-2 устанавливает требования, применимые к поставщику услуг, от которого заказчик хочет получить рекомендации о том, какие виды оценок могут соответствовать требованиям заказчика, а затем поставщик услуг оказывает заказчику эти услуги на основе выданных рекомендаций.
В обеих частях ИСО 10667 каждый этап оценки рассматривается в отдельном разделе (, , и ) в следующем порядке:
a) согласительные процедуры (), в котором описываются взаимная ответственность и обязанности заказчика и поставщика услуг, а также формат их соглашения и определяется предмет соглашения;
b) процедуры, предшествующие оценке ():
1) устанавливающие, что и как необходимо оценить с учетом выбранных критериев оценки достижений и четко выраженной ожидаемой полезности процесса;
2) определяющие, существует ли конфликт интересов, которые необходимо сбалансировать;
3) обеспечивающие понятное обоснование процесса оценивания, документально подтверждающие договор между заказчиком и поставщиком услуг посредством описания объема работ, или заключения контракта, что более подходит;
c) предоставление услуг по оценке (), в котором определены все этапы подготовки и проведения оценки;
d) проверка после оценки (), в котором установлены требования к проверке процесса оценки, чтобы определить, соответствуют ли результаты, их важность и полезность оценки предъявляемым требованиям и поставленным целям, и какие изменения в процессе оценки следует принять заказчику для последующего исполнения.
1 Область применения
Настоящий стандарт устанавливает требования и рекомендации для заказчика, работающего с поставщиком услуг для проведения оценки личности, группы или организации для рабочих целей. Настоящий стандарт позволяет заказчику принимать решения на основе подтвержденных результатов оценки.
Настоящий стандарт устанавливает требования к заказчику, учитывая:
a) потребности и обоснованность применения оценок;
b) условия, в которых будет применена оценка;
c) решения, касающиеся подхода к оценке вместе с их реализацией и анализом процедур и методов оценки;
d) необходимую компетенцию и профессионализм персонала заказчика, который вовлечен в процесс оценки;
e) решения о доступе, использовании и хранении результатов оценки и последующих отчетов;
f) решения, связанные с организационными вопросами, например, обучением, созданием команды, определением культуры или норм поведения в организации.
Настоящий стандарт также определяет процедуры и методы оценки, которые могут быть выполнены для достижения одной или нескольких связанных с работой целей, поставленных перед отдельным лицом, группой или организацией, или влияющие на их выполнение, включая, но, не ограничиваясь только ими:
- решения, связанные с устройством на работу, например, подбор и расстановка кадров, отбор, повышение квалификации, оценка деятельности, продвижение, трудоустройство уволенных, планирование преемственности и назначение на новую должность;
- решения, связанные с карьерным ростом, например, подбор кадров, обучение, наставничество, профессиональное переобучение и консультирование по устройству на работу;
- групповые решения, например, инициативы по обучению сотрудников, созданию команды и т.д.;
- решения на уровне организации, например, реструктуризация, правила и нормы нравственного поведения и культуры, слияние и поглощение и т.д.
Любые технические профессиональные стандарты не входят составной частью в ИСО 10667. Однако качество методов оценки следует определять с учетом целей оценки, актуальности применяемых мер, их обоснованности, достоверности, беспристрастности, стандартизации и иных вопросов, касающихся особых потребностей участника процесса оценки, а также других факторов, которые влияют на практичность, приемлемость и полезность оценки.
Примечания
1 Требования к поставщику услуг приведены в ИСО 10667-2.
2 Примеры различных принципов профессионального применения приведены в библиографии.
3 Более подробная информация об общепринятых технических требованиях к качеству приведена в .
Настоящий стандарт не содержит требования, касающиеся специфической компетенции, необходимой для специалистов по оценке, так как это зависит от характера оценки.
4 Дополнительная информация о компетенции специалистов по оценке приведена в .
2 Термины и определения
В настоящем стандарте применены следующие термины с соответствующими определениями:
2.1 соглашение (agreement): Подробное описание сроков и условий взаимодействия между заказчиком и поставщиком услуг.
Примечание - Примеры включают, но не ограничиваются только ими, конкретизацию предоставляемых услуг или продуктов, их продолжительность, сферу действия, применение права интеллектуальной собственности и расходы.
2.2 оценка (assessment): Последовательные метод и процедура установления связанных с работой знаний, навыков, способностей или других характеристик лица или группы лиц, или возможностей отдельного лица или группы лиц.
Примечание - Процесс оценки имеет результаты и последствия, которые могут быть определены и использованы для анализа их полезности. Формы оценки могут включать, но не ограничиваются только этим, структурированные анкеты, списки биографических данных; тестирование общих и специфических способностей; архивы самоотчетов и других документов, относящиеся к компетенции, личностным свойствам, мотивации, отношениям, ценностям, убеждениям, интересам и т.д.; структурированные интервью, задачи для решения индивидуальных проблем; групповые треннинги, моделирование и образцы работ; групповые мероприятия и мероприятия на уровне организации; опрос сотрудников; развернутую оценку обратной связи и оценку эффективности, например мнение эксперта по оценке интерпретаций, рейтинговую оценку руководителя и т.д.
2.3 администратор оценки (assessment administrator): Лицо или организация, ответственные за проведение оценки.
Примечание - Задачи администратора оценки включают, но не ограничиваются только этим, тестирование наедине; проведение оценки в интерактивном режиме; дистанционный мониторинг, управление деятельностью в пределах центра по оценке и другие административные задачи. В некоторых странах администраторов оценки называют "тест-инспекторы", "тест-помощники" или "наблюдатели". Администраторы оценки могут быть сотрудниками поставщика услуг или заказчика, или быть третьей стороной, с которой заключен договор для предоставления услуг по оценке.
2.4 участник оценки (assessment participant): Лицо, подлежащее оценке либо для себя самого, либо для организации, индивидуально или в составе группы.
Примечание - Участник оценки - это лицо, к которому относятся, но не ограничиваются только ими, претендент на работу или кандидат, сотрудник заказчика, являющийся кандидатом на продвижение по службе или проходящий оценку для каких-то других внутренних целей организации; любое лицо, подлежащее оценке, предоставляющее информацию или получающее профориентацию в своих собственных интересах.
2.5 эксперт по оценке (assessor): Лицо или организация, ответственные за оценку и интерпретацию способностей и возможностей участника оценки, связанных с выполнением производственного задания, предоставляющих соответствующий отчет и обеспечивающих обратную связь участников оценки и заказчика.
Примечание - Эксперты по оценке правомочны принимать комплексные решения относительно применения и интерпретации процедур оценки. Что касается психологического тестирования, то в некоторых странах их называют "пользователями тестов" в отличие от "инспекторов тестов", "администраторов тестов" или "контролеров". Экспертами по оценке могут быть сотрудники поставщика услуг или заказчика или третьи стороны, с которыми заключен договор на предоставление услуг по оценке.
2.6 заказчик (client): Лицо или организация, заключающие соглашение с поставщиком услуг на проведение оценки и смежных видов деятельности по предоставлению услуг по оценке.
Примечания
1 Заказчиками могут быть:
a) лица, в собственных интересах (например, для принятия решений, связанных с карьерным ростом по результатам оценки, включая инструктирование, тестирование на профориентацию, профессиональное переобучение и консультирование), или другие заказчики (например, органы лицензирования, органы по сертификации);
b) организации, для оценки самих организаций (например, исследование вовлеченности сотрудников, оценка условий труда, исследование удовлетворенности работой) или отдельные лица и/или группы внутри организаций (например, принимающие решения, связанные с приемом на работу, такие как подбор и расстановка кадров, повышение квалификации, продвижение, трудоустройство уволенных, планирование преемственности и назначение на новую должность).
2 В отдельных случаях участником оценки может быть заказчик. В настоящем стандарте, когда заказчик подлежит индивидуальной оценке, его определяют как участника оценки.
2.7 компетенция (competence): В оценке - владение соответствующими знаниями и умениями, полученными в результате обучения и/или подготовки с целью применения и интерпретации оценок, конкретно или в целом, в том числе в соответствующей теоретической, методологической и практической областях, и для предоставления услуг на заданном уровне, определенном настоящим стандартом.
Примечания
1 В ИСО 10667, термин "компетенция" относится к эксперту по оценке, а также ко всем работающим под его руководством, где это необходимо, но не к участнику оценки.
2 Компетенция необязательно предполагает применимость на практике во всех странах.
2.8 полномочия (credential): Лицензия, регистрация, сертификация или диплом, свидетельствующие об уровне компетенции в конкретной области.
2.9 критерий (criteria): Связанные с работой меры или последствия, результаты, используемые для оценки осмысленности, прогностической ценности или полезности результатов оценки.
2.10 оператор персональных данных (data controller): Лицо или организация, которые определяют цель и способ обработки, хранения и использования персональных данных.
2.11 обработчик данных (data processor): Лицо (отличное от оператора персональных данных) или организация, которые обрабатывают данные по поручению оператора персональных данных.
2.12 конечный пользователь (end user): Лицо или организация, которые используют результаты оценки для принятия решения или дальнейшего действия.
Примечание - Это может быть заказчик или промежуточные лица в процессе оценки, такие как непосредственный руководитель. В других случаях конечным пользователем может быть участник оценки.
2.13 беспристрастность (equity): Принцип, в соответствии с которым следует проводить оценку каждого участника, используя беспристрастные и, насколько возможно, лишенные субъективности процедуры, способствующие получению более точных результатов.
2.14 доказательный (evidence-based): Признак действия или решения, принимаемого по результатам выводов на основе имеющейся информации и данных, которые применимы в теории и поддерживают качество и соответствие результатам действия или решения в конкретном контексте для конкретного использования.
2.15 обратная связь (feedback): Информация о результатах их оценки, предоставляемая участникам оценки.
2.16 информированное согласие (informed consent): Процесс предоставления информации о самой оценке, цели и возможных последствиях, а также получение согласия от участника оценки на участие в процессе оценки.
Примечания
1 Согласие часто бывает скорее скрытым, чем явным. Например, согласие предполагается при оценке результатов деятельности.
2 В соответствии с действующими законами, правилами или корпоративной политикой участники оценки могут отказаться от оценки после информированного согласия, но это может привести к последствиям, которые должны быть объяснены участникам оценки на момент первого предоставления согласия.
2.17 норма (norm): Информация на основе баллов, полученных по выборке (часто обозначают как "группа норм") отдельных четко установленных категорий лиц (часто называют "нормативная численность"), что позволяет конвертировать необработанные данные, например, количество правильных вопросов, сумму рейтингов, присваиваемых элементам по шкале, и т.д., в стандартных баллах (т.е. баллы, соотносимые с распределением суммы баллов по нормативной численности населения).
Примечание - Типичные процентильные баллы включают классы от А до Е на основе верхних 10% населения, следующих 20%, средних 40%, следующих 20%, и нижних 10% соответственно, или на основе децилей, которые составляют 10% референтной группы населения. Типичные стандартные оценки включают в себя: z-баллы (при среднем значении нуля и среднеквадратичном отклонении 1); СТЕНС (STENS) (среднее 5,5 и среднеквадратичное отклонение 2) и Т-баллы (среднее 50 и среднеквадратичное отклонение 10).
2.18 персональные данные (personal data): Данные, которые могут быть идентифицированы как относящиеся к конкретному участнику оценки.
Примечание - Персональные данные не содержат сведения, полученные от участника оценки, которые являются анонимными или впоследствии оцененные как анонимные.
2.19 проверка после оценки (post-assessment review): Процедура для установления соответствия и степени соответствия оценки заявленным целям, включая соответствие требованиям, изложенным в письменном протоколе между заказчиком и поставщиком услуг, а также определение возможностей для улучшения оценки в будущем.
2.20 профессионализм (professionalism): Деятельность, совместимая с поведением и практиками, включая, где это применимо, этический кодекс, принятый или связанный с оцениваемой профессией, которая требует систематических знаний и специальной подготовки, понимания ограничений и не применяемая вне области компетенции.
2.21 достоверность (reliability): Степень, в которой результаты свободны от дисперсии погрешностей, т.е. диапазона ожидаемой погрешности измерения.
Примечание - Погрешность измерений может быть оценена путем изучения последовательности мер, предпринимаемых участниками оценки или экспертами в рамках администрирования методов оценки или в результате повторных применений.
2.22 отчет (report): Информация, предоставляемая заказчику.
2.23 безопасность (security): Ограничение и контроль доступа к материалам и результатам оценки, отчетам и другой конфиденциальной информации с целью обеспечения их недоступности для лиц, не имеющих допуска.
Примечание - Безопасность включает, но не ограничивается только этим, предотвращение доступа к материалам способами, которые позволили бы участнику оценки получить несправедливое преимущество над другими участниками оценки или снизить значимость материалов оценки, а также защиту результатов оценки участника от несанкционированного использования или разглашения.
2.24 поставщик услуг (service provider): В оценке - лицо или организация, предоставляющие заказчику услуги по оценке, независимо от того, является ли это лицо или организация внутренним или внешним по отношению к заказчику.
Примечание - Поставщик услуг может также нанимать или заключать договор с другими лицами на проектирование и разработку методов оценки или на подготовку экспертов по оценке.
2.25 стандартизованный (standardized): В оценке - предел, до которого процедуры оценки основываются на подробных правилах и нормах, включая все административные руководящие указания от разработчика оценки, для того, чтобы поддерживать единую, постоянную административную среду, в которой проводится оценка, подсчет баллов и интерпретация результатов оценки, и чтобы условия или среда тестирования были бы сопоставимы для всех участников, получивших одинаковую оценку.
2.26 полезность (utility): Значимость оценки для заказчика с учетом затрат на предоставление услуг по оценке.
Примечание - Принимаются во внимание такие факторы, как затраты и время на администрирование, выставление баллов, профайлинг, написание отчета, умения, требуемые от эксперта и легкость в обеспечении обратной связи с участником оценки.
2.27 обоснованность (validity): Степень, до которой интерпретация и использование оценочных баллов согласуются с предлагаемыми целями оценки и поддерживаются с помощью накопленных фактов и теории.
Примечание - Стратегия накопления фактов обоснованности смыкается с типом оценки и целью, для которой она проводится.
3 Согласительные процедуры
3.1 Соглашение
Между заказчиком и поставщиком услуг должно быть заключено соглашение независимо от того, является ли поставщик услуг внутренним или внешним по отношению к заказчику. В соглашении должна быть указана вся информация об услуге и определены все соответствующие обязательства и обязанности каждой из сторон. Заказчик должен быть уверен в том, что соглашение соответствующим образом документировано.
Примечание - К такой документации может относиться официальный письменный договор или неофициальное соглашение с письменным признанием принятия заказчиком предложения и условий поставщика услуг.
3.2 Обязанности заказчика
Заказчик должен участвовать в процессе оценки и обязан:
a) сообщать о своих требованиях к оценке поставщику(ам) услуг, который(ые) будет(ут) их выполнять;
b) выбирать поставщика услуг, компетенция которого позволит ему провести оценку;
c) запрашивать информацию, подтверждающую обоснованность методов оценки;
d) выполнять все требования соглашения с поставщиком услуг, включая те, которые относятся к информированному согласию, безопасности и защите материалов, охраняемых авторским правом;
e) принимать на себя ответственность за гарантированное соблюдение правовых и нормативных требований по использованию оценки;
f) выполнять свои обязательства таким образом, чтобы это соответствовало передовой практике и установленным профессиональным принципам;
g) гарантировать, чтобы участники оценки достигли информированного согласия с четким пониманием того, что от них ждут, и что будет происходить;
h) обеспечивать безопасность и конфиденциальность информации об оценке под контролем заказчика.
Примечание - Требования к обязанностям поставщика услуг приведены в ИСО 10667-2.
3.3 Ожидаемые результаты и последствия
Заказчик должен взаимодействовать с поставщиком услуг в целях определения возможных значительных результатов и последствий процесса оценки вместе с анализом рисков и ожидаемой полезностью. Когда это целесообразно и возможно, заказчик вместе с поставщиком услуг должны решить, как лучше реагировать на такие результаты и последствия.
3.4 Компетентность и обучение
Заказчик должен обеспечить, чтобы любой сотрудник, работающий под его контролем с ролью в процессе оценки, обладал необходимой компетенцией или прошел обучение для обладания ею.
3.5 Дополнительная исследовательская деятельность
Заказчик должен рассматривать вопрос о целесообразности участия в соответствующих дополнительных мероприятиях, таких как усовершенствование норм, изучение достоверности, изучение обоснованности, проверки документов, совершенствование процесса оценки уровня знаний или других видов исследовательской деятельности, направленной на повышение качества с учетом вариантов, затрат и выгоды от этих мероприятий, проводимых поставщиком услуг. Любое соглашение о проведении дополнительных мероприятий должно быть документировано.
4 Процедуры, предшествующие оценке
4.1 Определение потребностей в области оценки
Заказчик должен обсуждать с потенциальными поставщиками услуг по оценке потребности в области оценки и предоставления соответствующей документации, имеющейся в наличии или документации, которая может быть разработана по требованию любого поставщика услуг.
Заказчик должен определить предварительный перечень потребностей в области оценки, которые должны включать, но не ограничиваясь только этим:
a) цель(и) проведения оценки;
b) статус участника оценки;
c) соответствующие демографические показатели, такие как уровень образования, языки и другие необходимые биографические сведения о тех, кто подлежит оценке.
Если потребности в области оценки являются сложными или недостаточно прозрачными, то заказчик при необходимости может инициировать отдельный процесс для их определения. Эти трудности могут быть определены путем анализа задач, анализа работы или моделирования компетенции.
Примечания
1 Процесс определения потребностей может потребовать несколько циклов анализа и уточнения.
2 При необходимости разработки новых или адаптации существующих процедур оценки для удовлетворения требований заказчику может потребоваться разработка отдельного соглашения на эту работу с поставщиком услуг или другой организацией с опытом выполнения этой работы.
4.2 Рекомендации по услугам в области оценки
Заказчик должен рассматривать рекомендации, касающиеся услуг по оценке, и решать, какие из них наиболее соответствуют предъявляемым требованиям.
4.3 Соглашение, касающееся услуг в области оценки
Заказчик должен достигнуть соглашения с поставщиком услуг относительно требований к ним. Эти требования должны включать:
a) область применения услуг по оценке;
b) продолжительность предоставления услуг по оценке и самой оценки (там, где дата окончания отсутствует, это следует четко указать);
c) сведения о процедурах и методах оценки;
d) процедуры анализа, применяемые к мерам по оценке;
e) отчет о результатах оценки для каждого конечного пользователя;
f) способ объединения данных из различных процедур оценки;
g) распределение соответствующих функций, обязанностей и областей ответственности заказчика и поставщика услуг;
h) сведения о конфиденциальности персональных данных, правах на интеллектуальную собственность и данных оценки, хранении и удалении данных;
i) заявление о соответствии установленным правилам и действующему законодательству;
j) характер и периодичность мониторинга, периодический пересмотр процедур, необходимых для обеспечения качества оценки и гарантии того, что она соответствует необходимым профессиональным, правовым и нормативным требованиям;
k) характер обратной связи в случае ее наличия и способ ее предоставления;
I) определение затрат.
В случае необходимости заказчик и поставщик услуг должны включать в соглашение положения, касающиеся проверки после проведения оценки (см. ). Требования к такой проверке должны включать:
1) подтверждение уровня компетенции, необходимого для людей, проводящих проверку;
2) описание объекта проверки и дату ее проведения;
3) статус лица, проводящего проверку;
4) описание критериев проверки;
5) описание характера и формы предоставления результатов проверки.
Примечание - Два вышеприведенных перечня также представлены в ИСО 10667-2 для обеспечения согласованности с требованиями соглашения между заказчиком и поставщиком услуг.
5 Предоставление услуг по оценке
5.1 Этапы
В процессе предоставления услуг по оценке следует выполнить семь легко идентифицируемых этапов:
a) планирование оценки;
b) информирование всех заинтересованных лиц;
c) проведение оценки;
d) интерпретация результатов;
e) подготовка и представление отчетов;
f) обеспечение обратной связи;
g) непрерывный анализ процесса оценки.
5.2 Предоставление услуг по оценке. Планирование оценки
5.2.1 Планирование оценки
Заказчик должен достичь соглашения с поставщиком услуг относительно плана предоставления услуг по оценке, в том числе, но не ограничиваясь идентификацией:
а) личности, группы или организации, подлежащей оценке;
b) лиц, материалов и оборудования, необходимых для проведения мониторинга и оценки;
c) обязанностей и компетенции лиц для проведения мониторинга и оценки;
d) менеджмента по персоналу, информации, материалов оценки и других ресурсов;
e) беспристрастности ко всем соответствующим подгруппам;
f) процедур и методов оценки (одной или множества);
g) других факторов, которые могли бы затронуть или повлиять на принятие решения об оценке, такого как определение проходного или граничного баллов, полезность оценки (то есть анализ стоимости и эффективности), доступность и уместность альтернативных методов оценки.
Примечание - Вышеприведенный перечень также приведен в ИСО 10667-2 для обеспечения согласованности с требованиями соглашения между заказчиком и поставщиком услуг.
5.2.2 Безопасность
Заказчик должен гарантировать, что материалы оценки и данные в пределах его контроля являются конфиденциальными. Материалы, собранные данные и документация, касающиеся оценок, должны быть обработаны в соответствии с условиями соглашения по предоставлению услуг по оценке и передовым профессиональным опытом.
Если заказчик несет ответственность за материалы, собранные данные или документацию, он должен гарантировать:
a) соблюдение прав интеллектуальной собственности, которые существуют в области оценки;
b) контроль доступа к материалам оценки до и после их применения;
c) невозможность получения участниками оценки несанкционированного доступа к материалам оценки или информации, что может привести к аннулированию результатов оценки;
d) защищенность всех действий по сбору данных, например безопасность веб-сайтов, защиту персональных данных и т.д.;
е) информированность всех заинтересованных лиц, участвующих в оценке, о том, что считается допустимым или недопустимым использованием материалов оценки, а также о выполнении обязанностей по обеспечению безопасности материалов оценки;
f) недоступность открытого предоставления или размещения другими способами для всеобщего пользования методов оценки, например, подходов к объяснению оценок, подсчету баллов, конфиденциальных правил и данных, связанных с оценкой, что могло бы потенциально поставить под сомнение их обоснованность, целостность и ценность.
5.2.3 Права участников оценки
Заказчик должен гарантировать:
a) признание и соблюдение прав участников оценки и документальное оформление процедур и сроков рассмотрения и разрешения жалоб и (формальных) обращений;
b) последовательное общение с участниками оценки.
Примечание - Дополнительная информация о правах и обязанностях участников оценки представлена в ;
c) осуществление обработки результатов оценки и персональных данных в соответствии с требованиями к конфиденциальности данных.
5.2.4 Защита персональных данных участников оценки
Заказчик, выполняя функции оператора персональных данных, должен:
a) установить четкие правила относительно того, как долго идентификационные персональные данные будут храниться обработчиком данных;
b) обосновать степень конфиденциальности и ограничения доступа к данным участника оценки для тех, кто имеет право знать, включая защиту информации, хранящейся в файловых системах, с целью получения доступа только лиц, имеющих на это право;
c) получить соответствующее согласие на разрешение по использованию данных;
d) сообщать обработчику данных о необходимости и сроке удаления имен и других персональных идентификаторов из результатов оценки (например, данных испытаний, отдельных отчетов, заметок, сделанных интервьюерами, комментариев и рейтингов эксперта по оценке из оценочного центра), чтобы сделать их анонимными для исследовательских целей, разработки норм или других статистических целей.
Примечания
1 Защиту данных, распространяющихся на идентификационные персональные данные, осуществляют оператор персональных данных и обработчик данных. Данные, полученные анонимно или агрегировано через людей, не учитывают. Заказчик обычно выступает в качестве оператора данных при взаимодействии с поставщиком услуг, действующим в качестве обработчика данных либо самостоятельно, либо с привлечением третьей стороны, например, продавцов online-тестов, провайдеров системы слежения заявителя. Тем не менее эти функции могут быть распределены по-разному, что должно быть указано в соглашении между сторонами.
2 Требования к обработчику данных приведены в ИСО 10667-2.
5.2.5 Установление обратной связи
Соглашение между заказчиком и поставщиком услуг должно определить наличие обратной связи с участником оценки, характер обратной связи, способ и место ее установления. Обратная связь должна быть определена в рамках действующего законодательства, национальных рекомендаций по профессиональной подготовке, культурных традиций и правилах организации.
5.3 Предоставление услуг по оценке. Информирование участников оценки
5.3.1 Предоставление информации
Заказчик обязан предоставить заинтересованным сторонам любую информацию, которая была согласована. Эта информация может включать в себя следующее:
a) причины проведения оценки участников и целевого использования полученной информации, в том числе использования результатов оценки и способа обработки данных;
b) процесс, с помощью которого участник оценки должен дать информированное согласие на ее проведение;
c) способ хранения персональных данных, персональную ответственность за данные, срок их хранения и перечень лиц, имеющих к ним доступ;
d) способ получения помощи участником оценки по запросам, трудностям или проблемам, которые могут возникнуть в процессе оценки;
e) перечень необходимых мероприятий в случае наличия у участника оценки языковых проблем, особых запросов или требований проведения повторной оценки;
f) перечень существующих процедур для прохождения на месте участником оценки, группами или организациями с целью подачи жалоб и апелляции по результатам оценки;
g) иные права и обязанности, которые участник имеет в процессе оценки.
5.3.2 Информированное согласие
В отношении использования персональных идентификационных данных заказчик должен принимать участие в разработке документа об информированном согласии и процедуре, которая подходит для применяемого вида оценки и типа собираемых данных и которая определяет персональную ответственность за получение информированного согласия от участников оценки.
Если заказчик является ответственной стороной, то он должен получить до начала или в начале оценки информированное согласие участника оценки в отношении персональных данных, которые должны быть собраны касательно участника оценки.
a) Заказчик должен определить перечень лиц, имеющих доступ к получению результатов оценки.
b) Если участник оценки является заказчиком, то он/она имеет право назначать другие организации, например органы по лицензированию или сертификации, для получения результатов оценки.
c) В рамках процесса получения информированного согласия участник оценки должен быть проинформирован о том, кто должен получить результаты, будь то отдельно участник оценки и/или иные третьи стороны, например, непосредственный руководитель, независимо от того, предоставляется ли участнику оценки или нет доступ к отчету с целью согласования использования полученных результатов.
d) Участники оценки должны быть ознакомлены с условиями доступа для любого дополнительного применения, например повторного использования данных для анализа беспристрастности их результатов.
Примечание - Информация о правах и обязанностях участников оценки приведена в .
5.3.3 Конфиденциальность и анонимность
Заказчик должен либо непосредственно, либо через поставщика услуг информировать участников оценки и других лиц, предоставляющих данные об участнике оценки, например, экспертов по проведению развернутого опроса мнений о сотруднике, об оценке обратной связи, о конфиденциальности персональных данных, которые они просят предоставить на условиях анонимности предоставления результатов отчета.
5.4 Предоставление услуг по оценке. Проведение оценки
Если администраторы оценки являются сотрудниками заказчика, то заказчик должен гарантировать условия, при которых администраторы оценки обладали бы всей необходимой компетенцией, основанной на опыте, который можно проверить, обучении, образовании или полномочиях. При управлении оценкой одного или более лиц администраторы оценки должны наблюдать за выполнением стандартизованных процедур по предоставлению услуг по оценке и документированию любых отклонений от этих процедур.
Заказчик непосредственно или через поставщика услуг должен гарантировать выполнение соответствующих требований для администрирования услуг по оценке, независимо от того, предоставлены ли они в ходе личного общения или дистанционно, на бумажных или электронных носителях. Следует обеспечить необходимую поддержку участникам оценки и предусмотреть наличие соответствующих руководящих указаний для поощрения использования систем, способствующих справедливой и достоверной оценке.
Заказчик должен обеспечить, чтобы его работники, выполняющие определенные функции в процессе оценки, осуществляли процедуры и практики, предусмотренные поставщиком услуг.
Если эксперты по оценке являются сотрудниками заказчика, то заказчик должен следовать рекомендациям поставщика услуг относительно компетенции и квалификации экспертов по оценке и соответствующих стандартов надлежащей практики.
Примечание - В зависимости от характера оценки разные лица могут выполнять сбор полученных данных оценки, оценку данных, выставление баллов, подсчет и интерпретацию баллов.
5.5 Предоставление услуг по оценке. Интерпретация и использование результатов
При необходимости заказчику следует получать указания от поставщика услуг относительно интерпретации и использования результатов.
Все решения, связанные с их оценкой, должны являться областью ответственности заказчика.
5.6 Предоставление услуг по оценке. Обеспечение обратной связи
В период процесса получения информированного согласия участник оценки должен быть ознакомлен с процессом обеспечения обратной связи, характером обратной связи при ее наличии и способом ее предоставления. Обратная связь должна включать точную и актуальную информацию, которая позволит участнику оценки, группе или организации понять результаты оценки и то, как эти результаты будут использованы.
При наличии подробной обратной связи заказчик должен работать с поставщиком услуг с целью подтверждения доступности компетентного лица для обсуждения результатов с участником оценки, группой или организацией в конструктивной и благоприятной атмосфере.
5.7 Предоставление услуг по оценке. Анализ услуг по оценке
Заказчик должен выполнять свои обязанности по мониторингу данных по оценке и процессу оценки, гарантируя что:
a) информация, указывающая на возможность возникновения ошибки или проблемы, или возникновение необходимости внесения изменений или других корректив в процесс оценки, была проверена (при выявлении ошибок все заинтересованные стороны должны принять меры для минимизации любых негативных последствий);
b) критерии оценки являются актуальными и используются должным образом;
c) использованы передовой опыт и рекомендуемые нормы;
d) установленная законом возможность защиты осуществляется в соответствии с нормами той страны, в которой работают заказчик и поставщик услуг и страны, в которой предоставляются услуги по оценке;
e) оценка остается в силе, если цель оценки изменилась;
f) сохраняется беспристрастность обращения со всеми подгруппами.
6 Проверка после оценки
Если заказчик согласится на проверку после проведения оценки (см. 4.3), то он должен работать с поставщиком услуг для проведения такой проверки, которая должна включать, но не ограничиваться только этим, следующие пункты:
a) цель и оценки и степень их достижения;
b) те части процесса оценки, которые выполнены так, как было запланировано, и те, которые выполнить не удалось, например, администрирование, представление отчетов, использование данных, использование процедур и методов;
c) сбор, интеграция, хранение, уничтожение данных и результатов во время всех этапов проведения оценки (особенно в отношении конфиденциальности, безопасности и носителя информации);
d) возможности для повышения эффективности и/или результативности оценки;
e) последствия, как преднамеренные, так и непреднамеренные, а также последствия оценки для организации и участников оценки;
f) процедуры, используемые для интеграции данных оценки, например, для использования в процессе принятия решений, переоценке целесообразности использования источников информации;
g) уровень понимания отчетов конечными пользователями и их последствия для повышения качества отчетов;
h) способ использования отчетов конечными пользователями, например в организации при разработке планов действий или принятии решения о найме.
Приложение А
(справочное)
Права и обязанности участников оценки. Указания и ожидания
A.1 Общие положения
Участник оценки - это обобщающий термин, определяющий тех, кто применяет стандартизованные методы, проводит социологический опрос или участвует в реализации других показателей эффективности организации. Участник оценки может предоставить информацию для лица, группы или организации или может пройти оценку в своих собственных интересах. Оценка включает проведение экспертиз, выполненных с использованием метода "360 градусов", организационных исследований, тестов и экзаменов.
A.2 Права участников оценки
Участник оценки имеет право:
a) получать информацию о своих правах и обязанностях как участник оценки;
b) на вежливое, уважительное, постоянное и беспристрастное отношение, независимо от возраста, ограниченных возможностей, этнической принадлежности, пола, национального происхождения и языка, религии, сексуальной ориентации или других личностных характеристик;
c) пройти оценку с помощью методов, которые отвечают профессиональным и руководящим принципам и которые подходят для этого, учитывая то, каким образом будут использованы результаты оценки;
d) получать краткое устное или письменное объяснение о его предназначении до проведения оценки. Оценки различных видов будут применены, независимо от доведения результатов до сведения участников оценки и/или других лиц и предполагаемого использования результатов.
Примечание - Если участник оценки имеет инвалидность, то он имеет право запрашивать и получать информацию о жилье. Если участник оценки испытывает трудности в понимании языка, на котором проводится оценка, он имеет право до начала оценки быть проинформированным об обеспечении проживания;
e) знать заранее о проведении оценки, если оценка будет проводиться, как и когда будут доступны результаты, и следует ли ему оплачивать проведение оценки;
f) знать о том, осуществляется ли управление процессом оценки и интерпретация результатов квалифицированными специалистами, которые следуют кодексу профессиональной этики, или системами, разработанными такими специалистами;
g) знать о том, является ли участие в проведении оценки обязательным, и узнать о последствиях, связанных с участием или неучастием в процессе оценки, об окончательном завершении оценки или об отмене результатов (для изучения последствий участник оценки может при необходимости задать вопросы);
h) знать заранее о том, получит ли он и когда объяснение результатов, и если да, получит ли письменные или устные объяснения в разумные сроки после проведения оценки и на установленных соглашением условиях;
i) знать о том, что его индивидуальные ответы и результаты оценки не подлежат разглашению поставщиком услуг и могут быть предоставлены только лицам, имеющим допуск.
Примечание - Если участником оценки является заказчик, то он имеет право назначать другие организации, например, органы по лицензированию или сертификации, чтобы получить результаты оценки;
j) выражать озабоченность по поводу процесса оценки или результатов оценки и получать информацию о методах, которые будут использоваться для решения проблем, например таких, как процедуры и сроки инициирования и решения по жалобам, документирование официальных апелляций.
A.3 Обязанности участников оценки
Участник оценки должен:
a) прочитать и/или прослушать свои права и обязанности как участника оценки;
b) вежливо и уважительно относиться к другим лицам в период процесса оценки;
c) задавать вопросы до проведения оценки, если имеется уверенность в необходимости проведения оценки, касающиеся способа ее проведения, о своих функциях и о действиях с результатами;
d) прочитать или прослушать описательную информацию до начала проведения оценки и обратить пристальное внимание на все инструкции.
Примечание - Участник оценки должен заранее сообщить администратору оценки о необходимости предоставления жилья для инвалидов, физическом состоянии или заболевании, исключающем участие в процессе оценки. Если участник оценки испытывает трудности в понимании инструкций, то он обязан проинформировать об этом администратора оценки;
е) знать о времени и месте проведения оценки, о соответствии всем требованиям к оценке, о необходимости появления в установленный срок со всеми необходимыми материалами и готовности к оценке (возможно, для выяснения этой информации участники оценки могут при необходимости задавать вопросы);
f) следовать инструкциям, относящимся к процессу проведения оценки и честно формулировать ответы в процессе оценки (в ответ на вопрос о его или ее взглядах, отношениях или представлении о своей организации, группе или другом лице участник оценки должен отвечать достоверно);
g) спрашивать о последствиях и сделать выбор не принимать или не продолжать оценку;
h) информировать соответствующее(ие) лицо(а), если он считает, что экологические и технические условия повлияли на результаты;
i) просить о конфиденциальности ответов и результатов оценки, если этот аспект касается участника оценки, а также назначить любое соответствующее лицо, которому в случае необходимости следует передать результаты;
j) своевременно и в уважительной форме выражать любую озабоченность, возникшую в отношении процесса или результатов оценки;
k) давать информированное согласие.
Примечание - Эти права и обязанности разработаны на основе материалов [13].
Приложение B
(справочное)
Дополнительная информация о технической документации на методы и процедуры оценки
B.1 Документация на методы и процедуры оценки
Документация на методы и процедуры оценки должна удовлетворять следующим критериям:
a) техническая документация должна быть разработана для каждого используемого метода и процедуры оценки. Документация должна включать в себя доказательные исследования, которые обеспечивают качество методов и процедур оценки;
b) документация должна быть представлена конструктором или разработчиком метода или процедуры и быть доступна через дистрибьютора или правообладателя метода или процедуры;
c) техническая документация должна быть доступна поставщику услуг, заказчику и иным сторонам;
d) все источники, приведенные в технической документации, должны быть общедоступны или, в случае коммерческой информации, доступны для обзора в соответствии с соглашением о неразглашении;
e) все подтверждающие доказательства следует представить достаточно подробно, и они должны включать:
1) описание модели, теории или логики, на которых основан метод или процедура оценки, например, теория организационной культуры, модель удовлетворенности работой, теория индивидуальных различий в интеллекте или модель квалификационных требований к профилю работы;
2) сведения о времени и месте получения доказательства и времени их последнего обновления;
3) сведения о типе собранных данных, например, о результатах тестов, оценки, рейтингов, рейтингов интервью, опросников по внутригрупповому выбору;
4) информацию, касающуюся характеристик участников оценки, о достаточности их представительства и достаточном количестве, чтобы подтвердить любые выводы на основе их результатов;
5) информацию, касающуюся установления проходных или пограничных баллов;
6) последствия выводов для использования метода или процедуры оценки, включая ограничения по их применению;
f) документация для доказательств должна соответствовать общепринятым критериям для научных публикаций. Эти критерии представлены в В.2-В.6.
Примечание - Техническая документация не всегда содержит тестовые задания, содержание заданий или подходы к выставлению баллов/алгоритмам.
B.2 Объективность методов и процедур оценки в ходе их реализации
Необходимо представить порядок применения методов и процедур оценки, подсчета баллов и интерпретации результатов для их последовательного осуществления. Требования, предъявляемые к оборудованию (например, к компьютерам), обучению (например, экспертов по оценке, интервьюеров или администраторов) или другим специальным помещениям (например, подходящим помещениям для групповых занятий) должны быть четко описаны и документированы.
B.3 Обоснованность
Результаты оценки должны быть обоснованными. Техническая документация должна содержать данные, обеспечивающие доказательства для подтверждения выводов, которые можно сделать из результатов оценки, и включать описание ограничений на их использование.
a) Техническая документация должна содержать информацию о фактах, подтверждающих обоснованность процедуры.
b) Методы, используемые для сбора таких доказательств, должны быть описаны в технической документации. Описание метода должно включать в себя характеристики участников оценки, способ принятия их на работу и их демографические данные, способ исследования (например, сбор всей информации в одной точке в одно время или с задержкой по времени и т.д.) и размер выборки.
B.4 Достоверность
Результаты оценки должны быть достоверными. В используемых методах и процедурах должны быть предусмотрены баллы для оценки отдельных лиц, команд, групп или организаций, которые максимально свободны от источников случайной погрешности измерений.
a) Техническая документация должна содержать информацию о достоверности метода или процедуры и способе определения достоверности, например, при анализе повторяемости оценки экспертов или через лицо при проведении опроса (по соглашению между экспертом и опрашиваемым лицом), по временной стабильности результатов в различные временные интервалы, последовательности нескольких действий, направленных на измерение той же конструкции.
b) При использовании нескольких действий, например осуществляемых группой экспертов одновременно или одним экспертом в течение определенного времени, отдельные результаты оценки должны быть объединены в общий результат, и должна быть представлена информация о достоверности общего результата.
B.5 Объективность
Методы и процедуры оценки должны быть объективными. Степень, при которой они могут быть подвержены систематическим погрешностям, должна быть указана в документах.
Пример - Понятность мнения эксперта о наблюдении систематических погрешностей оценки, связанных с требованиями к некоторым участникам оценки, реагирующим на оценку на иностранном языке, и способами, в которых содержание метода или процедуры могло бы повлиять на эффективность действий, не связанных с целью оценки.
B.6 Периодические проверки на адекватность
Любые отклонения от стандартных методов и процедур, например, помещения для использования лицами, которые имеют особые потребности, или лицами, которые должны быть оценены на другом языке, должны соответствовать требованиям и быть документированы.
a) Достаточность доказательств для поддержки постоянного использования метода или процедуры следует периодически проверять, особенно это касается научной литературы и анализа данных поставщика услуг. Периодичность проверок должна определяться характером мер и выводов, которые используются для поддержки, доказательства их стабильности в течение времени и доказательств, относящихся к изменениям, в популяциях среди участников оценки (лиц, групп, организаций).
b) Процедуры, установленные для применения, управления, подсчета баллов и сбора информации, следует периодически пересматривать, особенно в соответствии с профессиональными стандартами и в связи с рисками возникновения возможной ошибочной интерпретации.
Приложение С
(справочное)
Дополнительная информация об анализе и интерпретации результатов
Ответственные за анализ и интерпретацию результатов должны:
a) быть в состоянии предоставить свидетельства о своей компетенции, основанной на поддающихся проверке опыте, обучении, образовании или документах, подтверждающих полномочия;
b) определить характер методов, чтобы объединить данные и дать четкое обоснование любых заключений и решений относительно комбинации и интерпретации данных и доказательств, подтверждающих их;
c) предпринять соответствующие меры, чтобы отчеты об оценке отразили данные, полученные на основе метода оценки;
d) использовать процедуры для просмотра результатов оценки, подходящие для определения маловероятных или необоснованных интерпретаций, классификации или баллов, как, например данные судебно-медицинской экспертизы, признание маловероятных баллов;
e) обеспечивать интерпретацию оценки, которая согласуется с информацией о методе оценки, как представлено в технической документации, руководствах для пользователя и в другой научной литературе;
f) гарантировать рассмотрение и проведение анализа каждого из положений, содержащихся в соглашении между сторонами;
g) интерпретировать результаты оценки с учетом имеющейся информации об участниках оценки и содержания оценки, условий, методов и способов, технических характеристик используемых методов, а также необходимости оценки;
h) с беспристрастностью анализировать и интерпретировать выводы и результаты;
i) уделять должное внимание имеющимся данным о технических показателях метода оценки для соответствующих демографических групп участников оценки;
j) принимать во внимание любые индивидуальные или групповые отклонения от стандартной процедуры в ходе управления процедурой оценки в случае необходимости;
k) принимать во внимание возможное влияние предыдущего опыта участника оценки по используемым методам:
1) избегать чрезмерного обобщения результатов одним методом оценки;
2) рассматривать обоснованные альтернативные интерпретации;
3) удостовериться в том, что все выводы подтверждены собранными данными;
4) документировать результаты и интерпретацию оценки, например тренинги или практики, или интервью центра по оценке.
Приложение D
(справочное)
Дополнительная информация по представлению отчета
Ответственные за предоставление отчета должны:
a) представлять отчеты на основе доказательных данных;
b) составлять отчеты, которые подходят для каждой категории конечных пользователей;
c) использовать форму и структуру отчета, который соответствует контексту оценки, например, отбор в зависимости от развития;
d) включать четкое резюме и, в соответствующих случаях, конкретные рекомендации;
e) обеспечивать, чтобы технический и лингвистический уровень любых отчетов соответствовал уровню понимания конечного пользователя;
f) четко указывать в отчете ограничения по использованию данных об оценке;
g) объяснять, как следует рассматривать результаты оценки относительно другой информации о лице, группе или организации, которые являются объектом оценки.
Библиография
|
|
|
[1] | ISO 10075-3 | Ergonomic principles related to mental workload - Part 3: Principles and requirements concerning methods for measuring and assessing mental workload (Эргономические принципы обеспечения адекватности умственной нагрузки. Часть 3. Принципы и требования к методам измерений и оценке умственной нагрузки) |
[2] | ISO 10667-2 | Assessment service delivery - Procedures and methods to assess people in work and organizational settings - Part 2: Requirements for service providers (Предоставление услуг по оценке. Процедуры и методы оценки работы персонала и организационной среды. Часть 2. Требования к поставщикам услуг) |
[3] | ISO 17024 | Conformity assessment - General requirements for bodies operating certification of persons (Оценка соответствия. Общие требования к органам, проводящим сертификацию персонала) |
[4] | Information technology - A code of practice for the use of information technology (IT) in the delivery of assessments [Информационные технологии. Свод правил по применению информационных технологий (IT) в предоставлении услуг по оценке] | |
[5] | DIN 33430:2002 | Requirements for procedures and their application in job related proficiency assessment (Профессиональная оценка сотрудников. Требования к методикам и их применению. Berlin: Издательство Beuth) |
[6] | AERA(1999). American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. Standards for Educational and Psychological Testing. Washington DC: American Educational Research Association | |
[7] | АРА (1985). American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. Standards for Educational and Psychological Testing. Washington DC: American Psychological Association | |
[8] | АРА (1950). Ethical standards for the distribution of psychological tests and diagnostic aids. American Psychologist, 5, p. 620-626 | |
[9] | Association of Test Publishers (ATP 2002). Guidelines for computer-based testing: ATP | |
[10] | European Federation of Psychologists’ Associations (EFP2A005). EFPA Review Model for the Description and Evaluation of Psychological TestsVersion 3.41: Test Review Form and Notes for Reviewers, www.efpa.eu | |
[11] | European Federation of Psychologists’ Associations (EFPA2005). European Test User Standards for Test Use in Work and Organizational Settings Version 1.92. www.efpa.eu | |
[12] | EVERS A., SIJTSMA K., LUCASSEN W., & MEIJER R.R. (2010). The Dutch review process for evaluating the quality of psychological tests: History, procedure and results. International Journal of Testing, 10, p. 295-317 | |
[13] | EYDE L, KRUG S.E., ROBERTSON G. (1993). Responsible Test Use: Case studies for assessing human behavior. Washington, DC: АРА | |
[14] |  R., DE BRUYN E.E.J., GODOY A., HORNKE L.F., TER LAAK J,. VIZCARRO C., WESTHOFF K., WESTMEYER H., & ZACCAGNINI J.L. (2001). Guidelines for the assessment process (GAP): A proposal for discussion. European Journal of Psychological assessment, 17, p. 187-200 | |
[15] | HAMBLETON R. (2005). Issues, designs, and technical guidelines for adapting tests into multiple languages and cultures. In, R.K. Hambleton, P. Merenda, & С. Spielberger (Eds.). Adapting Educational and Psychological Tests for Cross-Cultural assessment. Lawrence Erlbaum | |
[16] | International Test Commission (ITC 2001). International Guidelines on Test Use. International Journal of Testing, 1, p. 95-114 | |
[17] | International Test Commission (ITC 2006). International Guidelines on computer-based and Internet-delivered testing. International Journal of Testing, 6, p. 143-172 | |
[18] | Joint Committee on Testing Practices. (JCTP 2000). Rights and Responsibilities of Test Takers: Guidelines and Expectations. Washington DC: Joint Committee on Testing Practices | |
[19] | NIP (2004). Algemene Standaard Testgebruik. [General Standard Test Use]. Amsterdam: NIP | |
[20] | Society for Industrial and Organizational Psychology (SIOP) (2003). Principles for the validation and use of personnel selection procedures (4th ed.). Bowling Green, OH: Author | |
[21] | TURNER S.M., DEMERS S.T., FOX H.R., & REED G.M. (2001). APA’s guidelines for test user qualifications. An executive summary. American Psychologist, 56, p. 1099-1113 | |
[22] | Task Force on AC Guidelines (1989). Guidelines and ethical considerations for assessment center operations. Public Personnel Management, 18, p. 457-470 | |
|
|
|
|
УДК 658.386:006.354 |
|
| ОКС 03.080.30 |
| |||
Ключевые слова: оценка, предоставление услуг по оценке, процедура оценки, метод оценки, заказчик, поставщик услуг, участник оценки, обратная связь | |||