Как избежать того, чтобы люди использовали мой код во зло? [закрыто]

В настоящее время этот вопрос не подходит для нашего формата вопросов и ответов. Мы ожидаем, что ответы будут поддержаны фактами, ссылками или опытом, но этот вопрос, скорее всего, вызовет дебаты, аргументы, опросы или расширенное обсуждение. Если вы считаете, что этот вопрос можно улучшить и, возможно, снова открыть, посетите справочный центр , чтобы получить рекомендации.

Закрыт 6 лет назад .

Я не уверен, что это подходящее место, но мне кажется, что это достойное место, чтобы спросить.

Моя текущая работа включает ручной анализ большие наборы данных (на нескольких уровнях, каждый из которых уточняется и выполняется опытными аналитиками). Около года назад я начал разрабатывать несколько утилит для отслеживания работы аналитиков, сравнивая результаты на более ранних уровнях с конечными. Поначалу это работало довольно хорошо - мы использовали его в магазине как простой индикатор, помогающий сосредоточить усилия по обучению и сделать работу в целом лучше.

Однако недавно результаты были вырваны из контекста и использованы таким образом, как я никогда не предполагал. Похоже, что руководство (в частности, один человек) начало использовать результаты этих инструментов, чтобы напрямую повлиять на EPR (включенные отчеты о производительности - \ это дело ВВС, но я предполагаю, что нечто подобное существует в других областях) и аналогичную документацию. Проблема не в том, кто использует эти результаты, а в том, как. Я прояснил всем, что результаты очень просто подвержены ошибкам.

Существует множество неизбежных препятствий для генерации этих данных, которые я старался минимизировать с помощью некоторых изящных эвристик и тому подобного. Взятые в надлежащем контексте, они являются полезным инструментом. Однако вне контекста, поскольку они сейчас используются, они приносят больше вреда, чем пользы.

Рассматриваемый (е) менеджер (ы) воспринимает результаты как буквальные индикаторы того, хорошо или плохо работает аналитик. Результаты усредняются, и индивидуальные оценки оцениваются как выше (хорошо) или ниже (плохо). Это делается без учета естественной погрешности и систематической ошибки выборки, без учета какой-либо правильной интерпретации. Я знаю по крайней мере одного человека, чей рейтинг производительности был понижен за «процент точности» менее чем на один процентный пункт ниже среднего (когда типичная погрешность только одного метода расчета составляет около двух-трех процентов).

I Я в процессе написания официального отчета об ошибках, имеющихся в системе (включая «Руководство для начинающих по значимому статистическому анализу»), но все признаки указывают на то, что это не имеет никакого эффекта.

Если не считать преднамеренного взлома инструментов (a Я предпочел бы избегать маршрута, но в данных обстоятельствах сильно обдумываю его), я ' Мне интересно, успешно ли кто-нибудь здесь справлялся с подобными ситуациями раньше? Мы будем очень благодарны за любое понимание того, как это сделать.

Обновление: Спасибо за ответы - вокруг много хороших идей.

Если кому-то интересно, я двигаюсь в направлении «совершенствовать, обучать и контролировать интерпретацию». Я начал перестраивать свои инструменты, чтобы попытаться нейтрализовать или лучше отслеживать ошибки и автоматически генерировать любые числа и графики, которые они могли бы захотеть, с включенной документацией повсюду (при этом скрывая как неясные ссылки необработанные данные, которые они в настоящее время, похоже, так стремятся импортировать в '' волшебные таблицы Excel).

В частности, я надеюсь, что визуальное представление ошибок и правильно созданные системы ранжирования (с учетом ошибок, стандартных отклонений и т. д.) помогут ситуации.

performance statistics

задан 3 revs, 2 users 100% 4 August 2014 в 15:50

0 ответов

Другие вопросы по тегам:

performance statistics

Как избежать того, чтобы люди использовали мой код во зло? [закрыто]

0 ответов

Похожие вопросы: