Как убрать выбросы в excel

Удаление выбросов из исторических транзакционных данных при расчете прогноза спроса

В этом разделе описывается, как удалить выбросы из исторических данных, которые использовались для расчета прогноза спроса. Выбросы — это данные, которые не считаются частью общего спроса, например проводки по продажам, выполненные в результате распродажи, не являются типичным спросом. Поскольку выбросы могут повлиять на точность прогноза, может быть полезно удалить их из расчета. При прогнозировании спроса в Microsoft Dynamics AX 2012 R3 можно удалить выбросы для повышения точности прогноза. Выполните следующую необязательную задачу с помощью запроса, чтобы выбрать определенные проводки, которые требуется исключить.

Необходимые условия

В следующей таблице показаны обязательные компоненты, которые должны быть подготовлены до начала работы.

Прогнозирование спроса настроено. Дополнительные сведения см. в разделе Настройка прогнозирования спроса.

Базовый прогноз создан. Дополнительные сведения см. в разделе Создание базового прогноза.

Удаление выбросов

Чтобы удалить выбросы из исторических транзакционных данных, выполните следующие действия.

1. Щелкните Сводное планирование >Настройка >Прогнозирование спроса >Удаление выбросов.
2. Щелкните Создать, чтобы создать запрос, определяющий проводки, которые требуется исключить из исторических данных.
3. Выберите компанию, к которой применяется запрос, а затем введите имя и описание. Поле Дата запроса заполнится текущей датой.
4. Установите флажок Активный, чтобы исключить проводки, найденные в результате запроса, из исторических данных. Эта настройка вступит в силу при создании базового прогноза.
5. Щелкните Изменить запрос. В форме Запрос удаления выбросов можно добавить, удалить и выбрать критерии, определяющие проводки, которые будут исключены при расчете базового прогноза. Например, выберите определенную номенклатуру или проводку по заказу, которую необходимо исключить. Для создания запроса, основанного на существующем запросе, выберите его, а затем щелкните Дубликат. Запрос можно использовать как есть. В поле Дата запроса указывается версия. При необходимости можно изменить имя и описание, а затем нажать кнопку Изменить запрос, чтобы изменить критерии.
6. Для выполнения запроса нажмите кнопку OK.
7. Щелкните Отобразить проводки. В форме Проводки-выбросы содержится список проводок, которые отвечают критериям, указанным в запросе, и которые будут исключены из исторических данных при расчете прогноза спроса.

Далее

После удаления выбросов из расчета прогноза можно создать прогноз спроса. Дополнительные сведения см. в разделе Создание базового прогноза.

Связанные задачи

Техническая информация для системных администраторов

При отсутствии доступа к страницам, которые необходимы для выполнения этой задачи, свяжитесь с системным администратором и предоставьте сведения, представленные в следующей таблице.

Конфигурационные ключи

Щелкните Администрирование системы > Настройка > Лицензирование > Конфигурация лицензии. Разверните лицензионный ключ Торговля, разверните конфигурационный ключ Прогноз запасов и выберите конфигурационный ключ Прогнозирование спроса (ReqDemandPlanning).

Роли безопасности

Для выполнения этой задачи необходимо быть членом роли безопасности «Планировщик производства».

Удаление точек выбросов из графика

Иногда приходится обрабатывать большой набор статистических данных. Часто в этих случаях нужно отбросить недостоверные значения, ошибки эксперимента — точки выброса. И хорошо когда выборка объемом 10-20 значений. А как обрабатывать данные на 100, 1000 или более больших выборках? Вам поможет данная надстройка!

Пример работы программы

Допустим, имеется набор статистических данных, на основе которых строится график с целью выявления зависимости.

На графике отчетливо заметна область точек, которые не удовлетворяют искомой зависимости (так называемые точки-выбросы).

Для быстрого удаления этих точек и была написана данная программа.

Интерфейс ее прост и понятен:

1. Указываете номера столбцов с данными X и Y (начиная счет со столбца A).

2. Вводите количество наблюдений или нажимаете кнопку заполнить автоматически.

Внимание. На первой строке Excel обязательно указывается заголовок таблицы, а сами данные обязательно должны начинаться со второй строки Excel.

3. Ниже указывается тип зависимости, которую Вы хотите получить (Экспоненциальная, Логарифмическая или Линейная).

4. Задаются две пары точек, лежащие на искомом графике.

5. Указывается коэффициент корреляции (значение меньшее 1, указывается через запятую).

6. Нажимается кнопка расчет. Для удаления точек-выбрасов.

7. Кнопка отмена возвращает удаленные точки на график.

Результат выполнения расчета представлен на графике ниже.

Установка

• Убедитесь, что в Вашей программе Excel включены макросы. Как это сделать описано в этой статье.
• Для однократного запуска программы просто откройте скаченный файл надстройки «Точки выбросов».
• Как установить автоматический запуск надстройки при загрузке Excel рассказывается тут.

После установки надстройки на ленте меню появится новая вкладка «Выбросы», на которой расположена кнопка запуска программы «Удаление выбросов».

Изменение функционала

Если по каким-то причинам Вам не подходит программа и Вы хотите ее каким-либо образом улучшить или изменить, то свяжитесь с нами любым удобным для Вас способом.

Полное руководство: когда удалять выбросы в данных

Выброс — это наблюдение , которое лежит аномально далеко от других значений в наборе данных.

Выбросы могут быть проблематичными, поскольку они могут повлиять на результаты анализа.

Тем не менее, они также могут быть информативными в отношении данных, которые вы изучаете, потому что они могут выявить аномальные случаи или людей с редкими признаками.

В любом анализе вы должны принять решение об удалении или сохранении выбросов.

К счастью, вы можете использовать следующую блок-схему, чтобы решить:

Давайте подробнее рассмотрим каждый вопрос в блок-схеме.

Является ли выброс результатом ошибки ввода данных?

Иногда выбросы в наборе данных являются просто результатом ошибки ввода данных.

Например, предположим, что биолог собирает данные о высоте определенного вида растений и записывает следующие данные:

• 6,83 дюйма
• 7,51 дюйма
• 5,21 дюйма
• 5,84 дюйма
• 7,83 дюйма
• 755 дюймов
• 6,53 дюйма
• 6,31 дюйма
• 5,91 дюйма

Очевидно, что запись для 755 дюймов является выбросом и, вероятно, является результатом ошибки ввода данных. Более чем вероятно, что высота должна была быть 7,55 дюйма, но она просто была введена неправильно.

Если бы биолог сохранил это наблюдение и вычислил описательную статистику , такую как средняя высота растений в образце, это наблюдение сильно исказило бы результаты и дало неточную картину истинной средней высоты растений.

В этом сценарии (и в сценариях, подобных этому) имеет смысл удалить этот выброс из набора данных, потому что это ошибка и недопустимая точка данных для включения в анализ.

Влияет ли выброс значительно на результаты анализа?

Если наблюдение является истинным выбросом, а не просто результатом ошибки ввода данных, то нам необходимо проверить, влияет ли выброс на результаты анализа.

Например, предположим, что биолог изучает взаимосвязь между удобрением и высотой растения. Она хочет подобрать простую модель линейной регрессии , используя удобрения в качестве предиктора и высоту растения в качестве переменной отклика .

Она собирает следующие данные для 12 различных растений:

Ясно, что последнее наблюдение является исключением.

Однако, если мы создадим диаграмму рассеяния для визуализации этого набора данных, мы увидим, что линия регрессии не сильно изменится, вне зависимости от того, включили мы выброс или нет:

В этом сценарии выброс на самом деле не нарушает никаких предположений модели линейной регрессии , поэтому мы можем оставить его в наборе данных.

Однако предположим, что у нас есть следующий выброс в данных:

Ясно, что этот выброс значительно влияет на линию регрессии, поэтому мы могли подобрать одну модель регрессии с выбросом и одну без него, а затем представить результаты обеих моделей регрессии.

Влияет ли выброс на предположения, сделанные в анализе?

Если выброс не является результатом ошибки ввода данных и не оказывает существенного влияния на результаты анализа, то нам необходимо задаться вопросом, влияет ли выброс на допущения, сделанные в ходе анализа.

Если это не влияет на предположения, то мы можем просто оставить это в данных.

Однако, если это влияет на предположения, у нас есть несколько вариантов:

1. Удалите его. Мы можем просто удалить его из данных и отметить это при сообщении результатов.

2. Выполните преобразование данных. Вместо удаления выброса мы могли бы попробовать выполнить преобразование данных, например извлечь квадратный корень или записать журнал всех значений данных. Было показано, что это уменьшает выбросы и часто приводит к более нормальному распределению данных.

Независимо от того, как вы решите обрабатывать выбросы в своих данных, вы должны отметить свое решение в результатах анализа вместе с вашими рассуждениями.

Дополнительные ресурсы

В следующих руководствах объясняется, как находить и удалять выбросы в различных статистических программах:

Удаление выбросов из исторических транзакционных данных при расчете прогноза спроса

В этой статье описывается, как удалить выбросы из исторических данных, которые использовались для расчета прогноза спроса. Путем исключения выбросов, вы можете повысить точность прогноза.

Можно удалить выбросы для повышения точности прогноза. Эта задача не является обязательной. Обзор процесса:

1. Щелкните Сводное планирование>Настройка>Прогнозирование спроса>Удаление выбросов, чтобы открыть страницу Удаление выбросов, где вы можете использовать запрос для того, чтобы выбрать исключаемые проводки.
2. Выберите компанию, к которой применяется запрос, а затем введите имя и описание. В поле Дата запроса автоматически задается текущая дата.
3. Установите флажок Активно, чтобы исключить проводки, найденные в результате запроса, из исторических данных. Эта настройка вступит в силу при создании базового прогноза.
4. На странице Запрос удаления выбросов можно добавить, удалить и выбрать критерии, определяющие проводки, которые будут исключены при расчете базового прогноза. Например, выберите определенную номенклатуру или проводку по заказу, которую необходимо исключить.
5. Щелкните Отобразить проводки. На странице Проводки-выбросы содержится список проводок, которые отвечают критериям, указанным в запросе, и которые будут исключены из исторических данных при расчете прогноза спроса.

Примечание. Вы можете также создать запрос, который основан на существующем запросе. Выберите запрос для копирования и после этого щелкните Дублировать. В поле Дата запроса указывается версия. Вы можете использовать запрос «как есть» или можете щелкнуть Изменить запрос, чтобы изменить критерии. Вы можете также изменить имя и описание нового запроса.

Дополнительные ресурсы

• Обзор прогнозирования спроса
• Отслеживание точности прогноза