🤩 shapviz | Как использовать SHAP для интерпретации моделей Xgboost! ?~
🤩 shapviz | Как использовать SHAP для интерпретации моделей Xgboost! ?~

1 написано впереди

Поговорим сегодня о машинном Классический метод обучения,SHAPShapley Additive exPlanations)。🤒

SHAPИспользование классики теории игр и связанных с ней расширений.Shapley valueСвязь оптимального распределения кредитов с местными объяснениями,это своего родаигра Теоретически оптимальныйЗначение Шепли 来解释个体预测的方法。😂

С точки зрения теории игр,ПучокdataКаждая функциональная переменная рассматривается как игрок.,используйте этоdataпойти на тренировку Модельполучить прогнозируемые результаты,Это можно рассматривать как выгоду от сотрудничества многих игроков для завершения проекта. 🙃

Shapley valueУчитывая вклад отдельных игроков,справедливо распределить выгоды от сотрудничества. 🤓

Стоимость ШАПможет надежно интерпретировать деревья Модель。🌲

использовано 2 упаковки

Язык кода:javascript
копировать
rm(list = ls())
#devtools::install_github("ModelOriented/shapviz")
library(shapviz)
library(xgboost)
library(tidyverse)
library(patchwork)

3Пример данных

Язык кода:javascript
копировать
x <- c("carat", "cut", "color", "clarity")

data("diamonds")

4Моделирование

Здесь мы воспользуемсяxgboostМоделирование。😘

Язык кода:javascript
копировать
dtrain <- xgb.DMatrix(data.matrix(diamonds[x]), label = diamonds$price, nthread = 1)

fit <- xgb.train(params = list(learning_rate = 0.1, nthread = 1), data = dtrain, nrounds = 65)

fit

Анализ 5shap и простая визуализация

Язык кода:javascript
копировать
dia_2000 <- diamonds[sample(nrow(diamonds), 2000), x]

shp <- shapviz(fit, X_pred = data.matrix(dia_2000), X = dia_2000)

shp

классическийbarplot。😘

Язык кода:javascript
копировать
sv_importance(shp, show_numbers = T)

Измените свою позицию и сделайте это снова! ~😘

这里我们Пучоксхема пчелиного рояТакже добавьте,Точки расположены вдоль каждой строки объекта, чтобы показать плотность. 🤓

Цвет используется для отображения исходного значения признака. 🥳

Язык кода:javascript
копировать
sv_importance(shp, kind = "both")  # "bar", "beeswarm", "both", "no"

6График зависимостей

граф зависимостейПоказаны одна или две пары функций.машинное Предельный эффект прогнозируемых результатов обучения Модель может показать взаимосвязь между целью и функцией. 😘

Отображается значение признака и значение признака.SHAPценить。😜

граф зависимостейодин изВажные предположениязаключается в том, что первая функция не связана со второй функцией。⭐️

Иногда между объектами возникают интерактивные эффекты, которые можно отобразить, добавив второй объект, в данном случае цвет точки. 🫠

Язык кода:javascript
копировать
sv_dependence(shp, v = x)

7. Интерпретируемость прогнозов модели

водопадная диаграмма。🙊

Язык кода:javascript
копировать
sv_waterfall(shp, row_id = 1) +
  theme(axis.text = element_text(size = 11))

Force plot,Вот посмотрите на первый. 😘

Язык кода:javascript
копировать
sv_force(shp, row_id = 1)

Вы также можете выбрать свойства объекта,Например, выберите здесьbeautiful color D diamonds。😏

Язык кода:javascript
копировать
sv_waterfall(shp, shp$X$color == "D") +
  theme(axis.text = element_text(size = 11))

8SHAP Interactions

interaction valueдаСтоимость ШАПБолее продвинутый способ игры,Идеальное отображение интерактивных эффектов. 😘

Сначала посчитайте. 🤓

Язык кода:javascript
копировать
shp_i <- shapviz(fit, X_pred = data.matrix(dia_2000[x]), X = dia_2000, interactions = T)

shp_i

граф зависимостейвыставка。🐡

Язык кода:javascript
копировать
sv_dependence(shp_i, v = "carat", color_var = x, interactions = T)

ясно с первого взгляда,perfect!~🎱

Язык кода:javascript
копировать
sv_interaction(shp_i) +
  theme(axis.text.x = element_text(angle = 45, vjust = 1, hjust = 1))
boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose