Диаграмма рассеяния плотности визуализации данных Python Диаграмма рассеяния плотности
Диаграмма рассеяния плотности визуализации данных Python Диаграмма рассеяния плотности

График рассеяния плотности(Density Scatter График), также известный как точечный график плотности или оценка. плотности ядра График Рассеяние — это метод предварительного просмотра данных, который в основном используется для отображения распределения большого количества точек данных на двухмерной плоскости. По традиции График рассеянияпо сравнению с,Он использует цвет или затенение для представления плотности точек данных.,Это сделает распределение выставок более интуитивным. График рассеяния плотность может лучше выявить центральную тенденцию и структуру распределения данных, особенно когда объем данных очень велик, что позволяет избежать проблемы графика. рассеяния Проблема путаницы при предварительном просмотре, вызванная перекрытием средних точек.

Вставьте сюда описание изображения
Вставьте сюда описание изображения

Основные понятия, используемые в диаграммах рассеяния плотности:

  • График рассеяния(Scatter График: базовое двумерное представление данных, используемое для отображения взаимосвязи между двумя переменными. Положение каждой точки данных определяется значениями этих двух переменных. Когда объем данных огромен, многие точки будут перекрываться, что делает невозможным четкое представление о распределении данных.
  • Оценка плотности ядра(Kernel Density Оценка (KDE): непараметрический метод оценки функции плотности вероятности случайной величины. Сглаживание используется для заполнения промежутков между отдельными наблюдениями, в результате чего получается непрерывная функция плотности вероятности. КДЕ Обычно это включает в себя выбор функции ядра (например, ядра Гаусса) и полосы пропускания (параметр, который контролирует степень гладкости).
  • Цветовое кодирование:существовать График рассеяния плотностисередина,Области различной плотности частоиспользоватьразные цвета или оттенкивыражать,Глубина цвета представляет собой плотность точек данных в области.

Принципы визуализации:

  • отображение данных:Сначала положите каждыйданные Точки отображаются на двумерной плоскости.。Это отличается от обычного График Как и рассеяние, этот шаг определяет положение каждой точки на графике.
  • оценка плотности:всемданные Отвечатьиспользовать Оценка плотности Алгоритм ядра. Этот шаг выполняется путем размещения «ядра» вокруг каждой точки данных, а затем поиска всех ядер в области, покрытой всем набором данных. В результате получается оценка каждой позиции во всем двумерном пространстве. плотностиценить。
  • карта цветов:Согласно полученномуоценка Значения плотности присваивают цвета или оттенки различным областям. Областям с высокой плотностью будет присвоен более темный или более яркий цвет, а областям с низкой плотностью — более светлый или бледный цвет.
  • Рендеринг дисплея:в конечном итоге будет Цветовое Раскрывается двухмерная плоскость кодирования, образующая окончательный График. рассеяния плотность. Дополнительно: График на чертеже рассеяния Показывать цветную полосу справа или снизу плотности colorbar。

Зачем использовать диаграмму рассеяния плотности?

  • Изучите распределение данных:проходить Цветовое кодирование представляет собой различные уровни плотности, График рассеяния Плотность может выявить различные закономерности, кластеры или тенденции, которые могут быть скрыты в данных. Это особенно полезно для исследовательского анализа, поскольку может помочь исследователям обнаружить непредвиденные связи или модели поведения. Мы можем видеть, в каких областях более плотная концентрация точек данных, а в каких — относительно разреженная. При работе с большими наборами данных, содержащими десятки тысяч точек данных, традиционный График рассеяние может привести к серьезному перенасыщению графика, когда положения различных точек данных на диаграмме перекрываются, что делает невозможным четкое представление о распределении данных. График рассеяния Плотность решает эту проблему, представляя относительную плотность точек данных внутри области, обеспечивая тем самым более четкий и эффективный способ понимания распределения данных.
  • Оптимизируйте визуальное представление:График рассеяния Плотность помогает четко отображать данные с помощью таких методов, как градиентные цвета или отображение уровней цвета, по сравнению с традиционным графиком. рассеяния растерянность и размытость. Это облегчает различие между областями с высокой и низкой плотностью, делая общую презентацию более красивой и простой для понимания. Очень гибкий график рассеяния плотность поддерживает различные параметры настройки, такие как настройка карты цветов、прозрачность、отметкаразмерждать,Для соответствия различным типам и размерам наборов данных. также,Его также можно комбинировать с другими методами предварительной визуализации (например, с контурами или сетками) для улучшения выразительности.
  • Обнаружение выбросов:График рассеяния плотность может помочь нам выявить выбросы. Если одна область намного плотнее других областей, может быть выброс.
  • кластерный анализ:График рассеяния плотность может помочь нам обнаружить области сбора данных. Если определенная область имеет более высокую плотность, то это может быть центр кластера данных.
  • Анализ результатов прогнозирования модели:График рассеяния плотностиочень подходитиспользовать ВВизуализациянаблюдениеценитьипримеркаценитьситуация,Можно наблюдать потенциальные отклонения и достоверность прогнозов модели.
  • Облегчить принятие решений:существоватьбизнес-аналитика、финансовый анализ、Биометрияждатьполе,Понимание и анализ закономерностей в сложных наборах данных имеет решающее значение для принятия решений. График рассеяния плотности обеспечивает интуитивно понятный способ определения взаимосвязей между ключевыми переменными и динамическими изменениями.,Это помогает лицам, принимающим решения, делать более осознанный выбор на основе глубокой информации.

Таким образом, использование диаграмм рассеяния плотности полезно при работе с крупномасштабными и

{/}

или сложные наборы данных. Он не только эффективно решает проблему перерисовки, но также раскрывает структуру и закономерности, скрытые за огромными данными, обеспечивая при этом элегантное и мощное визуальное представление. Будь то научные исследования, промышленность или бизнес, освоение и применение этой технологии значительно повысят способность понимать и использовать данные.

Давайте объясним график с помощью подходящей кривой. рассеяния Пример рисунка плотности

Импортируйте необходимые зависимые библиотеки:

Язык кода:javascript
копировать
import numpy as np
from numpy import polyfit, poly1d
import matplotlib as mpl
from matplotlib import cm
from matplotlib import ticker
from matplotlib import colors
import matplotlib.pyplot as plt
import matplotlib.font_manager as fm
from scipy.stats import gaussian_kde

Постройте диаграмму рассеяния плотности с подобранной кривой Python Код выглядит следующим образом

Язык кода:javascript
копировать
# зафиксированный numpy случайное семя
np.random.seed(2024)

# Построение двумерных данных xиy
x = np.random.normal(loc=0.0, scale=1.0, size=1000)
y = x + np.random.normal(loc=0.1, scale=1.0, size=1000)

# Оценка плотности ядра
x_and_y = np.vstack([x, y])
kde = gaussian_kde(x_and_y)
z = kde(x_and_y)
idx = z.argsort()
x, y, z = x[idx], y[idx], z[idx]

is_cbar = True

# Создание графиков и осей
fig, ax = plt.subplots(figsize=(7, 4), dpi=150)

# cmap: bwr、Spectral_r、viridis_r、spring、gist_rainbow_r、RdBu_r
# настраиваемый colormaps - https://matplotlib.org/tutorials/colors/colormaps.html
my_cmap = "bwr"

# График рисования рассеяния плотности
ax.scatter(x, y, c=z, cmap=my_cmap)

# использовать 7 Субполиномиальная аппроксимация,настраиватьиспользовать poly1d Метод получения полиномиальных коэффициентов.
y_fit = polyfit(x, y, 7)
y_fit_1d = np.poly1d(y_fit)
y_hat = np.polyval(y_fit, x)

# Вычислить коэффициент корреляции и R^2
print('Correlation coefficients:')
print(np.corrcoef(y_hat, y))
correlation = np.corrcoef(y_hat, y)[0, 1]
R_square = correlation ** 2
print("R^2:", R_square)

xtick = np.linspace(min(x), max(x), 1000)
# Подобранная полиномиальная кривая
plt.plot(xtick, y_fit_1d(xtick), color="#FF0066", lw=2.2)

# Числовое значение шкалы координатной осииспользовать Latin Modern Math шрифт
labels = ax.get_xticklabels() + ax.get_yticklabels()
[label.set_fontproperties(font_latex2) for label in labels]
[label.set_color('black') for label in labels]

# Установить масштаб оси
plt.tick_params(axis='x', direction='out', labelsize=13, length=4.6, width=1.15)
plt.tick_params(axis='y', direction='out', labelsize=13, length=4.6, width=1.15)

# выставка XиY субшкала оси
ax.xaxis.set_minor_locator(ticker.AutoMinorLocator())
ax.yaxis.set_minor_locator(ticker.AutoMinorLocator())

# цветная полосанастраивать:шкала、шрифт、Размер шрифтаждать
if is_cbar:
    norm = colors.Normalize(vmin=np.min(z), vmax=np.max(z))
    cbar = plt.colorbar(cm.ScalarMappable(norm=norm, cmap=my_cmap), ax=ax)

    cbar.ax.set_ylabel("Density", fontproperties=font_latex2, labelpad=12)
    cbar.ax.tick_params(labelsize=12)

    labels = cbar.ax.get_xticklabels() + cbar.ax.get_yticklabels()
    [label.set_fontproperties(font_latex2) for label in labels]
    [label.set_color('black') for label in labels]
    
    tick_locator = ticker.MaxNLocator(nbins=8)
    cbar.locator = tick_locator
    cbar.update_ticks()

# настраивать X Ось Y Диапазон значений шкалы оси
ax.set_xlim(left=-6, right=6.0000001)
ax.set_xticks(np.arange(-6, 6.000001, step=2.0))
ax.set_ylim(bottom=-6, top=6.0000001)
ax.set_yticks(np.arange(-6, 6.000001, step=2.0))

# Сделайте рамку вокруг объекта рисования более жирной.
lw = 1.25
ax.spines["right"].set_linewidth(lw)
ax.spines["left"].set_linewidth(lw)
ax.spines["top"].set_linewidth(lw)
ax.spines["bottom"].set_linewidth(lw)

# настраивать X Ось Y метка оси、шрифт、шкалаишкала Этикеткасуществоватьограничивающая рамка оси внутрисерединарасстояние
plt.xlabel("X Label", fontproperties=font_latex1, labelpad=8)
plt.ylabel("Y Label", fontproperties=font_latex1, labelpad=8)

# настраиватьзаголовок шрифт размер и расстояние от объекта рисования
plt.title("Python Matplotlib - Density Scatter Plot",
          fontproperties=font_latex2, pad=12
         )

# Положение текста определяется на основе координат данных.
ax.text(x=-5, y=4.5, s=r'$\ {R^2} = 0.522$', usetex=True,
        fontsize=14, fontweight="bold"
       )

# показать сетку  Пунктирная линия и прозрачность
plt.grid(alpha=0.360, ls="--", which="major", color="#A9A9A9")
# Компактная планировка
plt.tight_layout()

plt.savefig("./Figures/График рассеяния плотности.png", dpi=300, bbox_inches="tight")
plt.show()

Общее объяснение: этот код сначала импортирует необходимые библиотеки, а затем генерирует тестовые данные.

x

и

y

Практическое применение также может быть реальной ценностью.

y

и прогнозируемая стоимость

\hat y

). Затем он использует оценку плотности ядра (KDE) для расчета распределения плотности данных. После этого он строит график рассеяния плотности и использует полиномиальную аппроксимацию для создания кривой. Наконец, он вычисляет коэффициент корреляции и

R^2

значение и устанавливать различные графические свойства, такие как масштабы осей, цветные полосы, сетки и т. д. Наконец, он сохраняет изображение как .png файл и отображается.

Результаты визуализации следующие:

Вставьте сюда описание изображения
Вставьте сюда описание изображения

📚️ Справочные ссылки:

boy illustration
Неразрушающее увеличение изображений одним щелчком мыши, чтобы сделать их более четкими артефактами искусственного интеллекта, включая руководства по установке и использованию.
boy illustration
Копикодер: этот инструмент отлично работает с Cursor, Bolt и V0! Предоставьте более качественные подсказки для разработки интерфейса (создание навигационного веб-сайта с использованием искусственного интеллекта).
boy illustration
Новый бесплатный RooCline превосходит Cline v3.1? ! Быстрее, умнее и лучше вилка Cline! (Независимое программирование AI, порог 0)
boy illustration
Разработав более 10 проектов с помощью Cursor, я собрал 10 примеров и 60 подсказок.
boy illustration
Я потратил 72 часа на изучение курсорных агентов, и вот неоспоримые факты, которыми я должен поделиться!
boy illustration
Идеальная интеграция Cursor и DeepSeek API
boy illustration
DeepSeek V3 снижает затраты на обучение больших моделей
boy illustration
Артефакт, увеличивающий количество очков: на основе улучшения характеристик препятствия малым целям Yolov8 (SEAM, MultiSEAM).
boy illustration
DeepSeek V3 раскручивался уже три дня. Сегодня я попробовал самопровозглашенную модель «ChatGPT».
boy illustration
Open Devin — инженер-программист искусственного интеллекта с открытым исходным кодом, который меньше программирует и больше создает.
boy illustration
Эксклюзивное оригинальное улучшение YOLOv8: собственная разработка SPPF | SPPF сочетается с воспринимаемой большой сверткой ядра UniRepLK, а свертка с большим ядром + без расширения улучшает восприимчивое поле
boy illustration
Популярное и подробное объяснение DeepSeek-V3: от его появления до преимуществ и сравнения с GPT-4o.
boy illustration
9 основных словесных инструкций по доработке академических работ с помощью ChatGPT, эффективных и практичных, которые стоит собрать
boy illustration
Вызовите deepseek в vscode для реализации программирования с помощью искусственного интеллекта.
boy illustration
Познакомьтесь с принципами сверточных нейронных сетей (CNN) в одной статье (суперподробно)
boy illustration
50,3 тыс. звезд! Immich: автономное решение для резервного копирования фотографий и видео, которое экономит деньги и избавляет от беспокойства.
boy illustration
Cloud Native|Практика: установка Dashbaord для K8s, графика неплохая
boy illustration
Краткий обзор статьи — использование синтетических данных при обучении больших моделей и оптимизации производительности
boy illustration
MiniPerplx: новая поисковая система искусственного интеллекта с открытым исходным кодом, спонсируемая xAI и Vercel.
boy illustration
Конструкция сервиса Synology Drive сочетает проникновение в интрасеть и синхронизацию папок заметок Obsidian в облаке.
boy illustration
Центр конфигурации————Накос
boy illustration
Начинаем с нуля при разработке в облаке Copilot: начать разработку с минимальным использованием кода стало проще
boy illustration
[Серия Docker] Docker создает мультиплатформенные образы: практика архитектуры Arm64
boy illustration
Обновление новых возможностей coze | Я использовал coze для создания апплета помощника по исправлению домашних заданий по математике
boy illustration
Советы по развертыванию Nginx: практическое создание статических веб-сайтов на облачных серверах
boy illustration
Feiniu fnos использует Docker для развертывания личного блокнота Notepad
boy illustration
Сверточная нейронная сеть VGG реализует классификацию изображений Cifar10 — практический опыт Pytorch
boy illustration
Начало работы с EdgeonePages — новым недорогим решением для хостинга веб-сайтов
boy illustration
[Зона легкого облачного игрового сервера] Управление игровыми архивами
boy illustration
Развертывание SpringCloud-проекта на базе Docker и Docker-Compose