Энергопотребление давно перестало быть второстепенной метрикой. Для стойки в дата-центре это прямая статья расходов и лишнее тепло, для ноутбука это время автономной работы, для встраиваемого устройства это порог, за которым начинается троттлинг и отключение сервисов. Ядро Linux при этом открывает инженеру доступ к телеметрии редкой откровенности: оно показывает, в каких состояниях простаивают ядра процессора, как часто система просыпается от прерываний и сколько энергии израсходовал процессор за последний интервал. Профилирование энергопотребления собирает эти разрозненные счётчики в цельную картину и отвечает на практический вопрос: куда уходят ватты и что можно улучшить без потери производительности.

Зачем команде эксплуатации нужен профиль энергопотребления серверов

Профиль - это распределение потребления по режимам жизни машины: глубокий простой, фоновая работа, типовая нагрузка, пик. Пока профиль не снят, любая оптимизация остаётся лотереей, а каждая заметная сумма в счёте за электричество выглядит необъяснимой. Снятый профиль сразу отвечает на вопросы, с которыми инженер сталкивается каждую неделю.

Он показывает цену пустой консолидации: несколько недозагруженных машин в сумме тратят больше энергии, чем одна загруженная, хотя формально все они работают. Он ловит регрессии после обновлений: неудачная версия прошивки или ядра способна отключить глубокие состояния сна, и сервер начнёт тратить заметно больше даже ночью, когда нагрузка нулевая. Он делает видимыми фоновые процессы, которые будят систему сотни раз в секунду. Наконец, он служит точкой отсчёта для тюнинга: без базы до и после невозможно отличить реальный выигрыш от красивой презентации средств экономии.

Отдельный сюжет - распределённые парки ноутбуков и пограничные устройства. Там профиль энергопотребления прямо определяет время автономной работы и частоту выездов к железу, а связь между температурой и потреблением позволяет замечать износ раньше, чем он остановит сервис. Выводы, снятые с одной машины, на парк переносятся аккуратно: у разных поколений железа своя цена простоя, поэтому замеры стоит повторять на каждом типовом конфигурационном классе.

Источники данных о питании от ядра до датчиков оборудования

Ядро экспортирует телеметрию питания в нескольких слоях, и полезно понимать происхождение каждой цифры. Подсистема cpuidle ведёт статистику простоя по каждому ядру: в каталоге /sys/devices/system/cpu/cpu0/cpuidle лежат состояния с именами, счётчиками входов и суммарным временем пребывания. Подсистема cpufreq публикует текущую частоту и активный governor. Фреймворк powercap на современных серверах Intel и AMD отдаёт накопленный расход энергии из аппаратных счётчиков RAPL. На ноутбуках состояние батареи описывает каталог /sys/class/power_supply. Наконец, /proc/interrupts и счётчики таймеров объясняют, кто именно будит систему.

# idle states of cpu0 with residency counters
ls /sys/devices/system/cpu/cpu0/cpuidle
cat /sys/devices/system/cpu/cpu0/cpuidle/state*/name
cat /sys/devices/system/cpu/cpu0/cpuidle/state2/time

# battery telemetry on a laptop
cat /sys/class/power_supply/BAT0/status
cat /sys/class/power_supply/BAT0/capacity
cat /sys/class/power_supply/BAT0/power_now

Состав полей зависит от модуля ядра: на одной машине power_now выдаёт микроватты, на другой ток в микроамперах, на третьей файл отсутствует вовсе. Относитесь к sysfs как к сырью, а не к готовому отчёту: для сравнимых цифр нужны одинаковые ядра, одинаковые интервалы и усреднение по нескольким прогонам. Для приостановки отдельный интерес представляет файл /sys/power/mem_sleep, где выбирается режим s2idle или глубокий сон по спецификации S3; на ноутбуках разница между ними измеряется часами автономной работы.

Серверы дают ещё один слой: контроллер управления платой знает суммарное потребление шасси. Команда ipmitool dcmi power reading возвращает его без остановки сервисов, и такие показания служат эталоном для проверки программных счётчиков. Каждая строка /proc/interrupts показывает счётчик конкретной линии, и разность двух снимков с интервалом в минуту мгновенно выявляет источник лишних пробуждений.

Powertop и turbostat интерактивный разбор процессов и состояний процессора

PowerTOP остаётся самым быстрым способом увидеть, кто расходует энергию прямо сейчас. Утилита ранжирует процессы по числу пробуждений, показывает суммарную статистику C- и P-состояний и работает поверх тех же системных счётчиков. Раздел tunables предлагает готовый список исправлений: автоприостановка USB, управление питанием канала SATA, энергосбережение аудиокодека, таймаут отложенной записи на диск. Отчёт в формате html удобен для внутренних разборов, а режим автонастройки применяет безопасные значения одной командой.

sudo powertop
sudo powertop --html=/tmp/power-report.html
sudo powertop --auto-tune

На ноутбуке утилита умеет калиброваться: при запуске с параметром --calibrate система на глазах оператора несколько раз уходит в сон, меняет яркость и заряжается, а утилита строит модель оценки мощности. На сервере без батареи оценка мощности недоступна, но счётчики пробуждений остаются честными. Для сервера под нагрузкой сотни пробуждений в секунду на процессор - обычное дело, а на холостом ходу здоровая система редко выходит за десятки; резкий рост этого числа после очередного обновления - классический признак появившегося фонового вредителя.

turbostat идёт глубже: он читает модельные регистры процессора напрямую. По каждому ядру выдаются фактическая средняя частота, резидентность состояний простоя вплоть до пакетных, температура и мощность, рассчитанная из RAPL. Колонки PkgWatt, CorWatt и RAMWatt показывают, как энергия делится между процессором в целом, вычислительными ядрами и контроллером памяти. Расхождение колонок Avg_MHz и Bzy_MHz - верный признак того, что ядра значительную часть интервала спали.

sudo turbostat -i 5
sudo turbostat -i 5 sleep 30

У пары инструментов разная специализация. PowerTOP отвечает на вопрос, какой процесс виноват, turbostat - на вопрос, во что обходится текущая политика частот. Обе утилиты требуют прав root, потому что работают с системными счётчиками, и обе показывают мгновенную картину, а не историю: длительные наблюдения имеет смысл сводить в систему мониторинга.

C-состояния и P-состояния поиск баланса между экономией и откликом

C-состояния описывают сон вычислительного ядра. В C0 ядро исполняет инструкции, в C1 останавливается по halt, более глубокие состояния отключают кэш и части конвейера, вплоть до полного снятия питания с ядра. Чем глубже сон, тем меньше утечка тока, но тем дольше выход из него. Для веб-служб и пакетной обработки обмен почти всегда выгоден, для систем с жёсткими требованиями к малому времени отклика глубокие состояния превращаются в источник джиттера: пробуждение занимает микросекунды, и они оказываются в хвосте распределения запаздываний.

Ядро позволяет управлять глубиной сна на работающей системе. Запись единицы в файл disable конкретного состояния запрещает его, а удержание открытого файлового дескриптора /dev/cpu_dma_latency фиксирует допустимое время выхода из сна для всей системы. Загрузочные параметры intel_idle.max_cstate и processor.max_cstate ограничивают сон на постоянной основе. Разумная последовательность проста: сначала замер с состояниями по умолчанию, затем замер с ограничением, и только потом решение, стоит ли платить ваттами за предсказуемость отклика.

Отдельно стоят пакетные состояния, когда спят все ядра сразу: резидентность вида Pkg%pc2 и Pkg%pc6 в turbostat показывает, насколько часто процессор целиком проваливается в глубокий сон. Если пакет почти никогда не спит, виновника обычно находят не в процессоре: таймеры, сетевые прерывания и фоновые службы держат систему в полусонном состоянии.

P-состояния описывают рабочие точки частоты и напряжения. Здесь действует грубая, но устойчивая закономерность: потребление растёт быстрее частоты, поэтому последние проценты производительности обходятся непропорционально дорого. Отсюда практический вывод: оптимум ищется не в максимуме или минимуме частоты, а в подборе политики под реальную нагрузку, и без замера выбор всегда будет произвольным.

Губернаторы cpufreq и поведение intel_pstate под разной нагрузкой

Governor - это политика, по которой подсистема cpufreq выбирает частоту. Классическая четвёрка знакома каждому: performance держит максимум, powersave - минимум, ondemand дёргает частоту вслед за загрузкой, conservative делает то же плавно. Более современный schedutil встроен в планировщик и принимает решения на основе фактической нагрузки, поэтому на большинстве дистрибутивов ведёт себя разумно по умолчанию.

На процессорах Intel модуль intel_pstate добавляет нюансы. В активном режиме он сам управляет частотой и регистрирует governor powersave, но это не тот пассивный powersave из старых ядер: внутренний алгоритм поднимает частоту агрессивно. Аппаратные HWP (Hardware P-States) и вовсе переносит выбор рабочей точки в процессор, а инженеру остаётся приоритет energy_performance_preference: performance, balance_performance, balance_power или power. Если требуется сравнить поведение со старой схемой, модуль переводят в пассивный режим параметром intel_pstate=passive или отключают через intel_pstate=disable, возвращаясь к acpi-cpufreq. На современных системах AMD похожим образом работает модуль amd-pstate.

cpupower frequency-info
sudo cpupower frequency-set -g performance
cat /sys/devices/system/cpu/cpu0/cpufreq/scaling_governor
cat /sys/devices/system/cpu/cpu0/cpufreq/energy_performance_preference

Разовые переключения - только начало. Для парка машин политики упаковывают в профили tuned или TLP на ноутбуках, а powertop2tuned переносит находки PowerTOP в постоянный профиль. После смены governor проверяйте фактическую частоту под нагрузкой turbostat: заявленная политика и реальное поведение железа иногда расходятся. Стоит помнить и про принцип racing to idle: иногда выгоднее прогнать работу на максимальной частоте и уйти в глубокий сон, чем тащить её на пониженной частоте. Проверяется только замером: у разных процессоров точка перелома находится в разных местах.

RAPL и sysfs замеры потребления без внешних приборов

Аббревиатура RAPL расшифровывается как Running Average Power Limit, и за ней скрывается приятная возможность: процессор сам считает израсходованную энергию по доменам. Классические домены: пакет целиком, вычислительные ядра, встроенная графика и, на серверных моделях, память. Счётчик energy_uj в каталоге /sys/class/powercap/intel-rapl:0 накапливает микроджоули с момента загрузки, поэтому мощность получают разностью двух чтений, делённой на время между ними. Счётчик периодически переполняется, и рабочий код обязан обрабатывать момент, когда новое значение оказывается меньше старого.

# package energy delta over one second
a=$(cat /sys/class/powercap/intel-rapl:0/energy_uj)
sleep 1
b=$(cat /sys/class/powercap/intel-rapl:0/energy_uj)
echo $(( (b - a) / 1000000 )) W

Через perf те же счётчики доступны как события, включая агрегированную статистику по всем процессорам:

sudo perf stat -a -e power/energy-pkg/,power/energy-ram/ sleep 10

Если perf отказывается открывать события, проверьте значение /proc/sys/kernel/perf_event_paranoid: на рабочих серверах его часто ограничивают, и замер придётся выполнять от root. У программных счётчиков есть честное ограничение: они видят процессор и память, но не видят диски, вентиляторы и потери блока питания. Для полной картины нужны показания PDU, IPMI или настольный измеритель. Тем не менее для сравнения конфигураций относительных цифр RAPL обычно достаточно, и turbostat фактически выводит те же значения в удобном виде.

Методика замера, которой можно доверять, устроена одинаково почти всегда:
1. Зафиксируйте окружение: governor, профиль tuned, версию ядра и температуру в помещении;
2. Прогрейте систему типовой нагрузкой, чтобы частоты и температуры вышли на плато;
3. Снимите базу на холостом ходу turbostat с интервалом в пять секунд;
4. Повторите замер под рабочим сценарием с той же длительностью и тем же интервалом;
5. Повторите серию минимум трижды и сравнивайте медианы, а не единичные пики.

Wake-on-LAN и скрытые потребители энергии в сетевой периферии

Сетевой контроллер умеет просыпаться по magic packet, и эта способность, известная как Wake-on-LAN, на серверах часто включена настройками прошивки по умолчанию. Включённый WoL удерживает часть логики карты под напряжением даже при выключенной системе, а на работающем хосте мешает карте уходить в глубокий сон между пакетами. Проверка занимает секунды, и её стоит включить в чек-лист приёмки каждого сервера.

sudo ethtool eth0 | grep -i wake
sudo ethtool -s eth0 wol d

Рядом с WoL живёт целое семейство незаметных потребителей. Energy Efficient Ethernet экономит энергию на линке, но на некоторых модулях увеличивает время его выхода из сна. ASPM переводит линии PCI Express в низкое потребление в простое. Автоприостановка USB, полезная на ноутбуке, на сервере способна отвалить внешний ИБП или консольный шнур. ALPM переводит канал SATA в сон между обращениями, а параметр power_save аудиокодека приглушает неиспользуемый звуковой тракт. На ноутбуках утилита hdparm настройкой -B управляет политикой парковки головок и остановкой пластин диска, но для дисковых массивов такая экономия противопоказана: частые остановки изнашивают механику и увеличивают время доступа.

Каждый механизм стоит включать по отдельности, замерять эффект и фиксировать решение в системе управления конфигурациями. Правила энергосбережения переносятся между машинами хуже, чем конфигурация сети: то, что безопасно для веб-сервера, способно напугать дисковую подсистему ложными ошибками.

Профилирование энергопотребления не требует отдельного стенда с приборами: sysfs, perf, PowerTOP и turbostat либо уже в системе, либо ставятся из стандартных репозиториев. Решает дисциплина: одинаковая методика, зафиксированная база и повторные прогоны дают цифры, с которыми можно идти и за бюджетом на модернизацию, и к разработчикам с конкретным отчётом о лишних пробуждениях. Начните с одного сервера, снимите его профиль в простое и под типовой нагрузкой - и первый же отчёт покажет, сколько ватт уходит впустую прямо сейчас.