Linux and cpu usage

Загрузка процессора Linux

Чтобы узнать хватает ли мощности процессора вашему серверу или компьютеру надо посмотреть загрузку процессора в данный момент или за последнее время. Это значение показывает на сколько процентов используется вычислительная мощность процессора.

В этой статье мы рассмотрим несколько способов решения этой задачи с помощью привычных системных утилит и более сложных инструментов.

Как посмотреть загрузку процессора в Linux

1. Утилита htop

Самый простой способ узнать насколько процессор загружен в данный момент — воспользоваться утилитой htop. Она показывает не только процент загрузки по каждому ядру процессора отдельно, но и позволяет найти процессы, которые нагружают систему больше всего. Для установки htop в Debian или Ubuntu выполните:

sudo apt install htop

А в CentOS или REHL:

sudo yum install htop

Главное окно программы выглядит вот так:

Здесь в верхней части окна выводится загрузка ядер процессора в виде наглядных шкал, а ниже процессы. В данном примере у процессора 12 ядер и каждое из них загружено не больше чем на один процент.

2. Файл /proc/loadavg

Если надо сориентироваться какая была нагрузка на процессор в последнее время, тут htop не поможет. Можно воспользоваться файлом /proc/loadavg. Его создаёт ядро и в нём содержится информация о средней нагрузке за одну, пять и пятнадцать минут. Но обратите внимание, данные, находящиеся в этом файле не такие однозначные. Во первых, это не проценты, во вторых, они отображают не нагрузку на процессор, а нагрузку на систему в целом.

Первые три значения в этом файле означают среднее количество процессов или потоков, которые выполняются, находятся в очереди на выполнение или ждут завершения операций ввода/вывода за 1, 5 и 15 минут. Вот:

Обычно, если значение больше единицы — значит нагрузка уже большая и надо разбираться почему. Если значение за минуту меньше значений за пять и пятнадцать минут — нагрузка падает, если больше — растёт. Таким образом можно немного сориентироваться насколько загружена ваша система. Эти значения можно использовать для общего ориентирования или отправки уведомлений на почту, а для разбора полётов уже применять другие метрики и программы.

Четвертое значение здесь — это количество процессов — выполняемых в данный момент, обычно соответствует количеству процессоров, следующее число через слеш — это общее количество таких процессов в системе. Последнее значение — PID последнего созданного процесса.

3. Утилита mpstat

Утилита mpstat позволяет посмотреть подробную статистику по использованию процессора. Можно посмотреть не только информацию по каждому из ядер, но и куда используются ресурсы — на ввод/вывод, ядро или программы пространства пользователя. Для установки программы в Ubuntu или Debian выполните:

sudo apt install sysstat

В CentOS или REHL:

sudo yum install sysstat

Для просмотра общей информации выполните такую команду:

А для просмотра подробностей по каждому ядру процессора используйте опцию -P с параметром ALL:

Вот значения колонок в выводе этой программы:

• CPU — номер ядра процессора;
• %usr — потребление программами пространства пользователя;
• %nice — потребление ресурсов в процентах программами в пространстве пользователя с повышенным приоритетом;
• %sys — потребление ресурсов процессора ядром;
• %iowait — затраты на ожидание ввода/вывода;
• %irq — ресурсы, потраченные на прерывания для работы с аппаратным обеспечением;
• %soft — ресурсы, потраченные на программные прерывания;
• %steal — украденные процессорные ресурсы, актуально для виртуальных машин;
• %guest — ресурсы, потраченные на работу виртуального процессора;
• %idle — неиспользованные ресурсы.

Как видите, в данном случае нагрузка на процессор не достигает даже трех процента для некоторых ядер.

4. Команда nmon

Утилита nmon позволяет выводить данные, в виде, похожем на htop, но только немного подробнее. Для установки её в Ubuntu и Debian выполните:

sudo apt install nmon

Для установки в CentOS или REHL:

sudo yum install nmon

После запуска надо нажать кнопку c для того чтобы отобразить информацию о нагрузке на ядра процессора:

Здесь кроме наглядной шкалы по каждому ядру выводится информация в процентах по таким показателям:

• User% — ресурсы, потраченные программами в пространстве пользователя;
• Sys% — ресурсы, потраченные ядром;
• Wait% — ресурсы, которые идут на ожидание ввода/вывода;

Здесь уже можно сориентироваться насколько всё загружено и в чём проблема.

5. CoreFreq

Если всей полученной ранее информации о производительности вам мало, можно воспользоваться утилитой CoreFreq. Её нет в официальных репозиториях, поэтому придется собирать программу из исходников. Но зато она имеет свой модуль ядра, который устанавливает свои счетчики производительности в ядре и возвращает утилите наиболее подробные данные. Сначала установите необходимые компоненты. В Ubuntu:

sudo apt install dkms git libpthread-stubs0-dev

В CentOS или REHL:

sudo yum group install ‘Development Tools’

Затем скачайте репозиторий утилиты с GitHub и соберите её:

git clone https://github.com/cyring/CoreFreq.git

Загрузите модуль ядра такой командой:

sudo insmod corefreqk.ko

Запустите её сервис:

Затем запускайте программу:

Вверху программы отображается информация о процессоре, ниже шкалы с загруженностью каждого ядра, а её ниже различные показатели по каждому ядру: частота — Freq, ускорение — Turbo, C0-C7 — значения состояний C-State процессора. В данном примере, большинство ядер процессора работают на минимальной частоте и большую часть времени находятся в состоянии C1. Это состояние означает, что ядро не активно, но может в любой момент перейти к выполнению инструкций. Состояние C0 — означает, что ядро активно и выполняет какие-то действия.

С помощью этой утилиты вы сможете узнать максимально подробную информацию о загрузке процессора и о самом процессоре в целом.

Выводы

В этой небольшой статье мы рассмотрели как определяется загрузка процессора Linux с помощью различных утилит. Как системных, так и сторонних. А какие утилиты для таких целей используете вы? Напишите в комментариях!

Источник

14 Command Line Tools to Check CPU Usage in Linux

CPU performance is one aspect of measuring the performance of a system. Monitoring the performance of CPU is essential to debug processes inside any system, manage system resources, making system decisions, and evaluating and examining systems in real-time.

There are a lot of tools available to monitor and display CPU performance. Operating systems have built-in system calls which these tools rely on to extract the performance readings.

In this tutorial, we will explore the best CPU usage monitoring tool and their usages in any Linux based distros.

1) Top

The top command displays real-time view of performance-related data of all running processes in a system. By default, the top command updates data every 5 seconds. Type ‘top’ from the terminal to view the statistical data related to the performance of a system.

To modify the output of top command, press:

‘P’ to sort by CPU usage.

‘I’ to remove the idle processes from the display and to revert back press ‘I’ again.

‘M’ to sort the data by memory usage.

‘S’ to sort by how long the processes have been running type.

‘P’ to sort by CPU usage.

‘U’ to view processes owned by a specific user.

‘K’ to kill processes.

‘R’ to renice processes.

2) Iostat

The iostat command list CPU utilization, device utilization and network file system utilization. This utility display system’s average CPU utilization since the last reboot. Running the following command without any options displays all the three reports.

To list the individual report use -c, -d and -h switch for CPU utilization, device utilization and network file system utilization. The following command will break the CPU utilization into user processes, system processes, I/O wait and idle time.

The following command will display extended statistics (-x), the number of times (-t) each report should be displayed for CPU utilization (-c).

3) Vmstat

The vmstat command will display statistics about system processes, memory, swap, I/O, and the CPU performance. For displaying statistics, the data is collected from the last time the command was run to the present. In case the command never being run, the data will be from the last reboot to the current time.

On multiple CPU systems, vmstat averages the number of CPUs into the output. The vmstat command updates its output like top command.

The following command will update its report every 5 seconds until there is an interrupt.

The following command will display the data that will update in every 5 seconds and the values will be re-measured and reported every 1 second.

The first line prints the average values since the last time the computer was rebooted. The rest of the lines will display their respective current values. A normal user can run vmstat command.

4) Mpstat

Mpstat is part of the sysstat package in Linux. The mpstat command writes to standard output about activities for each available processor, processor 0 being the first one. If no activity has been selected, then the default report is the CPU utilization report.

mpstat without any option will display Global Average Activities of all CPUs

mpstat with -p option and ‘ALL’ will list statistics about all CPUs one by one starting from 0.

The following command will list average CPU usage for 4 times, each after 2 seconds.

5) Sar

The sar is a performance monitoring tool for collecting, viewing and recording performance data and can list what a system is doing all the time. Sar command can generate report and email them to system admin. The statistics reported by sar include I/O transfer rates, paging activity, process-related activities, interrupts, network activity, memory and swap space utilization, CPU utilization, kernel activities and TTY statistics, among others. Run sar without any option and check the output. The default output list statistics for every 10 minutes and a final average.

Display CPU statistics 3 times with 2 second interval.

The following command displays cumulative real-time CPU usage of all CPU for every 2 seconds a total of 3 times.

The ‘-P ALL’ option displays statistics for ALL the individual Cores. If your system has 4 cores then the ‘CPU column’ will contain the number 0, 1, 2, 3 indicating the corresponding CPU core numbers. The ‘2 3’ option displays the statistics every 2 seconds for 3 times.

The ‘-P 2’ option displays statistics for third core every 2 seconds for 3 times.

6) CoreFreq

CoreFreq is a CPU performance monitoring software designed for 64-bits Processors w/ architectures Intel Atom, Core2, Nehalem, SandyBridge and superior, AMD Family. The CoreFreq provides a framework for retrieving CPU data with a high degree of precision. The kernel module, daemon, and userland command-line interface (CLI) are the three parts of Corefreq. The kernel module will have full access to the host. It is its responsibility to gather the low-level data. The userland daemon collects the data. You should be root user to run the daemon. Finally, CoreFreq comes with a terminal interface to report data in a nice human-readable format. That CLI tool is an ordinary process and may be used by the end user.

Prerequisite

i) CoreFreq uses the low-level counter and hence you should first disable NMI watchdog through /etc/default/grub. Edit /etc/default/grub and add the ‘nmi_watchdog=0’ kernel command line argument and subsequently run update-grub.

ii) No Virtualization. VMs don’t provide access to the registers that the CoreFreq driver employs.

Install CoreFreq

Install the kernel module with insmod

List the CoreFreq module with lsmod

The output of dmesg command shows CoreFreq has been recognized by the processor.

Start the CoreFreq daemon

Now start the corefreq client as a user.

7) Htop

Htop is a process viewer and a text-mode application for system monitoring in real-time like top. It displays a complete list of the processes that are running and is easy to use. It is based on ncurses for viewing the processes in a GUI-like environment running in the terminal. Htop displays usage per CPU along with memory and swap usage with a significant text graph printed at the top. Htop is very much convenient to use and easy to understand. Once you start using HTOP, you might not return to TOP.

Install htop using the following command in the terminal

Run htop using the following command.

8) Nmon

nmon (Nigel’s performance Monitor for Linux & AIX) has been developed by IBM employee Nigel Griffiths. This tool is used to monitor system resources such as CPU, memory, network, disks, file systems, NFS, top processes in the terminal. NMON supports various architectures like POWER, x86, x86_64, Mainframe and ARM (Raspberry Pi). This tool helps system administrator to tune, benchmark performance information to troubleshoot the CPU/system performance when there is some issues. For real-time monitoring, it uses curses library for low CPU impact and displays statistics on the screen and update in every two seconds. nmon consumes less CPU memory as compared with other tools since it uses curses library.

Installation

CentOS users need to install/enable EPEL Repository in order to install nmon.

Type nmon in the terminal and press enter, nmon will display a welcome screen with all the options to use it further. If you want to display CPU utilization, press c and to hide the CPU utilization widgets statistics, press ‘c’ again.

9) Glances

Glances is a cross-platform curses-based monitoring tool written in Python that uses the psutil library to fetch data from the system. Glance monitor CPU, Load Average, Memory, Network Interfaces, Disk I/O, Processes and File System spaces utilization.

Install glances in your system with the following command.

In Ubuntu:

In Centos:

You can run Glances in 3 modes-

1. Standalone

If you want to monitor your local machine(Standalone), simply run-

2. Client/Server

If you want to remotely monitor a machine then execute the following on the server.

and then from the client, execute the following command.

where @server is the IP address or hostname of the server.

3. Webserver

Run the glances in web server mode by executing the following command in the terminal.

To change the refresh rate of the page, just add the period in seconds at the end of the URL. For example, to refresh the page every 30 seconds, append 10 to the glances server URL from the browser.

10) Cpustat

Cpustat is like a fancy sort of top that does different things. Most performance tools average CPU usage over a few seconds or even a minute. This results in a fantasy of excess capacity because of an abrupt increase in resource usage that is blended in with less busy periods. On the other hand, cpustat takes higher frequency samples of each process and summarizes these samples at a lower frequency. For example, it can measure a process in every 200ms and summarize the samples in every 5 seconds, including min/average/max values for some metrics.

Install Cpustat

Cpustat is written in Go language. Therefore, you need GO in your system. If it is not there then install it using following commands in the terminal.

In Ubuntu

In CentOS

Once Golang is installed in your system then create a directory for Cpustat and make this directory available to the GOPATH.

Install Cpustat and verify that the directories are copied over to the folder cpustat.

Add bin folder to the PATH environment variable. You can also add the following line to

/.bashrc or /etc/profile depending on what you are using.

There are two ways of displaying this data. Either a pure text list of the summary interval or a colorful scrolling dashboard of each sample. To display data in fancy terminal mode, execute the following command in the terminal.

To run in pure text mode, use the following command. In text mode, few system-wide summary metrics come from /proc/stat.

The following command will take a sample of all processes in every 500ms and summarize this data after 10 samples, which is every 5 seconds.

Use the following command to measure processes that are owned by either user root or user ubuntu. The overall system stats will still be measured.

Only measure processes of «apache» or «mysql». The -p option of cpustat takes a list of process ids returned by pgrep. pgrep is used to get the process ids ( -d option ).

Use the following command to write memory profile in a file.

11) perf

Perf can measure CPU performance counters, tracepoints, kprobes, and uprobes that is included in the Linux kernel, under tools/perf. perf began as a tool for using the performance counters subsystem in Linux, and has had various enhancements to add tracing capabilities. The perf tools are integrated into the Linux kernel since the 2.6 version and are based on the perf events subsystem. The perf profiler uses hardware counters to profile the application. The result of this profiler is explicit and fast. The perf utility can be found in the linux-tools package.

If you are interested in finding CPU performance for a particular ‘command’ like cp. The following perf command will profile cp while it is copying the entire directory Documents to new location (Docs).

If you want to find CPU counter statistics for a specified PID then use the following command until CTRL+C is pressed.

Find the basic CPU statistics, system wide, for 10 seconds using the following perf command. You can also omit any one of the options under -e option to be more specific.

Collect Sample on-CPU user instructions, for 5 seconds and then use perf report to view the report.

Collect sample CPU stack traces, once every 10,000 Level 1 data cache misses, for 5 seconds and then use perf report to view the report.

12) tiptop

Tiptop reads hardware performance counters and displays statistics about running Linux processes, such as IPC, or cache misses. It provides a dynamic real-time view of the tasks running in the system. Tiptop is very similar to top, but the information displayed comes from hardware counters.

It has two running modes, live-mode and batch-mode. In both modes, the system is periodically queried for the values of hardware counters, and various ratios are printed for each task.

13) ps command

We can use ps command to find cpu usage for each process or users. Given few examples to understand

To display the highest CPU & Memory utilization by processes run by root.

Run the following command to display CPU usage for the specific command:

To show processes for all users and not attached to a terminal in full format listing with a sort

14) dstat command

dstat command is a versatile tool for generating system resource statistics and it would also show cpu stats. You need to install it in order to use it

On Centos

On Ubuntu

To monitor program that is using the most CPU and consuming the most amount of memory.

Conclusion

In this tutorial, we have explored few CPU performance monitoring tool along with their usages. Be sure to read man pages for each of them, as it also documents the usages in detail. Remember that using these tools also takes a CPU slice. For example, top takes 3%-4% of CPU while glances take 15% to 20% of CPU. So while using any one of these, you need to consider this aspect as well. In a nutshell, you will be able to find which process is taking more CPU time, is there enough free memory, whether processes are stalled while waiting for I/O viz. disk or network access to complete read/write and much more by using a combination of few of them.

Источник