Netdata 嵌入式配置

背景

Netdata 确实可以称得上一个非常优秀的项目，目前在嵌入式设备上能够稳定运行的监控系统本身就不多，然后真的具有比较强的商业价值的则又更少，例如宝塔青龙也提供类似于 netdata 的功能，但是其若是要真的作为运维人员的监控手段，则又显得有点小儿科，更像是个人业余开发使用。

Netdata 可以称为目前嵌入式最完美的监控方案，即使如此，其还是在嵌入式设备上存在不小的缺陷，这些缺陷大多来自于嵌入式设备本身；Netdata 虽然可以在嵌入式设备上运行，但是其本身更多针对的是服务器，甚至是服务器集群；换而言之，Netdata 面向的用户群体更多的是服务器运维人员，而非嵌入式运维人员。

嵌入式对应用程序的要求虽然不如服务器那般苛刻，但是也远比客户端程序复杂地多，一个优秀的嵌入式监控程序，应当做到 7*24 小时稳定运行，同时尽可能地减少系统的开销(CPU、磁盘、网络、内存)，要做点这点，对 Netdata 进行个性化定制是可不可少的过程。

本节会先讲解 Netdata 配置文件的配置规则，然后给出自己的一个配置实践，最后给出效果图；嵌入式设备的一个原则就是能省就省，不做无意味地开销，但也不能因此缺乏必要性功能，总之就是多快好省，所以如何配置 Netdata 需要实事求是，没有绝对的答案。

Netdata 配置规则

Netdata 是一个高度可配置的监控系统，其配置文件大多存在于 /etc/netdata 下，配置文件大多以 *.conf 开头，值得一提的是 Netdata 遵循约定优于配置的原则，所以如果没有存在的配置文件，它将启动编译时的默认配置。

Netdata 的主要配置分别为 apps+groups.conf、charts.d.conf、health_alarm_notify.conf、netdata.conf，其中最关键的就是 netdata.conf ，它是 Netdata 的主配置文件。

netdata.conf 是 Netdata 的主配置文件，通过修改其可以实现对 Netdata 近九成的个性化配置，所以了解如何配置 netdata.conf 是一个非常重要的必备技能,如果你通过 IP:Port/netdata.conf 的方式去访问 netdata 的配置，你会发现其配置项离谱地多，每个人都不一样，在我这里足足有 4000 多行，如下图:

要修改 netdata 的配置靠的是技巧，而非蚌; Netdata 的配置采取的是 ini 格式，其配置原则采取的是类似于多级域名的形式，举一个例子:

[plugins] -> [plugin:proc] -> [plugin:proc:diskspace] -> [plugin:proc:diskspace:/mnt/disk/disk1]

这就是多级域名制，在链路的任何地方拦截，都会使整条链路切断，比如说如果我禁用了 [plugins] 的话，那么 [plugin:proc] 就没有用了，因此 [plugin:proc:diskspace] 也跟无效了，更不用说 [plugin:proc:diskspace:/mnt/disk/disk1]。

一般来说是不用需要设置到这么深的层次的，一般像是上面的例子，往往只需要设置到 [plugin:proc:diskspace] 就足够了。

netdata 主要配置修改

针对于嵌入式设备，这里给出了一些主要的修改项，也就是 Netdata 配置的前几级：

# netdata configuration
# global netdata configuration
[global]run as user = roothostname = unknownupdate every = 10config directory = /var/netdata/etc/netdatastock config directory = /var/netdata/lib/netdata/conf.dlog directory = /var/netdata/var/log/netdataweb files directory = /var/netdata/share/netdata/webcache directory = /var/netdata/var/cache/netdatalib directory = /var/netdata/var/lib/netdatahome directory = /var/netdata/var/lib/netdatalock directory = /var/netdata/var/lib/netdata/lockplugins directory = "/var/netdata/libexec/netdata/plugins.d" "/var/netdata/etc/netdata/custom-plugins.d"memory mode = dbenginepage cache size = 4dbengine disk space = 128timezone = Asia/ShanghaiOOM score = 0process scheduling policy = nicepthread stack size = 1048576[web]default port = 25000enable gzip compression = no[plugins]PATH environment variable = /usr/bin:/usr/sbin:/bin:/sbin:/sbin:/usr/sbin:/usr/local/bin:/usr/local/sbinproc = yesdiskspace = yestimex = nocgroups = notc = noidlejitter = noenable running new plugins = yescheck for new plugins every = 60slabinfo = noapps = yesfping = nocharts.d = yesioping = noperf = nonode.d = nopython.d = no[health]enabled = no[backend]enabled = no[statsd]enable = no[plugin:proc]netdata server resources = no/proc/pagetypeinfo = no/proc/stat = yes/proc/uptime = yes/proc/loadavg = yes/proc/sys/kernel/random/entropy_avail = yes/proc/pressure = yes/proc/interrupts = yes/proc/softirqs = yes/proc/vmstat = yes/proc/meminfo = yes/sys/kernel/mm/ksm = yes/sys/block/zram = yes/sys/devices/system/edac/mc = yes/sys/devices/system/node = yes/proc/net/dev = yes/proc/net/wireless = no/proc/net/sockstat = no/proc/net/sockstat6 = no/proc/net/netstat = yes/proc/net/snmp = no/proc/net/snmp6 = no/proc/net/sctp/snmp = no/proc/net/softnet_stat = no/proc/net/ip_vs/stats = no/sys/class/infiniband = no/proc/net/stat/conntrack = no/proc/net/stat/synproxy = no/proc/diskstats = yes/proc/mdstat = no/proc/net/rpc/nfsd = no/proc/net/rpc/nfs = no/proc/spl/kstat/zfs/arcstats = no/proc/spl/kstat/zfs/pool/state = no/sys/fs/btrfs = noipc = yes/sys/class/power_supply = no[plugin:apps]command options =  without-users without-groups

其中核心修改的有几点是比较重要的:

• update every : 设置为 10 ，即每 10 秒采集一次数据，通过减低 netdata 的数据收集频率，减低 netdata CPU 的使用率，磁盘的存储；通过减少磁盘的存储能够极大地减低 netdata 查询往期数据产生的 IO 操作，内存读写频率以及带宽的开销。
• dbengine disk space : 设置磁盘存储空间为 128MB ，防止其占用太多的存储空间，在这个配置下这个大小大约是能够存储一周多的数据量的。
• OOM score ： 将其设置为 0 ,防止 netdata 由于系统资源紧张自动销毁。
• process scheduling policy ： 修改线程调度策略，使 netdata 能更好地收集到数据，防止在系统资源紧张时由于调度策略为 idel 导致数据没有采集到(毕竟这时候才是监控的重要时刻)。
• pthread stack size ： 修改线程的栈空间，修改为 1MB。
• compression : enable gzip compression 以及 netdata.compression_ratio 全部禁用为 no ，即存储数据不进行压缩，减少CPU在压缩以及解压时的负担。
• plugin:apps : 应用程序禁用分组，一般来书嵌入式上就一个 root 用户，不需要知道 users 以及 groups 的信息，就一个人。
• plugin:proc ： 针对性地裁剪一些收集指标，减少数据的收集量。

通过上面的修改，netdata 将会比较适合于嵌入式设备的运行。

以下给出完整的配置文件：

# netdata configuration
# global netdata configuration
[global]run as user = roothostname = unknownupdate every = 10config directory = /var/netdata/etc/netdatastock config directory = /var/netdata/lib/netdata/conf.dlog directory = /var/netdata/var/log/netdataweb files directory = /var/netdata/share/netdata/webcache directory = /var/netdata/var/cache/netdatalib directory = /var/netdata/var/lib/netdatahome directory = /var/netdata/var/lib/netdatalock directory = /var/netdata/var/lib/netdata/lockplugins directory = "/var/netdata/libexec/netdata/plugins.d" "/var/netdata/etc/netdata/custom-plugins.d"memory mode = dbenginepage cache size = 8dbengine disk space = 128timezone = Asia/ShanghaiOOM score = 0process scheduling policy = nicepthread stack size = 1048576[web]default port = 25000enable gzip compression = no[plugins]PATH environment variable = /usr/bin:/usr/sbin:/bin:/sbin:/sbin:/usr   /sbin:/usr/local/bin:/usr/local/sbinproc = yesdiskspace = yestimex = nocgroups = notc = noidlejitter = noenable running new plugins = yescheck for new plugins every = 60slabinfo = noapps = yesfping = nocharts.d = yesioping = noperf = nonode.d = nopython.d = no[health]enabled = no[backend]enabled = no[statsd]enable = no[netdata.compression_ratio]enabled = no[plugin:proc]netdata server resources = no/proc/pagetypeinfo = no/proc/stat = yes/proc/uptime = yes/proc/loadavg = yes/proc/sys/kernel/random/entropy_avail = yes/proc/pressure = yes/proc/interrupts = yes/proc/softirqs = yes/proc/vmstat = yes/proc/meminfo = yes/sys/kernel/mm/ksm = yes/sys/block/zram = yes/sys/devices/system/edac/mc = yes/sys/devices/system/node = yes/proc/net/dev = yes/proc/net/wireless = no/proc/net/sockstat = no/proc/net/sockstat6 = no/proc/net/netstat = yes/proc/net/snmp = no/proc/net/snmp6 = no/proc/net/sctp/snmp = no/proc/net/softnet_stat = no/proc/net/ip_vs/stats = no/sys/class/infiniband = no/proc/net/stat/conntrack = no/proc/net/stat/synproxy = no/proc/diskstats = yes/proc/mdstat = no/proc/net/rpc/nfsd = no/proc/net/rpc/nfs = no/proc/spl/kstat/zfs/arcstats = no/proc/spl/kstat/zfs/pool/state = no/sys/fs/btrfs = noipc = yes/sys/class/power_supply = no    
[plugin:apps]command options =  without-users without-groups[plugin:proc:/proc/diskstats:mtdblock0]enable = no[plugin:proc:/proc/diskstats:mtdblock2]enable = no[plugin:proc:/proc/diskstats:mtdblock3]enable = no[plugin:proc:/proc/diskstats:mtdblock4]enable = no[plugin:proc:/proc/diskstats:mtdblock5]enable = no[plugin:proc:/proc/diskstats:mtdblock1]enable = no[plugin:proc:/proc/net/dev:ip6gre0]enabled = no[plugin:proc:/proc/net/dev:sit0]enabled = no[plugin:proc:/proc/net/dev:lo]enabled = no[plugin:proc:/proc/net/dev:ip6tnl0]enabled = no[plugin:proc:/proc/net/netstat]bandwidth = autoinput errors = automulticast bandwidth = autobroadcast bandwidth = automulticast packets = autobroadcast packets = autoECN packets = noTCP reorders = noTCP SYN cookies = noTCP out-of-order queue = autoTCP connection aborts = autoTCP memory pressures = autoTCP SYN queue = noTCP accept queue = nofilename to monitor = /proc/net/netstat

Netdata 修改效果图

按照修改的先后顺序给出一次次修改后 netdata 的运行状况。

存储空间以一周进行计算，即7天。

到最终的效果图时，其对系统的占用基本如下：

未修改前对系统的占用基本如下: