162306a36Sopenharmony_ci.. include:: ../disclaimer-zh_CN.rst 262306a36Sopenharmony_ci 362306a36Sopenharmony_ci:Original: Documentation/accounting/taskstats.rst 462306a36Sopenharmony_ci 562306a36Sopenharmony_ci:Translator: Yang Yang <yang.yang29@zte.com.cn> 662306a36Sopenharmony_ci 762306a36Sopenharmony_ci================ 862306a36Sopenharmony_ci每任务的统计接口 962306a36Sopenharmony_ci================ 1062306a36Sopenharmony_ci 1162306a36Sopenharmony_ciTaskstats是一个基于netlink的接口,用于从内核向用户空间发送每任务及每进程的 1262306a36Sopenharmony_ci统计信息。 1362306a36Sopenharmony_ci 1462306a36Sopenharmony_ciTaskstats设计目的: 1562306a36Sopenharmony_ci 1662306a36Sopenharmony_ci- 在任务生命周期内和退出时高效的提供统计信息 1762306a36Sopenharmony_ci- 统一不同计数子系统的接口 1862306a36Sopenharmony_ci- 支持未来计数系统的扩展 1962306a36Sopenharmony_ci 2062306a36Sopenharmony_ci术语 2162306a36Sopenharmony_ci---- 2262306a36Sopenharmony_ci 2362306a36Sopenharmony_ci“pid”、“tid”、“任务”互换使用,用于描述由struct task_struct定义的标准 2462306a36Sopenharmony_ciLinux任务。“每pid的统计数据”等价于“每任务的统计数据”。 2562306a36Sopenharmony_ci 2662306a36Sopenharmony_ci“tgid”、“进程”、“线程组”互换使用,用于描述共享mm_struct的任务集, 2762306a36Sopenharmony_ci也就是传统的Unix进程。尽管使用了tgid这个词,即使一个任务是线程组组长, 2862306a36Sopenharmony_ci对它的处理也没有什么不同。只要一个进程还有任何归属它的任务,它就被认为 2962306a36Sopenharmony_ci活着。 3062306a36Sopenharmony_ci 3162306a36Sopenharmony_ci用法 3262306a36Sopenharmony_ci---- 3362306a36Sopenharmony_ci 3462306a36Sopenharmony_ci为了在任务生命周期内获得统计信息,用户空间需打开一个单播的netlink套接字 3562306a36Sopenharmony_ci(NETLINK_GENERIC族)然后发送指定pid或tgid的命令。响应消息中包含单个 3662306a36Sopenharmony_ci任务的统计信息(若指定了pid)或进程所有任务汇总的统计信息(若指定了tgid)。 3762306a36Sopenharmony_ci 3862306a36Sopenharmony_ci为了在任务退出时获取统计信息,用户空间的监听者发送一个指定cpu掩码的注册命令。 3962306a36Sopenharmony_cicpu掩码内的cpu上有任务退出时,每pid的统计信息将发送给注册成功的监听者。使用 4062306a36Sopenharmony_cicpu掩码可以限制一个监听者收到的数据,并有助于对netlink接口进行流量控制,后文 4162306a36Sopenharmony_ci将进行更详细的解释。 4262306a36Sopenharmony_ci 4362306a36Sopenharmony_ci如果正在退出的任务是线程组中最后一个退出的线程,额外一条包含每tgid统计信息的 4462306a36Sopenharmony_ci记录也将发送给用户空间。后者包含线程组中所有线程(包括过去和现在)的每pid统计 4562306a36Sopenharmony_ci信息总和。 4662306a36Sopenharmony_ci 4762306a36Sopenharmony_cigetdelays.c是一个简单的示例,用以演示如何使用taskstats接口获取延迟统计信息。 4862306a36Sopenharmony_ci用户可注册cpu掩码、发送命令和处理响应、监听每tid/tgid退出数据、将收到的数据 4962306a36Sopenharmony_ci写入文件、通过增大接收缓冲区进行基本的流量控制。 5062306a36Sopenharmony_ci 5162306a36Sopenharmony_ci接口 5262306a36Sopenharmony_ci---- 5362306a36Sopenharmony_ci 5462306a36Sopenharmony_ci内核用户接口封装在include/linux/taskstats.h。 5562306a36Sopenharmony_ci 5662306a36Sopenharmony_ci为避免本文档随着接口的演进而过期,本文仅给出当前版本的概要。当本文与taskstats.h 5762306a36Sopenharmony_ci不一致时,以taskstats.h为准。 5862306a36Sopenharmony_ci 5962306a36Sopenharmony_cistruct taskstats是每pid和每tgid数据共用的计数结构体。它是版本化的,可在内核新增 6062306a36Sopenharmony_ci计数子系统时进行扩展。taskstats.h中定义了各字段及语义。 6162306a36Sopenharmony_ci 6262306a36Sopenharmony_ci用户、内核空间的数据交换是属于NETLINK_GENERIC族的netlink消息,使用netlink属性 6362306a36Sopenharmony_ci接口。消息格式如下:: 6462306a36Sopenharmony_ci 6562306a36Sopenharmony_ci +----------+- - -+-------------+-------------------+ 6662306a36Sopenharmony_ci | nlmsghdr | Pad | genlmsghdr | taskstats payload | 6762306a36Sopenharmony_ci +----------+- - -+-------------+-------------------+ 6862306a36Sopenharmony_ci 6962306a36Sopenharmony_ciTaskstats载荷有三种类型: 7062306a36Sopenharmony_ci 7162306a36Sopenharmony_ci1. 命令:由用户发送给内核。获取指定pid/tgid数据的命令包含一个类型为 7262306a36Sopenharmony_ciTASKSTATS_CMD_ATTR_PID/TGID的属性,该属性包含u32的pid或tgid载荷。 7362306a36Sopenharmony_cipid/tgid指示用户空间要统计的任务/进程。 7462306a36Sopenharmony_ci 7562306a36Sopenharmony_ci注册/注销获取指定cpu集上退出数据的命令包含一个类型为 7662306a36Sopenharmony_ciTASKSTATS_CMD_ATTR_REGISTER/DEREGISTER_CPUMASK的属性,该属性包含cpu掩码载荷。 7762306a36Sopenharmony_cicpu掩码是以ascii码表示,用逗号分隔的cpu范围。例如若需监听1,2,3,5,7,8号cpu的 7862306a36Sopenharmony_ci退出数据,cpu掩码表示为"1-3,5,7-8"。若用户空间在关闭监听套接字前忘了注销监听 7962306a36Sopenharmony_ci的cpu集,随着时间的推移,内核会清理此监听集。但是,出于提效的目的,建议明确 8062306a36Sopenharmony_ci执行注销。 8162306a36Sopenharmony_ci 8262306a36Sopenharmony_ci2. 命令的应答:内核发出应答用户空间的命令。载荷有三类属性: 8362306a36Sopenharmony_ci 8462306a36Sopenharmony_cia) TASKSTATS_TYPE_AGGR_PID/TGID: 本属性不包含载荷,用以指示其后为被统计对象 8562306a36Sopenharmony_ci的pig/tgid。 8662306a36Sopenharmony_ci 8762306a36Sopenharmony_cib) TASKSTATS_TYPE_PID/TGID:本属性的载荷为pig/tgid,其统计信息将被返回。 8862306a36Sopenharmony_ci 8962306a36Sopenharmony_cic) TASKSTATS_TYPE_STATS:本属性的载荷为一个struct taskstats实例。每pid和 9062306a36Sopenharmony_ci每tgid统计信息共用该结构体。 9162306a36Sopenharmony_ci 9262306a36Sopenharmony_ci3. 内核会在任务退出时发送新消息。其载荷包含一系列以下类型的属性: 9362306a36Sopenharmony_ci 9462306a36Sopenharmony_cia) TASKSTATS_TYPE_AGGR_PID:指示其后两个属性为pid+stats。 9562306a36Sopenharmony_cib) TASKSTATS_TYPE_PID:包含退出任务的pid。 9662306a36Sopenharmony_cic) TASKSTATS_TYPE_STATS:包含退出任务的每pid统计信息 9762306a36Sopenharmony_cid) TASKSTATS_TYPE_AGGR_TGID:指示其后两个属性为tgid+stats。 9862306a36Sopenharmony_cie) TASKSTATS_TYPE_TGID:包含任务所属进程的tgid 9962306a36Sopenharmony_cif) TASKSTATS_TYPE_STATS:包含退出任务所属进程的每tgid统计信息 10062306a36Sopenharmony_ci 10162306a36Sopenharmony_ci每tgid的统计 10262306a36Sopenharmony_ci------------ 10362306a36Sopenharmony_ci 10462306a36Sopenharmony_ci除了每任务的统计信息,taskstats还提供每进程的统计信息,因为资源管理通常以进程 10562306a36Sopenharmony_ci粒度完成,并且仅在用户空间聚合任务统计信息效率低下且可能不准确(缺乏原子性)。 10662306a36Sopenharmony_ci 10762306a36Sopenharmony_ci然而,除了每任务统计信息,在内核中维护每进程统计信息存在额外的时间和空间开销。 10862306a36Sopenharmony_ci为解决此问题,taskstats代码将退出任务的统计信息累积到进程范围的数据结构中。 10962306a36Sopenharmony_ci当进程最后一个任务退出时,累积的进程级数据也会发送到用户空间(与每任务数据一起)。 11062306a36Sopenharmony_ci 11162306a36Sopenharmony_ci当用户查询每tgid数据时,内核将指定线程组中所有活动线程的统计信息相加,并添加到 11262306a36Sopenharmony_ci该线程组的累积总数(含之前退出的线程)。 11362306a36Sopenharmony_ci 11462306a36Sopenharmony_ci扩展taskstats 11562306a36Sopenharmony_ci------------- 11662306a36Sopenharmony_ci 11762306a36Sopenharmony_ci有两种方法可在未来修改内核扩展taskstats接口,以导出更多的每任务/进程统计信息: 11862306a36Sopenharmony_ci 11962306a36Sopenharmony_ci1. 在现有struct taskstats末尾增加字段。该结构体中的版本号确保了向后兼容性。 12062306a36Sopenharmony_ci用户空间将仅使用与其版本对应的结构体字段。 12162306a36Sopenharmony_ci 12262306a36Sopenharmony_ci2. 定义单独的统计结构体并使用netlink属性接口返回对应的数据。由于用户空间独立 12362306a36Sopenharmony_ci处理每个netlink属性,所以总是可以忽略其不理解类型的属性(因为使用了旧版本接口)。 12462306a36Sopenharmony_ci 12562306a36Sopenharmony_ci在1.和2.之间进行选择,属于权衡灵活性和开销的问题。若仅需增加少数字段,那么1.是 12662306a36Sopenharmony_ci首选方法,因为内核和用户空间无需承担处理新netlink属性的开销。但若新字段过多的 12762306a36Sopenharmony_ci扩展现有结构体,导致不同的用户空间计数程序不必要的接收大型结构体,而对结构体 12862306a36Sopenharmony_ci字段并不感兴趣,那么2.是值得的。 12962306a36Sopenharmony_ci 13062306a36Sopenharmony_ciTaskstats的流量控制 13162306a36Sopenharmony_ci------------------- 13262306a36Sopenharmony_ci 13362306a36Sopenharmony_ci当退出任务数速率变大,监听者可能跟不上内核发送每tid/tgid退出数据的速率,而导致 13462306a36Sopenharmony_ci数据丢失。taskstats结构体变大、cpu数量上升,都会导致这种可能性增加。 13562306a36Sopenharmony_ci 13662306a36Sopenharmony_ci为避免统计信息丢失,用户空间应执行以下操作中至少一项: 13762306a36Sopenharmony_ci 13862306a36Sopenharmony_ci- 增大监听者用于接收退出数据的netlink套接字接收缓存区。 13962306a36Sopenharmony_ci 14062306a36Sopenharmony_ci- 创建更多的监听者,减少每个监听者监听的cpu数量。极端情况下可为每个cpu创建 14162306a36Sopenharmony_ci 一个监听者。用户还可考虑将监听者的cpu亲和性设置为监听cpu的子集,特别是当他们 14262306a36Sopenharmony_ci 仅监听一个cpu。 14362306a36Sopenharmony_ci 14462306a36Sopenharmony_ci尽管采取了这些措施,若用户空间仍收到指示接收缓存区溢出的ENOBUFS错误消息, 14562306a36Sopenharmony_ci则应采取其他措施处理数据丢失。 146