EDA365电子论坛网

标题: 飞凌干货-printf数据打印的归宿 [打印本页]

作者: 罗罗诺亚    时间: 2022-5-23 14:06
标题: 飞凌干货-printf数据打印的归宿
本帖最后由 Heaven_1 于 2022-5-24 14:17 编辑 " U$ P1 P7 y7 Q4 e% ]$ m

, W2 ?; i0 E2 q6 v5 \& q关于printf

printf是一个接口,跟UNIX标准IO的write系统调用类似,但是更像[color=inherit !important]C库的fwrite,因为同系列的函数中还有一个fprintf(至于同系列其它的函数,请自行man)。printf和fwrite的区别在于两点:

1.它可以格式化输出,如果用fwrite,它接受的是一个固定的buffer,你不得不在调fwrite之前先使用sprintf之类的函数格式化buffer;

2.它免除了你的fopen-fwrite-fclose这个序列的调用,因为它直接将格式化的内容写入UNIX进程自然打开的1号文件描述符,即标准输出。

既然printf写入了标准输出,那么接下来就要定义什么是标准输出。在早期UNIX年代,人们在终端或者伪终端操作机器,那时的输入基本都是键盘,磁带更古老的东西,而输出就是一个计算结果,需要展示出来给人看的那种,一般为终端屏幕,也可以是一条纸带,那么程序怎么知道输入和输出到底是什么呢?这就需要程序明确指定。UNIX的“一切皆文件”思想以及“分离抽象”思想彻底改变了这一切。

UNIX定义了抽象文件描述符0,1,2分别为标准输入,标准输出,标准错误输出。至于它们到底对应什么设备,你可以在程序初始化的时候显式重定向到任意设备,也可以在外部shell做类似的重定向,这样就把指明设备这件事从程序分离了出来。

我为什么不统一说一下fwrite调用对程序性能的影响呢?因为该调用之前你必须执行fopen,而fopen的一个参数明确表示了你希望写入的对象是什么,这就不会带来异议,毕竟如果你非要在性能测试的时候写CF卡,那也是你愿意。printf就不同了,它对效率的影响取决于标准输出是什么以及你是如何重定向标准输出的,所谓的标准输出并不是真实的设备,它只是一个抽象层,具体如何解释标准输出,还要依靠外部。

数据都去哪儿了

我以下面这个超级小的程序来说明printf的时候,数据都去哪了: & I5 y3 f' b' E9 }$ }5 ^3 e' N7 o
#include <stdio.h>
0 e' O6 }- t/ m: I#include <stdlib.h>9 G8 P. I3 S2 v( d  X1 z
int main(int argc, char **argv)9 _3 d* j5 p' M' \7 N6 F# e; {
{       int i = 0;        
( I+ I9 `+ Y: L3 @$ bint c = atoi(argv[1]);# q" A% D8 g$ k- ?
        for(; i < c; i++) {               
$ }% E  J' d/ R( m9 p% \* g& e- P! Z6 B printf("############  %d\n", i);
. z+ _( b8 u' m/ j: b$ G# K! P}        return 0;3 G/ N% G% j2 ]  W/ L9 E
}

我先给出结果:+ Z: z) w7 p6 K
1.在/dev/tty1上直接执行time ./test 1000
2 @' B# b+ L% l+ L4 d! g... #########  995
5 R# }# O, F1 M3 ]# _' N; G# u#########  996
: j) M9 ^4 t* v  g& i8 M. m4 \#########  997
% B- {7 A+ t! [# n5 O/ ^#########  998- Q9 b' V( y8 ]  D; C) ]
#########  9997 i. f* x% ]2 [9 e
real    0m0.414s1 c- y3 Y! {2 f- S: I( u
user    0m0.003s
- [  H" x2 Z8 h. Q9 g5 n: K! X" C8 \sys     0m0.411s
% }- M3 M# ?! a6 O, `" A
- s0 A- m$ Z+ ]2 P0 n" n2.在/dev/tty1上执行time ./test 1000 >/dev/tty2
* L8 N" P( @& M- b  B0 c$ \real    0m0.007s( Y/ b7 Z# v) H" m$ ]  ~5 M! ]4 G
user    0m0.003s
! z5 _( T1 q: }* [7 Z0 Ssys     0m0.007s+ d) O, g- e8 n' g
3.在SecureC[color=inherit !important]RT
上执行time ./test 10008 K" A* Q. i/ r6 {2 q: _
...
; C/ g" U/ [  M  E: E0 o  T#########  9973 m0 E8 I3 r3 c; a+ |1 Z
#########  998! C; w: e  Z+ M, v
#########  999
% k( `& J* _: z/ v) `- ^1 Y# ?real    0m0.010s
& n: l7 L& W. i/ @6 x% G7 Puser    0m0.002s/ w3 V# K* T5 F( R
sys     0m0.003s
: G# A! l( Y, b  r8 f* e3 n$ P% r6 }9 B6 d$ r' O
在SecureCRT上执行time ./test 100000 >/dev/tty1,此时不切换tty
' H; k9 D7 l* A9 Y* |! [...
) v6 q/ Z6 v. q' u+ Q- p2 v8 _等了几秒,无结果,于是在键盘按下Alt-F2,切换到第二个tty,马上显示出了结果:
+ ?# D& ^# }; S. G# a; B9 Yreal    0m4.276s
8 t5 z2 J, |! o, Vuser    0m0.066s
8 I+ n" M! @* Tsys     0m4.204s
7 S1 a) u1 F; N- a' |* \5.在tty1上执行time ./test 100000 >/dev/tty2:8 R$ p# u9 q0 i6 K1 X' c; C8 H
real    0m0.499s8 \- L' r. a4 G- H% ~1 m+ Q
user    0m0.081s* G# D2 w' W" a. \5 b) k6 `' e
sys     0m0.410s& M: ?# {) K. C% T' z6 e1 n
6.在tty1上执行time ./test 100000 >/dev/null: w: i* K, E$ u* V& c
real    0m0.030s
0 `; P( v. @7 A) m1 c% Q5 `$ Xuser    0m0.028s
" K% {5 i  S; h& g2 c5 msys     0m0.001s

通过以上的结果数据,我们可以得到以下的结论:+ h7 S; v5 s. [$ Z) I+ x
a.对于tty终端而言,如果当前终端不是写入的终端,那么开销主要在内核态,且开销不是很大;
4 U; U$ M4 B) a, H6 W# Kb.对于tty终端而言,如果当前终端是写入的终端,那么开销主要在内核态,且开销很大;. r/ _$ [& L+ v# K, p
c.对于不管是tty还是远程的pty终端,写入/dev/null的开销主要在用户态,开销不大;
: z9 h+ C+ C6 w6 ^. q0 F8 m- Fd.对于pty远程终端(/dev/pts/X),不管写入的是不是当前的pty终端,开销主要在内核态,且开销不是很大0 `% {! t* K7 e$ l0 p. M
e.对应上面的结果和结论,下面给出一幅图解,详细解释一下printf冰山下面的秘密:
! q- t8 j- T% Q

线路规程串口举例:

简易图如下:

我想上图已经很清楚了,如果不懂什么叫行规程(也叫线路规程)的话,请阅读《UNIX环境高级编程》的终端和伪终端章节,简单来说,它就是一个中间层,用来适配VFS接口和底层的具体驱动,比如解释和处理控制字符等。从上面的图中,我们可以看出,主要的开销几乎都集中在底层,而底层却偏偏是我们不能控制或者很难控制的。之所以上面的测试例子中ssh登录的终端对test性能的测试效果良好,但是那是因为网络环境好,你在一个64kbps相隔5k公里的线路上试一下。

小小的printf下面竟然藏着如此多的内容,并且很可能就是它成了你的程序的性能瓶颈,因为最底层的影响因素往往是不可控的。那么是不是就是意味着我要建议大家从来不用printf打印呢?或者说干脆就不要用标准输出呢?并不是这样。但是为何不把打印这种事交给本机的另一个进程呢?事实上,几乎所有的需要记录日志的系统都是这么做的,而syslog则迎合了这个思想。这种思想的背后就是“用可控制的一次IPC替换不可控制冰山之下的茫茫深海

关于日志记录

日志记录一直都是“薛定谔猫”式的东西,因为日志记录作为一段代码,它已经是程序的一部分,不可能独立地观察程序的行为,如果说用镜像系统的话,那么这种行为就是被动的,你不得不镜像每一条指令,以发现一些关键的信息,要想主动记录关键事件,必须用日志系统。打印日志可以方便信息获取和审计,但是代价有时也是高昂的:
/ f; p4 F4 C& f; L1 l1 r1.你要设计一套日志回滚系统,防止存储空间被撑爆;
+ `' B2 x  ?( x1 c& X2.你要让日志记录尽快完成,不能降低关键路径的性能;
5 }1 ^# f  z, k7 O. Q% \$ y" M, u3.你要反复调试代码,确保日志记录的缓冲区不会溢出;
( G! E% w1 x) C8 G4.为了让日志更短,语言能力不好的人组织的日志就像电报一样难以理解。
8 f( v0 s* A+ \2 x2 W0 @; o2 ?! H...( G( Q; q+ c, f0 G( b
我认为,日志记录应该遵循以下的原则:

1.除非必须要把事件发生的时间记录下来,否则就用计数器代替日志记录,一系列的事件映射成一系列的计数器,由用户决定什么时候查看事件发生了。事实上,[color=inherit !important]Linux的网络子系统就是用的这种方式,所有的/proc/net/netstat就是这个查看接口。

2.一定要有一个日志级别控制选项,用户可以决定是否记录日志,以及记录的日志详细到什么程度。

tty层接口

驱动代码摘自:

lichee/linux-3.10/drivers/tty/serial/sunxi-uart.c

接收数据

static unsigned int sw_uart_handle_rx(struct sw_uart_port *sw_uport, unsigned int lsr)

{

….

tty_flip_buffer_push(&sw_uport->port.state->port);

}

tty_termios_baud_rate(termios)

tty_termios_encode_baud_rate(termios, baud, baud);

发送数据


  l, D9 P! q* E+ _5 h1 u; \
作者: land    时间: 2022-5-24 11:09
数据看结果         
3 x+ I2 a$ e$ _6 s$ B7 g4 \




欢迎光临 EDA365电子论坛网 (https://bbs.eda365.com/) Powered by Discuz! X3.2