当前位置:   article > 正文

鸿蒙OS的系统调用是如何实现的? | 解读鸿蒙源码_/home/book/openharmony/prebuilts/lite/sysroot/usr/

/home/book/openharmony/prebuilts/lite/sysroot/usr/include/arm-liteos/bits/sy

本文将首先带您回顾“系统调用”的概念以及它的作用,然后从经典的Hello World开始,逐行代码层层分析——鸿蒙OS的系统调用是如何实现的。

写在前面

9月10号 华为开发者大会(HDC)上,华为向广大开发者宣布了鸿蒙2.0系统开源,源码托管在国内源码托管平台“码云”上:https://openharmony.gitee.com/

我也第一时间从码云下载了鸿蒙系统的源代码,并进行了编译和分析。当晚回看了HDC上的关于鸿蒙OS 2.0的主题演讲,个人最为好奇的是——这次开源的liteos-a内核。因为它支持了带MMU(内存管理单元)的ARM Cortex-A设备;我们知道,在带有MMU的处理器上,可以实现虚拟内存,进而实现进程之间的隔离、内核态和用户态的隔离等等这些功能。

系统调用简介

引用一张官方文档中的图片,看看liteos-a内核在整个系统中的位置。

在这里插入图片描述

这次开源的鸿蒙系统中同时包含了两个内核,分别是liteos-a和liteos-m,其中的liteos-m和以前开源的LiteOS相当,而liteos-a是面向应用处理器的操作系统内核,提供了更为丰富的内核功能。此前已经开源的LiteOS,只是一个实时操作系统(RTOS),它主要面向的是内存和闪存配置都比较低的微控制器。

我们先来简单回顾一下操作系统课程的一个知识点——系统调用,以及为什么会有系统调用?它的作用是什么?如果你对于这两个问题以及了然于心,可以直接跳过本段,看后面的源码分析部分。

在微控制器这样的系统资源较少的硬件系统(比如STM32、MSP430、AVR、8051)上,通常直接裸跑程序(也就是不使用任何操作系统),或者使用像FreeRTOS、Zephyr这一类的实时操作系统(RTOS)。这些实时操作系统中,应用程序和内核程序直接运行在同一个物理内存空间(因为这些设备一般没有MMU)上。而RTOS只提供了线程(或者叫任务),线程间同步、互斥等基础设施;应用程序可以直接调用内核函数(用户程序和内核程序只是逻辑上的划分,本质上并没有太大不同);一旦有一个线程发生异常,整个系统就会重启。

而在ARM Cortex-A、x86、x86-64这样的系统资源丰富的硬件系统上,SoC或CPU芯片内部一般集成了MMU,而且CPU有特权级别状态(状态寄存器的某些位)。基于特权级别状态,可以实现部分硬件相关的操作只能在内核态进行,例如访问外设等,用户态应用程序不能访问硬件设备。在这样的系统上,系统调用是用户态应用程序调用内核功能的请求入口。通俗的说,系统调用就是在有内核态和用户态隔离的操作系统上,用户态进程访问内核态资源的一种方式。

从Hello World开始

接下来,我们一起从鸿蒙系统源码分析它在liteos-a内核上是如何实现系统调用的。鸿蒙OS使用了musl libc,应用程序和系统服务都通过musl libc封装的系统调用API接口访问内核相关功能。

下面,我们就从经典的helloworld分析整个系统调用的流程。鸿蒙系统目前官方支持了三个芯片平台,分别是Hi3516DV300(双核ARM Cortex A-7 @ 900M Hz),Hi3518EV300(单核ARM Cortex A-7 @ 900MHz 内置64MB DDR2内存)和Hi3861V100(单核RISC-V @160M Hz 内置 SRAM 和 Flash)。其中Hi3516和Hi3518是带有Cortex A7内核的芯片,鸿蒙系统在这两个平台使用的内核自然是liteos-a。根据官方指导文档,我们知道这两个平台的第一个应用程序示例都是helloworld,源码路径为:applications/sample/camera/app/src/helloworld.c,除去头部注释,代码内容为:

  1. #include <stdio.h>#include "los_sample.h"int main(int argc, char **argv){
  2. printf("\n************************************************\n");
  3. printf("\n\t\tHello OHOS!\n");
  4. printf("\n************************************************\n\n");
  5. LOS_Sample(g_num);
  6. return 0;
  7. }

musl libc的printf函数实现分析

文件路径:third_party/musl/src/stdio/printf.c:

  1. int printf(const char *restrict fmt, ...){ int ret;
  2. va_list ap;
  3. va_start(ap, fmt);
  4. ret = vfprintf(stdout, fmt, ap);
  5. va_end(ap); return ret;
  6. }

我们看到了,这里使用标准库的stdout作为第一个参数调用了vfprintf,我们继续向下分析third_party/musl/src/stdio/vfprintf.c文件:

  1. int vfprintf(FILE *restrict f, const char *restrict fmt, va_list ap)
  2. {// 删减若干和参数 f 无关的代码行
  3. FLOCK(f);
  4. olderr = f->flags & F_ERR; if (f->mode < 1) f->flags &= ~F_ERR; if (!f->buf_size) {
  5. saved_buf = f->buf;
  6. f->buf = internal_buf;
  7. f->buf_size = sizeof internal_buf;
  8. f->wpos = f->wbase = f->wend = 0;
  9. } if (!f->wend && __towrite(f)) ret = -1; else ret = printf_core(f, fmt, &ap2, nl_arg, nl_type); if (saved_buf) {
  10. f->write(f, 0, 0); if (!f->wpos) ret = -1;
  11. f->buf = saved_buf;
  12. f->buf_size = 0;
  13. f->wpos = f->wbase = f->wend = 0;
  14. } if (f->flags & F_ERR) ret = -1;
  15. f->flags |= olderr;
  16. FUNLOCK(f);
  17. va_end(ap2); return ret;
  18. }

这里,我们继续关注三处带有参数f的调用:__towrite(f),printf_core(f, fmt, &ap2, nl_arg, nl_type),f->write(f, 0, 0);

其中,__towrite的实现位于third_party/musl/src/stdio/__towrite.c(可见和系统调用无关):

  1. int __towrite(FILE *f)
  2. {
  3. f->mode |= f->mode-1; if (f->flags & F_NOWR) {
  4. f->flags |= F_ERR; return EOF;
  5. } /* Clear read buffer (easier than summoning nasal demons) */
  6. f->rpos = f->rend = 0; /* Activate write through the buffer. */
  7. f->wpos = f->wbase = f->buf;
  8. f->wend = f->buf + f->buf_size; return 0;
  9. }

从内容上看,__towrite函数的作用是更新文件结构FILE的wpos、wbase、wend成员,以指向待写入实际文件的内存缓冲区域,同时将rpos、rend值为零。

printf_core的实现也位于src/stdio/vfprintf.c文件:

  1. static int printf_core(FILE *f, const char *fmt, va_list *ap, union arg *nl_arg, int *nl_type){
  2. // 删除了变量定义部分
  3. for (;;) { /* This error is only specified for snprintf, but since it's
  4. * unspecified for other forms, do the same. Stop immediately
  5. * on overflow; otherwise %n could produce wrong results. */
  6. if (l > INT_MAX - cnt) goto overflow; /* Update output count, end loop when fmt is exhausted */
  7. cnt += l; if (!*s) break; /* Handle literal text and %% format specifiers */
  8. for (a=s; *s && *s!='%'; s++); for (z=s; s[0]=='%' && s[1]=='%'; z++, s+=2); if (z-a > INT_MAX-cnt) goto overflow;
  9. l = z-a; if (f) out(f, a, l); if (l) continue; if (isdigit(s[1]) && s[2]=='$') {
  10. l10n=1;
  11. argpos = s[1]-'0';
  12. s+=3;
  13. } else {
  14. argpos = -1;
  15. s++;
  16. } /* Read modifier flags */
  17. for (fl=0; (unsigned)*s-' '<32 && (FLAGMASK&(1U<<*s-' ')); s++)
  18. fl |= 1U<<*s-' '; /* Read field width */
  19. if (*s=='*') { if (isdigit(s[1]) && s[2]=='$') {
  20. l10n=1;
  21. nl_type[s[1]-'0'] = INT;
  22. w = nl_arg[s[1]-'0'].i;
  23. s+=3;
  24. } else if (!l10n) {
  25. w = f ? va_arg(*ap, int) : 0;
  26. s++;
  27. } else goto inval; if (w<0) fl|=LEFT_ADJ, w=-w;
  28. } else if ((w=getint(&s))<0) goto overflow; /* Read precision */
  29. if (*s=='.' && s[1]=='*') { if (isdigit(s[2]) && s[3]=='$') {
  30. nl_type[s[2]-'0'] = INT;
  31. p = nl_arg[s[2]-'0'].i;
  32. s+=4;
  33. } else if (!l10n) {
  34. p = f ? va_arg(*ap, int) : 0;
  35. s+=2;
  36. } else goto inval;
  37. xp = (p>=0);
  38. } else if (*s=='.') {
  39. s++;
  40. p = getint(&s);
  41. xp = 1;
  42. } else {
  43. p = -1;
  44. xp = 0;
  45. } /* Format specifier state machine */
  46. st=0; do { if (OOB(*s)) goto inval;
  47. ps=st;
  48. st=states[st]S(*s++);
  49. } while (st-1<STOP); if (!st) goto inval; /* Check validity of argument type (nl/normal) */
  50. if (st==NOARG) { if (argpos>=0) goto inval;
  51. } else { if (argpos>=0) nl_type[argpos]=st, arg=nl_arg[argpos]; else if (f) pop_arg(&arg, st, ap); else return 0;
  52. } if (!f) continue;
  53. z = buf + sizeof(buf);
  54. prefix = "-+ 0X0x";
  55. pl = 0;
  56. t = s[-1]; /* Transform ls,lc -> S,C */
  57. if (ps && (t&15)==3) t&=~32; /* - and 0 flags are mutually exclusive */
  58. if (fl & LEFT_ADJ) fl &= ~ZERO_PAD; switch(t) { case 'n': switch(ps) { case BARE: *(int *)arg.p = cnt; break; case LPRE: *(long *)arg.p = cnt; break; case LLPRE: *(long long *)arg.p = cnt; break; case HPRE: *(unsigned short *)arg.p = cnt; break; case HHPRE: *(unsigned char *)arg.p = cnt; break; case ZTPRE: *(size_t *)arg.p = cnt; break; case JPRE: *(uintmax_t *)arg.p = cnt; break;
  59. } continue; case 'p':
  60. p = MAX(p, 2*sizeof(void*));
  61. t = 'x';
  62. fl |= ALT_FORM; case 'x': case 'X':
  63. a = fmt_x(arg.i, z, t&32); if (arg.i && (fl & ALT_FORM)) prefix+=(t>>4), pl=2; if (0) { case 'o':
  64. a = fmt_o(arg.i, z); if ((fl&ALT_FORM) && p<z-a+1) p=z-a+1;
  65. } if (0) { case 'd': case 'i':
  66. pl=1; if (arg.i>INTMAX_MAX) {
  67. arg.i=-arg.i;
  68. } else if (fl & MARK_POS) {
  69. prefix++;
  70. } else if (fl & PAD_POS) {
  71. prefix+=2;
  72. } else pl=0; case 'u':
  73. a = fmt_u(arg.i, z);
  74. } if (xp && p<0) goto overflow; if (xp) fl &= ~ZERO_PAD; if (!arg.i && !p) {
  75. a=z; break;
  76. }
  77. p = MAX(p, z-a + !arg.i); break; case 'c':
  78. *(a=z-(p=1))=arg.i;
  79. fl &= ~ZERO_PAD; break; case 'm': if (1) a = strerror(errno); else
  80. case 's':
  81. a = arg.p ? arg.p : "(null)";
  82. z = a + strnlen(a, p<0 ? INT_MAX : p); if (p<0 && *z) goto overflow;
  83. p = z-a;
  84. fl &= ~ZERO_PAD; break; case 'C':
  85. wc[0] = arg.i;
  86. wc[1] = 0;
  87. arg.p = wc;
  88. p = -1; case 'S':
  89. ws = arg.p; for (i=l=0; i<p && *ws && (l=wctomb(mb, *ws++))>=0 && l<=p-i; i+=l); if (l<0) return -1; if (i > INT_MAX) goto overflow;
  90. p = i;
  91. pad(f, ' ', w, p, fl);
  92. ws = arg.p; for (i=0; i<0U+p && *ws && i+(l=wctomb(mb, *ws++))<=p; i+=l)
  93. out(f, mb, l);
  94. pad(f, ' ', w, p, fl^LEFT_ADJ);
  95. l = w>p ? w : p; continue; case 'e': case 'f': case 'g': case 'a': case 'E': case 'F': case 'G': case 'A': if (xp && p<0) goto overflow;
  96. l = fmt_fp(f, arg.f, w, p, fl, t); if (l<0) goto overflow; continue;
  97. } if (p < z-a) p = z-a; if (p > INT_MAX-pl) goto overflow; if (w < pl+p) w = pl+p; if (w > INT_MAX-cnt) goto overflow;
  98. pad(f, ' ', w, pl+p, fl);
  99. out(f, prefix, pl);
  100. pad(f, '0', w, pl+p, fl^ZERO_PAD);
  101. pad(f, '0', p, z-a, 0);
  102. out(f, a, z-a);
  103. pad(f, ' ', w, pl+p, fl^LEFT_ADJ);
  104. l = w;
  105. } if (f) return cnt; if (!l10n) return 0; for (i=1; i<=NL_ARGMAX && nl_type[i]; i++)
  106. pop_arg(nl_arg+i, nl_type[i], ap); for (; i<=NL_ARGMAX && !nl_type[i]; i++); if (i<=NL_ARGMAX) goto inval; return 1;
  107. inval: // 删除了错误处理代码overflow: // 删除了错误处理代码}

从注释和代码结构可以看出,这个函数实现了格式化字符串展开的主要流程,这里又调用了out和pad两个函数,从命名猜测应该分别是向内存缓冲区写入内容和填充内容的函数,它们的实现也位于vfprintf.c中:

  1. static void out(FILE *f, const char *s, size_t l){ if (!(f->flags & F_ERR)) __fwritex((void *)s, l, f);
  2. }static void pad(FILE *f, char c, int w, int l, int fl){ char pad[256]; if (fl & (LEFT_ADJ | ZERO_PAD) || l >= w) return;
  3. l = w - l;
  4. memset(pad, c, l>sizeof pad ? sizeof pad : l); for (; l >= sizeof pad; l -= sizeof pad) out(f, pad, sizeof pad); out(f, pad, l);
  5. }

它们又调用了__fwritex,它的实现位于third_party/musl/src/stdio/fwrite.c:

  1. size_t __fwritex(const unsigned char *restrict s, size_t l, FILE *restrict f)
  2. {
  3. size_t i=0; if (!f->wend && __towrite(f)) return 0; if (l > f->wend - f->wpos) return f->write(f, s, l); if (f->lbf >= 0) { /* Match /^(.*\n|)/ */
  4. for (i=l; i && s[i-1] != '\n'; i--); if (i) {
  5. size_t n = f->write(f, s, i); if (n < i) return n;
  6. s += i;
  7. l -= i;
  8. }
  9. }
  10. memcpy(f->wpos, s, l);
  11. f->wpos += l; return l+i;
  12. }

这里又出现了vfprintf中出现的f->write(f, s, i),下面我们就分析这个函数实际底是什么?

我们先找到它的定义prebuilts/lite/sysroot/usr/include/arm-liteos/bits/alltypes.h:

#if defined(__NEED_FILE) && !defined(__DEFINED_FILE)typedef struct _IO_FILE FILE;#define __DEFINED_FILE#endif

以及third_party/musl/src/internal/stdio_impl.h:

  1. struct _IO_FILE {
  2. unsigned flags; unsigned char *rpos, *rend; int (*close)(FILE *); unsigned char *wend, *wpos; unsigned char *mustbezero_1; unsigned char *wbase; size_t (*read)(FILE *, unsigned char *, size_t); size_t (*write)(FILE *, const unsigned char *, size_t); // <--关注它
  3. off_t (*seek)(FILE *, off_t, int); unsigned char *buf; size_t buf_size;
  4. FILE *prev, *next; int fd; int pipe_pid; long lockcount; int mode; volatile int lock; int lbf; void *cookie; off_t off; char *getln_buf; void *mustbezero_2; unsigned char *shend; off_t shlim, shcnt;
  5. FILE *prev_locked, *next_locked; struct __locale_struct *locale;};

我们再继续寻找stdout的各个成员值是什么?

可以找到third_party/musl/src/stdio/stdout.c文件中的:

  1. static unsigned char buf[BUFSIZ+UNGET];
  2. hidden FILE __stdout_FILE = {
  3. .buf = buf+UNGET,
  4. .buf_size = sizeof buf-UNGET,
  5. .fd = 1, // fd1 和多数UNIX系统一样
  6. .flags = F_PERM | F_NORD,
  7. .lbf = '\n',
  8. .write = __stdout_write, // <-- write 成员在这里
  9. .seek = __stdio_seek,
  10. .close = __stdio_close,
  11. .lock = -1,
  12. };
  13. FILE *const stdout = &__stdout_FILE; // <-- stdout 在这里

third_party/musl/src/stdio/__stdout_write.c文件中:

  1. size_t __stdout_write(FILE *f, const unsigned char *buf, size_t len)
  2. { struct winsize wsz;
  3. f->write = __stdio_write; if (!(f->flags & F_SVB) && __syscall(SYS_ioctl, f->fd, TIOCGWINSZ, &wsz))
  4. f->lbf = -1; return __stdio_write(f, buf, len);
  5. }

这段代码里调用了SYS_ioctl系统调用,但主体流程是下方的函数__stdio_write,它的实现在third_party/musl/src/stdio/__stdio_write.c文件中:

  1. size_t __stdio_write(FILE *f, const unsigned char *buf, size_t len)
  2. { struct iovec iovs[2] = {
  3. { .iov_base = f->wbase, .iov_len = f->wpos-f->wbase },
  4. { .iov_base = (void *)buf, .iov_len = len }
  5. }; struct iovec *iov = iovs;
  6. size_t rem = iov[0].iov_len + iov[1].iov_len;
  7. int iovcnt = 2;
  8. ssize_t cnt; for (;;) {
  9. cnt = syscall(SYS_writev, f->fd, iov, iovcnt); // <-- 看这里!
  10. if (cnt == rem) {
  11. f->wend = f->buf + f->buf_size;
  12. f->wpos = f->wbase = f->buf; return len;
  13. } if (cnt < 0) {
  14. f->wpos = f->wbase = f->wend = 0;
  15. f->flags |= F_ERR; return iovcnt == 2 ? 0 : len-iov[0].iov_len;
  16. }
  17. rem -= cnt; if (cnt > iov[0].iov_len) {
  18. cnt -= iov[0].iov_len;
  19. iov++; iovcnt--;
  20. }
  21. iov[0].iov_base = (char *)iov[0].iov_base + cnt;
  22. iov[0].iov_len -= cnt;
  23. }
  24. }

至此,我们看到了printf函数最终调用到了两个系统调用SYS_ioctl和SYS_write。

musl libc的syscall函数实现分析
在上一节中,我们看到printf最终调用到了两个长得像系统调用的函数syscall和__syscall。

系统调用宏syscall的实现
在musl代码仓(third_party/musl)下搜索:

  1. $ find . -name '*.h' | xargs grep --color -n '\ssyscall('./kernel/include/unistd.h:198:long syscall(long, ...);
  2. ./src/internal/syscall.h:44:#define syscall(...) __syscall_ret(__syscall(__VA_ARGS__))./include/unistd.h:199:long syscall(long, ...);

可以找到third_party/musl/src/internal/syscall.h:

#define __syscall(...) __SYSCALL_DISP(__syscall,__VA_ARGS__)#define syscall(...) __syscall_ret(__syscall(__VA_ARGS__))

这里可以看到它们两者都是宏,而syscall调用了__syscall,而__syscall又调用了__SYSCALL_DISP,它的实现也在同一个文件中:

#define __SYSCALL_NARGS_X(a,b,c,d,e,f,g,h,n,...) n#define __SYSCALL_NARGS(...) __SYSCALL_NARGS_X(__VA_ARGS__,7,6,5,4,3,2,1,0,)#define __SYSCALL_CONCAT_X(a,b) a##b#define __SYSCALL_CONCAT(a,b) __SYSCALL_CONCAT_X(a,b)#define __SYSCALL_DISP(b,...) __SYSCALL_CONCAT(b,__SYSCALL_NARGS(__VA_ARGS__))(__VA_ARGS__)

我们以__stdio_write中调用syscall处进行分析,即尝试展开syscall(SYS_writev, f->fd, iov, iovcnt);

  1. syscall(SYS_writev, f->fd, iov, iovcnt);
  2. => __syscall_ret(__syscall(SYS_writev, f->fd, iov, iovcnt)) // 展开syscall=> __syscall_ret(__SYSCALL_DISP(__syscall, SYS_writev, f->fd, iov, iovcnt)); // 展开__syscall

先忽略最外层的 __syscall_ret,展开__SYSCALL_DISP部分:

  1. __SYSCALL_DISP(__syscall, SYS_writev, f->fd, iov, iovcnt)
  2. => __SYSCALL_CONCAT(__syscall, __SYSCALL_NARGS(SYS_writev, f->fd, iov, iovcnt))(SYS_writev, f->fd, iov, iovcnt) // 展开 __SYSCALL_DISP

忽略外层的__SYSCALL_CONCAT,展开__SYSCALL_NARGS_X部分:

  1. __SYSCALL_NARGS(SYS_writev, f->fd, iov, iovcnt)
  2. => __SYSCALL_NARGS_X(SYS_writev, f->fd, iov, iovcnt,7,6,5,4,3,2,1,0,) // 展开 __SYSCALL_NARGS=> 3 // 展开 __SYSCALL_NARGS_X// SYS_writev, f->fd, iov, iovcnt 和宏参数 a,b,c,d 对应// 7,6,5,4 和宏参数 e,f,g,h 对应// 3 和宏参数 n 对应// 宏表达式的值为 n 也就是 3

回到 __SYSCALL_CONCAT 展开流程,

  1. __SYSCALL_CONCAT(__syscall, __SYSCALL_NARGS(SYS_writev, f->fd, iov, iovcnt))
  2. => __SYSCALL_CONCAT(__syscall, 3)
  3. => __SYSCALL_CONCAT_X(__syscall, 3)
  4. => __syscall3

再回到__SYSCALL_DISP(__syscall, SYS_writev, f->fd, iov, iovcnt)展开流程,结果应该是:

  1. __SYSCALL_DISP(__syscall, SYS_writev, f->fd, iov, iovcnt)
  2. => __syscall3(SYS_writev, f->fd, iov, iovcnt)

系统调用函数__syscall3的实现

这些__syscall[1-7]的系统调用包装宏定义如下:

#ifndef __scc#define __scc(X) ((long) (X)) // 转为long类型typedef long syscall_arg_t;#endif#define __syscall1(n,a) __syscall1(n,__scc(a))#define __syscall2(n,a,b) __syscall2(n,__scc(a),__scc(b))#define __syscall3(n,a,b,c) __syscall3(n,__scc(a),__scc(b),__scc(c)) // <- 看这里#define __syscall4(n,a,b,c,d) __syscall4(n,__scc(a),__scc(b),__scc(c),__scc(d))#define __syscall5(n,a,b,c,d,e) __syscall5(n,__scc(a),__scc(b),__scc(c),__scc(d),__scc(e))#define __syscall6(n,a,b,c,d,e,f) __syscall6(n,__scc(a),__scc(b),__scc(c),__scc(d),__scc(e),__scc(f))#define __syscall7(n,a,b,c,d,e,f,g) __syscall7(n,__scc(a),__scc(b),__scc(c),__scc(d),__scc(e),__scc(f),__scc(g))

继续搜索发现有多出匹配,我们关注arch/arm目录下的文件,因为ARM Cortext A7是Armv7-A指令集的32位CPU(如果是Armv8-A指令集的64位CPU则对应arch/aarch64下的文件):

  1. static inline long __syscall3(long n, long a, long b, long c)
  2. { register long r7 __ASM____R7__ = n; register long r0 __asm__("r0") = a; register long r1 __asm__("r1") = b; register long r2 __asm__("r2") = c;
  3. __asm_syscall(R7_OPERAND, "0"(r0), "r"(r1), "r"(r2));
  4. }

这段代码中还有三个宏,ASM____R7、__asm_syscall和R7_OPERAND:

  1. #ifdef __thumb__#define __ASM____R7__#define __asm_syscall(...) do { \
  2. __asm__ __volatile__ ( "mov %1,r7 ; mov r7,%2 ; svc 0 ; mov r7,%1" \
  3. : "=r"(r0), "=&r"((int){0}) : __VA_ARGS__ : "memory"); \
  4. return r0; \
  5. } while (0)#else // __thumb__#define __ASM____R7__ __asm__("r7")#define __asm_syscall(...) do { \
  6. __asm__ __volatile__ ( "svc 0" \
  7. : "=r"(r0) : __VA_ARGS__ : "memory"); \
  8. return r0; \
  9. } while (0)#endif // __thumb__#ifdef __thumb2__#define R7_OPERAND "rI"(r7)#else#define R7_OPERAND "r"(r7)#endif

它们有两个实现版,分别对应于编译器THUMB选项的开启和关闭。这两种选项条件下的代码流程基本一致,以下仅以未开启THUMB选项为例进行分析。这两个宏展开后的__syscall3函数内容为:

  1. static inline long __syscall3(long n, long a, long b, long c)
  2. { register long r7 __asm__("r7") = n; // 系统调用号
  3. register long r0 __asm__("r0") = a; // 参数0
  4. register long r1 __asm__("r1") = b; // 参数1
  5. register long r2 __asm__("r2") = c; // 参数2
  6. do { \
  7. __asm__ __volatile__ ( "svc 0" \
  8. : "=r"(r0) : "r"(r7), "0"(r0), "r"(r1), "r"(r2) : "memory"); \
  9. return r0; \
  10. } while (0);
  11. }

这里最后的一个内嵌汇编比较复杂,它符合如下格式(具体细节可以查阅gcc内嵌汇编文档的扩展汇编说明):

  1. asm asm-qualifiers ( AssemblerTemplate
  2. : OutputOperands
  3. [ : InputOperands
  4. [ : Clobbers ] ])

汇编模板为:"svc 0", 输出参数部分为:"=r"(r0),输出寄存器为r0 输入参数部分为:"r"(r7), "0"(r0), "r"(r1), "r"(r2),输入寄存器为r7,r0,r1,r2,("0"的含义是,这个输入寄存器必须和输出寄存器第0个位置一样) Clobber部分为:"memory"

这里我们只需要记住:系统调用号存放在r7寄存器,参数存放在r0,r1,r2,返回值最终会存放在r0中;

SVC指令,ARM Cortex A7手册 的解释为:

The SVC instruction causes a Supervisor Call exception. This provides a mechanism for unprivileged software to make a call to the operating system, or other system component that is accessible only at PL1.

翻译过来就是说

SVC指令会触发一个“特权调用”异常。这为非特权软件调用操作系统或其他只能在PL1级别访问的系统组件提供了一种机制。

详细的指令说明在
到这里,我们分析了鸿蒙系统上应用程序如何进入内核态,主要分析的是musl libc的实现。

liteos-a内核的系统调用实现分析

既然SVC能够触发一个异常,那么我们就要看看liteos-a内核是如何处理这个异常的。

ARM Cortex A7中断向量表

在ARM架构参考手册中,可以找到中断向量表的说明:

在这里插入图片描述

可以看到SVC中断向量的便宜地址是0x08,我们可以在kernel/liteos_a/arch/arm/arm/src/startup目录的reset_vector_mp.S文件和reset_vector_up.S文件中找到相关汇编代码:

  1. __exception_handlers:
  2. /*
  3. *Assumption: ROM code has these vectors at the hardware reset address.
  4. *A simple jump removes any address-space dependencies [i.e. safer]
  5. */
  6. b reset_vector
  7. b _osExceptUndefInstrHdl
  8. b _osExceptSwiHdl
  9. b _osExceptPrefetchAbortHdl
  10. b _osExceptDataAbortHdl
  11. b _osExceptAddrAbortHdl
  12. b OsIrqHandler
  13. b _osExceptFiqHdl

PS: kernel/liteos_a/arch/arm/arm/src/startup目录有两个文件reset_vector_mp.S文件和reset_vector_up.S文件分别对应多核和单核编译选项:

  1. ifeq ($(LOSCFG_KERNEL_SMP), y)
  2. LOCAL_SRCS += src/startup/reset_vector_mp.SelseLOCAL_SRCS += src/startup/reset_vector_up.Sendif

SVC中断处理函数
上面的汇编代码中可以看到,_osExceptSwiHdl函数就是SVC异常处理函数,具体实现在kernel/liteos_a/arch/arm/arm/src/los_hw_exc.S文件中:

  1. @ Description: Software interrupt exception handler_osExceptSwiHdl:
  2. SUB SP, SP, #(4 * 16) @ 栈增长
  3. STMIA SP, {R0-R12} @ 保存R0-R12寄存器到栈上
  4. MRS R3, SPSR @ 移动SPSR寄存器的值到R3
  5. MOV R4, LR
  6. AND R1, R3, #CPSR_MASK_MODE @ Interrupted mode
  7. CMP R1, #CPSR_USER_MODE @ User mode
  8. BNE OsKernelSVCHandler @ Branch if not user mode
  9. @ we enter from user mode, we need get the values of USER mode r13(sp) and r14(lr).
  10. @ stmia with ^ will return the user mode registers (provided that r15 is not in the register list).
  11. MOV R0, SP
  12. STMFD SP!, {R3} @ Save the CPSR
  13. ADD R3, SP, #(4 * 17) @ Offset to pc/cpsr storage
  14. STMFD R3!, {R4} @ Save the CPSR and r15(pc)
  15. STMFD R3, {R13, R14}^ @ Save user mode r13(sp) and r14(lr)
  16. SUB SP, SP, #4
  17. PUSH_FPU_REGS R1
  18. MOV FP, #0 @ Init frame pointer
  19. CPSIE I              @ Interrupt Enable
  20. BLX OsArmA32SyscallHandle
  21. CPSID I @ Interrupt Disable
  22. POP_FPU_REGS R1
  23. ADD SP, SP,#4
  24. LDMFD SP!, {R3} @ Fetch the return SPSR
  25. MSR SPSR_cxsf, R3 @ Set the return mode SPSR
  26. @ we are leaving to user mode, we need to restore the values of USER mode r13(sp) and r14(lr).
  27. @ ldmia with ^ will return the user mode registers (provided that r15 is not in the register list)
  28. LDMFD SP!, {R0-R12}
  29. LDMFD SP, {R13, R14}^ @ Restore user mode R13/R14
  30. ADD SP, SP, #(2 * 4)
  31. LDMFD SP!, {PC}^ @ Return to user

这段代码的注释较为清楚,可以看到,内核模式会继续调用OsKernelSVCHandler,用户模式会继续调用OsArmA32SyscallHandle函数;

OsArmA32SyscallHandle函数
我们这里分析的流程是从用户模式进入的,所以调用的是OsArmA32SyscallHandle,它的实现位于kernel/liteos_a/syscall/los_syscall.c文件:

  1. /* The SYSCALL ID is in R7 on entry. Parameters follow in R0..R6 */LITE_OS_SEC_TEXT UINT32 *OsArmA32SyscallHandle(UINT32 *regs)
  2. {
  3. UINT32 ret;
  4. UINT8 nArgs;
  5. UINTPTR handle;
  6. UINT32 cmd = regs[REG_R7];
  7. if (cmd >= SYS_CALL_NUM) {
  8. PRINT_ERR("Syscall ID: error %d !!!\n", cmd);
  9. return regs;
  10. }
  11. if (cmd == __NR_sigreturn) {
  12. OsRestorSignalContext(regs);
  13. return regs;
  14. }
  15. handle = g_syscallHandle[cmd]; // 得到实际系统调用处理函数
  16. nArgs = g_syscallNArgs[cmd / NARG_PER_BYTE]; /* 4bit per nargs */
  17. nArgs = (cmd & 1) ? (nArgs >> NARG_BITS) : (nArgs & NARG_MASK);
  18. if ((handle == 0) || (nArgs > ARG_NUM_7)) {
  19. PRINT_ERR("Unsupport syscall ID: %d nArgs: %d\n", cmd, nArgs);
  20. regs[REG_R0] = -ENOSYS;
  21. return regs;
  22. }
  23. switch (nArgs) { // 以下各个case是实际函数调用
  24. case ARG_NUM_0:
  25. case ARG_NUM_1:
  26. ret = (*(SyscallFun1)handle)(regs[REG_R0]);
  27. break;
  28. case ARG_NUM_2:
  29. case ARG_NUM_3:
  30. ret = (*(SyscallFun3)handle)(regs[REG_R0], regs[REG_R1], regs[REG_R2]);
  31. break;
  32. case ARG_NUM_4:
  33. case ARG_NUM_5:
  34. ret = (*(SyscallFun5)handle)(regs[REG_R0], regs[REG_R1], regs[REG_R2], regs[REG_R3],
  35. regs[REG_R4]);
  36. break;
  37. default:
  38. ret = (*(SyscallFun7)handle)(regs[REG_R0], regs[REG_R1], regs[REG_R2], regs[REG_R3],
  39. regs[REG_R4], regs[REG_R5], regs[REG_R6]);
  40. }
  41. regs[REG_R0] = ret; // 返回值填入R0
  42. OsSaveSignalContext(regs);
  43. /* Return the last value of curent_regs. This supports context switches on return from the exception.
  44. * That capability is only used with theSYS_context_switch system call.
  45. */
  46. return regs;
  47. }

这个函数中用到了个全局数组g_syscallHandle和g_syscallNArgs,它们的定义以及初始化函数也在同一个文件中:

  1. static UINTPTR g_syscallHandle[SYS_CALL_NUM] = {0};static UINT8 g_syscallNArgs[(SYS_CALL_NUM + 1) / NARG_PER_BYTE] = {0};void SyscallHandleInit(void)
  2. {#define SYSCALL_HAND_DEF(id, fun, rType, nArg) \
  3. if ((id) < SYS_CALL_NUM) { \
  4. g_syscallHandle[(id)] = (UINTPTR)(fun); \
  5. g_syscallNArgs[(id) / NARG_PER_BYTE] |= \
  6. ((id) & 1) ? (nArg) << NARG_BITS : (nArg); \
  7. }
  8. #include "syscall_lookup.h"#undef SYSCALL_HAND_DEF}

其中SYSCALL_HAND_DEF宏的对齐格式我做了一点调整。

从g_syscallNArgs成员赋值以及定义的地方,能看出它的每个UINT8成员被用来存放两个系统调用的参数个数,从而实现更少的内存占用;

syscall_lookup.h文件和los_syscall.c位于同一目录,它记录了系统调用函数对照表,我们仅节取一部分:

  1. SYSCALL_HAND_DEF(__NR_read, SysRead, ssize_t, ARG_NUM_3)
  2. SYSCALL_HAND_DEF(__NR_write, SysWrite, ssize_t, ARG_NUM_3) // <-- 我们要跟踪的 write 在这里SYSCALL_HAND_DEF(__NR_open, SysOpen, int, ARG_NUM_7)
  3. SYSCALL_HAND_DEF(__NR_close, SysClose, int, ARG_NUM_1)
  4. SYSCALL_HAND_DEF(__NR_creat, SysCreat, int, ARG_NUM_2)
  5. SYSCALL_HAND_DEF(__NR_unlink, SysUnlink, int, ARG_NUM_1)#ifdef LOSCFG_KERNEL_DYNLOADSYSCALL_HAND_DEF(__NR_execve, SysExecve, int, ARG_NUM_3)#endif

看到这里,write系统调用的内核函数终于找到了——SysWrite。
到此,我们已经知道了liteos-a的系统调用机制是如何实现的。

liteos-a内核SysWrite的实现

SysWrite函数的实现位于kernel/liteos_a/syscall/fs_syscall.c文件:

  1. ssize_t SysWrite(int fd, const void *buf, size_t nbytes)
  2. {
  3. int ret;
  4. if (nbytes == 0) {
  5. return 0;
  6. }
  7. if (!LOS_IsUserAddressRange((vaddr_t)(UINTPTR)buf, nbytes)) {
  8. return -EFAULT;
  9. }
  10. /* Process fd convert to system global fd */
  11. fd = GetAssociatedSystemFd(fd);
  12. ret = write(fd, buf, nbytes); // <-- ??似曾相识??
  13. if (ret < 0) {
  14. return -get_errno();
  15. }
  16. return ret;
  17. }

它又调用了write?但是这一次是内核空间的write,不再是 musl libc,经过一番搜索,我们可以找到另一个文件third_party/NuttX/fs/vfs/fs_write.c中的write:

  1. ssize_t write(int fd, FAR const void *buf, size_t nbytes) {#if CONFIG_NFILE_DESCRIPTORS > 0
  2. FAR struct file *filep;
  3. if ((unsigned int)fd >= CONFIG_NFILE_DESCRIPTORS)#endif
  4. { /* Write to a socket descriptor is equivalent to send with flags == 0 */#if defined(LOSCFG_NET_LWIP_SACK)
  5. FAR const void *bufbak = buf;
  6. ssize_t ret;
  7. if (LOS_IsUserAddress((VADDR_T)(uintptr_t)buf)) {
  8. if (buf != NULL && nbytes > 0) {
  9. buf = malloc(nbytes);
  10. if (buf == NULL) { /* 省略 错误处理 代码 */ }
  11. if (LOS_ArchCopyFromUser((void*)buf, bufbak, nbytes) != 0) {/* 省略 */}
  12. }
  13. }
  14. ret = send(fd, buf, nbytes, 0); // 这个分支是处理socket fd
  15. if (buf != bufbak) {
  16. free((void*)buf);
  17. }
  18. return ret;#else
  19. set_errno(EBADF);
  20. return VFS_ERROR;#endif
  21. }#if CONFIG_NFILE_DESCRIPTORS > 0
  22. /* The descriptor is in the right range to be a file descriptor... write
  23. * to the file.
  24. */
  25. if (fd <= STDERR_FILENO && fd >= STDIN_FILENO) { /* fd : [0,2] */
  26. fd = ConsoleUpdateFd();
  27. if (fd < 0) {
  28. set_errno(EBADF);
  29. return VFS_ERROR;
  30. }
  31. }
  32. int ret = fs_getfilep(fd, &filep);
  33. if (ret < 0) {
  34. /* The errno value has already been set */
  35. return VFS_ERROR;
  36. }
  37. if (filep->f_oflags & O_DIRECTORY) {
  38. set_errno(EBADF);
  39. return VFS_ERROR;
  40. }
  41. if (filep->f_oflags & O_APPEND) {
  42. if (file_seek64(filep, 0, SEEK_END) == -1) {
  43. return VFS_ERROR;
  44. }
  45. }
  46. /* Perform the write operation using the file descriptor as an index */
  47. return file_write(filep, buf, nbytes);#endif}

找到这段代码,我们知道了:

liteos-a的vfs是在NuttX基础上实现的,NuttX是一个开源RTOS项目;

liteos-a的TCP/IP协议栈是基于lwip的,lwip也是一个开源项目;

这段代码中的write分为两个分支,socket fd调用lwip的send,另一个分支调用file_write;

至于,file_write如何调用到存储设备驱动程序,则是更底层的实现了,本文不在继续分析。

补充说明

本文内容均是基于鸿蒙系统开源项目OpenHarmony源码静态分析所整理,没有进行实际的运行环境调试,实际执行过程可能有所差异,希望发现错误的读者及时指正。文中所有路径均为整个openharmony源码树上的相对路径(而非liteos源码相对路径)。

参考链接

ARM Architecture Reference Manual ® ARMv7-A and ARMv7-R edition: https://developer.arm.com/docs/ddi0406/latest

gcc内嵌汇编文档的扩展汇编说明:https://gcc.gnu.org/onlinedocs/gcc-9.3.0/gcc/Extended-Asm.html#Extended-Asm

鸿蒙官方文档“内核子系统”:https://gitee.com/openharmony/docs/blob/master/readme/%E5%86%85%E6%A0%B8%E5%AD%90%E7%B3%BB%E7%BB%9FREADME.md

鸿蒙官方文档“ OpenHarmony轻内核”:https://gitee.com/openharmony/docs/blob/master/kernel/Readme-CN.md

NuttX:https://nuttx.apache.org/

Lwip:https://savannah.nongnu.org/projects/lwip/

本文参与了「解读鸿蒙源码」技术征文,欢迎正在阅读的你也加入。


原文链接:https://developer.huawei.com/consumer/cn/forum/topic/0201398672740480099?fid=0101303901040230869

原作者:思维

标签: 鸿蒙OS

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/从前慢现在也慢/article/detail/255532?site
推荐阅读
相关标签
  

闽ICP备14008679号