操作系统原理:链接与ELF文件

2024-03-31 21:08
文章标签 原理 操作系统 链接 elf

本文主要是介绍操作系统原理:链接与ELF文件,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

ELF文件

本文主要针对Linux系统。在x86架构下,Linux使用的是ELF(Executable and Linkable Format)目标文件格式。目标文件的三种格式:

  1. Relocatable object file. 可重定位目标文件包含二进制代码和数据,编译时可与其他可重定位目标文件合并组成可执行目标文件,如 .o,.a文件。
  2. Executable object file. 可执行目标文件包含二进制代码和数据,可以直接加载到内存并执行, 如 .out文件。
  3. Shared object file. 共享目标文件是一种特殊类型的可重定位目标文件,可以在加载或运行时动态的加载到内存并链接。如 .so文件。

Relocatable object file

编译器和汇编器生成可重定向(或共享)目标文件,链接器生成可执行目标文件。ELF header 以一个16字节的序列开始的,描述了生成改文件的系统的字的大小(word size)和字节序(byte ordering),剩下的ELF header则包含了一些让链接器去parse和interpret目标文件的信息,如ELF头的大小,目标文件类型(Relocatable,executalbe, or shared), 及其类型(eg., IA32), section header table的文件偏移,section header table中条目大小和数目。不同节的位置和大小是由节头部表描述的, 且每个节都有个固定大小的条目。一个典型的Relocatable object file如下图:
relocatable elf

其中各部分解释如下:

  • .text: 编译好的机器代码。
  • .rodata: read-only数据,比如常量字符串。
  • .data: 初始化过的全局变量。
  • .bss: (block storage start)未初始化的全局比那里, better save sapce :),仅仅是占位符,未初始化不需要占据实际磁盘空间。
  • .symtab: symbol table, 函数与全局变量。
  • .rel.text: 一个 .text 节中位置的列表,链接器把其和其他可重定位文件链接时,会修改这些位置。通常调用外部函数或引用外部全局变量需要修改,本地则不需要。Executable目标文件则不需要这些信息,一般不显示制定就缺省。
  • .rel.data: 被模块引用或定义的全局变量的重定位信息,比如初始化的全局变量初始值是外部的一个全局变量或函数的地址。
  • .debug: 调试符号表,包含了局部变量和类型信息,引用或定位的全局变量,还有原始的C文件,编译加 -g 选项才此表。
  • .line: 源代码行号和.text中机器码的映射关系,编译时加 -g 才有此信息。
  • .strtab: string table, 包含了 .symtab 和 .debug中的符号表,还有节头部的节名字,是以null结尾的字符串序列。

c语言是分离式编译,每个.c可以编程一个.o,是一个编译单元。在链接器上下文中,static符号不对外部模块可见。

符号表由汇编器生成,是一个数组,里面的条目由下面结构体所描述。name是字符串表中自己偏移。value是符号的地址,对于 executable 文件就是运行时绝对地址。type是函数或数据。binding表示是本地还是全局。链接器解析全局符号时,只允许有一个强符号(已经初始化的全局变量是强符号,反之弱符号)。

typedef struct {int name;       /* string table offset */int value;      /* section offset, or VM address */int size;       /* object size in bytes */char type:4,    /* data, func, section, or src file name (4 bits) */binding:4; /* local or global (4 bits) */char reserved;  /* unused */char section;   /* section header index, ABS, UNDEF, *//* or COMMON */
} Elf_Symbol;

链接器链接静态库.a时有一些注意点。符号解析阶段,链接器按照从左到右的顺序来扫描命令行上输入的.o.a文件。这些文件在命令行上的顺序要注意,库.a一般放到结尾。如果引用的库还不是相互独立的,那么要求有序放置,要有定义在引用之后,也即a依赖b,那么b放到a后面。还有一种方法是把相互依赖的链接库合并。链接器完成了符号解析后,最后要做的是重定位,合并输入模块,并且为每个符号分配运行时地址。重定位有两部:重定位节和符号定义;重定位节中的符号引用。

Executable Object Files

可执行目标程序结构类似于可重定位目标程序,没有了重定位信息.rel节。ELF header还包括了程序的entry point,即程序运行时执行的第一条指令地址。.init节定义了一个小函数_init,程序的初始化代码会调用它。在命令行启动一个可执行程序,通过调用execve内核系统调用调到操作系统loader代码,把代码和数据读到内存,跳转到第一条指令entry point来运行它,拷贝的过程叫加载(loading),最终会调用程序的main函数。一个ELF的结构图如下:
executable elf

程序被加载运行,必然是在一个进程上下文中,有自己的虚拟地址空间。父进程fork一个子进程,然后通过execve系统调用加载器代码删除子进程已存的虚拟存储段,加载新的代码数据与堆栈,新的堆栈段会被初始化为0。32位系统的进程虚拟地址空间如下图:
32bit_runtime_process

Dynamic Linking with Shared Libraries

共享库so在运行期加载到内存,并和一个程序链接起来,即dynamic linking, 是由dynamic linker动态链接器来执行的。编译动态链接库so,需要用到编译器gcc的-shared -fPIC参数。

加载时动态链接

创建可执行文件时静态执行一些链接,最终程序加载时动态完成链接过程。举例:
编译动态链接库:gcc -shared -fPIC -o libxxx.so a.c b.c
编译可执行文件:gcc -o a.out main.c ./libxxx.so
其中的-fPIC创建(Position-Independent Code, PIC), 位置无关代码不需要链接器修改就可以在任何地址加载和执行这些代码。在进程虚拟地址空间中,数据段总是在代码段之后,代码段中的指令地址和数据段中全局变量地址之间距离是一个运行时常量。正好PIC数据引用可以利用此点,编译器在数据段开始的地方创建了一个全局偏移量表(Global offset Table,GOT), 每个被目标模块引用的全局变量都有一个条目,编译时还为每个条目生成一个重定位记录。加载时,Dynamic Linker就会重定位每个条目,使其包含正确的运行时绝对地址。

运行时动态链接

程序在运行时完成动态链接,动态加载so,可以使用下面的API. 这种方法使用的更加广泛写。API可以在include目录下搜索root@ubuntu:/usr/include# grep dlopen -r *, 很容易找到。

/* Open the shared object FILE and map it in; return a handle that can bepassed to `dlsym' to get symbol values from it.  */
extern void *dlopen (const char *__file, int __mode) __THROWNL;/* Unmap and close a shared object opened by `dlopen'.The handle cannot be used again after calling `dlclose'.  */
extern int dlclose (void *__handle) __THROWNL __nonnull ((1));/* Find the run-time address in the shared object HANDLE refers toof the symbol called NAME.  */
extern void *dlsym (void *__restrict __handle,const char *__restrict __name) __THROW __nonnull ((2));

ELF常用处理命令

  • nm,列出符号表
  • readelf, 读ELF文件完整结构
  • objdump, 显示ELF所有信息,常用来反汇编.text中指令
  • ldd,列出executable object file运行时需要的动态库
  • strings,列出所有可打印的字符串
  • size, 列出目标文件中节的名字和大小
  • ar, 创建静态库,插入、删除、列出和提取成员

对于ELF这种二进制文件,同样可以用grep来搜里面的字符串,如grep -ao a.out可以搜里面的常量字符串和符号表,有时候也是很方便的。

参考

Computer Systems: A Programmer’s Perspective (3rd Edition)

这篇关于操作系统原理:链接与ELF文件的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/865342

相关文章

ShardingProxy读写分离之原理、配置与实践过程

《ShardingProxy读写分离之原理、配置与实践过程》ShardingProxy是ApacheShardingSphere的数据库中间件,通过三层架构实现读写分离,解决高并发场景下数据库性能瓶... 目录一、ShardingProxy技术定位与读写分离核心价值1.1 技术定位1.2 读写分离核心价值二

深度解析Python中递归下降解析器的原理与实现

《深度解析Python中递归下降解析器的原理与实现》在编译器设计、配置文件处理和数据转换领域,递归下降解析器是最常用且最直观的解析技术,本文将详细介绍递归下降解析器的原理与实现,感兴趣的小伙伴可以跟随... 目录引言:解析器的核心价值一、递归下降解析器基础1.1 核心概念解析1.2 基本架构二、简单算术表达

深入浅出Spring中的@Autowired自动注入的工作原理及实践应用

《深入浅出Spring中的@Autowired自动注入的工作原理及实践应用》在Spring框架的学习旅程中,@Autowired无疑是一个高频出现却又让初学者头疼的注解,它看似简单,却蕴含着Sprin... 目录深入浅出Spring中的@Autowired:自动注入的奥秘什么是依赖注入?@Autowired

从原理到实战解析Java Stream 的并行流性能优化

《从原理到实战解析JavaStream的并行流性能优化》本文给大家介绍JavaStream的并行流性能优化:从原理到实战的全攻略,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的... 目录一、并行流的核心原理与适用场景二、性能优化的核心策略1. 合理设置并行度:打破默认阈值2. 避免装箱

Python中的filter() 函数的工作原理及应用技巧

《Python中的filter()函数的工作原理及应用技巧》Python的filter()函数用于筛选序列元素,返回迭代器,适合函数式编程,相比列表推导式,内存更优,尤其适用于大数据集,结合lamb... 目录前言一、基本概念基本语法二、使用方式1. 使用 lambda 函数2. 使用普通函数3. 使用 N

MyBatis-Plus 与 Spring Boot 集成原理实战示例

《MyBatis-Plus与SpringBoot集成原理实战示例》MyBatis-Plus通过自动配置与核心组件集成SpringBoot实现零配置,提供分页、逻辑删除等插件化功能,增强MyBa... 目录 一、MyBATis-Plus 简介 二、集成方式(Spring Boot)1. 引入依赖 三、核心机制

redis和redission分布式锁原理及区别说明

《redis和redission分布式锁原理及区别说明》文章对比了synchronized、乐观锁、Redis分布式锁及Redission锁的原理与区别,指出在集群环境下synchronized失效,... 目录Redis和redission分布式锁原理及区别1、有的同伴想到了synchronized关键字

Linux中的HTTPS协议原理分析

《Linux中的HTTPS协议原理分析》文章解释了HTTPS的必要性:HTTP明文传输易被篡改和劫持,HTTPS通过非对称加密协商对称密钥、CA证书认证和混合加密机制,有效防范中间人攻击,保障通信安全... 目录一、什么是加密和解密?二、为什么需要加密?三、常见的加密方式3.1 对称加密3.2非对称加密四、

setsid 命令工作原理和使用案例介绍

《setsid命令工作原理和使用案例介绍》setsid命令在Linux中创建独立会话,使进程脱离终端运行,适用于守护进程和后台任务,通过重定向输出和确保权限,可有效管理长时间运行的进程,本文给大家介... 目录setsid 命令介绍和使用案例基本介绍基本语法主要特点命令参数使用案例1. 在后台运行命令2.

Spring Security 单点登录与自动登录机制的实现原理

《SpringSecurity单点登录与自动登录机制的实现原理》本文探讨SpringSecurity实现单点登录(SSO)与自动登录机制,涵盖JWT跨系统认证、RememberMe持久化Token... 目录一、核心概念解析1.1 单点登录(SSO)1.2 自动登录(Remember Me)二、代码分析三、