[转帖]Mysql源码学习笔记——偷窥线程_MySQL, Oracle及数据库讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  MySQL, Oracle及数据库讨论区 »
总帖数
1
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 1718 | 回复: 0   主题: [转帖]Mysql源码学习笔记——偷窥线程        下一篇 
ad222888
注册用户
等级:新兵
经验:66
发帖:134
精华:0
注册:2016-9-25
状态:离线
发送短消息息给ad222888 加好友    发送短消息息给ad222888 发消息
发表于: IP:您无权察看 2018-8-16 14:02:01 | [全部帖] [楼主帖] 楼主

安装完Mysql 后,使用VS打开源码开开眼,我嘞个去,这代码和想象中怎么差别这么大呢?感觉代码有些凌乱,注释代码都写的比较随意,好像没有什么统一的规范,不同的文 件中代码风格也有差异,可能Mysql经过了很多牛人的手之后,集众牛人之长吧。也可能是我见识比较浅薄,适应了自己的代码风格,井底之蛙了,总之还是怀 着敬畏的心情开始咱的源码之旅吧。本人菜鸟,大神轻拍。

Mysql可以启动起来了,应该怎么学习呢?总不能从main开始一步一步的 看吧,Mysql作为比较底层的大型软件,涉及到数据库实现的方方面面,没有厚实的数据库理论基础和对Mysql各个模块相当的熟悉,从main开始势必 会把自己引入某个死胡同啊,什么都看,最后啥也不会,咱伤不起。

经过思考后,我想还是通过客户端来调试服务器,从而学习服务器代码比较现实。 也就是通过客户端的动作,看服务器的反应。比如从客户端的登录动作来看SERVER如何进行通信、用户识别、鉴定以及任务分配的,通过CREATE TABLE,来看SERVER如何解析DDL语句以及针对不同的存储引擎采取的不同的物理存储方式,通过INSERT语句,来看SERVER如何进行 Btree的操作。通过SELECT语句来看如何进行SQL语句语法树的创建和优化的,通过ROLL BACK,来看SERVER事务是如何实现的。这里主要是通过跟踪代码学习Mysql数据库实现的思想,对于具体的代码不去做过多的追究(主要是我对 C++不是很熟悉),好读书,不求甚解,呵呵。

由此,暂时准备了以下几条SQL语句,来有针对的进行SERVER的分析

1、 LOGIN(登录)

mysql.exe –uroot –p
2、 DDL(建表语句)
create table tb_myisam(c1 int, c2 varchar(256)) engine = myisam;
create table tb_innodb(c1 int, c2 varchar(256)) engine = innodb;
3、 INSERT
Insert into tb_myisam values(1 , ’寂寞的肥肉’);
Insert into tb_innodb values(1 , ’寂寞的肥肉’);
4、 SELECT
Select c1 from tb_myisam;
Select * from tb_innodb;
5、 ROLLBACK


复制代码

大家都知道,mysql可以通过多个客户端,进行并发操作,当然也包括登录 了。在别人登录的时候,其他的用户可能正在进行一些其它的操作,因此对于登录我们猜测应该有专门的线程负责客户端和服务器的连接的创建,以保证登录的及时 性,对于每个连接的用户,应该用一个独立的线程进行任务的执行。

首先介绍下mysql中创建线程的函数,创建线程的函数貌似就是 _begin_thread,CreateThread,我们通过VS在整个解决方案中进行查找,bingo!在my_winthread.c中找到了调 用_begin_thread的函数pthread_create,在os0thread.c中找到了调用CreateThread的函数 os_thread_create,一个系统怎么封装两个系统函数呢??再仔细看下,发现my_winthread.c是在项目mysys下,而 os0thread.c是在项目innobase下。innobase!!这不就是innodb的插件式存储引擎么,原来这是存储引擎自己的封装的底层函 数,哥心中豁然开朗了。我想Mysql应用范围如此之广,除了开源之外,插件式的存储引擎功不可没啊,用户可以根据自己的实际应用采取不同的存储引擎,对于大公司,估计会开发自己的存储引擎。

下面分析下pthread_create是如何调用_begin_thread的,先粗略看下源码。 

int pthread_create(pthread_t *thread_id, pthread_attr_t *attr,
pthread_handler func, void *param)
{
      HANDLE hThread;
      struct pthread_map *map;
      DBUG_ENTER(“pthread_create”);
      if (!(map=malloc(sizeof(*map))))
      DBUG_RETURN(-1);
      map->func=func;
      map->param=param;
      pthread_mutex_lock(&THR_LOCK_thread);
      #ifdef __BORLANDC__
      hThread=(HANDLE)_beginthread((void(_USERENTRY *)(void *)) pthread_start,
      attr->dwStackSize ? attr->dwStackSize :
      65535, (void*) map);
      #else
      hThread=(HANDLE)_beginthread((void( __cdecl *)(void *)) pthread_start,
      attr->dwStackSize ? attr->dwStackSize :
      65535, (void*) map);
      #endif
      DBUG_PRINT(“info”, (“hThread=%lu”,(long) hThread));
      *thread_id=map->pthreadself=hThread;
      pthread_mutex_unlock(&THR_LOCK_thread);
      if (hThread == (HANDLE) -1)
      {
            int error=errno;
            DBUG_PRINT(“error”,
            (“Can’t create thread to handle request (error %d)”,error));
            DBUG_RETURN(error ? error : -1);
      }
      VOID(SetThreadPriority(hThread, attr->priority)) ;
      DBUG_RETURN(0);
}


复制代码

关键的代码是下面三句:

map->func=func;
map->param=param;
_beginthread((void( __cdecl *)(void *)) pthread_start,
attr->dwStackSize ? attr->dwStackSize :
65535, (void*) map);


复制代码

从这可以看出,创建的新线程的名字是个固定的函数——pthread_start,而我们传进来的想创建的函数func是挂载在了map上了,函数的参数同样的挂载在map上了,这样我们就可以推理出在pthread_start函数中,肯定会出现这样的代码:

map->func(map->param);


mysql没有选择直接_beginthread(func, stack_size, param)的形式,而是进行了一次封装,不知道这样的好处是什么,可能牛人的思想不是我这样小菜鸟能顿悟的,跑题了~~

至此,我们只在pthread_create函数上设置断点,调试启动mysqld,断点停下来,看下系统的线程状况:

我们第一次进入pthread_create,任何线程都没开始创建呢,按理说系统线程应该就只有一个主线程,可现在多了这么多,这些应该是innodb存储引擎创建的线程了(具体是在plugin_init)。根据线程的名称,结合注释,猜测了下这些线程的作用。

Io_handler_thread:从名称可以知道这些是I/O线程,负责进行磁盘I/O。

Svr_error_monitor_thread:应该是服务器出错监控线程。

Svr_lock_timeout_thread:应该是和上锁相关的线程。

Svr_master_thread:
/*************************************************************************
The master thread controlling the server. */


服务器控制线程,应该是具体进行作业的线程。

Svr_monitor_thread:
/*************************************************************************
A thread prints the info output by various InnoDB monitors. */


监控线程,负责打印信息。

淡然飘过吧,不去细究了,我们只关心pthread_create创建的线程。根据调试,发现多了几个线程同名的线程_threadstart,如下所示:

调试时看堆栈可以知道这三个线程的创建者和作用,如下所示

创建者:调用pthread_create进行创建线程的函数。

处理函数:调用pthread_create所创建的线程的具体的线程函数。

由名称我们就可以看出,handle_connections_sockets应该是处理连接的线程了,从顺序上看,也应该是这样,只有系统中所有的其他必须的线程创建完毕后,才能创建监听线程(连接线程),即监听线程应该是系统最后创建的。

    找到了我们LOGIN需要的线程了,下次针对这个线程,分析下如何进行登录的,以及登录后为用户分配哪些资源。




赞(0)    操作        顶端 
总帖数
1
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论