菜鸟笔记
提升您的技术认知

拼多多面试官没想到threadlocal我用得这么溜,人直接傻掉-ag真人游戏

开场白

张三最近天气很热心情不是很好,所以他决定出去面试跟面试官聊聊天排解一下,结果刚投递简历就有人约了面试。

我丢,什么情况怎么刚投递出去就有人约我面试了?诶。。。真烦啊,哥已经不在江湖这么久了,江湖还是有哥的传说,我还是这么抢手的么?太烦恼了,帅无罪。

暗自窃喜的张三来到了某东现场面试的办公室,我丢,这面试官?不是吧,这满是划痕的mac,这发量,难道就是传说中的架构师?

张三的心态一下子就崩了,出来第一场面试就遇到一个顶级面试官,这谁顶得住啊。

你好,我是你的面试官tony,看我的发型应该你能猜到我的身份了,我也话不说,我们直接开始好不好?看你简历写了多线程,来你跟我聊一下threadlocal吧,我很久没写代码不太熟悉了,你帮我回忆一下。

我丢?这tm是人话?这是什么逻辑啊,说是问多线程然后一上来就来个这么冷门的threadlocal?心态崩了呀,再说你tm自己忘了不知道下去看看书么,来我这里找答案是什么鬼啊…

尽管十分不情愿,但是张三还是高速运转他的小脑袋,回忆起了threadlocal的种种细节…

面试官说实话我在实际开发过程中用到threadlocal的地方不是很多,我在写这个文章的时候还刻意去把我电脑上几十个项目打开之后去全局搜索threadlocal发现除了系统源码的使用,很少在项目中用到,不过也还是有的。

threadlocal的作用主要是做数据隔离,填充的数据只属于当前线程,变量的数据对别的线程而言是相对隔离的,在多线程环境下,如何防止自己的变量被其它线程篡改。

你能跟我说说它隔离有什么用,会用在什么场景么?

这,我都说了我很少用了,还问我,难受了呀,哦哦哦,有了想起来了,事务隔离级别。

面试官你好,其实我第一时间想到的就是spring实现事务隔离级别的源码,这还是当时我大学被女朋友甩了,一个人在图书馆哭泣的时候无意间发现的。

spring采用threadlocal的方式,来保证单个线程中的数据库操作使用的是同一个数据库连接,同时,采用这种方式可以使业务层使用事务时不需要感知并管理connection对象,通过传播级别,巧妙地管理多个事务配置之间的切换,挂起和恢复。

spring框架里面就是用的threadlocal来实现这种隔离,主要是在transactionsynchronizationmanager这个类里面,代码如下所示:

private static final log logger = logfactory.getlog(transactionsynchronizationmanager.class);
	private static final threadlocal> resources =
			new namedthreadlocal<>("transactional resources");
	private static final threadlocal> synchronizations =
			new namedthreadlocal<>("transaction synchronizations");
	private static final threadlocal currenttransactionname =
			new namedthreadlocal<>("current transaction name");
  ……

spring的事务主要是threadlocal和aop去做实现的,我这里提一下,大家知道每个线程自己的链接是靠threadlocal保存的就好了,继续的细节我会在spring章节细说的,暖么?

除了源码里面使用到threadlocal的场景,你自己有使用他的场景么?一般你会怎么用呢?

来了来了,加分项来了,这个我还真遇到过,装b的机会终于来了。

有的有的面试官,这个我会!!!

之前我们上线后发现部分用户的日期居然不对了,排查下来是simpledataformat的锅,当时我们使用simpledataformat的parse()方法,内部有一个calendar对象,调用simpledataformat的parse()方法会先调用calendar.clear(),然后调用calendar.add(),如果一个线程先调用了add()然后另一个线程又调用了clear(),这时候parse()方法解析的时间就不对了。

其实要解决这个问题很简单,让每个线程都new 一个自己的 simpledataformat就好了,但是1000个线程难道new1000个simpledataformat

所以当时我们使用了线程池加上threadlocal包装simpledataformat,再调用initialvalue让每个线程有一个simpledataformat的副本,从而解决了线程安全的问题,也提高了性能。

那……

还有还有,我还有,您别着急问下一个,让我再加点分,拖延一下面试时间。

我在项目中存在一个线程经常遇到横跨若干方法调用,需要传递的对象,也就是上下文(context),它是一种状态,经常就是是用户身份、任务信息等,就会存在过渡传参的问题。

使用到类似责任链模式,给每个方法增加一个context参数非常麻烦,而且有些时候,如果调用链有无法修改源码的第三方库,对象参数就传不进去了,所以我使用到了threadlocal去做了一下改造,这样只需要在调用前在threadlocal中设置参数,其他地方get一下就好了。

before
  
void work(user user) {
  
    getinfo(user);
    checkinfo(user);
    setsomething(user);
    log(user);
}
then
  
void work(user user) {
  
try{
  
	  threadlocaluser.set(user);
	  // 他们内部  user u = threadlocaluser.get(); 就好了
    getinfo();
    checkinfo();
    setsomething();
    log();
    } finally {
  
     threadlocaluser.remove();
    }
}

我看了一下很多场景的cookie,session等数据隔离都是通过threadlocal去做实现的。

对了我面试官允许我再秀一下知识广度,在android中,looper类就是利用了threadlocal的特性,保证每个线程只存在一个looper对象。

static final threadlocal sthreadlocal = new threadlocal();
private static void prepare(boolean quitallowed) {
  
    if (sthreadlocal.get() != null) {
  
        throw new runtimeexception("only one looper may be created per thread");
    }
    sthreadlocal.set(new looper(quitallowed));
}

面试官:我丢,这货怎么知道这么多场景?还把android都扯了出来,不是吧阿sir,下面我要考考他原理了。

嗯嗯,你回答得很好,那你能跟我说说他底层实现的原理么?

好的面试官,我先说一下他的使用:

threadlocal localname = new threadlocal();
localname.set("张三");
string name = localname.get();
localname.remove();

其实使用真的很简单,线程进来之后初始化一个可以泛型的threadlocal对象,之后这个线程只要在remove之前去get,都能拿到之前set的值,注意这里我说的是remove之前。

他是能做到线程间数据隔离的,所以别的线程使用get()方法是没办法拿到其他线程的值的,但是有办法可以做到,我后面会说。

我们先看看他set的源码:

public void set(t value) {
  
    thread t = thread.currentthread();// 获取当前线程
    threadlocalmap map = getmap(t);// 获取threadlocalmap对象
    if (map != null) // 校验对象是否为空
        map.set(this, value); // 不为空set
    else
        createmap(t, value); // 为空创建一个map对象
}

大家可以发现set的源码很简单,主要就是threadlocalmap我们需要关注一下,而threadlocalmap呢是当前线程thread一个叫threadlocals的变量中获取的。

threadlocalmap getmap(thread t) {
  
        return t.threadlocals;
    }
public class thread implements runnable {
  
      ……
    /* threadlocal values pertaining to this thread. this map is maintained
     * by the threadlocal class. */
    threadlocal.threadlocalmap threadlocals = null;
    /*
     * inheritablethreadlocal values pertaining to this thread. this map is
     * maintained by the inheritablethreadlocal class.
     */
    threadlocal.threadlocalmap inheritablethreadlocals = null;
  
     ……

这里我们基本上可以找到threadlocal数据隔离的真相了,每个线程thread都维护了自己的threadlocals变量,所以在每个线程创建threadlocal的时候,实际上数据是存在自己线程thread的threadlocals变量里面的,别人没办法拿到,从而实现了隔离。

threadlocalmap底层结构是怎么样子的呢?

面试官这个问题问得好啊,内心暗骂,让我歇一会不行么?

张三笑着回答道,既然有个map那他的数据结构其实是很像hashmap的,但是看源码可以发现,它并未实现map接口,而且他的entry是继承weakreference(弱引用)的,也没有看到hashmap中的next,所以不存在链表了。

static class threadlocalmap {
  
        static class entry extends weakreference> {
  
            /** the value associated with this threadlocal. */
            object value;
            entry(threadlocal k, object v) {
  
                super(k);
                value = v;
            }
        }
        ……
    }    

结构大概长这样:

稍等,我有两个疑问你可以解答一下么?

好呀,面试官你说。

为什么需要数组呢?没有了链表怎么解决hash冲突呢?

用数组是因为,我们开发过程中可以一个线程可以有多个treadlocal来存放不同类型的对象的,但是他们都将放到你当前线程的threadlocalmap里,所以肯定要数组来存。

至于hash冲突,我们先看一下源码:

private void set(threadlocal key, object value) {
  
           entry[] tab = table;
            int len = tab.length;
            int i = key.threadlocalhashcode & (len-1);
            for (entry e = tab[i];
                 e != null;
                 e = tab[i = nextindex(i, len)]) {
  
                threadlocal k = e.get();
                if (k == key) {
  
                    e.value = value;
                    return;
                }
                if (k == null) {
  
                    replacestaleentry(key, value, i);
                    return;
                }
            }
            tab[i] = new entry(key, value);
            int sz =   size;
            if (!cleansomeslots(i, sz) && sz >= threshold)
                rehash();
        }

我从源码里面看到threadlocalmap在存储的时候会给每一个threadlocal对象一个threadlocalhashcode,在插入过程中,根据threadlocal对象的hash值,定位到table中的位置i,int i = key.threadlocalhashcode & (len-1)

然后会判断一下:如果当前位置是空的,就初始化一个entry对象放在位置i上;

if (k == null) {
  
    replacestaleentry(key, value, i);
    return;
}

如果位置i不为空,如果这个entry对象的key正好是即将设置的key,那么就刷新entry中的value;

if (k == key) {
  
    e.value = value;
    return;
}

如果位置i的不为空,而且key不等于entry,那就找下一个空位置,直到为空为止。

这样的话,在get的时候,也会根据threadlocal对象的hash值,定位到table中的位置,然后判断该位置entry对象中的key是否和get的key一致,如果不一致,就判断下一个位置,set和get如果冲突严重的话,效率还是很低的。

以下是get的源码,是不是就感觉很好懂了:

 private entry getentry(threadlocal key) {
  
            int i = key.threadlocalhashcode & (table.length - 1);
            entry e = table[i];
            if (e != null && e.get() == key)
                return e;
            else
                return getentryaftermiss(key, i, e);
        }
 private entry getentryaftermiss(threadlocal key, int i, entry e) {
  
            entry[] tab = table;
            int len = tab.length;
// get的时候一样是根据threadlocal获取到table的i值,然后查找数据拿到后会对比key是否相等  if (e != null && e.get() == key)。
            while (e != null) {
  
                threadlocal k = e.get();
              // 相等就直接返回,不相等就继续查找,找到相等位置。
                if (k == key)
                    return e;
                if (k == null)
                    expungestaleentry(i);
                else
                    i = nextindex(i, len);
                e = tab[i];
            }
            return null;
        }

能跟我说一下对象存放在哪里么?

在java中,栈内存归属于单个线程,每个线程都会有一个栈内存,其存储的变量只能在其所属线程中可见,即栈内存可以理解成线程的私有内存,而堆内存中的对象对所有线程可见,堆内存中的对象可以被所有线程访问。

那么是不是说threadlocal的实例以及其值存放在栈上呢?

其实不是的,因为threadlocal实例实际上也是被其创建的类持有(更顶端应该是被线程持有),而threadlocal的值其实也是被线程实例持有,它们都是位于堆上,只是通过一些技巧将可见性修改成了线程可见。

如果我想共享线程的threadlocal数据怎么办?

使用inheritablethreadlocal可以实现多个线程访问threadlocal的值,我们在主线程中创建一个inheritablethreadlocal的实例,然后在子线程中得到这个inheritablethreadlocal实例设置的值。

private void test() {
      
final threadlocal threadlocal = new inheritablethreadlocal();       
threadlocal.set("帅得一匹");    
thread t = new thread() {
          
    @override        
    public void run() {
              
      super.run();            
      log.i( "张三帅么 ="   threadlocal.get());        
    }    
  };          
  t.start(); 
} 

在子线程中我是能够正常输出那一行日志的,这也是我之前面试视频提到过的父子线程数据传递的问题。

怎么传递的呀?

传递的逻辑很简单,我在开头thread代码提到threadlocals的时候,你们再往下看看我刻意放了另外一个变量:

thread源码中,我们看看thread.init初始化创建的时候做了什么:

public class thread implements runnable {
  
  ……
   if (inheritthreadlocals && parent.inheritablethreadlocals != null)
      this.inheritablethreadlocals=threadlocal.createinheritedmap(parent.inheritablethreadlocals);
  ……
}

我就截取了部分代码,如果线程的inheritthreadlocals变量不为空,比如我们上面的例子,而且父线程的inheritthreadlocals也存在,那么我就把父线程的inheritthreadlocals给当前线程的inheritthreadlocals

是不是很有意思?

小伙子你懂的确实很多,那你算是一个深度的threadlocal用户了,你发现threadlocal的问题了么?

你是说内存泄露么?

我丢,这小子为啥知道我要问什么?嗯嗯对的,你说一下。

这个问题确实会存在的,我跟大家说一下为什么,还记得我上面的代码么?

threadlocal在保存的时候会把自己当做key存在threadlocalmap中,正常情况应该是key和value都应该被外界强引用才对,但是现在key被设计成weakreference弱引用了。

我先给大家介绍一下弱引用:

只具有弱引用的对象拥有更短暂的生命周期,在垃圾回收器线程扫描它所管辖的内存区域的过程中,一旦发现了只具有弱引用的对象,不管当前内存空间足够与否,都会回收它的内存。

不过,由于垃圾回收器是一个优先级很低的线程,因此不一定会很快发现那些只具有弱引用的对象。

这就导致了一个问题,threadlocal在没有外部强引用时,发生gc时会被回收,如果创建threadlocal的线程一直持续运行,那么这个entry对象中的value就有可能一直得不到回收,发生内存泄露。

就比如线程池里面的线程,线程都是复用的,那么之前的线程实例处理完之后,出于复用的目的线程依然存活,所以,threadlocal设定的value值被持有,导致内存泄露。

按照道理一个线程使用完,threadlocalmap是应该要被清空的,但是现在线程被复用了。

那怎么解决?

在代码的最后使用remove就好了,我们只要记得在使用的最后用remove把值清空就好了。

threadlocal localname = new threadlocal();
try {
  
    localname.set("张三");
    ……
} finally {
  
    localname.remove();
}

remove的源码很简单,找到对应的值全部置空,这样在垃圾回收器回收的时候,会自动把他们回收掉。

那为什么threadlocalmap的key要设计成弱引用?

key不设置成弱引用的话就会造成和entry中value一样内存泄漏的场景。

补充一点:threadlocal的不足,我觉得可以通过看看netty的fastthreadlocal来弥补,大家有兴趣可以康康。

好了,你不仅把我问的都回答了,我不知道的你甚至都说了,threadlocal你过关了,不过juc的面试才刚刚开始,希望你以后越战越勇,最后拿个好offer哟。

什么鬼,突然这么煽情,不是很为难我的么?难道是为了锻炼我?难为大师这样为我着想,我还一直心里暗骂他,不说了回去好好学了。

总结

其实threadlocal用法很简单,里面的方法就那几个,算上注释源码都没多少行,我用了十多分钟就过了一遍了,但是在我深挖每一个方法背后逻辑的时候,也让我不得不感慨josh bloch 和 doug lea的厉害之处。

在细节设计的处理其实往往就是我们和大神的区别,我认为很多不合理的点,在google和自己不断深入了解之后才发现这才是合理,真的不服不行。

threadlocal是多线程里面比较冷门的一个类,使用频率比不上别的方法和类,但是通过我这篇文章,不知道你是否有新的认知呢?

网站地图