android 动态加载classpath,Android的ClassLoader

1. 前言

ClassLoader翻译过来就是类加载器。

阅读过JVM和Android的Dalvik与ART我们知道,Dalvik虚拟机如同其他Java虚拟机一样,在运行程序时首先需要将对应的类加载到内存中。而在Java标准的虚拟机中,类加载可以从class文件中读取,也可以是其他形式的二进制流。因此,我们常常利用这一点,在程序运行时手动加载Class,从而达到代码动态加载执行的目的。

只不过Android平台上虚拟机运行的是Dex字节码,一种对class文件优化的产物,传统Class文件是一个Java源码文件会生成一个.class文件,而Android是把所有Class文件进行合并,优化,然后生成一个最终的class.dex,目的是把不同class文件重复的东西只需保留一份,如果我们的Android应用不进行分dex处理,最后一个应用的apk只会有一个dex文件。

那么在理解Android的ClassLoader之前要先了解Java的ClassLoader。

2. Java的ClassLoader

大家都知道,一个Java程序编译之后,是由若干个.class文件组织而成的一个完整的Java应用程序,当程序在运行时,即会调用该程序的一个入口函数来调用系统的相关功能,而这些功能都被封装在不同的class文件当中,所以经常要从这个class文件中要调用另外一个class文件中的方法,如果另外一个文件不存在的,则会引发系统异常。而程序在启动的时候,并不会一次性加载程序所要用的所有class文件,而是根据程序的需要,通过Java的类加载机制(ClassLoader)来动态加载某个class文件到内存当中的,从而只有class文件被载入到了内存之后,才能被其它class所引用。所以ClassLoader就是用来动态加载class文件到内存当中用的。

2.1 Java语言系统自带有三个类加载器

– Bootstrap ClassLoader:

最顶层的加载类,主要加载核心类库,%JRE_HOME%\lib下的rt.jar、resources.jar、charsets.jar和class等。另外需要注意的是可以通过启动jvm时指定-Xbootclasspath和路径来改变Bootstrap ClassLoader的加载目录。比如java -Xbootclasspath/a:path被指定的文件追加到默认的bootstrap路径中。我们可以打开我的电脑,在上面的目录下查看,看看这些jar包是不是存在于这个目录。

它是由C/C++编写的,它本身是虚拟机的一部分,所以它并不是一个JAVA类,也就是无法在java代码中获取它的引用,JVM启动时通过Bootstrap类加载器加载rt.jar等核心jar包中的class文件,之前的int.class,String.class都是由它加载。

Bootstrap没有父加载器,但是它却可以作用一个ClassLoader的父加载器,比如ExtClassLoader。

– Extention ClassLoader:

扩展的类加载器,加载目录%JRE_HOME%\lib\ext目录下的jar包和class文件。还可以加载-D java.ext.dirs选项指定的目录。

– Appclass Loader也称为SystemAppClass:

加载当前应用的classpath的所有类。

这三个类加载器的加载顺去是:

1. Bootstrap CLassloder

2. Extention ClassLoader

3. AppClassLoader

2.2 双亲委托模型

“双亲委拖”是指子类加载器如果没有加载过该目标类,就先委托父类加载器加载该目标类,只有在父类加载器找不到字节码文件的情况下才从自己的类路径中查找并装载目标类。

先来看一下ClassLoader的体系架构

570999cd33a76171fb4f3936de0daa80.png

加载过程表述:

源ClassLoader先判断该Class是否已加载,如果已加载,则返回Class对象;如果没有则委托给父类加载器。

父类加载器判断是否加载过该Class,如果已加载,则返回Class对象;如果没有则委托给祖父类加载器。

依此类推,直到始祖类加载器(引用类加载器)。

始祖类加载器判断是否加载过该Class,如果已加载,则返回Class对象;如果没有则尝试从其对应的类路径下寻找class字节码文件并载入。如果载入成功,则返回Class对象;如果载入失败,则委托给始祖类加载器的子类加载器。

始祖类加载器的子类加载器尝试从其对应的类路径下寻找class字节码文件并载入。如果载入成功,则返回Class对象;如果载入失败,则委托给始祖类加载器的孙类加载器。

依此类推,直到源ClassLoader。

源ClassLoader尝试从其对应的类路径下寻找class字节码文件并载入。如果载入成功,则返回Class对象;如果载入失败,源ClassLoader不会再委托其子类加载器,而是抛出异常。

总体概括成两句话:

自底向上检查类是否加载

自顶向下尝试加载类

“双亲委派”机制只是Java推荐的机制,并不是强制的机制。

我们可以继承java.lang.ClassLoader类,实现自己的类加载器。如果想保持双亲委派模型,就应该重写findClass(name)方法;如果想破坏双亲委派模型,可以重写loadClass(name)方法。

再来了解一下源码:

public abstract class ClassLoader {

private ClassLoader parent;

...

public Class> loadClass(String className) throws ClassNotFoundException {

return loadClass(className, false);

}

protected Class> loadClass(String className, boolean resolve) throws ClassNotFoundException {

Class> clazz = findLoadedClass(className);

if (clazz == null) {

ClassNotFoundException suppressed = null;

try {

clazz = parent.loadClass(className, false);

} catch (ClassNotFoundException e) {

suppressed = e;

}

if (clazz == null) {

try {

clazz = findClass(className);

} catch (ClassNotFoundException e) {

e.addSuppressed(suppressed);

throw e;

}

}

}

return clazz;

}

protected Class> findClass(String className) throws ClassNotFoundException {

throw new ClassNotFoundException(className);

}

...

}

2.3 Java为什么要要采用双亲委托模型

理解这个问题,我们引入另外一个关于Classloader的概念命名空间

它是指要确定某一个类,需要类的全限定名以及加载此类的ClassLoader来共同确定。

也就是说即使两个类的全限定名是相同的,但是因为不同的ClassLoader加载了此类,那么在JVM中它是不同的类。

明白了命名空间以后,我们再来看看委托模型。

采用了委托模型以后加大了不同的 ClassLoader的交互能力,比如上面说的,我们JDK本生提供的类库,比如hashmap,linkedlist等等,这些类由bootstrp 类加载器加载了以后,无论你程序中有多少个类加载器,那么这些类其实都是可以共享的,这样就避免了不同的类加载器加载了同样名字的不同类以后造成混乱。

再比如假设有一个开发者自己编写了一个名为Java.lang.Object的类,想借此欺骗JVM。现在他要使用自定义ClassLoader来加载自己编写的java.lang.Object类。然而幸运的是,双亲委托模型不会让他成功。因为JVM会优先在Bootstrap ClassLoader的路径下找到java.lang.Object类,并载入它。

2.4 自定义ClassLoader

既然JVM已经提供了默认的类加载器,为什么还要定义自已的类加载器呢?

因为Java中提供的默认ClassLoader,只加载指定目录下的jar和class,如果我们想加载其它位置的类或jar时,比如:我要加载网络上的一个class文件,通过动态加载到内存之后,要调用这个类中的方法实现我的业务逻辑。在这样的情况下,默认的ClassLoader就不能满足我们的需求了,所以需要定义自己的ClassLoader。

定义自已的类加载器分为两步:

1)、继承java.lang.ClassLoader

2)、重写父类的findClass方法

在自定义Classloader的时候,我们需要注意几个重要的方法

1). loadClass方法

protected Class> loadClass(String className, boolean resolve) throws ClassNotFoundException {

Class> clazz = findLoadedClass(className);

if (clazz == null) {

ClassNotFoundException suppressed = null;

try {

clazz = parent.loadClass(className, false);

} catch (ClassNotFoundException e) {

suppressed = e;

}

if (clazz == null) {

try {

clazz = findClass(className);

} catch (ClassNotFoundException e) {

e.addSuppressed(suppressed);

throw e;

}

}

}

return clazz;

}

protected Class> loadClass(String className, boolean resolve) throws ClassNotFoundException {

Class> clazz = findLoadedClass(className);

if (clazz == null) {

ClassNotFoundException suppressed = null;

try {

clazz = parent.loadClass(className, false);

} catch (ClassNotFoundException e) {

suppressed = e;

}

if (clazz == null) {

try {

clazz = findClass(className);

} catch (ClassNotFoundException e) {

e.addSuppressed(suppressed);

throw e;

}

}

}

return clazz;

}

需要注意public Class>loadClass(String name) throws ClassNotFoundException没有被标记为final, 也就意味着我们是可以override这个方法的,也就是说双亲委托机制是可以打破的。

2). findClass 方法

protected Class> findClass(String className) throws ClassNotFoundException {

throw new ClassNotFoundException(className);

}

protected Class> findClass(String className) throws ClassNotFoundException {

throw new ClassNotFoundException(className);

}

我们可以看出此方法默认的实现是直接抛出异常,其实这个方法就是留给我们应用程序来override的。

那么具体的实现就看你的实现逻辑了,你可以从磁盘读取,也可以从网络上获取class文件的字节流,获取class二进制了以后就可以交给defineClass来实现进一步的加载。

我们在写自己的ClassLoader的时候,如果想遵循双亲委托机制,则只需要override findClass.

3).defineClass 方法

protected final Class> defineClass(String name, byte[] b, int off, int len) throws ClassFormatError {

return defineClass(name, b, off, len, null);

}

protected final Class> defineClass(String name, byte[] b, int off, int len) throws ClassFormatError {

return defineClass(name, b, off, len, null);

}

从上面的代码我们看出此方法被定义为了final,这也就意味着此方法不能被Override,其实这也是jvm留给我们的唯一的入口,通过这个唯一的入口,jvm保证了类文件必须符合Java虚拟机规范规定的类的定义。此方法最后会调用native的方法来实现真正的类的加载工作。

3. Android的ClassLoader

Android中类加载器有BootClassLoader,URLClassLoader,PathClassLoader,DexClassLoader,BaseDexClassLoader,等都最终继承自java.lang.ClassLoader。

810c0c760bb5a6eb67dbc2792adcfb17.png

3.1 ClassLoader

java.lang.ClassLoader是所有ClassLoader的最终父类。下面看一下其构造方法:

static private class SystemClassLoader {

public static ClassLoader loader = ClassLoader.createSystemClassLoader();

}

private final ClassLoader parent;

private static ClassLoader createSystemClassLoader() {

String classPath = System.getProperty("java.class.path", ".");

String librarySearchPath = System.getProperty("java.library.path", "");

return new PathClassLoader(classPath, librarySearchPath, BootClassLoader.getInstance());

}

private static Void checkCreateClassLoader() {

return null;

}

private ClassLoader(Void unused, ClassLoader parent) {

this.parent = parent;

}

protected ClassLoader(ClassLoader parent) {

this(checkCreateClassLoader(), parent);

}

protected ClassLoader() {

this(checkCreateClassLoader(), getSystemClassLoader());

}

public final ClassLoader getParent() {

return parent;

}

public static ClassLoader getSystemClassLoader() {

return SystemClassLoader.loader;

}

protected Class> loadClass(String name, boolean resolve)

throws ClassNotFoundException

{

// First, check if the class has already been loaded

Class> c = findLoadedClass(name);

if (c == null) {

try {

if (parent != null) {

c = parent.loadClass(name, false);

} else {

c = findBootstrapClassOrNull(name);

}

} catch (ClassNotFoundException e) {

// ClassNotFoundException thrown if class not found

// from the non-null parent class loader

}

if (c == null) {

// If still not found, then invoke findClass in order

// to find the class.

c = findClass(name);

}

}

return c;

}

static private class SystemClassLoader {

public static ClassLoader loader = ClassLoader.createSystemClassLoader();

}

private final ClassLoader parent;

private static ClassLoader createSystemClassLoader() {

String classPath = System.getProperty("java.class.path", ".");

String librarySearchPath = System.getProperty("java.library.path", "");

return new PathClassLoader(classPath, librarySearchPath, BootClassLoader.getInstance());

}

private static Void checkCreateClassLoader() {

return null;

}

private ClassLoader(Void unused, ClassLoader parent) {

this.parent = parent;

}

protected ClassLoader(ClassLoader parent) {

this(checkCreateClassLoader(), parent);

}

protected ClassLoader() {

this(checkCreateClassLoader(), getSystemClassLoader());

}

public final ClassLoader getParent() {

return parent;

}

public static ClassLoader getSystemClassLoader() {

return SystemClassLoader.loader;

}

protected Class> loadClass(String name, boolean resolve)

throws ClassNotFoundException

{

// First, check if the class has already been loaded

Class> c = findLoadedClass(name);

if (c == null) {

try {

if (parent != null) {

c = parent.loadClass(name, false);

} else {

c = findBootstrapClassOrNull(name);

}

} catch (ClassNotFoundException e) {

// ClassNotFoundException thrown if class not found

// from the non-null parent class loader

}

if (c == null) {

// If still not found, then invoke findClass in order

// to find the class.

c = findClass(name);

}

}

return c;

}

1).可以看出ClassLoader主要就是传入一个父构造器,而且一般父构造器不能为空,不像java虚拟机里父构造器为空时默认的父构造器为Bootstrap ClassLoader。Android中默认无父构造器传入的情况下,默认父构造器为一个PathClassLoader且此PathClassLoader父构造器为BootClassLoader。

2).ClassLoader中重要的方法是loadClass(String name),其他的子类都继承了此方法且没有进行复写。它实现了双亲委托模型, 这种模型并不是一个强制性的约束模型,比如你可以继承ClassLoader复写loadCalss方法来破坏这种模型,只不过双亲委派模是一种被推荐的实现类加载器的方式,而且jdk1.2以后已经不提倡用户在覆盖loadClass方法,而应该把自己的类加载逻辑写到findClass中

3.2 BootClassLoader

和java虚拟机中不同的是BootClassLoader是ClassLoader内部类,由java代码实现而不是c++实现,是Android平台上所有ClassLoader的最终parent,这个内部类是包内可见,所以我们没法使用。

3.3 URLClassLoader

只能用于加载jar文件,但是由于 dalvik 不能直接识别jar,所以在 Android 中无法使用这个加载器。

3.4 BaseDexClassLoader

PathClassLoader和DexClassLoader都继承自BaseDexClassLoader,其中的主要逻辑都是在BaseDexClassLoader完成的。这些源码在java/dalvik/system中。

先看下BaseDexClassLoader的构造方法:

81d91faecba93827bdaa48504e8245aa.png

BaseDexClassLoader的构造函数包含四个参数,分别为:

dexPath,指目标类所在的APK或jar文件的路径,类装载器将从该路径中寻找指定的目标类,该类必须是APK或jar的全路径.如果要包含多个路径,路径之间必须使用特定的分割符分隔,特定的分割符可以使用System.getProperty(“path.separtor”)获得。上面”支持加载APK、DEX和JAR,也可以从SD卡进行加载“指的就是这个路径,最终做的是将dexPath路径上的文件ODEX优化到内部位置optimizedDirectory,然后,再进行加载的。

File optimizedDirectory,由于dex文件被包含在APK或者Jar文件中,因此在装载目标类之前需要先从APK或Jar文件中解压出dex文件,该参数就是制定解压出的dex 文件存放的路径。这也是对apk中dex根据平台进行ODEX优化的过程。其实APK是一个程序压缩包,里面包含dex文件,ODEX优化就是把包里面的执行程序提取出来,就变成ODEX文件,因为你提取出来了,系统第一次启动的时候就不用去解压程序压缩包的程序,少了一个解压的过程。这样的话系统启动就加快了。为什么说是第一次呢?是因为DEX版本的也只有第一次会解压执行程序到 /data/dalvik-cache(针对PathClassLoader)或者optimizedDirectory(针对DexClassLoader)目录,之后也是直接读取目录下的的dex文件,所以第二次启动就和正常的差不多了。当然这只是简单的理解,实际生成的ODEX还有一定的优化作用。ClassLoader只能加载内部存储路径中的dex文件,所以这个路径必须为内部路径。

libPath,指目标类中所使用的C/C++库存放的路径

classload,是指该装载器的父装载器,一般为当前执行类的装载器,例如在Android中以context.getClassLoader()作为父装载器。

3.5 DexClassLoader

public class DexClassLoader extends BaseDexClassLoader {

public DexClassLoader(String dexPath, String optimizedDirectory, String librarySearchPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

}

public class DexClassLoader extends BaseDexClassLoader {

public DexClassLoader(String dexPath, String optimizedDirectory, String librarySearchPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

}

ROM里的实现代码:

5f53d5f79a69fb9f8d3accd812501922.png

DexClassLoader支持加载APK、DEX和JAR,也可以从SD卡进行加载。

上面说dalvik不能直接识别jar,DexClassLoader却可以加载jar文件,这难道不矛盾吗?

其实在BaseDexClassLoader里对”.jar”,”.zip”,”.apk”,”.dex”后缀的文件最后都会生成一个对应的dex文件,所以最终处理的还是dex文件,而URLClassLoader并没有做类似的处理。

一般我们都是用这个DexClassLoader来作为动态加载的加载器。

3.6 PathClassLoader

public class PathClassLoader extends BaseDexClassLoader {

public PathClassLoader(String dexPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

public PathClassLoader(String dexPath, String librarySearchPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

}

public class PathClassLoader extends BaseDexClassLoader {

public PathClassLoader(String dexPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

public PathClassLoader(String dexPath, String librarySearchPath, ClassLoader parent) {

super((String)null, (File)null, (String)null, (ClassLoader)null);

throw new RuntimeException("Stub!");

}

}

ROM里的实现代码:

09cb831aed0d51cdb27e3dfebf753058.png

很简单明了,可以看出PathClassLoader没有将optimizedDirectory置为Null,也就是没设置优化后的存放路径。其实optimizedDirectory为null时的默认路径就是/data/dalvik-cache 目录。

PathClassLoader是用来加载Android系统类和应用的类,并且不建议开发者使用。

3.6 BaseDexClassLoader加载class的过程

#BaseDexClassLoader

@Override

protected Class> findClass(String name) throws ClassNotFoundException {

List suppressedExceptions = new ArrayList();

Class c = pathList.findClass(name, suppressedExceptions);

if (c == null) {

ClassNotFoundException cnfe = new ClassNotFoundException(

"Didn't find class \"" + name + "\" on path: " + pathList);

for (Throwable t : suppressedExceptions) {

cnfe.addSuppressed(t);

}

throw cnfe;

}

return c;

}

#DexPathList

public Class> findClass(String name, List suppressed) {

for (Element element : dexElements) {

Class> clazz = element.findClass(name, definingContext, suppressed);

if (clazz != null) {

return clazz;

}

}

if (dexElementsSuppressedExceptions != null) {

suppressed.addAll(Arrays.asList(dexElementsSuppressedExceptions));

}

return null;

}

#DexPathList#Element

public Class> findClass(String name, ClassLoader definingContext,List suppressed) {

return dexFile != null ? dexFile.loadClassBinaryName(name, definingContext, suppressed) : null;

}

#DexFile

public Class loadClassBinaryName(String name, ClassLoader loader, List suppressed) {

return defineClass(name, loader, mCookie, this, suppressed);

}

private static Class defineClass(String name, ClassLoader loader, Object cookie,DexFile dexFile, List suppressed) {

Class result = null;

try {

result = defineClassNative(name, loader, cookie, dexFile);

} catch (NoClassDefFoundError e) {

if (suppressed != null) {

suppressed.add(e);

}

} catch (ClassNotFoundException e) {

if (suppressed != null) {

suppressed.add(e);

}

}

return result;

}

private static native Class defineClassNative(String name, ClassLoader loader, Object cookie, DexFile dexFile)

throws ClassNotFoundException, NoClassDefFoundError;

#BaseDexClassLoader

@Override

protected Class> findClass(String name) throws ClassNotFoundException {

List suppressedExceptions = new ArrayList();

Class c = pathList.findClass(name, suppressedExceptions);

if (c == null) {

ClassNotFoundException cnfe = new ClassNotFoundException(

"Didn't find class \"" + name + "\" on path: " + pathList);

for (Throwable t : suppressedExceptions) {

cnfe.addSuppressed(t);

}

throw cnfe;

}

return c;

}

#DexPathList

public Class> findClass(String name, List suppressed) {

for (Element element : dexElements) {

Class> clazz = element.findClass(name, definingContext, suppressed);

if (clazz != null) {

return clazz;

}

}

if (dexElementsSuppressedExceptions != null) {

suppressed.addAll(Arrays.asList(dexElementsSuppressedExceptions));

}

return null;

}

#DexPathList#Element

public Class> findClass(String name, ClassLoader definingContext,List suppressed) {

return dexFile != null ? dexFile.loadClassBinaryName(name, definingContext, suppressed) : null;

}

#DexFile

public Class loadClassBinaryName(String name, ClassLoader loader, List suppressed) {

return defineClass(name, loader, mCookie, this, suppressed);

}

private static Class defineClass(String name, ClassLoader loader, Object cookie,DexFile dexFile, List suppressed) {

Class result = null;

try {

result = defineClassNative(name, loader, cookie, dexFile);

} catch (NoClassDefFoundError e) {

if (suppressed != null) {

suppressed.add(e);

}

} catch (ClassNotFoundException e) {

if (suppressed != null) {

suppressed.add(e);

}

}

return result;

}

private static native Class defineClassNative(String name, ClassLoader loader, Object cookie, DexFile dexFile)

throws ClassNotFoundException, NoClassDefFoundError;

可以看出,BaseDexClassLoader中有个pathList对象,pathList中包含一个DexFile的数组dexElements。

由上面分析知道,dexPath传入的原始dex(.apk,.zip,.jar等)文件在optimizedDirectory文件夹中生成相应的优化后的odex文件,dexElements数组就是这些odex文件的集合,如果不分包一般这个数组只有一个Element元素,也就只有一个DexFile文件。

而对于类加载呢,就是遍历这个集合,通过DexFile去寻找。最终调用native方法的defineClass。

4.ART虚拟机的兼容性问题

Android Runtime(缩写为ART),在Android 5.0及后续Android版本中作为正式的运行时库取代了以往的Dalvik虚拟机。ART能够把应用程序的字节码转换为机器码,是Android所使用的一种新的虚拟机。它与Dalvik的主要不同在于:Dalvik采用的是JIT技术,字节码都需要通过即时编译器(just in time ,JIT)转换为机器码,这会拖慢应用的运行效率,而ART采用Ahead-of-time(AOT)技术,应用在第一次安装的时候,字节码就会预先编译成机器码,这个过程叫做预编译。ART同时也改善了性能、垃圾回收(Garbage Collection)、应用程序除错以及性能分析。但是请注意,运行时内存占用空间较少同样意味着编译二进制需要更高的存储。

ART模式相比原来的Dalvik,会在安装APK的时候,使用Android系统自带的dex2oat工具把APK里面的.dex文件转化成OAT文件,OAT文件是一种Android私有ELF文件格式,它不仅包含有从DEX文件翻译而来的本地机器指令,还包含有原来的DEX文件内容。这使得我们无需重新编译原有的APK就可以让它正常地在ART里面运行,也就是我们不需要改变原来的APK编程接口。ART模式的系统里,同样存在DexClassLoader类,包名路径也没变,只不过它的具体实现与原来的有所不同,但是接口是一致的。实际上,ART运行时就是和Dalvik虚拟机一样,实现了一套完全兼容Java虚拟机的接口。