原型模式【不常用】

今天的讲解跟具体某一语言的语法机制无关,而是通过一个 clone 散列表的例子带你搞清楚:原型模式的应用场景,以及它的两种实现方式:深拷贝和浅拷贝。虽然原型模式的原理和代码实现非常简单,但今天举的例子还是稍微有点复杂的

原型模式的原理与应用

如果对象的创建成本比较大,而同一个类的不同对象之间差别不大(大部分字段都相同),在这种情况下,我们可以利用对已有对象(原型)进行复制(或者叫拷贝)的方式来创建新对象,以达到节省创建时间的目的。这种基于原型来创建对象的方式就叫作原型设计模式(Prototype Design Pattern),简称原型模式。

那何为“对象的创建成本比较大”?

  1. 实际上,创建对象包含的申请内存、给成员变量赋值这一过程,本身并不会花费太多时间,或者说对于大部分业务系统来说,这点时间完全是可以忽略的。应用一个复杂的模式,只得到一点点的性能提升,这就是所谓的过度设计,得不偿失。
  2. 但是,如果对象中的数据需要经过复杂的计算才能得到(比如排序、计算哈希值),或者需要从 RPC、网络、数据库、文件系统等非常慢速的 IO 中读取,这种情况下,我们就可以利用原型模式,从其他已有对象中直接拷贝得到,而不用每次在创建新对象的时候,都重复执行这些耗时的操作。

这么说还是比较理论,接下来,我们通过一个例子来解释一下刚刚这段话。

  1. 假设数据库中存储了大约 10 万条“搜索关键词”信息,每条信息包含关键词、关键词被搜索的次数、信息最近被更新的时间等。系统 A 在启动的时候会加载这份数据到内存中,用于处理某些其他的业务需求。为了方便快速地查找某个关键词对应的信息,我们给关键词建立一个散列表索引。
  2. 如果你熟悉的是 Java 语言,可以直接使用语言中提供的 HashMap 容器来实现。其中,HashMap 的 key 为搜索关键词,value 为关键词详细信息(比如搜索次数)。我们只需要将数据从数据库中读取出来,放入 HashMap 就可以了。
  3. 不过,我们还有另外一个系统 B,专门用来分析搜索日志,定期(比如间隔 10 分钟)批量地更新数据库中的数据,并且标记为新的数据版本。比如,在下面的示例图中,我们对 v2 版本的数据进行更新,得到 v3 版本的数据。这里我们假设只有更新和新添关键词,没有删除关键词的行为。

创建型-原型模式 - 图1

  1. 为了保证系统 A 中数据的实时性(不一定非常实时,但数据也不能太旧),系统 A 需要定期根据数据库中的数据,更新内存中的索引和数据。
  2. 我们该如何实现这个需求呢?实际上,也不难。我们只需要在系统 A 中,记录当前数据的版本 Va 对应的更新时间 Ta,从数据库中捞出更新时间大于 Ta 的所有搜索关键词,也就是找出 Va 版本与最新版本数据的“差集”,然后针对差集中的每个关键词进行处理。如果它已经在散列表中存在了,我们就更新相应的搜索次数、更新时间等信息;如果它在散列表中不存在,我们就将它插入到散列表中。
  3. 按照这个设计思路,我给出的示例代码如下所示:
  1. public class Demo {
  2. private ConcurrentHashMap<String, SearchWord> currentKeywords = new ConcurrentHashMap<>();
  3. private long lastUpdateTime = -1;
  4. public void refresh() {
  5. // 从数据库中取出更新时间>lastUpdateTime的数据,放入到currentKeywords中
  6. List<SearchWord> toBeUpdatedSearchWords = getSearchWords(lastUpdateTime);
  7. long maxNewUpdatedTime = lastUpdateTime;
  8. for (SearchWord searchWord : toBeUpdatedSearchWords) {
  9. if (searchWord.getLastUpdateTime() > maxNewUpdatedTime) {
  10. maxNewUpdatedTime = searchWord.getLastUpdateTime();
  11. }
  12. if (currentKeywords.containsKey(searchWord.getKeyword())) {
  13. currentKeywords.replace(searchWord.getKeyword(), searchWord);
  14. } else {
  15. currentKeywords.put(searchWord.getKeyword(), searchWord);
  16. }
  17. }
  18. lastUpdateTime = maxNewUpdatedTime;
  19. }
  20. private List<SearchWord> getSearchWords(long lastUpdateTime) {
  21. // TODO: 从数据库中取出更新时间>lastUpdateTime的数据
  22. return null;
  23. }
  24. }

不过,现在,我们有一个特殊的要求:任何时刻,系统 A 中的所有数据都必须是同一个版本的,要么都是版本 a,要么都是版本 b,不能有的是版本 a,有的是版本 b。那刚刚的更新方式就不能满足这个要求了(因为数据很多,一个一个的for循环肯定会出现不同数据版本的问题)。除此之外,我们还要求:在更新内存数据的时候,系统 A 不能处于不可用状态,也就是不能停机更新数据。

  1. 那我们该如何实现现在这个需求呢?
  2. 实际上,也不难。我们把正在使用的数据的版本定义为“服务版本”,当我们要更新内存中的数据的时候,我们并不是直接在服务版本(假设是版本 a 数据)上更新,而是重新创建另一个版本数据(假设是版本 b 数据),等新的版本数据建好之后,再一次性地将服务版本从版本 a 切换到版本 b。这样既保证了数据一直可用,又避免了中间状态的存在。
  3. 按照这个设计思路,我给出的示例代码如下所示:
  1. public class Demo {
  2. private HashMap<String, SearchWord> currentKeywords=new HashMap<>();
  3. public void refresh() {
  4. HashMap<String, SearchWord> newKeywords = new LinkedHashMap<>();
  5. // 从数据库中取出所有的数据,放入到newKeywords中
  6. List<SearchWord> toBeUpdatedSearchWords = getSearchWords();
  7. for (SearchWord searchWord : toBeUpdatedSearchWords) {
  8. newKeywords.put(searchWord.getKeyword(), searchWord);
  9. }
  10. currentKeywords = newKeywords;
  11. }
  12. private List<SearchWord> getSearchWords() {
  13. // TODO: 从数据库中取出所有的数据
  14. return null;
  15. }
  16. }
  1. 不过,在上面的代码实现中,newKeywords 构建的成本比较高。我们需要将这 10 万条数据从数据库中读出,然后计算哈希值,构建 newKeywords。这个过程显然是比较耗时。为了提高效率,原型模式就派上用场了。
  2. 我们拷贝 currentKeywords 数据到 newKeywords 中,然后从数据库中只捞出新增或者有更新的关键词,更新到 newKeywords 中。而相对于 10 万条数据来说,每次新增或者更新的关键词个数是比较少的,所以,这种策略大大提高了数据更新的效率。
  3. 按照这个设计思路,我给出的示例代码如下所示:
  1. public class Demo {
  2. private HashMap<String, SearchWord> currentKeywords=new HashMap<>();
  3. private long lastUpdateTime = -1;
  4. public void refresh() {
  5. // 原型模式就这么简单,拷贝已有对象的数据,更新少量差值
  6. HashMap<String, SearchWord> newKeywords = (HashMap<String, SearchWord>) currentKeywords.clone();
  7. // 从数据库中取出更新时间>lastUpdateTime的数据,放入到newKeywords中
  8. List<SearchWord> toBeUpdatedSearchWords = getSearchWords(lastUpdateTime);
  9. long maxNewUpdatedTime = lastUpdateTime;
  10. for (SearchWord searchWord : toBeUpdatedSearchWords) {
  11. if (searchWord.getLastUpdateTime() > maxNewUpdatedTime) {
  12. maxNewUpdatedTime = searchWord.getLastUpdateTime();
  13. }
  14. if (newKeywords.containsKey(searchWord.getKeyword())) {
  15. SearchWord oldSearchWord = newKeywords.get(searchWord.getKeyword());
  16. oldSearchWord.setCount(searchWord.getCount());
  17. oldSearchWord.setLastUpdateTime(searchWord.getLastUpdateTime());
  18. } else {
  19. newKeywords.put(searchWord.getKeyword(), searchWord);
  20. }
  21. }
  22. lastUpdateTime = maxNewUpdatedTime;
  23. currentKeywords = newKeywords;
  24. }
  25. private List<SearchWord> getSearchWords(long lastUpdateTime) {
  26. // TODO: 从数据库中取出更新时间>lastUpdateTime的数据
  27. return null;
  28. }
  29. }
  1. 这里我们利用了 Java 中的 clone() 语法来复制一个对象。如果你熟悉的语言没有这个语法,那把数据从 currentKeywords 中一个个取出来,然后再重新计算哈希值,放入到 newKeywords 中也是可以接受的。毕竟,最耗时的还是从数据库中取数据的操作。相对于数据库的 IO 操作来说,内存操作和 CPU 计算的耗时都是可以忽略的。
  2. 不过,不知道你有没有发现,实际上,刚刚的代码实现是有问题的。要弄明白到底有什么问题,我们需要先了解另外两个概念:深拷贝(Deep Copy)和浅拷贝(Shallow Copy)。

原型模式的实现方式:深拷贝和浅拷贝

1、关于深拷贝浅拷贝,我觉得这篇文章讲的不错:https://blog.csdn.net/baiye_xing/article/details/71788741

我自己的总结:

浅拷贝:对一个对象进行拷贝时,这个对象对应的类里的成员变量。

  • 对于数据类型是基本数据类型的成员变量,浅拷贝会直接进行值拷贝,也就是将该属性值复制一份给新的对象。因为是两份不同的数据,所以对其中一个对象的该成员变量值进行修改,不会影响另一个对象拷贝得到的数据
  • 对于数据类型是引用数据类型的成员变量(也就是子对象,或者数组啥的),也就是只是将该成员变量的引用值(引用拷贝【并发引用传递,Java本质还是值传递】)复制一份给新的对象。因为实际上两个对象的该成员变量都指向同一个实例。在这种情况下,在一个对象中修改该成员变量会影响到另一个对象的该成员变量值。
  1. 深拷贝:对基本数据类型进行值传递,对引用数据类型,创建一个新的对象,并复制其内容,此为深拷贝。
  2. 也就是说浅拷贝对于子对象只是拷贝了引用值,并没有真正的拷贝整个对象。

深拷贝实现思路:

  1. 对于每个子对象都实现Cloneable 接口,并重写clone方法。最后在最顶层的类的重写的 clone 方法中调用所有子对象的 clone 方法即可实现深拷贝。【简单的说就是:每一层的每个子对象都进行浅拷贝=深拷贝】
  2. 利用序列化。【先对对象进行序列化,紧接着马上反序列化出 】

【以下可选看】

我们来看,在内存中,用散列表组织的搜索关键词信息是如何存储的。我画了一张示意图,大致结构如下所示。从图中我们可以发现,散列表索引中,每个结点存储的 key 是搜索关键词,value 是 SearchWord 对象的内存地址。SearchWord 对象本身存储在散列表之外的内存空间中。创建型-原型模式 - 图2

浅拷贝和深拷贝的区别在于,浅拷贝只会复制图中的索引(散列表),不会复制数据(SearchWord 对象)本身。相反,深拷贝不仅仅会复制索引,还会复制数据本身。浅拷贝得到的对象(newKeywords)跟原始对象(currentKeywords)共享数据(SearchWord 对象),而深拷贝得到的是一份完完全全独立的对象。具体的对比如下图所示:创建型-原型模式 - 图3

创建型-原型模式 - 图4

  1. 在 Java 语言中,Object 类的 clone() 方法执行的就是我们刚刚说的浅拷贝。它只会拷贝对象中的基本数据类型的数据(比如,int、long),以及引用对象(SearchWord)的内存地址,不会递归地拷贝引用对象本身。
  2. 在上面的代码中,我们通过调用 HashMap 上的 clone() 浅拷贝方法来实现原型模式。当我们通过 newKeywords 更新 SearchWord 对象的时候(比如,更新“设计模式”这个搜索关键词的访问次数),newKeywords 和 currentKeywords 因为指向相同的一组 SearchWord 对象,就会导致 currentKeywords 中指向的 SearchWord,有的是老版本的,有的是新版本的,就没法满足我们之前的需求:currentKeywords 中的数据在任何时刻都是同一个版本的,不存在介于老版本与新版本之间的中间状态。
  3. 现在,我们又该如何来解决这个问题呢?
  4. 我们可以将浅拷贝替换为深拷贝。newKeywords 不仅仅复制 currentKeywords 的索引,还把 SearchWord 对象也复制一份出来,这样 newKeywords 和 currentKeywords 就指向不同的 SearchWord 对象,也就不存在更新 newKeywords 的数据会导致 currentKeywords 的数据也被更新的问题了。
  5. 那如何实现深拷贝呢?总结一下的话,有下面两种方法。

第一种方法:递归拷贝对象、对象的引用对象以及引用对象的引用对象……直到要拷贝的对象只包含基本数据类型数据,没有引用对象为止。根据这个思路对之前的代码进行重构。重构之后的代码如下所示:

  1. public class Demo {
  2. private HashMap<String, SearchWord> currentKeywords=new HashMap<>();
  3. private long lastUpdateTime = -1;
  4. public void refresh() {
  5. // Deep copy
  6. HashMap<String, SearchWord> newKeywords = new HashMap<>();
  7. for (HashMap.Entry<String, SearchWord> e : currentKeywords.entrySet()) {
  8. SearchWord searchWord = e.getValue();
  9. SearchWord newSearchWord = new SearchWord(
  10. searchWord.getKeyword(), searchWord.getCount(), searchWord.getLastUpdateTime());
  11. newKeywords.put(e.getKey(), newSearchWord);
  12. }
  13. // 从数据库中取出更新时间>lastUpdateTime的数据,放入到newKeywords中
  14. List<SearchWord> toBeUpdatedSearchWords = getSearchWords(lastUpdateTime);
  15. long maxNewUpdatedTime = lastUpdateTime;
  16. for (SearchWord searchWord : toBeUpdatedSearchWords) {
  17. if (searchWord.getLastUpdateTime() > maxNewUpdatedTime) {
  18. maxNewUpdatedTime = searchWord.getLastUpdateTime();
  19. }
  20. if (newKeywords.containsKey(searchWord.getKeyword())) {
  21. SearchWord oldSearchWord = newKeywords.get(searchWord.getKeyword());
  22. oldSearchWord.setCount(searchWord.getCount());
  23. oldSearchWord.setLastUpdateTime(searchWord.getLastUpdateTime());
  24. } else {
  25. newKeywords.put(searchWord.getKeyword(), searchWord);
  26. }
  27. }
  28. lastUpdateTime = maxNewUpdatedTime;
  29. currentKeywords = newKeywords;
  30. }
  31. private List<SearchWord> getSearchWords(long lastUpdateTime) {
  32. // TODO: 从数据库中取出更新时间>lastUpdateTime的数据
  33. return null;
  34. }
  35. }

第二种方法:先将对象序列化,然后再反序列化成新的对象。具体的示例代码如下所示:

  1. public Object deepCopy(Object object) {
  2. ByteArrayOutputStream bo = new ByteArrayOutputStream();
  3. ObjectOutputStream oo = new ObjectOutputStream(bo);
  4. oo.writeObject(object);
  5. ByteArrayInputStream bi = new ByteArrayInputStream(bo.toByteArray());
  6. ObjectInputStream oi = new ObjectInputStream(bi);
  7. return oi.readObject();
  8. }
  1. 刚刚的两种实现方法,不管采用哪种,深拷贝都要比浅拷贝耗时、耗内存空间。针对我们这个应用场景,有没有更快、更省内存的实现方式呢?
  2. 我们可以先采用浅拷贝的方式创建 newKeywords。对于需要更新的 SearchWord 对象,我们再使用深度拷贝的方式创建一份新的对象,替换 newKeywords 中的老对象。毕竟需要更新的数据是很少的。这种方式即利用了浅拷贝节省时间、空间的优点,又能保证 currentKeywords 中的中数据都是老版本的数据。具体的代码实现如下所示。这也是标题中讲到的,在我们这个应用场景下,最快速 clone 散列表的方式。
  1. public class Demo {
  2. private HashMap<String, SearchWord> currentKeywords=new HashMap<>();
  3. private long lastUpdateTime = -1;
  4. public void refresh() {
  5. // Shallow copy
  6. HashMap<String, SearchWord> newKeywords = (HashMap<String, SearchWord>) currentKeywords.clone();
  7. // 从数据库中取出更新时间>lastUpdateTime的数据,放入到newKeywords中
  8. List<SearchWord> toBeUpdatedSearchWords = getSearchWords(lastUpdateTime);
  9. long maxNewUpdatedTime = lastUpdateTime;
  10. for (SearchWord searchWord : toBeUpdatedSearchWords) {
  11. if (searchWord.getLastUpdateTime() > maxNewUpdatedTime) {
  12. maxNewUpdatedTime = searchWord.getLastUpdateTime();
  13. }
  14. if (newKeywords.containsKey(searchWord.getKeyword())) {
  15. newKeywords.remove(searchWord.getKeyword());
  16. }
  17. newKeywords.put(searchWord.getKeyword(), searchWord);
  18. }
  19. lastUpdateTime = maxNewUpdatedTime;
  20. currentKeywords = newKeywords;
  21. }
  22. private List<SearchWord> getSearchWords(long lastUpdateTime) {
  23. // TODO: 从数据库中取出更新时间>lastUpdateTime的数据
  24. return null;
  25. }
  26. }