继续浏览精彩内容
慕课网APP
程序员的梦工厂
打开
继续
感谢您的支持,我会继续努力的
赞赏金额会直接到老师账户
将二维码发送给自己后长按识别
微信支付
支付宝支付

10-玩转数据结构-Trie

幕布斯6054654
关注TA
已关注
手记 1264
粉丝 219
获赞 1011

本章我们介绍Trie字典树前缀树

正确的读法就是Tree,为了区别Tree E;微软真实案例: 手持设备通讯录搜索,实习生使用Trie

映射结构: 字典。但Trie 专门为处理字符串而生。

如果有n个条目 使用树结构(平衡) 查询的时间复杂度是O(logn);如果有100万个条目(2^20)logn大约为20

Trie 查询每个条目的时间复杂度,和字典中一共有多少条目无关! 时间复杂度为O(w) w为查询单词的长度! 因为大多数单词的长度都是小于10的。

5c1279860001cccf06220537.jpg

之前都是一个单词为一个节点进行存储,Trie按字母拆开进行了树形结构的排列。上图中有cat dog dear panda 四个单词。单词有多少个字母,访问到叶子节点就可以访问到单词。

Trie中节点的定义: 每个节点有26个指向下个节点的指针,每个节点有能力指向26个孩子。考虑不同的语言,不同的情境,26个指针有可能是不够的,也有可能有多余的。

class Node{  char c;
  Node next[26];
}

考虑大小写,有52个指针。如果设计的是url,邮箱等,肯定就要扩展更多的指针。更灵活的Trie会不固定指针的数量。

class Node{  char c;
  Map<char, Node> next;
}

next就是指一个char和一个node之间的映射,map中存放多少个不知道,但每一个都是节点到字符的映射。TreeMap(平衡二叉树 红黑树) HashMap

5c1279860001213106130526.jpg

来到这个节点之前就已经知道这条线通往哪个字母了。因此可以不存值,只存映射。

class Node{
  Map<char, Node> next;
}

Trie中添加查询即使没有char c也没有问题。我们上面的例子到叶子节点就是一个要查询的单词,但是英语世界中一些单词是另一些的前缀。pan panda都要存。 要有一个标识,记录该节点是否是一个单词的结尾。

5c1279860001e95c01380462.jpg

class Node{  boolean isWord;
  Map<char, Node> next;
}

最重要的一个部分就是next,既是一个映射,又存放着一个char值。

Trie字典树基础

package cn.mtianyan.trie;import java.util.TreeMap;public class Trie {    /**
     * 节点类:isWord,Map<c,node>
     */
    private class Node {        public boolean isWord;        public TreeMap<Character, Node> next; // 中文单词界限模糊

        // 传入isWord
        public Node(boolean isWord) {            this.isWord = isWord;
            next = new TreeMap<>();
        }        // 无参构造函数
        public Node() {            this(false);
        }
    }    private Node root;  // 根节点
    private int size;   // 存储了多少个单词

    /**
     * Trie默认构造函数
     */
    public Trie() {
        root = new Node();
        size = 0;
    }    /**
     * 获得Trie中存储的单词数量
     *
     * @return
     */
    public int getSize() {        return size;
    }    /**
     * 向Trie中添加一个新的单词word
     *
     * @param word
     */
    public void add(String word) {        // 非递归写法,字符串拆成字符
        Node cur = root;        for (int i = 0; i < word.length(); i++) {            char c = word.charAt(i);            // 如果为空,新建节点。
            if (cur.next.get(c) == null)
                cur.next.put(c, new Node());
            cur = cur.next.get(c); // 走到下一个节点
        }        // 这个节点以前不表示单词结尾
        if (!cur.isWord) {
            cur.isWord = true;
            size++;
        }
    }
}

可以尝试一下递归写法作为练习。

Trie中查询单词。

    /**
     * 查询单词word是否在Trie中
     * @param word
     * @return
     */
    public boolean contains(String word){

        Node cur = root;        for(int i = 0 ; i < word.length() ; i ++){            char c = word.charAt(i);            // 没有这个字符,return false
            if(cur.next.get(c) == null)                return false;
            cur = cur.next.get(c);
        }        // 比如trie中有panda,查pan。虽然到节点,但是并没有这个单词。
        return cur.isWord;
    }
package cn.mtianyan;import cn.mtianyan.set.BSTSet;import cn.mtianyan.trie.Trie;import java.util.ArrayList;public class Main {    public static void main(String[] args) {

        System.out.println("Pride and Prejudice");

        ArrayList<String> words = new ArrayList<>();        if(FileOperation.readFile("pride-and-prejudice.txt", words)){            long startTime = System.nanoTime();

            BSTSet<String> set = new BSTSet<>();            for(String word: words)
                set.add(word);            for(String word: words)
                set.contains(word);            long endTime = System.nanoTime();            double time = (endTime - startTime) / 1000000000.0;

            System.out.println("Total different words: " + set.getSize());
            System.out.println("BSTSet: " + time + " s");            // ---

            startTime = System.nanoTime();

            Trie trie = new Trie();            for(String word: words)
                trie.add(word);            for(String word: words)
                trie.contains(word);

            endTime = System.nanoTime();

            time = (endTime - startTime) / 1000000000.0;

            System.out.println("Total different words: " + trie.getSize());
            System.out.println("Trie: " + time + " s");
        }
    }
}

运行结果:

5c1279860001190f03690153.jpg

时间性能上Trie略高于BST。集合元素越多,Trie性能越高,因为Trie的性能与集合中有多少个字符串无关。

Trie和前缀搜索

5c1279870001434e06430532.jpg

比如查找cat的时候 c ca都是cat的前缀。非常方便查找是否有某一个前缀对应的单词。

/**
     * 查询是否在Trie中有单词以prefix为前缀
     *
     * @param prefix
     * @return
     */
    public boolean isPrefix(String prefix){

        Node cur = root;        for(int i = 0 ; i < prefix.length() ; i ++){            char c = prefix.charAt(i);            if(cur.next.get(c) == null)                return false;
            cur = cur.next.get(c);
        }        return true; // 单词本身也是该单词的前缀。
    }

Trie又称为前缀树。BST中添加prefix方法,比较性能(自己练习)

leetcode中208 实现Trie

https://leetcode-cn.com/problems/implement-trie-prefix-tree/description/

实现一个 Trie (前缀树),包含 insert, search, 和 startsWith 这三个操作。将我们上面实现的Trie方法名改成和题目一致就行。

5c127987000183bc07360086.jpg

Trie的具体应用

LeetCode 211 简单的正则表达式。

5c12798700014fe006920530.jpg

对于遇到的.,我们遍历所有的可能。

package cn.mtianyan.leetcode_211;/// Leetcode 211. Add and Search Word - Data structure design/// https://leetcode.com/problems/add-and-search-word-data-structure-design/description/import java.util.TreeMap;public class WordDictionary {    /**
     * 节点类:isWord,Map<c,node>
     */
    private class Node {        public boolean isWord;        public TreeMap<Character, Node> next; // 中文单词界限模糊

        // 传入isWord
        public Node(boolean isWord) {            this.isWord = isWord;
            next = new TreeMap<>();
        }        // 无参构造函数
        public Node() {            this(false);
        }
    }    private Node root;  // 根节点

    /**
     * 默认构造函数,初始化节点
     */
    public WordDictionary() {
        root = new Node();
    }    /**
     * 添加一个单词到数据结果中
     */
    public void addWord(String word) {

        Node cur = root;        // 不存在创建
        for (int i = 0; i < word.length(); i++) {            char c = word.charAt(i);            if (cur.next.get(c) == null)
                cur.next.put(c, new Node());
            cur = cur.next.get(c);
        }
        cur.isWord = true;
    }    /**
     * Returns if the word is in the data structure. A word could contain the dot character '.' to represent any one letter.
     */
    public boolean search(String word) {        // 最差情况全是点
        return match(root, word, 0);
    }    private boolean match(Node node, String word, int index) {        // 递归到底,整个word已经考虑完了
        if (index == word.length())            return node.isWord;        char c = word.charAt(index);        // 具体字母
        if (c != '.') {            if (node.next.get(c) == null)                return false; // 字符串匹配失败
            return match(node.next.get(c), word, index + 1);
        } else {            for (char nextChar : node.next.keySet())                if (match(node.next.get(nextChar), word, index + 1))                    return true;            return false;
        }
    }
}

运行结果:

5c1279870001227f03080087.jpg

Trie字典树和字符串映射

677 https://leetcode-cn.com/problems/map-sum-pairs/description/

字符串有一个value值,传入前缀,返回包含这个前缀的单词的value和。

处理1 node中包含value值,处理2 基于前缀,查找时计算所有对应词的value值和。

package cn.mtianyan.leetcode_677;import java.util.TreeMap;public class MapSum {    private class Node{        public int value; // 单词权重值 isWord可以省略,0不是单词。
        public TreeMap<Character, Node> next;        public Node(int value){            this.value = value;
            next = new TreeMap<>();
        }        public Node(){            this(0);
        }
    }    private Node root;    /** Initialize your data structure here. */
    public MapSum() {

        root = new Node();
    }    public void insert(String key, int val) {

        Node cur = root;        // 单词添加Trie,并添加value值。
        for(int i = 0 ; i < key.length() ; i ++){            char c = key.charAt(i);            if(cur.next.get(c) == null)
                cur.next.put(c, new Node());
            cur = cur.next.get(c);
        }
        cur.value = val;
    }    public int sum(String prefix) {        // 先找到前缀最后一个字母所在位置。
        Node cur = root;        for(int i = 0 ; i < prefix.length() ; i ++){            char c = prefix.charAt(i);            if(cur.next.get(c) == null)                return 0;
            cur = cur.next.get(c);
        }        return sum(cur);
    }    private int sum(Node node){        // cur 为根节点的单词,所有节点value值相加。
        int res = node.value;        for(char c: node.next.keySet())
            res += sum(node.next.get(c));        return res;
    }
}

递归到底的情况就是当前节点是一个叶子节点,下一个节点映射为0。这个问题中我们的Trie是作为一个映射来使用的,每一个单词和整型的value值进行了映射,映射具体体现在node节点中存储了一个value值。

Trie和映射

5c1279870001b9c406380496.jpg

映射使用: 词频统计,Trie也可以做词频统计。练习: TrieMap 统计词频 比对 BSTMap

理解node 添加元素,与单词之间的关系。

更多与Trie相关的话题

Trie的删除操作,通讯录的实现。将通讯录中每一个人名,当做一个单词插入Trie,单词最后一个字母位置存储相应的电话号码等信息。

5c1279870001070c06710531.jpg

删除deer单词会将eer节点都删除掉,然后保留d。删除pan,把n的isWord置为false即可。

Trie的局限性:

最大的问题:空间!

class Node{  boolean isWord;
  Tree<char, Node> next;
}

每个节点只存储了一个字符的信息,节点之间的关联全部由TreeMap映射。存储空间是27n

解决方案: 压缩字典树Compressed Trie,只有一个后续字符的单链可以进行合并。

5c127988000129bf12150551.jpg

空间节省了,但是维护成本高了很多。

  • Ternary Search Trie 三分搜索树

5c1279880001b6ef06480195.jpg

5c1279880001614206100448.jpg

上图中存储了dog这个词。

5c12798800014a8206190452.jpg



作者:天涯明月笙
链接:https://www.jianshu.com/p/8f0ba5df1f77


打开App,阅读手记
0人推荐
发表评论
随时随地看视频慕课网APP