在Java中，可以使用Comparator接口来实现按照多个字段进行排序，并且通过优先级配置来添加/删除字段。

首先，创建一个自定义的Comparator类，实现compare方法来定义排序规则。在compare方法中，可以通过优先级配置来判断需要按照哪些字段进行排序。

以下是一个示例代码：

import java.util.Comparator;
import java.util.List;

public class MultiFieldComparator implements Comparator {
    private List> comparators;

    public MultiFieldComparator(List> comparators) {
        this.comparators = comparators;
    }

    @Override
    public int compare(T obj1, T obj2) {
        for (Comparator comparator : comparators) {
            int result = comparator.compare(obj1, obj2);
            if (result != 0) {
                return result;
            }
        }
        return 0;
    }
}

在上述代码中，MultiFieldComparator类接受一个Comparator列表，每个Comparator表示一个字段的排序规则。在compare方法中，按照列表中的顺序逐个比较字段，如果某个字段的比较结果不为0，则返回该结果；如果所有字段的比较结果都为0，则返回0。

接下来，我们可以创建多个Comparator对象，并将它们添加到MultiFieldComparator中，通过优先级来决定排序的字段。

以下是一个示例代码：

import java.util.ArrayList;
import java.util.Collections;
import java.util.Comparator;
import java.util.List;

public class Main {
    public static void main(String[] args) {
        List persons = new ArrayList<>();

        persons.add(new Person("John", 25, 180));
        persons.add(new Person("Alice", 30, 160));
        persons.add(new Person("Bob", 20, 170));
        persons.add(new Person("Emily", 25, 165));

        // 创建多个Comparator对象，并按照优先级添加到MultiFieldComparator中
        List> comparators = new ArrayList<>();
        comparators.add(Comparator.comparing(Person::getName));
        comparators.add(Comparator.comparing(Person::getAge));
        comparators.add(Comparator.comparing(Person::getHeight));

        MultiFieldComparator multiFieldComparator = new MultiFieldComparator<>(comparators);

        // 使用MultiFieldComparator进行排序
        Collections.sort(persons, multiFieldComparator);

        // 输出排序结果
        for (Person person : persons) {
            System.out.println(person.getName() + ", " + person.getAge() + ", " + person.getHeight());
        }
    }
}

class Person {
    private String name;
    private int age;
    private int height;

    public Person(String name, int age, int height) {
        this.name = name;
        this.age = age;
        this.height = height;
    }

    public String getName() {
        return name;
    }

    public int getAge() {
        return age;
    }

    public int getHeight() {
        return height;
    }
}

在上述代码中，我们创建了一个Person类，其中包含name、age和height字段。我们按照name、age和height的优先级进行排序。通过调用Collections.sort方法，并传入MultiFieldComparator实例，可以实现按照多个字段排序的功能。

通过添加/删除Comparator对象，可以灵活地配置需要排序的字段和优先级。