在AngularJS中，可以使用ng-change指令来监听下拉多选框的选择改变事件，并在事件处理函数中手动更新选中的选项。以下是一个示例代码：

HTML代码：

JavaScript代码：

$scope.options = [
  { id: 1, name: 'Option 1' },
  { id: 2, name: 'Option 2' },
  { id: 3, name: 'Option 3' }
];

$scope.selectedOptions = [];

$scope.updateSelectedOptions = function() {
  // 检查选项是否被选中，如果没有被选中则从selectedOptions数组中移除
  for (var i = 0; i < $scope.options.length; i++) {
    var option = $scope.options[i];
    var isSelected = $scope.selectedOptions.indexOf(option) > -1;
    if (isSelected && !$scope.isSelected(option)) {
      $scope.selectedOptions.splice($scope.selectedOptions.indexOf(option), 1);
    }
  }
};

$scope.isSelected = function(option) {
  // 检查选项是否被选中
  return $scope.selectedOptions.indexOf(option) > -1;
};

在上述代码中，ng-change指令绑定了一个名为updateSelectedOptions的函数，当下拉多选框的选择改变时会触发该函数。在updateSelectedOptions函数中，我们遍历所有选项，检查每个选项是否被选中。如果某个选项被选中但在selectedOptions数组中不存在，则将其从数组中移除。

另外，我们还定义了一个isSelected函数用于检查某个选项是否被选中。

通过这种方式，我们可以在选择改变时手动更新选中的选项，确保不会出现未能取消选中的情况。