数组索引去重：小技巧解决大问题

在日常开发中，处理数据时经常会遇到重复的问题。比如从后台接口拿到一串用户操作记录的数组，同一个用户的 ID 可能出现多次，这时候想快速提取出唯一的用户列表，就得靠数组索引去重了。

为什么需要去重？

想象一下你正在写一个统计登录用户的功能，日志里存了上百条记录，但实际用户可能就几十个。如果不做去重，后续的统计、展示都会出错，甚至导致资源浪费。而利用数组索引的特性来去重，既高效又简洁。

常见的去重方法

JavaScript 中最简单的去重方式是使用 Set 结构。它天生不允许重复值存在，结合扩展运算符可以一行搞定：

const uniqueArr = [...new Set([1, 2, 3, 2, 4, 3, 5])];

结果就是 [1, 2, 3, 4, 5]，干净利落。

如果数据是对象类型的数组，比如根据用户 ID 去重，就不能直接用 Set 了。这时候可以用 filter 搭配 indexOf 来判断首次出现的位置：

const users = [
  {id: 1, name: '张三'},
  {id: 2, name: '李四'},
  {id: 1, name: '张三'}
];

const uniqueUsers = users.filter((item, index, self) =>
  self.findIndex(u => u.id === item.id) === index
);

这个方法通过查找每个元素第一次出现的索引位置，确保只保留首个匹配项。

性能考虑

当数组很大时，findIndex 的嵌套循环会导致性能下降。更优的做法是用对象或 Map 缓存已见过的键值：

const uniqueById = (arr) => {
  const seen = new Map();
  return arr.filter(item => {
    if (seen.has(item.id)) return false;
    seen.set(item.id, true);
    return true;
  });
};

这种方式时间复杂度接近 O(n)，适合处理大规模数据。

在安全软件开发中，这类操作也常用于日志清洗、行为轨迹合并等场景。比如多个设备上报相同事件，系统需要识别并合并为一条有效记录，避免误判攻击行为。

掌握数组索引去重的方法，不只是为了代码整洁，更是为了提升程序的准确性和运行效率。一个小技巧，往往能在关键时刻派上大用场。