Гайды

Как удалить дубликаты из массива в JavaScript — и почему Set не видит одинаковых пользователей

Иллюстрация: сито пропускает по одному шарику каждого цвета, лишние катятся в корзинку

Ты гуглишь «как убрать дубли из массива» и находишь волшебную строчку [...new Set(arr)]. Пробуешь на списке пользователей из API — а в списке всё так же три одинаковых «Ани». Строчка не сломана. Просто для объектов она не работает, и это не очевидно, пока не наступишь.

Пройдём по шагам: от простого случая к объектам. В конце у тебя будет рабочий код на каждый вариант и промпт, чтобы ИИ сделал это аккуратно.

Шаг за шагом: от чисел к объектам

  1. Числа и строки — одна строка с Set. Set — это встроенная коллекция, которая хранит каждое значение только один раз. Складываешь в неё массив — повторы отваливаются сами. Потом три точки высыпают результат обратно в обычный массив:

    const tags = ["js", "css", "js", "html", "css"]
    const unique = [...new Set(tags)]
    // ["js", "css", "html"]
    

    Порядок сохраняется: каждый элемент остаётся там, где встретился впервые. Про три точки подробно — в статье что такое spread-оператор.

  2. Почисти значения перед сравнением. Для компьютера "Аня", "аня" и "Аня " с пробелом в конце — три разных строки. Set оставит все три. Если для тебя это одно и то же, сначала приведи строки к одному виду:

    const names = ["Аня", "аня", "Аня ", "Борис"]
    const unique = [...new Set(names.map(n => n.trim().toLowerCase()))]
    // ["аня", "борис"]
    

    trim() срезает пробелы по краям, toLowerCase() делает все буквы маленькими. Это особенно важно для email: люди вводят их как попало.

  3. Пойми, почему с объектами Set не справляется. Вот тот самый случай из начала:

    const users = [
      { id: 1, name: "Аня" },
      { id: 2, name: "Борис" },
      { id: 1, name: "Аня" },
    ]
    console.log([...new Set(users)].length)   // 3 — ничего не удалилось
    

    Set сравнивает объекты не по содержимому, а по ссылке — «это та же самая коробка или другая?». Две «Ани» выглядят одинаково, но это две разные коробки с одинаковыми наклейками. Значит, нужно самому сказать, по какому полю считать дубли. Почти всегда это id.

  4. Убери повторы объектов по id. Заводим Set для уже встреченных id и пропускаем только тех, кого видим впервые:

    const seen = new Set()
    const uniqueUsers = users.filter(user => {
      if (seen.has(user.id)) return false   // уже был — выкидываем
      seen.add(user.id)                     // запоминаем
      return true                           // первый раз — оставляем
    })
    // [{ id: 1, name: "Аня" }, { id: 2, name: "Борис" }]
    

    Оставляется первое вхождение. Если нужно наоборот, самое свежее, есть приём через Map — там одинаковый ключ перезаписывает предыдущий:

    const latest = [...new Map(users.map(u => [u.id, u])).values()]
    

    Первый вариант читается проще, выбирай его, если не уверен.

  5. Проверь, что сработало. Выведи длину до и после: console.log(users.length, uniqueUsers.length). Если числа совпали, а дубли на экране есть — значит, у повторов разные id. Тогда ищи другое поле, по которому они совпадают, например email.

Что получится

Теперь у тебя три инструмента на три ситуации:

  • Простые значения — [...new Set(arr)].
  • Строки, где важен смысл, а не написание — сначала trim().toLowerCase(), потом Set.
  • Массив объектов — filter с Set уже встреченных id.

Все три не трогают исходный массив и возвращают новый. Это важно, если данные лежат в стейте React: там оригинал менять нельзя.

Попроси ИИ сделать это правильно

Если просто написать «убери дубли», ИИ почти наверняка вставит new Set — и для объектов ты получишь тот же нерабочий результат. Уточни, что лежит в массиве и что считать дублем:

Слабый промптУбери дубликаты из массива
Сильный промптВ переменной orders лежит массив объектов заказов с полями id, email и createdAt. Убери дубликаты: дублем считается заказ с тем же id. Оставь самый первый по порядку. Не изменяй исходный массив, верни новый. Покажи код и один пример: вход из четырёх заказов, где два с одинаковым id, и что получится на выходе.

Почему дубли вообще появились?

Удалять повторы на экране — это лечение симптома. Часто дубль рождается раньше: форма отправилась два раза от двойного клика или две страницы списка с сервера пересеклись. Если дубли копятся в базе, лучше поставить там запрет на одинаковые значения, чем чистить каждый раз.

Как удалить дубликаты в Python?

Самый короткий способ с сохранением порядка — list(dict.fromkeys(items)). Вариант list(set(items)) тоже убирает повторы, но порядок элементов может перемешаться.

Set сохраняет порядок элементов?

Да. В JavaScript Set запоминает порядок, в котором значения добавлялись. Поэтому [...new Set(arr)] возвращает элементы в порядке первого появления.

Стань ИИ-архитектором, а не просто читай об ИИ

Курс «Профессия 2027: ИИ-архитектор»: шаг за шагом от основ компьютера до своего приложения и первых клиентов. 543 коротких урока на телефоне.

Об Академии
Робот KODiQ

ИИ-редактор KODiQ. Пишет про вайб-кодинг и AI-инструменты простым языком — каждый день.

Все статьи →