Tupel duplizieren die Eliminierung aus einer Liste

Betrachten Sie die folgende Liste von Tupeln: val input= List((A,B), (C,B), (B,A))und unter der Annahme, dass die Elemente(A,B) und(B,A) sind die gleichen und daher Duplikate, was ist der effiziente Weg (vorzugsweise in Scala), um Duplikate aus ...

Entfernen von Duplikaten aus einer Liste von numPy-Arrays

Ich habe eine gewöhnliche Python-Liste, die (mehrdimensionale) numPy-Arrays enthält, die alle dieselbe Form und dieselbe Anzahl von Werten haben. Einige der Arrays in der Liste sind Duplikate früherer Arrays. Ich habe das Problem, dass ich alle ...

Wie entferne ich doppelte Wörter mit Java, wenn die Anzahl der Wörter mehr als 200 Millionen beträgt?

Ich habe eine Datei (Größe = ~ 1,9 GB), die ~ 220.000.000 (~ 220 Millionen) Wörter / Zeichenfolgen enthält. Sie haben eine Verdoppelung, fast 1 doppeltes Wor...

Aktualisieren Sie die Spalte, um andere Aggregatwerte zu erhalten

Ich erstelle ein Skript zum "Zusammenführen" und Löschen doppelter Zeilen aus einer Tabelle. Die Tabelle enthält Adressinformationen und verwendet ...

Java: Optimieren Sie das Hashset für die Erkennung von Duplikaten in großem Maßstab

Ich arbeite an einem Projekt, in dem ich viele Tweets bearbeite. Das Ziel ist es, Duplikate zu entfernen, während ich sie verarbeite. Ich habe die Tweet-IDs,...

Duplikate aus einem Array entfernen, basierend auf der Objekteigenschaft?

Ich habe eine Reihe von Objekten. Ich möchte die Duplikate basierend auf dem Wert "name" im Objekt entfernen.

Doppelte Datensätze verhindern, Abfrage vor dem Erstellen neuer Datensätze

Hilfe zum Entfernen von SQL Query-Duplikaten

Ich muss doppelte Datensätze aus der folgenden Tabelle entfernen

Herausfiltern von doppelten / nicht eindeutigen Zeilen in data.table

Ich habe ein

Entfernen doppelter Einheiten aus dem Datenrahmen

Ich arbeite an einem großen Datensatz mit n Kovariaten. Viele der Zeilen sind Duplikate. Um die Duplikate zu identifizieren, muss eine Teilmenge der Kovariat...