Ранжирование элементов в массиве с помощью Python/NumPy
у меня есть массив чисел, и я хотел бы создать другой массив, который представляет ранг каждого элемента в первом массиве. Я использую Python и NumPy.
например:
array = [4,2,7,1]
ranks = [2,1,3,0]
вот лучший метод, который я придумал:
array = numpy.array([4,2,7,1])
temp = array.argsort()
ranks = numpy.arange(len(array))[temp.argsort()]
есть ли какие-либо лучшие/более быстрые методы, которые избегают сортировки массива дважды?
9 ответов:
используйте нарезку с левой стороны на последнем шаге:
array = numpy.array([4,2,7,1]) temp = array.argsort() ranks = numpy.empty_like(temp) ranks[temp] = numpy.arange(len(array))это позволяет избежать сортировки дважды путем инвертирования перестановки на последнем шаге.
используйте argsort дважды, сначала для получения порядка массива, а затем для получения рейтинга:
array = numpy.array([4,2,7,1]) order = array.argsort() ranks = order.argsort()при работе с двумерными (или многомерными) массивами обязательно передайте аргумент axis в argsort, чтобы упорядочить правильную ось.
этому вопросу уже несколько лет, и принятый ответ велик, но я думаю, что следующее все еще стоит упомянуть. Если вы не против зависимости от
scipy, вы можете использоватьscipy.stats.rankdata:In [22]: from scipy.stats import rankdata In [23]: a = [4, 2, 7, 1] In [24]: rankdata(a) Out[24]: array([ 3., 2., 4., 1.]) In [25]: (rankdata(a) - 1).astype(int) Out[25]: array([2, 1, 3, 0])приятная особенность
rankdataэтоmethodаргумент предоставляет несколько вариантов обработки связей. Например, есть три вхождения 20 и два вхождения 40 вb:In [26]: b = [40, 20, 70, 10, 20, 50, 30, 40, 20]по умолчанию присваивается среднее значение ранг к связанным значениям:
In [27]: rankdata(b) Out[27]: array([ 6.5, 3. , 9. , 1. , 3. , 8. , 5. , 6.5, 3. ])
method='ordinal'подряд присваивает звания:In [28]: rankdata(b, method='ordinal') Out[28]: array([6, 2, 9, 1, 3, 8, 5, 7, 4])
method='min'присваивает минимальный ранг связанных значений всем связанным значениям:In [29]: rankdata(b, method='min') Out[29]: array([6, 2, 9, 1, 2, 8, 5, 6, 2])Дополнительные параметры см. В строке документа.
Я попытался расширить оба решения для массивов A более чем одного измерения, предположив, что вы обрабатываете свой массив по строкам (axis=1).
я расширил первый код с циклом по строкам; вероятно, его можно улучшить
temp = A.argsort(axis=1) rank = np.empty_like(temp) rangeA = np.arange(temp.shape[1]) for iRow in xrange(temp.shape[0]): rank[iRow, temp[iRow,:]] = rangeAи второй, следуя предложению к. ройджерса, становится:
temp = A.argsort(axis=1) rank = temp.argsort(axis=1)Я произвольно сгенерировал 400 массивов с формой (1000,100); первый код занял около 7,5, второй 3,8.
для векторизованной версии усредненного ранга см. ниже. Я люблю НП.уникальный, он действительно расширяет область того, что код может и не может быть эффективно векторизован. Помимо избегания python for-loops, этот подход также позволяет избежать неявного двойного цикла над "a".
import numpy as np a = np.array( [4,1,6,8,4,1,6]) a = np.array([4,2,7,2,1]) rank = a.argsort().argsort() unique, inverse = np.unique(a, return_inverse = True) unique_rank_sum = np.zeros_like(unique) np.add.at(unique_rank_sum, inverse, rank) unique_count = np.zeros_like(unique) np.add.at(unique_count, inverse, 1) unique_rank_mean = unique_rank_sum.astype(np.float) / unique_count rank_mean = unique_rank_mean[inverse] print rank_mean
использовать argsort () дважды сделает это:
>>> array = [4,2,7,1] >>> ranks = numpy.array(array).argsort().argsort() >>> ranks array([2, 1, 3, 0])
Я пробовал вышеуказанные методы, но не удалось, потому что у меня было много зеор. Да, даже с поплавками повторяющиеся элементы могут быть важны.
поэтому я написал модифицированное решение 1D, добавив шаг проверки связи:
def ranks (v): import numpy as np t = np.argsort(v) r = np.empty(len(v),int) r[t] = np.arange(len(v)) for i in xrange(1, len(r)): if v[t[i]] <= v[t[i-1]]: r[t[i]] = r[t[i-1]] return r # test it print sorted(zip(ranks(v), v))Я верю, что это так эффективно, как это может быть.
помимо элегантности и краткости решений, существует также вопрос производительности. Вот немного ориентир:
import numpy as np from scipy.stats import rankdata l = list(reversed(range(1000))) %%timeit -n10000 -r5 x = (rankdata(l) - 1).astype(int) >>> 128 µs ± 2.72 µs per loop (mean ± std. dev. of 5 runs, 10000 loops each) %%timeit -n10000 -r5 a = np.array(l) r = a.argsort().argsort() >>> 69.1 µs ± 464 ns per loop (mean ± std. dev. of 5 runs, 10000 loops each) %%timeit -n10000 -r5 a = np.array(l) temp = a.argsort() r = np.empty_like(temp) r[temp] = np.arange(len(a)) >>> 63.7 µs ± 1.27 µs per loop (mean ± std. dev. of 5 runs, 10000 loops each)
Мне понравился метод k. rooijers, но, как писал rcoup, повторяющиеся числа ранжируются в соответствии с позицией массива. Это не было хорошо для меня, поэтому я изменил версию для постпроцессинга рангов и слияния любых повторяющихся чисел в объединенный средний ранг:
import numpy as np a = np.array([4,2,7,2,1]) r = np.array(a.argsort().argsort(), dtype=float) f = a==a for i in xrange(len(a)): if not f[i]: continue s = a == a[i] ls = np.sum(s) if ls > 1: tr = np.sum(r[s]) r[s] = float(tr)/ls f[s] = False print r # array([ 3. , 1.5, 4. , 1.5, 0. ])Я надеюсь, что это может помочь другим тоже, я пытался найти другое решение для этого, но не смог найти ни одного...
Comments