python pandas

скриншот

нужно оставить в таблице только первое и последнее время для каждого key, все промежуточные значения и если время указано только 1 надо удалить. Как быстрее всего это можно сделать?

 

число записей - 2 / число потоков.

в потоках удаляешь отрезок

 

?

 

Ну крутишь выведенное через for i in data_temp.head (или че там у тебя выводится), це вроде список списков.

Запоминаешь индекс первого вреения, запоминаешь индекс нового времени и так крутишь, пока новый кей не появится  (они у тебя уже рассортированы, поэтому можно не париться). Загугли команду pop в пайтоне. И удаляешь ненужные, так как ты знаешь индексы нужных тебе кеев, удаляешь промежуточные через поп. Продолжаешь.

Ну суть ты понял

acewasel сказал(а):↑

Ну крутишь выведенное через for i in data_temp.head (или че там у тебя выводится), це вроде список списков.

Запоминаешь индекс первого вреения, запоминаешь индекс нового времени и так крутишь, пока новый кей не появится  (они у тебя уже рассортированы, поэтому можно не париться). Загугли команду pop в пайтоне. И удаляешь ненужные, так как ты знаешь индексы нужных тебе кеев, удаляешь промежуточные через поп. Продолжаешь.

Ну суть ты понял

Нажмите, чтобы раскрыть...

ну человек явно не спрашивает как удалить элементы кроме 0 и len()

оспа этого времени сказал(а):↑

число записей - 2 / число потоков.

в потоках удаляешь отрезок

 

?

 

Нажмите, чтобы раскрыть...

Скрин

  в ссылке инфа по таблице, 15к+ строк 3+к key. удалить надо что бы оставалось 2 значения key  1 1 2 2 3 3 итд, с первым и последним временем.

я в этой теме только разбираюсь, так что сори если туплю)

acewasel сказал(а):↑

Ну крутишь выведенное через for i in data_temp.head (или че там у тебя выводится), це вроде список списков.

Запоминаешь индекс первого вреения, запоминаешь индекс нового времени и так крутишь, пока новый кей не появится  (они у тебя уже рассортированы, поэтому можно не париться). Загугли команду pop в пайтоне. И удаляешь ненужные, так как ты знаешь индексы нужных тебе кеев, удаляешь промежуточные через поп. Продолжаешь.

Ну суть ты понял

Нажмите, чтобы раскрыть...

Если ему надо только 0 и последний элемент оставить в новый список то легче наверное просто будет создать new = [old[0], old[len(old)-1]]. Если ему надо вырезать всё из списка то легче наверное будет сделать del old[1:len(old)-1].

Но главная проблема в том что кажется ему не это надо.

Через dataframe работаешь? Тебе человек идею уже расписал. Еслиу тебя значения уже отсортированны по ключу и дате, то сканируешь всю таблицу и сохраняешь индексы первого и последнего значения у каждого ключа. Через drop удалишь промежуточные.

Input

Output

 

result_df = d2_df.loc&d2_df.groupby('key');'measurement_time'].agg(;'idxmin','idxmax']).stack()].drop_duplicates()
result_df = result_df.groupby('key').filter(lambda x: x.shape[0] != 1)

Заменить & в первом выражении (после groupby) на квадратную открывающую скобку. Сайт ломает конструкцию.