Вопросы с меткой [group-by]
group by — конструкция/метод, применяемая к набору данных для группировки строк по одному или нескольким столбцам для применения к оставшимся столбцам агрегатной функции.
230
вопросов
0
голосов
1
ответ
24
показа
Посчитать уникальные текстовые значения в столбце нарастающим итогом (по месяцам)
Есть таблица:
-- для теста
df = pd.DataFrame(({'date': ['2021-10-02', '2021-10-02', '2021-11-02', '2021-12-02', '2022-01-02'],
'user_id': ['user_1', 'user_2', 'user_9', 'user_5', '...
0
голосов
1
ответ
22
показа
Счетчик дубликатов в БД
У меня есть бд
где только одно поле (title)
Например:
title
first
second
first
Мне нужно подсчитать сколько раз встречается в бд то или иное название. В этом примере мне нужно будет вывести first - 2 ...
0
голосов
2
ответа
37
показов
Группировка SQL с выводом значений из других столбцов, соответствующих MAX()
есть таблица
person_id
fullname
test_id
date_test
score
01
Vasiliy
123
21.02.2021
100
01
Vasiliy
123
13.01.2022
85
01
Vasiliy
123
30.05.2021
75
01
Vasiliy
123
23.03.2021
NULL
Мне надо ...
0
голосов
1
ответ
42
показа
Как добавить столбец образованный с помощью groupby и aggregate в датафрейм?
Имеется датафрейм
делаю группировку по Сoach c агрегацией по среднему Weight
как теперь создать новый столбец в датасете со средним значением Weight?
df['Avg Weight per Coach'] = df.groupby(['Coach']...
0
голосов
0
ответов
34
показа
Группировка в SQL - запросе в Sping Data проекте Java настойчиво требует id
Ситуация:
Делаю проект на Java, Spring Framework.
Использую БД:
spring:
datasource:
driver-class-name: org.h2.Driver
url: jdbc:h2:mem:mydatabase;MODE=PostgreSQL
Есть таблица:
create ...
2
голоса
1
ответ
155
показов
Как пронумеровать строки удовлетворяющие критерию в каждой группе?
У меня есть дата фрейм.
Мне надо преобразовать существующие колонки.
У меня следующее значение в колонке будет зависеть от предыдущего.
Я могу сделать эти калькуляции и преобразования с помощью ...
1
голос
1
ответ
74
показа
Pandas: проверка верхней строки на идентичность нижней стоке
Имеется датасет
В столбце "А" построчно перечислены дубли имен объектов, в последующих столбцах указаны свойства каждого объекта.
Код должен работать по следующему алгоритму:
Если в столбце &...
0
голосов
1
ответ
24
показа
Вернуть наиболее часто встречающееся записи в рамках каждой группы
Необходимо для каждой группы страны определить самую популярную приставку для игр, на основе таблицы опросника.
Подскажите пожалуйста каким способом выполнить группировку.
Country
Model
China
PC
...
2
голоса
1
ответ
71
показ
Ускорить работу функции
Помогите оптимизировать код. Написал такую функцию
def vp(df):
df_v=df.groupby('col1').sum().reset_index()
df['target']=0
for i in range(0, (len(df)-1)):
for j in range (0, (len(...
1
голос
1
ответ
28
показов
Как создать ванильный groupBy, чтобы он вернул массив объектов вместе с title?
Есть функция, которая групирует массив объектов по ключу.
Наприме массив:
data: [
{
CS_NAME: "AAA",
IS_MAIN: "Y",
WEBSITE_CREATE_DATE: "2021-06-01T15:50:...
0
голосов
1
ответ
165
показов
Почему при использовании метода groupby в pandas колонки по которым происходит группировка исчезают из расчета?
Её размерность (6, 3)
После применения groupby:
df_gr = df.groupby(['Towns', 'Country']).sum()
Её размерность (6, 1)
Что из себя представляют "Country" и "Towns" столбцы?
Как они ...
0
голосов
0
ответов
19
показов
SQL запрос на количество одинаковых записей
Всем добрый день!
Подскажите возможно ли сделать SQL запрос чтобы получить количество одинаковых userIp при этом не группируя их, т. к. нужны userEmail
userIp
userID
userEmail
198.23.0.1
1111
user1@...
1
голос
1
ответ
28
показов
Группировка таблицы по выборочному диапазону дат для каждой группы
Имеется таблица продаж по магазинам:
Дата Магазин Продажи
0 01.01.2020 first 1
1 02.01.2020 first 2
2 03.01.2020 first 3
3 04.01.2020 first 5
4 ...
1
голос
1
ответ
91
показ
Группировка объектов по полям. Java
Необходимо обработать выборку из базы данных, в которой часть полей повторяются (это должен быть один конечный объект).
List из БД построчно:
[
{
"fullName": "Иванов И.И.&...
1
голос
2
ответа
101
показ
Счётчик в столбце по ненулевым данным с учётом значений в ещё одном столбце
Есть посуточные показания датчиков. Необходимо задать счётчик ненулевых значений по датчикам и по количеству показаний, т.е. от первого ненулевого значения до нуля - 1; от следующего ненулевого ...
0
голосов
2
ответа
129
показов
Как объединить два List таким образом, чтобы
Как объединить, чтобы одинаковые элементы слились в один и получил на выходе
[productUuid=55d7cd69-7db0-43fc-8bc6-813db36f69f4, productName=Product740, amount=57],
[productUuid=e6296ab4-9f94-4105-...
0
голосов
1
ответ
13
показов
Отобрать уникальные по коду и суммировать их значения
Есть DF
Код Название Сумма
03.2.01.01-0001 Цемент 300
14.5.06.03-0002 Паста 125
03.2.01.01-0001 Цемент 120
14.5.06.03-...
0
голосов
1
ответ
49
показов
Как удалить дубликаты по условию?
Есть DataFrame
city
year
0
Лодзь
990
1
Краков
990
2
NaN
990
3
Перм
1826
4
NaN
1826
5
NaN
1827
Нужно удалить дубликаты по колонке year, но в случае если поле city не пусто, то такие значения не ...
-1
голос
1
ответ
50
показов
Помогите создать sql запрос Sum для множества с исключением
Здравствуйте Как посчитать Sum для каждого из списка получателей с условием что тип Tip=1
PlatelshchiK не может быть кто из списка.
Есть таблица Plateg
В таблице Poluchatel, PlatelshchiK, Summ2, Tip
...
0
голосов
2
ответа
50
показов
Заполнение колонки в pandas минимальным значением после groupby
Путанный заголовок получился, но смысл проблемы вот в чем.
Есть табличка, которая выглядит таким образом:
q = pd.DataFrame({'first':[1, 2, 3, 2], 'days':['2019-10-19', '2019-10-20','2019-10-21', '2019-...
-2
голоса
1
ответ
73
показа
Использование ORDER BY и GROUP BY
Помогите пожалуйста разобраться с запросом.
Мне нужно посчитать стоимость всех экземпляров каждого автора без учета книг «Идиот» и «Белая гвардия». В результат включить только тех авторов, у которых ...
1
голос
1
ответ
97
показов
Как посчитать разницу между временными точками внутри группы при группировке?
Имеется фрейм, в котором есть столбец time (datetime64[ns, UTC]) и столбец ID (int64), содержащий ID предметов. ID дублируются, потому что у них разные значения в столбце time. Количество дубликатов ...
1
голос
1
ответ
114
показов
Группировка значений из csv в Python
Всем привет. Подскажите, пожалуйста, как сгруппировать значения из csv?
Привожу пример. В файле csv есть два столбца - в одном дата, в другом число:
01.01.2021, 123
01.01.2021, 456
02.01.2021, 789
02....
2
голоса
1
ответ
39
показов
Как изменить иерархию уровней при группировке DataFrame?
Предположим есть DataFrame такого вида:
samp = pd.DataFrame({'region': ['North','North','South','South','East','East','West','West'],
'store': list('ABCDEFGH'),
...
1
голос
2
ответа
60
показов
Группировка с использованием пользовательской функции для агрегации
Имеется DataFrame такого вида:
Необходимо сгруппировать данные по филиалам и получить общую сумму по колонке сумма для каждого филиала. Но кроме суммы нужно получить еще расчетную среднюю величину ...
1
голос
1
ответ
47
показов
Объект в условии GROUP BY в C# LINQ - некорректная группировка, если использовать не анонимный тип [дубликат]
Есть тестовый список пользователей:
public class ClassForOrderBy
{
public string Name { get;set; }
public int Priority { get;set; }
public long OwnerId { get;set; }
public ...
2
голоса
1
ответ
126
показов
Как сгруппировать по нескольким колонкам?
Есть датасет df с колонками person, year, sum_of_purchase. В датасете может быть много строк - когда один 'person' в один 'year' тратил разные суммы.
Надо сделать: 1) новую колонку df['...
2
голоса
1
ответ
43
показа
Как группировать по одному столбцу и по разнице соседних значений == 1 в другом столбце?
Имеется таблица:
data1 = pd.DataFrame({'store_id': [4168621, 4168621, 4168621, 4168621, 4168621, 4168624, 4168624, 4168626, 4168626],
'period_id': [191, 192, 194, 195, 196, ...
1
голос
2
ответа
276
показов
Сравнение значений из одного столбца
Есть следующая таблица:
Необходимо заполнить promo_cw последовательно идущими числами от 0, в случае если в period_id есть также непрерывная последовательность чисел. Если последовательность в ...
0
голосов
1
ответ
241
показ
pandas dataframe. сравнить значения датафреймов
У меня есть несколько датафреймов df, df_left_border, df_right_border, где
df
df_left_border
df_right_border аналогичен left
Необходимо посчитать количество элементов df, которые больше ...
1
голос
1
ответ
30
показов
Сгруппировать в SQL запросе поля по имени персонажа и вывести только записи с минимальной датой. Как сделать?
Есть таблица
name, date, price
Слон, 21-06-2021, 5000
Слон, 22-06-2021, 7500
Мартышка, 21-06-2021, 4000
Мартышка, 22-06-2021, 3900
Кот, 21-06-2021, 11200
Кот, 22-06-2021, 8700
Нужно сгруппировать по ...
3
голоса
3
ответа
42
показа
Поиск похожих словарей в списке словарей
Нужна помощь с алгоритмом.
Есть есть список из dicts:
[
{ 'id': 1, 'name': 'vasya', 'group_id': 1},
{ 'id': 2, 'name': 'petya', 'group_id': 2},
{ 'id': 3, 'name': 'kolya', 'group_id': 3},
{...
2
голоса
2
ответа
42
показа
Как отобрать максимальные значения в группе строк?
Имею вот такой фрейм данных:
cid num bdate cost payed upto pdate
0 29 233128 2021-06-05 15000.0000 15000.0000 2021-06-06 2021-06-06
1 29 233128 2021-06-05 ...
2
голоса
1
ответ
50
показов
Как получить только последнее значение за день?
Пример входных данных csv:
,ammount,time,currency
0,1470.01,2020-01-02 00:00:00,Евро
1,2530.01,2020-01-02 06:01:00,Доллар
2,1840.01,2020-01-02 18:25:00,Евро
3,1400.01,2020-01-03 00:00:00,Евро
4,...
0
голосов
0
ответов
17
показов
Как вывести группу и применить к ней агрегатную функцию postgresql
У меня есть две таблички. 1 - табличка тем для форума.
CREATE TABLE forum.thread
(
id SERIAL PRIMARY KEY NOT NULL,
title TEXT NOT NULL,
author VARCHAR(60) NOT ...
1
голос
1
ответ
38
показов
Как выбрать всю строку с максимальным значением в одном столбце для каждой группы?
Имеется общий df приблизительно следующего вида:
df po oh io yh qw er ty yu io
id 09 09 87 89 12 23 34 45 1
id 09 09 87 89 12 23 34 2
id 09 09 87 89 12 23 35 3
id 09 09 87 89 12 23 36 4
...
1
голос
1
ответ
58
показов
Группировка дат с привязкой к началу периода
При группировке в SQL, получаю данные, привязанные к началу временного интервала. Например, при группировке по месяцу, получаю год-месяц-01 и количество записей. При группировке в Pandas, получаю ...
3
голоса
2
ответа
68
показов
Как выбрать элементы в подгруппах groupby, или есть что то изящнее?
Есть два фрейма - ордера с налогами и справочник налога на каждый товар.
Нужно отобрать по каждому коду товара те ордера, в которых значение "налога" выше стандартного, взятого из "...
0
голосов
1
ответ
68
показов
Как отдельные строки повернуть и преобразовать в столбцы, используя аггрегатные функции
Есть такой JSON
sJson clob := '{
"NumDoc":"63",
"Groups": [
{
"GroupCode":"ALM",
"...
2
голоса
2
ответа
52
показа
Как найти изменение к последнему дню прошлой недели?
Найти разницу Weekly_ch между текущим значением Sales и значением Sales в последний известный день прошлой недели. Количество данных за каждую неделю разное. Некоторых недель нет.
Через for, конечно ...
2
голоса
1
ответ
34
показа
Как отфильтровать по размеру группы?
Дан df:
df = pd.DataFrame([{'id': 1, 'b': 1, 'd': 0},
{'id': 1, 'b': 2, 'd': 0},
{'id': 1, 'b': 2, 'd': 1},
{'id': 1, 'b': 2, 'd': 0},
...
1
голос
2
ответа
59
показов
Как указать значения по условию для каждой группы?
Имеется фрейм данных:
data = {'фрукт': ['груша','огурец','вишня', 'абрикос', 'груша','арбуз','груша','банан', 'груша', 'вишня','яблоко', 'груша', 'вишня', 'абрикос', 'груша', 'банан'],
'страна': ['...
2
голоса
1
ответ
129
показов
Как посчитать процентное соотношение для каждого объекта?
У меня есть огромный дата сет на миллион строк, в котором есть название товара (product_id) и номера заказов (order_id), в которых эти товары приобретаются. Также у меня есть столбец (reordered), ...
0
голосов
1
ответ
55
показов
pandas resample by date, начиная с конечной даты
Как можно разделить датафрейм с помощью метода resample, вычитая интервал из end_date, а не из start_date
import pandas as pd
index = pd.date_range('1/1/2000', periods=10, freq='T')
series = pd....
0
голосов
1
ответ
144
показа
Объединение строк в DataFrame
У меня есть датафрэйм
Ниже его скрин:
Я пытаюсь посчитать сколько времени ID с номером (8690950461832000) находился в каждой зона (признак Идентификатор зоны).
Т.е сделать группировку примерно так:
...
-1
голос
2
ответа
61
показ
Почему запрос выполняется неверно?
Есть вот такой пример: sqlfiddle.com/#!9/595fdf/3 Я ожидаю что вернутся записи с id 2 и 3, а возвращаются 1 и 3. Что не так и как исправить?
create table chat_messages
(
id int auto_increment ...
2
голоса
1
ответ
120
показов
Как преобразовать DataFrame в словарь?
Есть задача, решение которой привожу.
Исходная таблица.
test = pd.DataFrame({"par1": [1, 2, 3, 4, 5], "par2": [11, 12, 13, 14, 15],
"country": ["...
2
голоса
1
ответ
71
показ
Как отобрать срез строк со смещением?
Имеется фрейм данных:
import pandas as pd
import numpy as np
data = {'фрукт': ['авокадо','груша','арбуз', 'груша', 'вишня', 'груша', 'банан'],
'страна': ['китай','сша', np.nan, np.nan,'канада', np....
1
голос
2
ответа
49
показов
Заполнение значений столбца с условием
Есть фрейм со временем посещений пользователями ресурса.
Как заполнить колонку visit, считая все посещения одним пользователем внутри суток одним и тем же визитом?
Для примера заполнил колонку '...
1
голос
0
ответов
72
показа
В каких случаях внутренние группировки нужны в подзапросах?
В каких случаях внутренние группировки нужны в подзапросах? Ведь если результаты передаются "вверх", где в конечном итоге группируются, то внутренние получается не нужны. Например:
SELECT n1....