Size: a a a

R language and Statistical data analysis

2019 October 24

АК

Артём Клевцов in R language and Statistical data analysis
G Dash
Всем привет.
Кто-нибудь кто работает с пакетом bigrquery может подсказат?
Как можно отдельной таблице в bigquery удалить определенное количество строк по датам ? Например с 12-10-2019 по 23-10-2019  ?
С функций для удаления всей таблицы все понятно.
Но задача в том, чтобы удалять из таблицы данные за определенный период и после описывать свежие данные за этот период.
SQL команды подсказать?
Доки читал?
https://cloud.google.com/bigquery/docs/reference/standard-sql/dml-syntax
источник

AS

Alexey Seleznev in R language and Statistical data analysis
G Dash
Всем привет.
Кто-нибудь кто работает с пакетом bigrquery может подсказат?
Как можно отдельной таблице в bigquery удалить определенное количество строк по датам ? Например с 12-10-2019 по 23-10-2019  ?
С функций для удаления всей таблицы все понятно.
Но задача в том, чтобы удалять из таблицы данные за определенный период и после описывать свежие данные за этот период.
А в чем проблема использовать DELETE + WHERE?
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Alexey Seleznev
А в чем проблема использовать DELETE + WHERE?
На больших данных DELETE зло. В некоторых случаях такой операции вообще нет. ;-)

P.S. С BQ не работал
источник

AS

Alexey Seleznev in R language and Statistical data analysis
Владислав Lazycat
На больших данных DELETE зло. В некоторых случаях такой операции вообще нет. ;-)

P.S. С BQ не работал
А какой есть аналог ?
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Как ни смешно - Insert
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Ну или выборка просто
источник

AS

Alexey Seleznev in R language and Statistical data analysis
Как то я раньше не замечал что бы insert быстрее чем delete  был, хотя может в bigquery и так)

Ну  и опять вопрос в том действительно надо удалить строки или просто выборку без удаления получить
источник

GD

G Dash in R language and Statistical data analysis
Alexey Seleznev
А в чем проблема использовать DELETE + WHERE?
А можно пример скрипта для пакета bigrquery с использованием DELET?
источник

OB

Oleg Basmanov in R language and Statistical data analysis
bigrquery это оболочка, которая отправляет sql запросы. А sql запросы они и в Африке одинаковые
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Alexey Seleznev
Как то я раньше не замечал что бы insert быстрее чем delete  был, хотя может в bigquery и так)

Ну  и опять вопрос в том действительно надо удалить строки или просто выборку без удаления получить
Дело в том, что например в Hadoop вообще нет delete. Как класс
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Oleg Basmanov
bigrquery это оболочка, которая отправляет sql запросы. А sql запросы они и в Африке одинаковые
Ню-ню. Вы какой sql имеете ввиду? SQL-92, OpenSQL, SQL Script (SAP) ? Может Hive?
источник

OB

Oleg Basmanov in R language and Statistical data analysis
Владислав Lazycat
Ню-ню. Вы какой sql имеете ввиду? SQL-92, OpenSQL, SQL Script (SAP) ? Может Hive?
Standard sql в big query.
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Я писал, что Bq не пользовался. Не могу сказать. Но на действительно больших данных delete зло.
источник

OB

Oleg Basmanov in R language and Statistical data analysis
Там 3кк строк вмего
источник

ВL

Владислав Lazycat in R language and Statistical data analysis
Ну так это другой разговор. Короче ясно
источник

AS

Alexey Seleznev in R language and Statistical data analysis
G Dash
А можно пример скрипта для пакета bigrquery с использованием DELET?
Напомните завтра накидаю вам пример
источник

AS

Alexey Seleznev in R language and Statistical data analysis
Но в bigquery dml операции поддерживаются только в standart диалекте
источник

AS

Alexey Seleznev in R language and Statistical data analysis
Может в этом проблема?
источник

AP

Artur Popov in R language and Statistical data analysis
Господа, есть один очень насущный вопрос, буду очень благодарен, если поможете. Задача такая: есть две группы A и B. Группа A делится на подгруппы: A1,A2,A3 и так далее. Требуется оценить какая из подгрупп оказала наибольшее положительное влияние на B.
источник

PU

Philipp Upravitelev in R language and Statistical data analysis
попарный хи-квадрат и разница в процентах, например
источник