DL
мммм, дай угадаю, бидон юзает ffi?
Size: a a a
2020 April 29
AP
Вон, последний пример пригодности гуйла в задачах из реального мира ;)
Всего-то надо было загрузить csv средней толстоты
DL
где кот, билли?
m
мммм, дай угадаю, бидон юзает ffi?
там свои обертки над simd кодом на си и фортране
AP
где кот, билли?
Питон:
data = []
with open(csv_file_path) as csv_file:
csv_reader = csv.reader(csv_file, delimiter=',')
for row in csv_reader:
data.append(row)
line_count = len(data)
print(f'Processed {line_count} lines.')
data = []
with open(csv_file_path) as csv_file:
csv_reader = csv.reader(csv_file, delimiter=',')
for row in csv_reader:
data.append(row)
line_count = len(data)
print(f'Processed {line_count} lines.')
AP
Гуйло:
(use-modules (dsv))
(define *data* (dsv->scm (open-input-file *csv-file-path*) #\, #:format 'rfc4180 ))
(format #t "~%Processed ~a lines.~%" (length *data*))
(use-modules (dsv))
(define *data* (dsv->scm (open-input-file *csv-file-path*) #\, #:format 'rfc4180 ))
(format #t "~%Processed ~a lines.~%" (length *data*))
A
ну в птоне можно написать немного более идиоматично
AP
мммм, дай угадаю, бидон юзает ffi?
Наверняка. Но просто как-бы на дворе 2020, не можем открыть csv...
m
ну в птоне можно написать немного более идиоматично
wc -l?
2020 April 30
DL
Наверняка. Но просто как-бы на дворе 2020, не можем открыть csv...
это нечестно, лол, ты в бидоне тупо читаешь строки по одной
DL
а в гуйле целиком (нелениво) конвертишь файл в память
A
нет, что-нибудь вроде data = [row for row in csv_reader]
AP
wc -l?
Ну ты прикалуешься? Мне как бы надо было загрузить данные, подсчет - это просто проверка что они вообще целиком загружаются )
m
нет, что-нибудь вроде data = [row for row in csv_reader]
еще можно через итератор файлобжекта
for line in open(...):
...
for line in open(...):
...
A
но при этом в птоне ты можешь в цикле сразу деконструировать поля
A
нет, тут мы хотим не просто строки, а распарсенный csv
m
line.split(',') же
A
with open(tlk_path) as tsv, open(result, 'w') as out:
tsv.readline()
tsvin = csv.reader(tsv, delimiter='\t')
for profile1, profile2, dialogue in tsvin:
for participant, phrase in _parse_dialogue(dialogue):
print(phrase, file=out)
A
вот у меня такой есть реальный код
m
гм, я бы немного подругому сделал запись