Телеграмм чат группы scrapy

нуууу, я заменял на подобных сайтах одинарные кавычки на двойные и оно работало. только я боюсь экранирования. поэтому вот озаботился более нормальными методами)

источник

12:19пожаловаться #8

Andrey Rahmatullin in Scrapy

"нормальных" нет

источник

12:19пожаловаться #9

Кирилл in Scrapy

https://stackoverflow.com/questions/24027589/how-to-convert-raw-javascript-object-to-python-dictionary

Stack Overflow

How to convert raw javascript object to python dictionary?

When screen-scraping some website, I extract data from <script> tags.
The data I get is not in standard JSON format. I cannot use json.loads().

# from
js_obj = '{x:1, y:2, z:3}'

# to
py_o...

источник

12:19пожаловаться #10

ildar in Scrapy

chompjs тоже ненормальный что-ли? он же вроде учитывает экранирование

источник

12:19пожаловаться #11

Andrey Rahmatullin in Scrapy

любой способ ненормальный если он не умеет интерпретировать JS

источник

12:20пожаловаться #12

Andrey Rahmatullin in Scrapy

а если соглашаться на компромиссы то есть много вариантов

источник

12:20пожаловаться #13

ildar in Scrapy

а в яваскрипте тоже нет разницы примерно как для питона между одинарными и двойными кавычками?

источник

12:24пожаловаться #14

Andrey Rahmatullin in Scrapy

да

источник

12:24пожаловаться #15

ildar in Scrapy

ну собсна могли бы и двойные кавычки использовать, чтоб мне жизнь облегчить)

источник

12:26пожаловаться #16

Кирилл in Scrapy

Просто там все из PHP и они оптимизируют)

источник

12:27пожаловаться #17

ildar in Scrapy

ну я вообще нубас - я реально думал они там этой переменной json присваивают. и типа почему он такой невалидный)

источник

12:29пожаловаться #18

Bulatbulat48 in Scrapy

ildar

да, скинь если найдешь плиз, пригодится в будущем, а то я пока нашел ast.literal.eval, но на моих данных он помирает с ValueError: malformed node or string:
и demjson.decode, но работает по-сравнению с тупо-заменой одинарных на двойные кавычки и затем orjson.loads очень медленно.

https://stackoverflow.com/questions/18514910/how-do-i-automatically-fix-an-invalid-json-string

Stack Overflow

How do I automatically fix an invalid JSON string?

From the 2gis API I got the following JSON string.

{
"api_version": "1.3",
"response_code": "200",
"id": "3237490513229753",
"lon": "38.969916127827",
"lat": "45.069889625267",...

источник

12:29пожаловаться #19

ildar in Scrapy

верней так - для меня как-то смутно была видна разница между json и словарем в js. почему-то запомнилось где-то на подкорке, что json это js-словарь

источник

12:30пожаловаться #20