2

Хочу разобраться с чего начать парсинг в Node.js, то есть какие модули могут помочь в этом.

Есть данные в формате JSON такого вида:

{
    "id": 4055833268,
    "original_id": 2838729037,
    "defindex": 30140,
    "level": 10,
    "quality": 6,
    "inventory": 3221225475,
    "quantity": 1,
    "origin": 2,
    "attributes": [
        {
            "defindex": 142,
            "value": 1246442696,
            "float_value": 3329330
        },
        {
            "defindex": 261,
            "value": 1246442696,
            "float_value": 3329330
        },
        {
            "defindex": 292,
            "value": 1115684864,
            "float_value": 64
        },
        {
            "defindex": 388,
            "value": 1115684864,
            "float_value": 64
        }
    ]
}

Данные получаю по ссылке такого вида (без расширения файла):

http://site.com/base/?id=6767657657&key=klj87ui6789yi6789uy

Для получения данных по такой ссылке я использовал модуль request (может, есть более удобный способ?):

var url = 'http://site.com/base/?id=6767657657&key=klj87ui6789yi6789uy',
    file = 'f.json';
request(url, function (error, response, body) {
    if (!error && response.statusCode == 200) {
        fs.writeFileSync(file, body);
    }
});
var obj = fs.readFileSync('./f.json','utf8');
var parse = JSON.parse(obj);

Данные я хочу парсить в цикле (for, for in, ...) по условию типа if (float_value == 3329330).

Если условие совпало, то выполняем код дальше (я так понимаю, это синхронный код должен быть), а если нет, то возвращаемся и начинаем парсить сначала через определенный промежуток времени.

Возможно, есть удобный вариант сделать парсер на другом языке, который будет работать на сервере Linux.

10
  • Задам нескромный вопрос: а вы в гугл ходили? Что нашли сами по этому вопросу? Вопросы в стиле "просто напишите мне код, пожалуйста" здесь не очень любят.
    – user181100
    25 авг 2015 в 15:12
  • Нескромно отвечу, что в тексте, что я написал выше и в помине нету ничего из серии: "Сделайте все за меня". Наоборот я хочу сам и спросил только модули которые мне в этом помогут или интересный материал на эту тему.
    – excellproj
    25 авг 2015 в 20:33
  • Что вы имеете в виду, когда говорите "JSON.parse не может получить данные по такой ссылке"? Добавьте в вопрос кусок кода, в котором вы используете JSON.parse. 28 авг 2015 в 10:16
  • Для того, чтобы ответить на вопрос, совершенно необходим ваш код. Возможно, в нем мелкая ошибка. Возможно, совсем неверный подход. Или что-то еще. Без кода угадать невозможно.
    – Nick Volynkin
    29 авг 2015 в 6:30
  • Нафига писать в файл. И да, естественно, этот код не работает, потому что ты сначала читаешь, а потом пишешь.
    – Qwertiy
    31 авг 2015 в 10:56

3 ответа 3

2

Нормальный json парсится безо всяких модулей при помощи JSON.parse, как и везде.

Если json не совсем нормальный и содержит js-комментарии, то их можно убрать с помощью модуля strip-json-comments.

1
  • Пример json-данных я указал. Они не измены. Проблема возникла при получении данных в JSON.parse по ссылке типа site.com/base/?id=6767657657&key=klj87ui6789yi6789uy. при ее открытии на странице сразу структура json-файла
    – excellproj
    25 авг 2015 в 20:39
0

Не знаю Node.js, но нагуглил:

var object_from_json = JSON.parse(string);
1
  • Спасибо за ответ. Моя вина и при правке текста случайно удалил про JSON.parse. В ней я столкнулся с тем, что не могу получить данные по ссылке вида site.com/base/?id=6767657657&key=klj87ui6789yi6789uy (как я указал выше). JSON.parse не может ее прочесть так как это не файл типа file.json
    – excellproj
    25 авг 2015 в 20:36
0
var url = 'http://site.com/base/?id=6767657657&key=klj87ui6789yi6789uy';

request(url, function (error, response, body) {
  if (error || response.statusCode !== 200) {
    throw error || new Error("Invalid status code"); // Ну или что тут надо делать
  }

  var obj = JSON.parse(body);
  // ...
});

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge that you have read and understand our privacy policy and code of conduct.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.