Каковы хорошие инструменты CLI для JSON?

Ответ 1

Я только что нашел это:

http://stedolan.github.com/jq/

"jq - это легкий и гибкий процессор командной строки JSON".

2014 обновление:

@user456584 упоминается:

Там также команда 'json' (например, 'jsontool'). Я склонен предпочесть это JQ. Очень UNIX-й. Вот ссылка на проект: github.com/trentm/json -

в README json адресу http://github.com/trentm/json есть длинный список похожих вещей

• JQ: http://stedolan.github.io/jq/
• json: выберите: http://jsonselect.org/
• jsonpipe: https://github.com/dvxhouse/jsonpipe
• json-команда: https://github.com/zpoley/json-command
• JSONPath: http://goessner.net/articles/JsonPath/, http://code.google.com/p/jsonpath/wiki/Javascript
• jsawk: https://github.com/micha/jsawk
• jshon: http://kmkeen.com/jshon/
• json2: https://github.com/vi/json2
• FX: https://github.com/antonmedv/fx

Ответ 2

Я создал модуль, специально разработанный для манипуляции JSON с командной строкой:

https://github.com/ddopson/underscore-cli

• FLEXIBLE. Инструмент "swiss-army-knife" для обработки данных JSON - может использоваться как простой симпатичный принтер или как полноценная Javascript-команда.
• МОЩНЫЙ - предоставляет полную мощность и функциональность underscore.js(плюс underscore.string)
• ПРОСТОЙ - упрощает запись однострочных JS, аналогичных использованию "perl -pe"
• CHAINED. Несколько команд-команд можно связать вместе для создания конвейера обработки данных.
• MULTI-FORMAT. Богатая поддержка форматов ввода/вывода - довольно печатная, строгая JSON и т.д. [скоро]
• DOCUMENTED - отличная документация по командной строке с несколькими примерами для каждой команды

Это позволяет вам делать мощные вещи очень легко:

cat earthporn.json | underscore select '.data .title'
# [ 'Fjaðrárgljúfur canyon, Iceland [OC] [683x1024]',
#   'New town, Edinburgh, Scotland [4320 x 3240]',
#   'Sunrise in Bryce Canyon, UT [1120x700] [OC]',
# ...
#   'Kariega Game Reserve, South Africa [3584x2688]',
#   'Valle de la Luna, Chile [OS] [1024x683]',
#   'Frosted trees after a snowstorm in Laax, Switzerland [OC] [1072x712]' ]

cat earthporn.json | underscore select '.data .title' | underscore count
# 25

underscore map --data '[1, 2, 3, 4]' 'value+1'
# prints: [ 2, 3, 4, 5 ]

underscore map --data '{"a": [1, 4], "b": [2, 8]}' '_.max(value)'
# [ 4, 8 ]

echo '{"foo":1, "bar":2}' | underscore map -q 'console.log("key = ", key)'
# key = foo
# key = bar

underscore pluck --data "[{name : 'moe', age : 40}, {name : 'larry', age : 50}, {name : 'curly', age : 60}]" name
# [ 'moe', 'larry', 'curly' ]

underscore keys --data '{name : "larry", age : 50}'
# [ 'name', 'age' ]

underscore reduce --data '[1, 2, 3, 4]' 'total+value'
# 10

Он имеет очень приятную справочную систему с командной строкой и чрезвычайно гибкий. Он хорошо протестирован и готов к использованию; однако я все еще создаю несколько функций, таких как альтернативы для формата ввода/вывода и слияния в моем инструменте обработки шаблонов (см. TODO.md). Если у вас есть какие-либо запросы по функциям, прокомментируйте это сообщение или добавьте проблему в github. Я разработал довольно обширный набор функций, но я был бы рад уделять приоритетное внимание функциям, которые необходимы членам сообщества.

Ответ 3

Один из способов сделать это - преобразовать его в XML. Следующее использует два модуля perl (JSON и XML:: Simple) для преобразования fly-by:

cat test.json | perl -MJSON -MXML::Simple -e 'print XMLout(decode_json(do{local$/;<>}),RootName=>"json")'

который для вашего примера json заканчивается как:

<json age="200" firstName="Bender" lastName="Robot">
  <address city="New York" postalCode="1729" state="NY" streetAddress="123" />
  <phoneNumber number="666 555-1234" type="home" />
  <phoneNumber number="666 555-4567" type="fax" />
</json>

Ответ 4

Взгляните на этот безумный проект jsawk. Это дизайн для фильтрации через вход JSON из командной строки. Проверьте resty, а также для клиента REST командной строки, который можно использовать в конвейерах, которые могут пригодиться.

Ответ 5

Недавно я обнаружил, что JSON легко может быть eval -ed с Python:

$ python -c "json=eval(open('/json.txt').read()); print len(json['phoneNumber'])"
2

Хотя этот метод, очевидно, будет терпеть неудачу, если вход JSON содержит нули.

Ответ 6

Посмотрите f:json-document() из Библиотека FXSL 2.x.

С помощью этой функции очень просто включить JSon и использовать его так же, как... XML.

Например, можно просто написать следующее выражение XPath:

f:json-document($vstrParam)/Students/*[sex = 'Female']

и получить все дочерние элементы Students с помощью sex = 'Female'

Вот полный пример:

<xsl:stylesheet version="2.0"
 xmlns:xsl="http://www.w3.org/1999/XSL/Transform"
 xmlns:xs="http://www.w3.org/2001/XMLSchema"
 xmlns:f="http://fxsl.sf.net/"
 exclude-result-prefixes="f xs"
 >
 <xsl:import href="../f/func-json-document.xsl"/>

 <xsl:output omit-xml-declaration="yes" indent="yes"/>

 <xsl:variable name="vstrParam" as="xs:string">
{

  "teacher":{
    "name":
      "Mr Borat",
    "age":
      "35",
    "Nationality":
      "Kazakhstan"
             },


  "Class":{
    "Semester":
      "Summer",
    "Room":
      null,
    "Subject":
      "Politics",
    "Notes":
      "We're happy, you happy?"
           },

  "Students":
    {
      "Smith":
        {"First Name":"Mary","sex":"Female"},
      "Brown":
        {"First Name":"John","sex":"Male"},
      "Jackson":
        {"First Name":"Jackie","sex":"Female"}
    }
    ,


  "Grades":

    {
      "Test":
      [
        {"grade":"A","points":68,"grade":"B","points":25,"grade":"C","points":15},

        {"grade":"C","points":2, "grade":"B","points":29, "grade":"A","points":55},

        {"grade":"C","points":2, "grade":"A","points":72, "grade":"A","points":65}
       ]
    }


}
 </xsl:variable>

 <xsl:template match="/">
    <xsl:sequence select=
     "f:json-document($vstrParam)/Students/*[sex = 'Female']"/>

 </xsl:template>
</xsl:stylesheet>

Когда указанное преобразование применяется к любому XML-документу (игнорируется), получается правильный результат:

<Smith>
   <First_Name>Mary</First_Name>
   <sex>Female</sex>
</Smith>
<Jackson>
   <First_Name>Jackie</First_Name>
   <sex>Female</sex>
</Jackson>

Ответ 7

Существует также интерактивный инструмент терминала - FX

Передайте в FX любой JSON и анонимную функцию для его уменьшения.

$ echo '{...}' | fx [code ...]

Запустите интерактивный режим без передачи аргументов:

$ curl ... | fx

• https://github.com/antonmedv/fx

Ответ 8

К счастью, в области XML у нас есть замечательные технологии, такие как XPath, XQuery и XSLT, которые могут нам помочь.
[...]
Так что это приводит меня к моему вопросу: есть ли такие инструменты для JSON?

Если вы спросите меня, Xidel именно то, что вы ищете.

Xidel - это инструмент командной строки для загрузки и извлечения данных со страниц HTML/XML или JSON-API с использованием CSS, XPath 3.0, XQuery 3.0, JSONiq или шаблонных шаблонов. Он также может создавать новые или преобразованные документы XML/HTML/JSON.

Запрос:

xidel -s "input.json" \
-e '
  $json/avg(
    count(
      (phoneNumber)()
    )
  )
'

или же

xidel -s "input.json" -e '$json/avg(count((phoneNumber)()))'

Выход:

2