Получение вывода внешнего процесса в Питоне

[Luca Brasi]

Только собрался делать задуманные вещи столкнулся с проблемой, а как же собственно перехватить вывод консоли? Использую модуль os. Например

Код: [Выделить]

os.system('ls -lah') Пытаюсь присвоить вывод команды переменной - не выходит. Читал про popen и модуль subprocess, но к сожалению еще больше запутан. Есть какой то очевидный способ решения столь простой задачи?

[Sly_tom_cat]

Надо subprocess использовать для таких вещей. Там все элементарно

Код: (python) [Выделить]

strOutput = subprocess.check_output(['<команда>'])
Только стоит в try except обернуть что бы ошибки отловить.

[Luca Brasi]

Может в моем случае все запутанно и ваша функция не самый лучшее решение или я ошибся с синтаксисом.

Код: (python) [Выделить]

scale = subprocess.check_output( 'zenity', '--scale --title=\"Уровень цвета СИНИЙ\" \
       --text=\"Установите требуемый уровень синего цвета\" \
       --min-value=0 --max-value=255 --value=100 --step=5')

[Sly_tom_cat]

Да ничего не запутано просто внимательно нужно читать описание функции и следить за синтаксисом.
Там не список аргументов надо передавать, а массив. Кроме того все аргументы (уже не знаю почему) но нужно передавать отдельными элементами массива.

Код: (python) [Выделить]

scale = subprocess.check_output( ['zenity', '--scale', '--title=\"Уровень цвета СИНИЙ\"', '--text=\"Установите требуемый уровень синего цвета\"', '--min-value=0', '--max-value=255', '--value=100', '--step=5'])

И еще поясните, что вы называете "не самый лучшее решение"? ... если сыплются ошибки - то это не повод считать чужие советы неумными, а повод разобраться как добиться выполнения команды без ошибок....

[Luca Brasi]

я вовсе не считаю ваш совет плохим, просто более детально расписал команду которую хочу использовать. В зависимости от конкретной ситуации может вы подскажете еще что.
З.ы. Есть какойто справочник с описанием модулей и их методов, кроме как на английском.

[Sly_tom_cat]

Я немного ковырялся с вызовом внешних программ из питона и то что вам посоветовал - результат моих поисков в этом направлении. Т.е. то что я счел самым простым и удобным для такой задачи. А еще - все расписано в хелпах по питону (https://docs.python.org/3/)

К сожалению без английского (хотя бы на уровне "чтения со словарем", сейчас с успехом заменяемого автоматическими переводчиками типа гуглтранслейт) в программировании делать - нечего.

(Нажмите, чтобы показать/скрыть)

Я в школе, и 4 года в институте училпроходил немецкий. Но уже на третьем курсе ВУЗа я английские хелпы и сообщения вполне прилично переводил, однако читать/говорить я не умел совершенно. Это вызвало просто шок у преподавателя когда я пришел проходить тесты при поступлении на курсы английского (уже после получения диплома) - я читал "тхе табле" (the table - читается "зе тейбл"), но просто с листа переводил очень близко к тексту  .

А секрет мой был прост - я просто много программировал на Turbo Pascal и там были очень хорошие (простые) тексты в системе помощи, да и сообщения об ошибках были довольно развернутые и на простом языке. Собственно я и до этого много программировал на разных языках и все они были с английскими названиями операторов и функций, что тоже давало некоторое знание языка.

(Нажмите, чтобы показать/скрыть)

Но самый курьезный момент с языком случился на уроке немецкого языка на 4-м курсе. Нам выдали тексты (переводить нормативные тысячи знаков) и мы начали выбирать из пачки с одногруппником:
Первый лист - текст (на один лист А4) состоит из двух абзацев, в каждом абзаце по 2-3 сложно подчиненно-сочиненных предложения (немцы это любят - там просто винегрет из слов - переводить - голову наизнанку вывернуть надо) и там еще словечки (составленные из 3-5 отдельных слов) длинной на пол строки, а то и больше.... ничерта не понятно, нафиг, откладываем...
Второй текст - "те же яйца только вид сбоку"
И так мы листаем пока нам не попадается текст, который мы вместе на пару, прямо с листа (одно слово я знаю, одно он) начинаем переводить!!! ... мы уже на друг друга косимся - текст то хороший, но пока нам один такой из пачки попался - а нам каждому нужно свой текст выбрать... а будет ли еще там такой хороший???
Но каково же было наше разочарование когда мы наконец поняли, что текст то был АНГЛИЙСКИЙ!!! - он случайно среди немецких затесался...

[Master_Sergius]

как по мне, Popen - круче

[Sly_tom_cat]

Master_Sergius, Popen требует гораздо больше всяких наворотов для решения той же задачи что решает subprocess. subprocess - это более высокоуровневая библиотека (внутри там, на самом деле - popen используется).

Посему и вопрос: Если есть более простые конструкции то зачем пользоваться более сложными?

Причем, как по мне, так в subprocess предусмотрели все возможные варианты использования вызовов внешних программ, так что очень трудно представить - для чего нужно было бы опускаться на более низкий уровень popen

[Luca Brasi]

Sly_tom_cat, проверил ваше решение. Все путем. Спасибо!
Единственное что, почему вывод такого формата b'100\n'? Ну я понимаю строка, перевод каретки, а 'b' это байтовая строка?

(Нажмите, чтобы показать/скрыть)

А так из хелпа далеко не сразу догадаешься, что аргументы нужно передавать в виде массива... Разве что в примере можно увидеть. Или это у меня из-за малого опыта работы с питоном?) Обычно в лит пишут если передаются аргументы, то и их тип. Например:

Код: [Выделить]

array array_merge ( array $array1 [, array $... ] ). Хотя опять же, может это и без того всем кроме меня понятно.

(Нажмите, чтобы показать/скрыть)

Соглашусь, что без англ сложно, не только в программировании, но и в освоении тех же сложностей с ЭВМ. Это я понял когда начал столкнулся с Линуксом. Потому как большее число решений на англ давно описано. Англ мне недавно оценили в pre-intermediate, но уклон у меня больше не в сторону комп тематики. В каких то ситуациях приходится напрягаться , чтобы вникнуть. Спросил я насчет русской документации, т.к. Привык что по php и js, как правило нет потребности прибегать к зарубежным источникам. Ну это уже такое 

[Sly_tom_cat]

В Python3 эта функци subprocess возвращает байтовый массив, если не указан парамеметр universal_newlines=True (по умолчанию он False), если же указано universal_newlines=True, то возвращается строка (в кодировке заданной по умолчанию).
В Python 2.7 возвращается всегда массив байт (но там это не столь критично, т.к. разницы между байтовым массивом и строкой в 2.7 практически нет, чего нельзя сказать про Python3).

[Luca Brasi]

насолько я понял из руководства модуль subprocess призван заменить os.system и os.spawn*. Выходит про os.system можно забыть?

[Sly_tom_cat]

Luca Brasi, И да и нет.
Для большинства стандартных задач модуля subprocess вполне достаточно.
Для очень специфичных задач может потребоваться залезть на более низкий уровень библиотек или восе перейти на C/C++ (благо все это описано в стандартной документации).

Собственно любая высокоуровневая (универсальная) библиотека скрывает использование служебных примитивов (типа тех же pipe), но скрывая эти механизмы не позволяет тонко настраивать их, а значит оптимизировать их использование под специфичные задачи. Так что универсальность - не панацея от всех болячек.
 

(Нажмите, чтобы показать/скрыть)

Я когда мне говорят, что универсальное решение лучше специфичного предлагаю рассмотреть универсалов и профессионалов в природе. Хороший пример - утка. Это существо обитает в 4-х "средах": утка летает по воздуху, ходит по земле, плавает по поверхности воды и даже ныряет под воду. Круто? Безусловно. Но!

1. Может полет утки сравнится с виртуозными полетами ласточки или уникальными по соотношению затрат энергии на перемещение полетом орлов-парителей (которые порой без единого взмаха крыла поднимаются по термикам чуть ли не в стратосферу)?
2. Может ли подводное плавание уток сравниться со скоростью атаки щуки или виртуозным плаванием дельфинов и морских котиков?
3. Может ли плавание по поверхности воды сравниться со скоростью водомерки?
4. Ну а на земле - тут даже не надо с топовыми моделями наземных сравнивать (гепард, к примеру, до 90км/ч разогнаться может) тут они вообще скорее анекдот, а не ходоки (даже в своем птичьем царстве). Можно ли их передвижение по суше считать чем-то хотя бы не позорным?
И вот когда на все эти 4 вопроса ответ НЕТ - и начинаешь понимать - универсализм слишком дорогая штука, что бы им увлекаться....

[Luca Brasi]

еще один момент. Не очень то мне понятный. Вот к примеру я хочу перехватить вывод команды, дальше его парсить ну и т.п.  допустим вывод идет в файл. При этом файл пишется безостановочно. Как выйти из процесса? Ну имитация crtl+c

[Sly_tom_cat]

В принципе ctrl-c можно процессу и послать через открытый пайп для общения с ним, но для этого нужен уже отдельный поток (т.к. тот поток, что запустит выполнение внешнего процесса будет занят).

[Luca Brasi]

то есть создаю отдельный поток посылаю его ранее созданному потоку?