LE Blog

Инженер с поэтической душой

09.08.2011 firtree_right Социальненько

Завёл себе ГуглПлюс. Можно меня круглить: https://plus.google.com/110926467496252906772 Всё такое новенькое и карамельное. Хочется лизнуть.

Последнее время никуда почти совсем не пишу. ЖЖ как-то требует серьёзности и осмысленности. Твиттер слишком легкомысленен. А ГуглПлюс где-то посередине. ФСБук очень не хочется заводить. (Можно это превратить в идейную позицию, и выстреливать ей при случае собеседнику в лицо.)

Хотел Лёше-парикмахеру рассказать, как мне было грустно, когда умерла Эми Вайнхаус, но он не стал поддерживать эту тему. Наверное, не очень хорошо говорить о грустном, когда стрижка. Хотя именно он Иру в своё время на неё подсадил. А у нас, как я говорил, за музыкальную составляющую отвечает супруга. Которая мне, кстати, сказала, что лучше как Кобейн, Моррисон и Джоплин, чем как Корнелюк рассекать на старости лет по подмосковным ДК. Это целая тема для пьяного спора. Есть куда бодрее старички.

Кстати, о пьяных спорах. Долгое время мне было наутро очень стыдно, если я с кем-то вообще разговаривал по пьяни накануне. Это даже более стыдно, чем читать свои высеры в жж двухгодичной и более давности. Я даже переставал встречаться и пить с друзьями. Счас как-то проходит эта ерунда. Иногда даже думаю, с кем бы новым забухать. :)

14.07.2011 firtree_right 20/80

Прикольное наблюдение случилось на крайнем рабочем собрании. Оказалось, что в этом съёмочном сезоне около 60%, если не 80% (точно больше половины) наших инноваций провалилось. Под инновациями я понимаю проекты, которые должны были изменить рабочий процесс с целью его улучшить. Какие-то не дошли до конца и намертво остановились, какие не остановились, сильно затянулись, какие не затянулись, в тех неудовлетворительный результат.

Из тех, что не провалились, большая половина — крепкий середнячок. Нормальные изменения, нормальные результаты. И только совсем небольшая часть оказалась ощутимым прорывом. По крайней мере если мерить по моим ожиданиям. Похоже на старое правило, что 20% дел создают 80% фана.

Бывают, конечно, и супер-мега-прорывы.

28.06.2011 firtree_right Ловко

Мне уже пора бы отдохнуть в этом году, но всё никак не получится. Буду писать всякую ерунду, хотя потом как-то неловко бывает перечитывать.

Программирую я последние дни немного, а в основном переписываюсь с другим программистом, который выполняет для меня работу. Пару месяцев назад, я узнал, что он сектант. Поскольку я бывший сектант, то я могу так говорить, шутить про это и иронизировать. Когда в компании несектантов так пошутишь, они сразу напрягаются, и повисает неловкая пауза. И даже сказать, что это я несерьёзно, неловко.

Подарил ребятам на новоселье колоды Magic: The Gathering. Как говорится, первая доза бесплатно, а потом будет куда ездить на товарищеские встречи под вино. Когда сели играть, вокруг нас образовался купол, и выпихнул остальных гостей из квартиры взашей. Было круто! И немного неловко.

Ира уехала получать загранпаспорт и сделала мне кастрюлю окрошки, и написала везде записочки, про сколько воды и когда наливать в цветы, сколько сахара класть в квас, и прочие милые глупости. Я читал и радовался. Окрошка быстро кончилась, кстати. И теперь я могу принимать троих гостей одновременно, а не двоих. И кстати, я и сам бы сходил в гости. Только неловко звонить или писать, кого давно не видел, потому что «с чего бы это вдруг? надо что-то?»

Приобрёл себе коллекционное переиздание Трамвая. Гениальная штука. Сначала заявки, чтобы определить тираж, потом оплатил предзаказ за сильно дешевле, чем сейчас продаётся. Очень удобно -- почти краудфандинг. Вспомнил, как ждал каждый номер. Сначала читал всё самое интересное, смотрел картинки. Потом, нового номера долго ждать, приходилось читать так нелюбимые мной длинные тексты, и оказывалось, что они тоже ничего. :) Правда, когда читал предисловие к переизданию, там редактор рассказывал, какой он клёвый, и как заботился о команде. Мне за него было неловко.

Вообще, избегание неловкости (или иначе стыда), составляет огромную часть моей жизни. Я даже неоднократно пытался продать душу, чтобы избавиться от этого чувства навсегда.

P.S. Оффтопик. Кстати, одно моё присутствие в комнате даёт +6 к безглючной работе компьютерной техники. И это ещё без возложения рук.

13.06.2011 firtree_right Вкратце

Периодически внутренний диалог складывается во что-то вроде поста в жж, но написать как-то руки не доходят. Поэтому коротко о главном.

♯♯♯

Уже давно написал статью в бложек про использование однострочников руби вместо grep, sed и прочего. Но до сих пор ссылку не запостил. А ведь тут есть те, кто регулярно смотрит там картинки.

♯♯♯

У нас в разгаре съёмочный сезон, и мы ищем молодых людей на вакансию оператора. Романтичная картика для привлечения внимания:

Эта работа — очень крутая. А с каждым днём она становится ещё круче, потому что те, кто отвечают за ПО (начиная с меня) заботятся о том, чтобы всё, с чем соприкасается оператор, было удобно и приятно.

18.05.2011 firtree_right Использование руби программ в качестве фильтров для поиска

Предыстория

Не далее как прошлой осенью я писал о том, как изнутри процесса определить, запущен ли он, используя инструмент grep. В комментариях мне посоветовали использовать pidof, но мне не удалось заставить его работать для руби, т.к. поиск происходит по имени запускаемого файла, а в случае руби-скрипта это всегда ruby. Но мне существенно удалось сократить получение списка запущенных процессов с таким же именем. Вместо:

`ps ax | grep #{File.basename(__FILE__)} | grep -v grep`.split("\n").map{ |l| l.strip.split(/\s+/)[0].to_i }.reject{ |pid| pid == Process.pid }

получилось

`pgrep -f #{File.basename(__FILE__)}`.chomp.split(/\s+/).reject{ |pid| pid.to_i == Process.pid }

Довольно часто мне необходимо отфильтровать вывод или содержимое файла хитрее, чем просто поиск по регулярному выражению. Поскольку мне очень нравится руби, и, как неоднократно писалось в этом блоге, я пытаюсь использовать его везде, где можно, то почему бы снова так не поступить?

ascannerdarkly

Командная строка руби

Руби имеет умеренное количество ключей командной строки. Кратко они описаны в выводе:

ruby --help

Нас в большей степени интересуют ключи -n и -p, которые создают цикл вокруг чтения из пайпа. Ссылка на подробности — в конце статьи.

Например, мы хотим посчитать, сколько всего виртуальной памяти занимают все процессы браузера гугл-хром. В качестве источника информации будем использовать вывод команды:

ps axo "%p %z %c"

В которой собраны только необходимые данные (занимаемая виртуальная память и имя процесса без аргументов) и пид (ну а вдруг?). А теперь этот вывод отправим не грепу, а нашему родному руби:

ps axo "%p %z %c" | ruby -nae 'num ||= 0; num += $F[1].to_i if $F[2] =~ /chrome/; END{puts "total chrome virtual memory size #{num} Kbytes"}'

Что это означает? Ключ n означает, что вокруг нашего скрипта есть цикл вида:

while gets(); ... end

Ключ a означает, что вместо переменной $_, куда автоматически попадает результат gets, мы можем использовать $F, который есть суть $_.split. А END содержит блок, который выполняется после цикла.

Ту же магию можно использовать и внутри запускаемых руби-скриптов. Например, если мы хотим найти какое-то слово внутри файла, выделить его цветом и вывести строку с номером, где это слово нашлось, то наш скрипт будет выглядеть вот так (файл look_for):

#!/usr/bin/ruby -n

BEGIN {
  unless ARGV.size == 2
    puts "Usage: ./look_for <word> <path/to/file>"
    exit
  end
  str = ARGV.shift
}

next unless $_ =~ /#{str}/

printf "%6s%s", $., $_.gsub($&, "\e[31m#{$&}\e[0m")

Теперь, если сделать этот файл запускаемым и запустить его:

./look_for word /in/some/file

То можно увидеть неземную красоту. Кстати, обратите внимание на shift. Без него программа не работает, т.к. gets, который тут за кадром правит бал, пытается воспринимать все аргументы как пути к файлам, из которых непременно нужно что-нибудь прочитать.

Прочие прекрасные применения параметров командной строки руби я предлагаю пытливому читателю подсмотреть в ссылках ниже или найти самостоятельно.

Материалы для самостоятельного изучения

  1. Полный код статьи на гитхабе.
  2. Справочник по параметрам командной строки.
  3. То же, что и выше, но подробнее
  4. Множество прекрасных примеров (со ссылкой на источник).

30.03.2011 firtree_right Упёртые программисты упёрты

Отличная история одного бага в пересказе . Я довольно долго сам вёл себя как эти ребята, пока несколько раз не столкнулся с подобным поведением с другой стороны и не усвоил, что в действительности USERS DON'T CARE.

25.03.2011 firtree_right Кроты как эволюционировавшие черви

После долгого молчания обновился бложек. Начал эту статью писать, правда, ещё до переезда. О том, что казалось невозможным: рекурсия в регулярных выражениях.

25.03.2011 firtree_right Во времени

Наденька отвезла мою благоверную супругу на отдых в Севастополь. Меня же ожидают пять дней холостяцкого быта. В доме уже практически совсем порядок и можно приглашать гостей, но не больше двух человек за раз :)

♯♯♯

У нас в Универе было специальное тёплое и тихое место для фанатов Magic: The Gathering. Я даже слышал, что некоторые, увлёкшись этой игрой, вылетали из Бауманки почти так же быстро, как увлёкшиеся Counter Strike. Когда я их видел, то, конечно, хихикал над ними. Кто бы мог подумать, что спустя тринадцать лет я буду регулярно, почти каждую неделю, ходить на дружеские матчи по MTG под коньяк.

♯♯♯

Ещё рассказывал ребятам про курение. В своей жизни я, как и любой другой человек, принимал множество решений: учиться, не учиться, жениться, не жениться, переезжать, не переезжать, покупать, не покупать, ехать, не ехать, увольняться, не увольняться, говорить, не говорить и т.п. О любом из них можно пожалеть, но если ты принял решение перестать курить и осуществил его, то никогда об этом не пожалеешь. Не так много решений, которые могут это гарантировать.

А какие у вас произошли трансформации, о которых бы вы хихикая рассказали себе в прошлом?

23.03.2011 firtree_right Рекурсия в регулярных выражениях

Пролог

Что-то большие перерывы в написании статей входят в привычку. Способность некоторых коллег по цеху регулярно выдавать что-нибудь полезное и интересное вызывает уважение.

worm

Введение

С тех самых пор, как я только узнал про регулярные выражения, я слышал об их несовершенстве и моральном устаревании. Регулярные выражения продолжали использоваться, а недовольные теоретики — сетовать. Основной претензией было то, что регулярные выражения не позволяют исследовать вложенности паттернов в виду своей линейности. Действительно, соглашался я, невозможно проверить правильность открытия и закрытия тегов или получить выражение в самых внутренних скобках.

Однако, как оказалось, человечество шагнуло далеко вперёд в вопросе совершенствования регулярных выражений. Об одном из новшеств хочу сегодня рассказать.

mole_worm

Именованные группы

В регулярных выражениях руби 1.9 появились именованные группы. Вот, как выглядит их элементарное использование:

if /\A(?<first>[a-zA-Z]+)\s+(?<last>[a-zA-Z]+)\Z/ =~ "Vassily Poopkine"
  puts [first, last].inspect
end

if md = /\A(?<first>[a-zA-Z]+)\s+(?<last>[a-zA-Z]+)\Z/.match("Vassily Poopkine")
  puts [md[:first], md[:last]].inspect
end

То есть мы не только выделяем группу скобками, как обычно, назначая ей тем самым порядковый номер (по номеру открывающей скобки), но и даём имя. И использовать его можно не только в локальных переменных и объекте MatchData, но и в самом регулярном выражении.

Более того, обращение к объявленным группам внутри может быть рекурсивным. Мне сразу же захотелось написать давнишнюю мою задумку о функции, раскрывающей вложенные скобки. Вот так:

str = "1 + 2 * (3 - 4 / {5 + 6} + [7 - 8 * (9 + 10 * 11) + 12 * {13 - 14}] + 15) + 16 * (17 + 18)"

re = %r{
        (?<fill>[0-9+\-*/\s]+){0}
        (?<expression>\g<fill>*\g<brackets>\g<fill>*|\g<fill>){0}
        (?<braces>\{\g<expression>+\}){0}
        (?<squarebrackets>\[\g<expression>+\]){0}
        (?<parentheses>\(\g<expression>+\)){0}
        (?<brackets>\g<braces>|\g<squarebrackets>|\g<parentheses>)
}x

def calculator(str)
  if str =~ /\A[0-9+\-*\/\s]+\Z/
    eval str
  else
    raise "Invalid expression: #{str}"
  end
end

f =-> s do
  if $~[:expression] == $~[:fill]
    calculator($~[:fill])
  else
    calculator($~[:brackets][1..-2].gsub(re, &f))
  end
end

puts calculator(str.gsub(re, &f))
puts eval(str.gsub(/(?<left>\{|\[)|\}|\]/) { |s| $~[:left] ? "(" : ")" })

Итак, в регулярном выражении присутствует 6 именованных групп: fill (заполнения пространства между скобками), expression (выражение, содержащее одни или ни одних нераскрытых скобок), braces (фигурные скобки), squarebrackets (квадратные скобки), parentheses (круглые скобки), brackets (любые скобки). Как видите, выражение описывается через скобки, а скобки — через выражение.

Для проверки правильности расчёта, используем обычный eval, заменив все скобки на круглые.

mole

Сделав этот пример, я был доволен, как стадо слонов, но потом решил проверить, а что будет, если скобки расставлены неправильно?

str = "1 + 2 * (3 - 4 / {5 + 6} + [7 - 8 * (9 + 10 * 11) + 12 * {13 - 14]} + 15) + 16 * (17 + 18)"

re = %r{
        (?<fill>[0-9+\-*/\s]+){0}
        (?<expression>\g<fill>*\g<brackets>\g<fill>*|\g<fill>){0}
        (?<braces>\{\g<expression>+\}){0}
        (?<squarebrackets>\[\g<expression>+\]){0}
        (?<parentheses>\(\g<expression>+\)){0}
        (?<brackets>\g<braces>|\g<squarebrackets>|\g<parentheses>)
}x

str =~ re

И я не смог дождаться завершения работы оператора =~ для такого длинного выражения. Это, конечно, неприятно. В причины я вникал не особо, но похоже, это связано с поведением недетерминированной машины Тьюринга. По крайней мере вот ответ на похожую проблему. Для нас это всего лишь означает, что проверять правильность расстановки скобок нужно отдельно и другим способом. Чем я предлагаю заняться пытливому читателю самостоятельно.

Материалы для самостоятельного изучения

  1. Исходный код статьи.
  2. Новый синтаксис и прочие вкусняшки в руби 1.9. Для тех, кто заметил =->.
  3. Глобальные переменные с непонятными именами. Для тех, кто заметил $~.
  4. Ещё немного базовых приёмов в регулярных выражениях руби.

11.03.2011 firtree_right Пере

В наш век цифровых технологий переезд можно считать состоявшимся, на мой взгляд, только тогда, когда по дому разливается густой жирный интернет из кабеля. Ёта-Итсо, конечно, хорошо, но от него какое-то походное ощущение, типа твиттер в палатке почитать.

Этот переезд мне обещали звёзды, на него намекала супруга, да и сам я уже хотел, но состоялся он резко и по объективным обстоятельствам. Что, конечно, создало море плюсов и возможностей. Например, сумму, которую я бы мог потратить на агента и залог, я потратил на ремонт и теперь у нас красиво, новая дверь, и новенькая кухня с посудомойкой. Или, например, я бы не стал искать квартиру на кольцевой линии, но оказалось, что местоположение вполне стоит своих денег.

Интересно отметить, что 6 лет без переездов дают о себе знать. Если на предыдущую квартиру мы носили вещи сами и в тот же день вечером принимали гостей, то сейчас были грузчики, дополнительная ходка с техникой и в первую ночь мы не смогли даже заночевать на новом месте.

Так же забавно, что каждый год, который мы встречали не дома, мы переезжали. А в этот раз переехаи туда, где гуляли после новогоднего шампанского.

Меня же больше всего занимает вопрос, почему не получается всё сделать сразу и идеально. Дверная фирма приятная, дверь хорошая, но установщики неаккуратно разворотили дверь, удлинив ремонт на пару дней. Икеевскую кухню привезли и собрали отлично, но сборщик забыл гаечный ключ, и мне пришлось ездить дважды на рынок, и он потом не стал подключать электрику. Электрики всё подключили, и всё работает, но неаккуратно выглядит местами. Стиральную машинку быстро привезли и подключили, но у неё что-то сломалось в первую стирку, и теперь нужно разбираться с гарантийной заменой. Сама квартира с удобным местоположением, тёплая, но в подъезде какие-то сумасшедшие соседи попадаются, которые не пускают к щитку протянуть провод интернета.

Никакого внятного ответа на вопрос «зачем все эти неприятные мелочи» я не нахожу. Ведь их наличие ничего принципиально не меняет. Не добавляет интереса, не особо чему-то учит полезному. Но по какой-то причине появляется всегда шероховатость.

Супруга, однако, сообщает мне, что я — самый прекрасный мужчина на свете.