Записки океанолога — обработка и визуализация данных

В октябре я провёл воркшоп на яндексовой Yet Another Conference 2014 (YaC2014). На днях выложили видео с записью трансляции. Надо сказать, что снималось всё очень профессионально, суровыми дядьками с большими камерами, а звук записывали с петличного микрофона заботливо прикреплённого звукорежисёром, который сидел, видимо, с режисёром за специальным пультом.

Я всё-таки предпочитаю, когда на записях подобного рода воркшопов есть малюсенький экран со спикером а всё остальное место занимает постоянно транслируемая картинка с экрана компьютера, тогда ничего не пропускаешь (как например на SciPy конференциях). Однако здесь почти всё видно и самая большая проблема в том, что не показали ссыку на репозиторий в начале видео.

Что касается самого выступления, то я там пару-тройку раз спорол чушь, но публика либо не заметила, либо скромно промолчала 🙂 В целом всё было неплохо. Само выступление не столько про анализ логов апача, сколько про IPython notebook и Pandas, так что если вы хотите посмотреть на них в действии, то вам должно понравиться.

Ссылка на само видео.

Здесь лежит репозиторий с ноутбуками и инструкции по установке всего необходимого при помощи анаконды.

Здесь репозиторий с магией, которая позволила нам дать доступ к ноутбукам всем присутствующим на воркшопе, да так, чтобы они друг другу не мешали. Каждый работал во временном докер-контейнере.

Последнюю штуку нашёл Антон Кортунов, модератор секции Backend, поставил ее и настроил. Это заставило меня по приезду поближе познакомиться с докером. Мне удалось достаточно быстро разобраться куда нужно вводить три строчки из документации и поднять дроплет с этим делом на Digital Ocean. Уже через неделю после YaC я смог работать с 15 студентами на этом дроплете, без бесконечных объяснений как установить тот или иной питоновский модуль.

Ещё раз огромное спасибо Антону и Насте из Яндекса за приглашение и очень профессиональную работу.