Записки дебианщика

Вычислительный танк заряженный свободой: ThinkPad T420 и Debian Linux

2012-06-04T02:14:00.000+04:00

Послее очередной серии отказов проверенного временем железа выяснилось, что для проведения масштабных симуляций и написания пачки статей в арсенале автора имеет место быть только Toshiba NB100. Нетбук он приличный, конечно, и на конференцию или поездку его взять самое оно. Но для масштабной работы это, конечно, не серьёзно. Отчаявшись найти что-нибудь достойное среди унылого ширпотреба от HP, Acer и Samsung, автор обратился к сайту Lenovo. Памятуя о более чем достойном планшете Thinkpad, автор спросил у сайта Леновы: а что, отцы, может вы и ноутбуки приличные делаете? Вот так автор стал счастливым обладателем нового Lenovo Thinkpad T420.

Как говорил Стив Джобс, компьютер это как велосипед для мозга. Вот и автору потребовался новый ноутбук, который был бы полноценной заменой десктопу - с удобной клавиатурой, нормальным экраном, поддерживаемым в Linux железом и с DVD-RW для бекапов. После долгих мук, выбор пал на крепко сбитый и ладно скроенный Lenovo Thinkpad T420, и после пары ударов в бубен, обтачивая Debian Squeeze, Debian Lenny и бекпорты до съедобного состояния, ноутбук заработал на полную мощь. Но об этом чуть ниже.

Каков собою Т420?

В отличие от ~~непотребных~~ ширпотребных поделок с облезающим пластиком, кои имеются в наличии в Эльдорадах местного разлива, T420 выглядит и ощущается как настоящий танк рядом с жигулями и запорожцами от HP и самсунга. Вот он:

На картинках он выглядит огромным чемоданом, но в жизни он компактнее многих аналогичных ноутбуков от, скажем, HP. Яркий матовый чёрт подери экран 1366x768 с LCD-подсветкой радует глаз настолько, что часто приходится снижать яркость подсветки.

Особенно хочется отметить клавиатуру - она прекрасна. Нет, серьёзно: у Dell отличные мягкие клавиатуры, на которых удобно и приятно набирать тексты, но Lenovo это просто нечто. С коротким ходом, мягкая и с тихим кликом, набирать тексты на ней просто одно удовольствие. Ну и легендарный красный сексапильный трекпоинт в центре клавиатуры, куда ж без него.

В закрытом виде Thinkpad T420 представляет собой брутальный кирпичик без всяких блескучих мигалок:

Также весьма интересно, что в Thinkpad T420 нет жесткого крепления винчестера и корпуса: жесткий диск расположен между резиновыми прокладками:

Это отражается на статистике отказов жесткого диска: вот тут говорят, что ноутбуки от Леновы к ним приходят на ремонт довольно редко. Это, конечно, не означает, что владелец ноутбука Lenovo может забыть про резервные копии.

Как попасть в настройки BIOS у Lenovo Thinkpad T420?
Непраздный вопрос, кстати. При загрузке рекомендуют жать синюю кнопку ThinkVantage, но это не работает. А на самом деле нужно нажимать F1 хотя время для этого отведено немного. Список устройств для загрузки можно запросить кнопкой F12, и загрузиться с DVD-RW, USB-флешки, или сети по выбору.

Что под килтом у T420?

Весьма мощное железно и очень хорошая система охлаждения. Буквально, под килтом вот что:

На сайте Lenovo можно кастомизировать свой ноутбук и выкинуть из него ненужное (типа сканера отпечатков пальцев) и добавить зато что-то полезное (типа более быстрого процессора и больше памяти). Что интересно, доступен для скачивания полный мануал по разборке ноутбука. Мало ли, пригодится...

Ноутбук Lenovo Thinkpad в конфигурации, которую я выбрал на официальном сайте, больше напоминает вычислительный танк:

Processor:	Intel Core i7-2640M Processor (2.80GHz, 4MB L3, 1333MHz with Intel HD Graphics 3000)
Operating system:	Debian GNU/Linux i386 Special Virens ``Old School Warm Tube'' Remix
Display type:	14.0" HD LED backlight Anti-Glare (1366 x 768)
System graphics:	Intel HD Graphics 3000 processor graphics with dynamic frequency
Total memory:	8 GB PC3-10600 DDR3 SDRAM 1333MHz SODIMM Memory (2 DIMM)
Keyboard:	Kosher Soft IBM Keyboard - US English
Pointing device:	UltraNav (TrackPoint and TouchPad) without Fingerprint Reader
Camera:	720p HD Camera with Microphone
Hard drive:	500GB Hard Disk Drive, 7200rpm
Optical device:	HL-DT-ST DVDRAM GT50N
System expansion slots:	Express Card Slot, 4-in-1 Card Reader
Audio device:	Intel Corporation Cougar Point High Definition Audio
Bluetooth:	Broadcom Bluetooth 3.0 with antenna
Integrated WiFi wireless LAN adapters:	Intel Centrino Advanced-N 6205 AGN
Ethernet:	Intel PRO/1000 Network (Driver e1000e)

В ноутбуке есть 3 порта USB 2.0, один USB 3.0 (туда можно засунуть и USB 2), и один порт eSATA. Ноутбук удивительно тихий и холодный - почти не греется, что поражает, особенно учитывая огромную мощь внутри.

Ноутбук был заказан на официальном сайте Lenovo и почти все переключатели на сайте были выставлены на максимум, что влетело автору в 1500$. Доставку в нашу глухую австралийскую деревню Ленова сделала бесплатной.

Дальнейшие приключения по вживлению в ноутбук Дебиана с элементами секса и насилия подсвечены следующими цветами:

Работает нормально
Пытается отчасти работать
Не работает вообще

История с хорошим концом: не смотря на некоторое количество эротических приключений с элементами техноложества, о чём ниже, T420 в конце концов заработал на полную мощь.

Первый подход к штанге: попытка запалить Debian Lenny на T420
У автора есть уже настроенный образ с Debian Lenny, матлабом, гнуплотом, шахматами и поэтессами, готовыми к немедленному употреблению. Что удобно, ибо работы много, времени мало, и лишних движений делать не хочется. А с Debian всё легко и просто: всякая железяка, попавшая в крепкие руки автора, сразу же форматируется и на чистый винчестер заливается настроенный образ Lenny легко и просто.

Итак, Debian Lenny c ядром Linux 2.6.26 загрузился с переносного винчестера, но на этом всё хорошее закончилось. В общем и целом, выглядело это вот так:

Да, картинка описывает ситуацию предельно точно:

Процессор: из 4 ядер доступно только 2.
Память: из 8 Гб доступно только 3 (PAE-то нету)
Дисплей и графика: 1024х768 растянут на широкий формат, тормозит безбожно, ибо драйвер VESA.
Жёсткий диск: работает.
Оптический привод: читает и пишет DVD/CD без проблем.
Карты памяти: не обнаруживаются вообще.
Звук: alsaconf пожимает плечами - звука нет.
Ethernet: отсутствует.
WiFi: об этом даже думать не стоит.
ACPI кнопки: никакой реакции.

Иксы стартуют только в Vesa и только в кривом разрешении: получается типа 1024х768, только растянутые на широкий формат. В общем не густо, прямо скажем. Даже ядро 2.6.31 оказывается устаревшее для этого ноутбука. Автор вспомнил свой первый Debian Woody - там хотя бы сеть поднялась сразу... Ладно, придётся нам обновляться на Squeeze.

Становая тяга: обновление до Debian Squeeze
Как ни удивительно, апдейт не принёс никаких позитивных улучшений вообще - всё 1:1 как с Ленни, только теперь иксы сказали, что знают про графическую карту, но попытка переместить окно приводит к слайд-шоу. Вот так выглядел рабочий стол после обновления до Squeeze:

Всё растянуто на 1366х768. Такой хоккей нам, естественно, не нужен. А нужно срочно обновлять иксы и ядро из Squeeze Backports.

Сухой остаток прежний: стало только хуже (приложения KDE4), при этом не добавив позитива (ядро устройства не поддерживает). Поэтому продолжаем обновляться и тягаем Backports.

Результативный рывок: Debian Squeeze + Squeeze Backports + Lenny
Продолжая курочить систему в попытках сделать из неё работоспособную машину, автор начал тягать бэкпорты из Squeeze Backports в поисках ядра, иксов и свежих приложений. Этому помогла очень дельный пост другого владельца T420 и заядлого дебианщика. Дальнейшее ~~битва за урожай~~ повествование описывает подъём железа и войну за нормальное софтверное рабочее окружение.

Подключение бекпортов в /etc/apt/sources.list происходит строчкой:
deb http://backports.debian.org/debian-backports squeeze-backports main

и далее пишем

# apt-get update

Но до этого хорошо бы получить хотя бы проводную сеть, так что нужно выкачивать ядро из Backports вручную и ставить его.

После установки и загрузки ядра 3.2.0 жить стало лучше, жить стало сильно веселее:

Linux dot 3.2.0-0.bpo.1-686-pae #1 SMP Sat Feb 11 14:57:20 UTC 2012 i686 GNU/Linux

Экран
Видеокарте тоже полегчало - при загрузке сразу врубается Framebuffer на полное разрешение и далее у иксов не возникает вопросов, какое разрешение ставить.

Кстати, это может неслабо напугать по первому разу: сначала ядро загружается нормально, крупными буквами сыпя привычные строчки про обнаружение устройств. Потом экран резко гаснет, и включается framebuffer с мелким шрифтом, и загрузка продолжается. Слабонервным заготовить валидол.

Потом привычно грузятся иксы в нормальном разрешении 1366х768, что радует. При этом радует то, что сразу доступно аппаратное ускорение:

think@dot:~$ glxinfo
name of display: :0.0
display: :0 screen: 0
direct rendering: Yes
server glx vendor string: SGI
server glx version string: 1.4

Файл xorg.conf иксами читается, поэтому старые настройки переключения клавиатуры сразу стали доступны.

Самое замечательное, что нет никаких проблем со внешним монитором - всё отлично работает через xrandr:

xrandr --output LVDS1 --mode 1366x768 --output VGA1 --right-of LVDS1 --mode 1024x768

Включает внешний монитор, и можно перетащить туда окно с Kdvi и править там статьи.

Звук!
Загудели, заиграли провода:

# alsactrl init

нашлась звуковая карта, которая корректно заработала с наушниками и колонками из коробки:

[ 8.036368] input: HDA Digital PCBeep as /devices/pci0000:00/0000:00:1b.0/input/input11
[ 8.040885] input: HDA Intel PCH HDMI/DP,pcm=8 as /devices/pci0000:00/0000:00:1b.0/sound/card0/input12
[ 8.040974] input: HDA Intel PCH HDMI/DP,pcm=7 as /devices/pci0000:00/0000:00:1b.0/sound/card0/input13
[ 8.041057] input: HDA Intel PCH HDMI/DP,pcm=3 as /devices/pci0000:00/0000:00:1b.0/sound/card0/input14

В коробке с новым ядром Linux 3.2.0 вообще обнаружилось много приятных мелочей. Так, из коробки заработали почти все функциональные клавиши - даже лампочка подсветки включается по Fn+PgUP. Вот автор сейчас сидит в темноте и строчит этот пост как раз с такой подсветкой. Мелочь, а Ленова :-)

Проводная сеть

Нашлась новым ядром интеловская сетевая карта:

[ 1.347541] e1000e: Intel(R) PRO/1000 Network Driver - 1.5.1-k
[ 1.347605] e1000e: Copyright(c) 1999 - 2011 Intel Corporation.
[ 1.347698] e1000e 0000:00:19.0: PCI INT A -> GSI 20 (level, low) -> IRQ 20

и Интернет потёк сразу широкой гигабитной рекой.

Беспроводная сеть Intel Centrino Advanced-N 6205
В ядре 3.2.0 всё уже есть, и модуль iwlwifi уже должен быть собран, но на всякий случай:

# apt-get install firmware-iwlwifi

И далее идём на интеловский сайт за firmware. Сайт организован весьма бестолково, ибо постоянно отправляет на intellinuxwireless.org
где всё свалено в одну кучу. В этой куче и лежит золотой ключик:

6005 Images - for Intel Centrino Advanced-N 6205

Скачиваем фирмварь (она называется как-нибудь iwlwifi-6000g2a-ucode-17.168.5.3.tgz), распаковываем и кладём в директорию:

/lib/firmware

Всё, после этого (перезагрузка системы или включение wicd) загорится лампочка WiFi и Интернет польётся широкой рекой.

Также стоит установить wicd network manager:

apt-get install wicd wicd-gtk

который в Squeeze весьма хорош и отлично делает своё дело:

При этом с новым ядром проводная сеть (Ethernet) уже должна работать из коробки, радуя душу вебдванольщика гигабитным интернетом.

Broadcom Corp. Bluetooth Controller
Синезубый передатчик встроен в ноутбук и из коробки поддерживается ядром Linux 3.2.0. Для работы с файлами (по большей части переброска файлов между смартфоном и планшетом) удобнее поставить какие-нибудь графические приблуды вроде bluemon:

apt-get install bluez-utils bluemon

При этом можно легко спаривать устройства:

и пересылать файлы между ними.

Можно также попробовать gnome-bluetooth, который более симпатичен и функционален, но он за собой потащил зачем-то обновления для samba и ntfsprogs (пути гномеров неисповедимы....).

На всякий случай, включение и выключение Bluetooth можно делать через файловую систему /proc: состояние Bluetooth хранится в файле /proc/acpi/ibm/bluetooth поэтому если вы хотите выключить адаптер, даёте команду:

# echo disable > /proc/acpi/ibm/bluetooth

При этом на передней панели гаснет лампочка синего зуба.

ACPI и функциональные кнопки

Из коробки работает засыпание по закрытию крышки ноутбука или по Fn+F4. Автор всегда считал это буржуазным излишеством и нездоровым развратом, ничего, кроме проблем не приносящим. Но раз работает - пусть будет.

Почти все функциональные кнопки работают, если загрузить модуль ядра thinkpad_acpi:

# modprobe thinkpad_acpi

При этом ядро выдаст в логах (можно посмотреть с помощью dmesg) нечто жизнеутверждающее в стиле:

[ 7.054988] thinkpad_acpi: ThinkPad ACPI Extras v0.24
[ 7.060464] thinkpad_acpi: http://ibm-acpi.sf.net/
[ 7.060610] thinkpad_acpi: ThinkPad BIOS 83ET66WW (1.36 ), EC unknown
[ 7.060758] thinkpad_acpi: Lenovo ThinkPad T420, model 4177CTO
[ 7.061662] thinkpad_acpi: detected a 8-level brightness capable ThinkPad
[ 7.061939] thinkpad_acpi: radio switch found; radios are enabled
[ 7.063925] thinkpad_acpi: rfkill switch tpacpi_bluetooth_sw: radio is unbloc

При этом c ThinkPad ACPI Extras v0.24 работают кнопки:

Fn+PgUp - включить фонарик над камерой для (хилой) подсветки клавиатуры (владельцы маков снисходительно улыбаются);
Fn+Home и Fn+Home - увеличить и уменьшить яркость монитора;
Fn+F7 - переключаться между внешним и штатным монитором;
Fn+F5 - включить и выключить беспроводную сеть (тут есть нюанс: оно выключает WiFi с концами, до следующей перезагрузки);
Fn+F4 - отправить ноутбук в спящий режим (таки работает, на удивление, без сбоев).

Как говорят арчеводы, ACPI is well supported here. No obvious troubleshoots. Им, арчеводам, хочется верить, но:

Fn+F12 - типа suspend to disk, но он уводит машину в летаргический сон навсегда (ну, до включения кнопкой POWER);
Fn+F8 - по идее должен выключать тачпад, но не делает этого (автор уже начинает любить этот сексапильный трекпоинт);
Fn+F5 - работает, как и обещано, в режиме "kill_switch", то есть убивает беспроводную сеть надёжно, аж до следующей перезагрузки.

Но это мелочи. На всякий случай, в ядре это включается так:

Device Drivers  --->

[*] X86 Platform Specific Device Drivers  --->

<M>   ThinkPad ACPI Laptop Extras

[ ]     Maintainer debug facilities

[ ]     Verbose debug mode

[ ]     Allow control of important LEDs (unsafe)

[ ]     Video output control support

[ ]     Support NVRAM polling for hot keys

Ну и яркость монитора теперь можно регулировать хардкорным способом, через файловую систему /sys: там есть файл /sys/class/backlight/acpi_video0/brightness в который можно передать параметр яркости (от 0 до 15, где 0 это минимальная подсветка, а 15 максимальная).

... с вентиляторным заводом заключать договора ...

Отдельная история про вентилятор. По умолчанию он работает вполне сносно, но регулировки температуры у автоматики какие-то странные. Поэтому лучше установить thinkfan:

apt-get install thinkfan

и немного поиграться с его конфигом. При этом в качестве сенсора температуры можно указать следующие устройства:

sensor /sys/devices/platform/coretemp.0/temp1_input
sensor /sys/devices/platform/coretemp.2/temp1_input
sensor /sys/devices/virtual/hwmon/hwmon0/temp1_input

Сенсор выдаёт температуру в миллицельсиях, так что 32000 означает не то, что ваш ноутбук упал на Солнце, а всего лишь 32 градуса. Мой рабочий конфиг /etc/thinkfan.conf

# Syntax:
# (LEVEL, LOW, HIGH)
# LEVEL is the fan level to use (0-7 with thinkpad_acpi)
# LOW is the temperature at which to step down to the previous level
# HIGH is the temperature at which to step up to the next level
# All numbers are integers.
#

sensor /sys/devices/virtual/thermal/thermal_zone0/temp
sensor /sys/devices/virtual/hwmon/hwmon0/temp1_input

(0, 0, 20)
(1, 20, 40)
(2, 40, 50)
(3, 50, 52)
(4, 52, 55)
(5, 55, 65)
(6, 65, 70)
(7, 67, 32767)

В параметры демона /etc/modprobe.d/thinkfan.conf стоит добавить строчку:

options thinkpad_acpi fan_control=1

Посмотреть скорость вращения пропеллера и его уровни можно в /proc:

$ cat /proc/acpi/ibm/fan

при этом мы увидим:

status: enabled
speed: 3230
level: auto
commands: level <level> (<level> is 0-7, auto, disengaged, full-speed)
commands: enable, disable
commands: watchdog <timeout> (<timeout> is 0 (off), 1-120 (seconds))

После запуска:

# thinkfan

демон выдаст сообщение типа:

Config as read from /etc/thinkfan.conf:
Fan level Low High
0 0 20
1 20 40
2 40 50
3 50 52
4 52 55
5 55 65
6 65 70
7 67 32767
Daemon PID: 2103

Обращаю внимание, что демон туп и примитивен, и почти не проверяет конфиг, так что будьте бдительны.

Управления частотой процессора

Для того, чтобы продлить время работы от батарей и несколько охладить ноутбук, можно установить:

apt-get install cpufrequtils cpudyn cpufreqd

После этого с помощью утилиты cpufreq-set можно рулить частотой процессора для каждого ядра (а их четыре) отдельно. Команда

$ cpufreq-info

расскажет нам, какой режим используется процессором в данный момент:

cpufrequtils 007: cpufreq-info (C) Dominik Brodowski 2004-2009
Report errors and bugs to cpufreq@vger.kernel.org, please.

analyzing CPU 0:
driver: acpi-cpufreq
CPUs which run at the same hardware frequency: 0 1 2 3
CPUs which need to have their frequency coordinated by software: 0
maximum transition latency: 10.0 us.
hardware limits: 800 MHz - 2.80 GHz
available frequency steps: 2.80 GHz, 2.80 GHz, 2.60 GHz, 2.40 GHz, 2.20 GHz, 2.00 GHz, 1.80 GHz, 1.60 GHz, 1.40 GHz, 1.20 GHz, 1000 MHz, 800 MHz
available cpufreq governors: powersave, conservative, userspace, ondemand, performance
current policy: frequency should be within 800 MHz and 2.80 GHz.
The governor "ondemand" may decide which speed to use
within this range.
current CPU frequency is 800 MHz.
cpufreq stats: 2.80 GHz:5,36%, 2.80 GHz:0,10%, 2.60 GHz:0,12%, 2.40 GHz:0,11%, 2.20 GHz:0,09%, 2.00 GHz:0,12%, 1.80 GHz:0,14%, 1.60 GHz:0,13%, 1.40 GHz:0,22%, 1.20 GHz:0,18%, 1000 MHz:0,23%, 800 MHz:93,18% (13545)

Вывод для остальных трёх ядер не приводится для краткости. Далее примеры настроек:

cpufreq-set --min 800MHz --max 1.4GHz -c 0 -g 'powersave'

для работы от батарей, когда хочется продержаться подольше. Можно сделать так:

cpufreq-set --min 800MHz --max 2.8GHz -c 0 -g 'ondemand'

для того, чтобы сбить температуру при долгой работе по набору текста, чтобы ноутбук не нагревался (максимальные настройки дают температуру +55 градусов, ondemand же +45). Если же нужно проводить моделирование, то врубаем машину на всю катушку:

cpufreq-set --min 2.8GHz --max 2.8GHz -c 0 -g 'performance'

и так для каждого ядра.

Ой яи яи ёё, сееее-лаааа батарейка!

Не знаю как насчёт 8 часов, обещанных Леновой, но по моим оценкам оно как-то ближе к 4 часам. Вот скриншот после полутора часов работы (режим ondemand, правка текста, никаких симуляций.)

Батарея 6-cell, на 9-cell меня задушила жаба по многим причинам:

это НЕ ноутбук для поездок;
эта машина для вычислений (замена десктопа), стоит на столе со стабильным электропитанием. От батареек требуется продержаться до выключения машины - 5-10 минут, не больше.
максимум автономной работы - час или полтора, на встрече с шефом и демонстрации ему результатов.

Некоторое время спустя kpowersave из Lenny начал выдавать что-то маловразумительное, пытаясь меня убедить, что батарей целых три:

В настоящее время ведётся расследование этого странного факта.

Общее впечатление от Debian Squeeze на ~~Lenovo~~ IBM Thinkpad T420
Картина после описанных процедурок радикально приятнее:

Процессор: все 4 ядра работают.
Память: все 8 Гб доступны (через PAE)
Дисплей и графика: полное разрешение 1366х768, драйвер i915, аппаратное ускорение включено.
Жёсткий диск: тихо но быстро шуршит.
Карты памяти: SD-карты обнаруживаются и монтируются.
Звук: играет и поёт.
Ethernet: качает и радует гигабитом.
Bluetooth: работает и перекидывает файлы.
Оптический привод: читает и пишет DVD/CD без проблем.
WiFi: подключается без проблем к открытым и шифрованным сетям с помощью wicd.
ACPI кнопки: самые нужные работают.

Ну и как оно всё работает?
Превосходно. Как выглядит мой рабочий стол после наката Backports (IceWM, тема Korstro, обои с vladstudio):

Необходимые уточнения: мне нужно ехать, шашечки опционально, и чтобы колёса были круглыми. Поэтому IceWM из Lenny (а не из сквизи, где его сломали), KDEшные программы из Lenny - там человеческий KDE, а не это убожество с плазмой и гномьими закидонами.

А вот как выглядит всё вместе на работе:

Как и обещано, ``Old School Warm Tube'' - олдскульный тёплый ламповый ремикс Debian. Совершенно лицензионный, кстати:

[оригинал в SVG, и ещё один]. Неважно, что половина софта пятилетней давности, главное - что работает и греет душу.

Возможности настройки GRUB2 в Linux: от серьезных параметров до бесполезных украшательств

2012-05-21T07:00:00.000+04:00

Эта статья является вольным переводом GNU GRUB Manual, структурированной выжимкой по интересующей нас теме. Мы не будем рассматривать вопрос установки и запуска GRUB'ом той или иной операционной системы. Мы посмотрим, какие возможности предоставляет GRUB2 версии 1.99 для собственной настройки. Ведь, как известно, "в Линукс можно настроить абсолютно все! И вы будете настраивать абсолютно все!"

Чем же GRUB2 лучше, чем GRUB Legacy? Да, собственно, для большинства пользователей практически ничем. Потенциально, он более гибок, в нем раньше появляются некоторые новые возможности (как, например, поддержка ext4). У GRUB2 более продвинутая поддержка таблицы разделов GPT и загрузка с (U)EFI. Нужно это, если жёсткий диск имеет объём более 2ТБ. Но если вы обычный пользователь и у вас уже установлен GRUB Legacy, то нет практического смысла менять его на GRUB2, по крайней мере, я его не вижу. Если же вы ставите систему с нуля, то все же стоит отдать предпочтение GRUB2 как более перспективной (и уже стабильно работающей) разработке.

Так нас обычно встречает компьютер унылой менюшкой GRUB2. Мало того, что картинка не балует жизнерадостностью, так она еще и не совсем соответствует действительности - в моем случае, установленный BackTrack был опознан как Ubuntu. Посмотрим, как все это можно исправить.

Что нужно знать
Собственно конфигурационный файл находится в /boot/grub/grub.cfg, но его редактирование особого смысла не имеет. Дело в том, что этот файл создается автоматически утилитой update-grub на основе файла настроек /etc/default/grub и скриптов, находящихся в /etc/grub.d/. Таким образом, если вы не хотите, чтобы ваши изменения терялись, например, при обновлении ядра, правильным способом настройки будет редактирование файла настроек, а при отсутствии требуемого параметра в файле настроек, редактирования конфигурационных скриптов. Чтобы изменения вступили в силу необходимо запустить update-grub.

При настройке нам может понадобится выйти в командную строку GRUB. Для этого в меню выбора ОС необходимо нажать 'c', для возврата - 'esc'. Командная строка поддерживает автодополнение по Tab.

Чтобы в процессе работы в командной строке получить доступ к файлу, находящемуся не в корневой файловой системе (получить доступ к файлу, находящемуся в корневой файловой системе можно как обычно /path/to/file), необходимо знать наименование устройств и разделов. Например:

(hd0,1)

означает первый жесткий диск (устройства нумеруются с 0) и на нем первый раздел (разделы нумеруются с единицы), что соответствует /dev/sda1.

Если при наборе команды, например:

set root=(

нажать Tab, то GRUB сам предложит вам список возможных устройств:

possible devices are:
hd0 fd0

Если нажать Tab при набранной команде

set root=(hd0,

то вам будет предложен список разделов на первом жестком диске. Ну и для набранной команды

set root=(hd0,1)/

будет предложен список файлов на данном разделе.

Так же при настройке GRUB может оказаться полезной команда grub-mkconfig, которая позволяет посмотреть предварительный вариант файла grub.cfg без изменения реального конфигурационного файла. Собственно, update-grub выполняет grub-mkconfig с параметром вывода в файл /boot/grub/grub.cfg.

GRUB использует unicode, т.е. создание пункта меню на русском языке проблем вызвать не должно.

Простейший пример настроек

Рассмотрим простейший пример файла настроек. Если вам захочется чего-то большего, чем описано в этом разделе, обратите внимание на раздел "Параметры /etc/default/grub".

Большинству пользователей, к коим я отношу и себя, понадобится всего несколько параметров для настройки функциональности GRUB2. Мой файл настроек выглядит так (за вычетом неинтересных комментариев):

GRUB_DEFAULT=0
GRUB_TIMEOUT=3

#GRUB_TIMEOUT=0
#GRUB_HIDDEN_TIMEOUT=1
#GRUB_HIDDEN_TIMEOUT_QUIET=true

GRUB_DISTRIBUTOR=`lsb_release -i -s 2> /dev/null || echo Debian`
GRUB_CMDLINE_LINUX_DEFAULT="quiet"
GRUB_CMDLINE_LINUX=""

GRUB_GFXMODE=1280x768
GRUB_GFXPAYLOAD_LINUX=keep
GRUB_BACKGROUND="/root/picture.jpeg"

Наиболее востребованы бывают первые два параметра, отвечающие за пункт меню по умолчанию и время ожидания выбора. Если у вас установлена всего одна ОС, то можете вместо GRUB_TIMEOUT=3 раскомментировать следующие три строчки - в этом случае выбор меню GRUB2 отображаться не будет, если вы не нажмете Esc. На это у вас будет одна секунда (или столько, сколько вы зададите параметром GRUB_HIDEN_TIMEOUT). После изменения этих настроек не забываем выполнить update-grub.

Если вы хотите изменить имя вашей операционной системы в меню выбора GRUB2, можете воспользоваться для этого параметром GRUB_DISTRIBUTOR.

Для управления списком параметров, передаваемых ядру Linux, GRUB2 предоставляет команды GRUB_CMDLINE_LINUX и GRUB_CMDLINE_LINUX_DEFAULT. Мы не будем вдаваться в подробности и описывать разные параметры, поскольку это относится уже к теме загрузки Linux.

Последние три параметра отвечают за настройку внешнего вида GRUB2. Если вы любите красоту во всем, даже в меню загрузчика, то можете ознакомится с предоставляемыми для этого возможностями в следующей части.

Настройка внешнего вида
В этой части мы посмотрим, как можно улучшить вид GRUB2.

Для начала поменяем разрешение экрана. Чтобы узнать текущее разрешение, в командной строке GRUB2 вводим команду

set

и смотрим на параметр gfxmode. Список поддерживаемых разрешений можно получить командой vbeinfo. Теперь загружаемся в дебиан, находим в конфигурационном файле /etc/default/grub параметр GRUB_GFXMODE, (раскомментируем его, если он закомментирован и добавляем, если его нет) и назначаем его: GRUB_GFXMODE=1280x768 или GRUB_GFXMODE=1280x768x32 (цветность можно не указывать). Не забываем выполнить update-grub, перезагружаемся, получаем:

Для того, чтобы разрешение экрана до запуска иксов оставалось таким же, как в GRUB, можно установить параметр:

GRUB_GFXPAYLOAD_LINUX=true

Теперь попробуем поставить красивую картинку в качестве фона. Для начала можно посмотреть как она будет выглядеть. В консоли GRUB сначала подгружаем нужные модули командой

insmode jpeg

(или png, tga) и можем устанавливать фон:

background_image /path/to/picture.jpeg

Тут помним, что смонтирован только корневой раздел. До остальных можно добраться указав идентификатор раздела, например, (hd0,1)/path/to/picture.jpeg.

Установить картинку в качестве фона можно несколькими способами, опишем два из них. Самый простой - скопировать картинку в /boot/grub/ и как всегда не забыть запустить update-grub. Второй способ (и он является для GRUB'а более приоритетным) - установить параметр: GRUB_BACKGROUND="/path/to/picture.jpeg". Можно не беспокоиться, что картинка находится где-то, куда GRUB не сможет добраться во время загрузки - если он это поймет, то скопирует ее себе в буфер. Итак, получаем:
На фоне такой картинки серый цвет надписей смотрится как-то уныло. К сожалению, поменять цвет шрифта в файле настроек нельзя, поэтому нам придется лезть в настроечные скрипты, к счастью, в данном случае это совсем просто. Файл /etc/grub.d/40_custom предназначен для пользовательской настройки. Добавляем в конец:

set menu_color_normal=red/black
set menu_color_highlight=yellow/black
set color_normal=yellow/black

Получаем:
Установить можно четыре параметра: color_highlight, color_normal, menu_color_highlight, menu_color_normal. Все они должны быть вида color-foreground/color-background, устанавливается, соответственно, цвет текста и цвет фона.

Допустимы цвета:

blue
green
cyan
red
magenta
brown
light-gray
dark-gray
light-blue
light-green
light-cyan
light-red
light-magenta
yellow
white
black

Если в качестве фона установлен black, то фон будет прозрачным.

Как и в случае с фоновым изображением, цвета текста можно предварительно опробовать используя командную строку GRUB. Достаточно ввести команду

set one_of_4_color_parametrs first-color/second-color

Так же, GRUB поддерживает более сложный механизм настройки внешнего вида. Можно установить параметр GRUB_THEME="path/to/theme.file". Впрочем, вопрос создания своих файлов с темами для GRUB мы пока рассматривать не будем.

Редактирование скриптов
Расскажем немного про редактирование скриптов формирования конфигурационного файла. Нам уже приходилось влезать в скрипты создания конфигурационного файла GRUB, теперь сделаем это подробнее. При редактировании скриптов удобно пользоваться командой grub-mkconfig, чтобы не портить существующий файл конфигурации.

При создании конфигурационного файла используются все скрипты из директории "/etc/grub.d/", запускаются они в алфавитном порядке. В Debian там находятся:

00_header отвечает за загрузку основных параметров и библиотек;
05_debian_theme отвечает за оформление внешнего вида;
10_linux отвечает за формирование записей в меню, соответствующих ОС-linux, в которой стоит GRUB;
20_linux_xen - аналогично предыдущему;
30_os-prober отвечает за обнаружение и включение в список остальных ОС;
40_custom и 41_custom - пользовательские скрипты.

Для наглядности поставим себе задачу заменить надпись "Ubuntu" в меню загрузки на "BackTrack Linux", убрать для него recovery режим и поставить выше Windows. Поставленная нами задача относится к скриптам 30_os-prober.

Объяснить GRUB, что не надо формировать запись меню для определенного раздела, достаточно просто. В цикле перебора установленных ОС:

for OS in ${OSPROBED} ; do

где-нибудь после определения параметра DEVICE надо добавить строчки:

if [ "$DEVICE" = "/dev/sda2" ] ; then
continue
fi

Тогда никакая информация об ОС на /dev/sda2 в конфигурационный файл не попадет. Теперь сами прописываем информацию о нашей системе до вышеозначенного цикла, заменяя параметры, которые нам не подходят. При этом опираемся на то, как формируются аналогичные записи в цикле. Результат будет выглядеть так (изменения выделены жирным шрифтом):

DEVICE="/dev/sda2"
LINUX="`linux-boot-prober ${DEVICE} 2> /dev/null | tr ' ' '^' | paste -s -d ':'`"
prepare_boot_cache=

LROOT="`echo ${LINUX} | cut -d ':' -f 1`"
LBOOT="`echo ${LINUX} | cut -d ':' -f 2`"
LLABEL="`echo ${LINUX} | cut -d ':' -f 3 | tr '^' ' '`"
LKERNEL="`echo ${LINUX} | cut -d ':' -f 4`"
LINITRD="`echo ${LINUX} | cut -d ':' -f 5`"
LPARAMS="`echo ${LINUX} | cut -d ':' -f 6 | tr '^' ' '`"

if [ -z "${LLABEL}" ] ; then
LLABEL="${LONGNAME}"
fi

if [ "${LROOT}" != "${LBOOT}" ]; then
LKERNEL="${LKERNEL#/boot}"
LINITRD="${LINITRD#/boot}"
fi
cat << EOF
menuentry "BackTrack Linux" --class gnu-linux --class gnu --class os {
EOF
save_default_entry | sed -e "s/^/\t/"
if [ -z "${prepare_boot_cache}" ]; then
prepare_boot_cache="$(prepare_grub_to_access_device ${LBOOT} | sed -e "s/^/\t/")"
fi
printf '%s\n' "${prepare_boot_cache}"
cat << EOF
linux ${LKERNEL} ${LPARAMS}
EOF
if [ -n "${LINITRD}" ] ; then
cat << EOF
initrd ${LINITRD}
EOF
fi
cat << EOF
}
EOF

При помощи команды grub-mkconfig проверяем, что конфигурационный файл не содержит ошибок, запускаем update-grub, получаем:

Параметры /etc/default/grub
Рассмотрим более подробно большинство параметров, которые можно задать для настройки GRUB2.

GRUB_DEFAULT отвечает за то, какой пункт загружать по умолчанию. Может быть равен номеру (GRUB_DEFAULT=0 - в нашем случае будет загружать Debian в обычном режиме), точному названию (GRUB_DEFAULT="Microsoft Windows XP Professional (on /dev/sda1)" - будет, как это не удивительно, загружать Windows), в паре с GRUB_SAVEDEFAULT указанию, что надо загружать предыдущий выбор (GRUB_DEFAULT=keep, также это значение нужно установить для использования команд grub-set-default и grub-reboot).

GRUB_SAVEDEFAULT=true в паре с GRUB_DEFAULT=keep указывает GRUB, что по умолчанию нужно ставить предыдущий выбор.

GRUB_TIMEOUT - время в секундах, в течении которого GRUB ждет выбора, прежде чем загрузить значение по умолчанию. Можно установить равным 0, чтобы GRUB не показывал экран выбора ОС, или любое отрицательное значение для отключения таймера.

GRUB_HIDDEN_TIMEOUT указывает сколько секунд ждать перед тем, как показать экран загрузки, если не нажата клавиша. Учитывается, только когда не установлены другие ОС. Если GRUB_HIDDEN_TIMEOUT_QUIET=true, то во время ожидания не показывается таймер.

GRUB_DISTRIBUTOR - название текущего дистрибутива, используется при формировании соответствующей записи в меню выбора ОС.

GRUB_CMDLINE_LINUX, GRUB_CMDLINE_LINUX_DEFAULT - список параметров, используемых при запуске ядра Линукс. Параметры GRUB_CMDLINE_LINUX используются как для обычного режима загрузки, так и для recovery. Параметры GRUB_CMDLINE_LINUX_DEFAULT используются только обычным режимом. Аналогично используются параметры GRUB_CMDLINE_NETBSD, GRUB_CMDLINE_NETBSD_DEFAULT GRUB_CMDLINE_XEN, GRUB_CMDLINE_XEN_DEFAULT для систем NetBSD и Xen.

GRUB_DISABLE_RECOVERY=true - тип загрузки recovery не будет создаваться.

GRUB_DISABLE_OS_PROBER=true - убрать проверку наличия других установленных ОС.

GRUB_GFXMODE=1280x768x32 - установить разрешение экрана. Третий параметр (цветность) можно опустить. Список доступных разрешений можно посмотреть командой vbeinfo в командной строке GRUB2.

GRUB_GFXPAYLOAD_LINUX=keep - разрешение экрана будет сохранено при передаче загрузки ядру Linux.

GRUB_BACKGROUND="/path/to/picture.jpeg" - установить фоновую картинку.

GRUB_THEME="path/to/theme.file" - установить файл тем.

Кроме того, GRUB имеет ряд специфических возможностей, которые вряд ли пригодятся обычному пользователю, но на всякий случай кратко опишем их:

возможность отключить использование GRUB'ом специальной системы идентификаторов для определения корневой файловой системы (GRUB_DISABLE_LINUX_UUID);
возможность исключать поврежденные блоки памяти (GRUB_BADRAM);
возможность загружать дополнительные модули (GRUB_PRELOAD_MODULES);
возможность управлять терминалами ввода и вывода (GRUB_TERMINAL_INPUT, GRUB_TERMINAL_OUTPUT, GRUB_TERMINAL, GRUB_SERIAL_COMMAND);
возможность воспроизводить звуковой сигнал при запуске (GRUB_INIT_TUNE).

Настройка безопасности
Мало кому такая возможность может понадобиться, но она есть и заслуживает того, чтобы о ней рассказали. GRUB предоставляет возможность разграничения прав доступа. Можно создавать обычных пользователей, которые могут загружать разрешенные им ОС, а так же суперпользователей, которые могут загружать любую ОС, редактировать существующие записи и вызывать командную строку. Список суперпользователей задается командой

set superusers="root"

Создать обычного пользователя и задать ему не зашифрованный пароль можно командой:

password user 123

Той же командой можно создать пароль суперпользователю. Для создания зашифрованного пароля нужно воспользоваться программой grub-mkpasswd-pbkdf2, а в скриптах прописать соответственно команду:

password_pbkdf2 root grub.pbkdf2.sha512.10000.mnogobukv

Все эти команды лучше всего дописать в скрипт 40_custom.

Для того, чтобы определенный пользователь мог запускать определенную ОС, он должен быть прописан в списке в соответствующем пункте меню в ключе --users:

menuentry "Debian" --users "user user1 user2" --class ...

Заключение
Как мы видим, GRUB2 предоставляет массу возможностей по собственной настройке. И хотя механизм скриптов может кому-то показаться достаточно сложным, он позволяет гибко реагировать на изменения в списке установленных ОС и изменения в возможностях загрузки конкретной ОС. К тому же, практически все важные параметры вынесены в отдельный конфигурационный файл, что позволяет настраивать GRUB2 практически так же легко, как и GRUB Legacy.

Шифрование разделов и файлов в Linux с помощью loop-device и AES алгоритма

2012-05-14T02:00:00.004+04:00

Способов шифрования в Linux много, но в данном случае будет показан простой и быстрорастворимый метод с использованием cryptoloop. С его помощью мы можем шифровать как отдельные разделы (например, создать зашифрованный раздел на флешке), либо сделать криптофайл (зашифрованный файл, внутри которого хранятся ценные данные). Последнее особенно удобно для личного применения.

Немного юниксвея
Шифрование раздела на физическом носителе и создание криптофайла на самом деле для UNIX будут выглядеть одинаково. Это есть следствие принципа UNIX "всё есть файл", над которым стоит немного помедитировать. Так, в посте о монтировании разделов уже приводился пример того, как можно примонтировать ISO-образ файла в Linux и получить доступ к файлам. Хотелось бы подчеркнуть этот факт ещё раз:

с точки зрения UNIX/Linux не важно, примонтируете ли вы:
физический CD-диск, который соответствует устройству /dev/cdrom в точку монтирования /mnt/cdfiles
ISO-образ этого диска в точку монитирования /mnt/cdfiles
вы получите один и тот же результат. На самом деле вы монтируете логическую структуру, подключая её к корневой файловой системе.

Понимание этого факта важно для последующего изложения, и вообще важно для работы в Linux, а не только тыкания по кнопкам в KDE/GNOME.

Два слова о петлевом устройстве (Loop-device)
Loopback Device (loop) это механизм ядра Linux, используемый для интерпретации файлов как реальных блочных устройств. Главное, что все инструменты, используемые для работы с реальными дисками (например mount), могут быть использованы и для петлевых устройств.

Говоря простыми словами, loop нужен для того, чтобы структурированные файлы (ISO-образы, копии разделов с флешек, шифрованные файлы) для ядра выглядели, как реальные диски. В посте о монтировании разделов был пример с ISO-образом

mount -t iso9660 file.iso /mnt/dvd -o loop

Именно параметр и указывает на то, что при монтировании будет использовано loop-устройство (петлевое устройство, петля). Петлевых устройств в системе несколько, и называются они /dev/loop0 ... /dev/loop7. Можно создать их и больше, если надо:

mknod /dev/loop8 b 7 8
mknod /dev/loop9 b 7 9

Главное, чтобы поддержка loopback-device была в ядре Linux (если вы его не собирали сами, она там скорее всего есть). Больше о петлевых устройствах можно прочитать тут, там и здесь.

Установка и подготовка к работе
Для cryptoloop нам потребуется установить небольшой пакет:

sudo aptitude install loop-aes-utils

Далее загружаем модуль cryptoloop:

sudo modprobe cryptoloop

он должен появиться в списке модулей ядра, проверить который можно командой lsmod.

Шифруем файлы и разделы с помощью Cryptoloop и алгоритма AES
Для начала нужно определиться: указываемый метод НЕ ПРЕДНАЗНАЧЕН для шифрования разделов с данными, а только для создания зашифрованных разделов, куда эти данные потом будут скопированы. Так что если вы сотрёте свой раздел с важными данными - пеняйте на себя и читайте в следующий раз внимательно.

Если следовать рецептам ниже с головой и всё сделать правильно, то в результате мы получим раздел\файл, с которым можно будет работать, как с любым диском на чтение и запись - с той разницей, что данные там будут зашифрованы. Каждый раз при монтировании нас будут спрашивать пароль для доступа к этим файлам.

Итак, начинаем подготавливать криптораздел\криптофайл, куда мы скопируем ценные данные и зашифруем.

0. Создание криптофайла или криптораздела
Если мы хотим создать один большой файл, который будет содержать зашифрованные файлы, делаем это так:

dd if=/dev/zero of=~crypto.file bs=1M count=30

В данном примере это файл на 30 Мб, но при нужде можно сделать сколько угодно.

Или ищем флешку, на которой есть пустой раздел - этот пустой раздел мы сделаем шифрованным. Допустим, это будет /dev/sdd2 который мы скоро отформатируем и зашифруем.

Ещё раз:/dev/sdd2 это НЕ раздел с вашими данными, а пустой раздел, куда вы эти данные переместите - и они при этом зашифруются. О создании разделов можно почитать в посте о форматировании.

1. Связываем устройство с loop device (петлевым устройством) с использованием шифрования
В случае криптофайла:

losetup -e aes /dev/loop0 ~crypto.file

В случае криптораздела:

losetup -e aes /dev/loop0 /dev/sdd2

При любом варианте вас попросят ввести пароль - он будет использоваться для доступа к вашим файлам.

cat file | losetup -e aes /dev/loop0 /dev/sdd2 -p0

Пароль меньше 20 символов оно не примет - и правильно сделает. Излишне напоминать, что если забудете пароль - не сможете примонтировать данные обратно. Для любопытных: ключ -e aes указывает программе использовать шифрование AES, который довольно устойчив ко взлому.

Теперь больше работать с устройством через /dev/sdd2 или crypto.file мы не будем, потому как оно зашифровано и система его просто так не примонтирует. Вместо этого работать мы будем именно с петлевым устройством, на которое замкнули криптофайл или криптораздел - оно может быть /dev/loop0 или другое (необязательно каждый раз замыкать на одно и то же устройство).

2. Форматирование зашифрованного раздела или файла
После того, как мы связали устройство или файл с loop-device, нужно его отформатировать:

mkfs.ext2 /dev/loop0

В этом примере мы отформатировали на файловую систему Ext2, но можно использовать любую.

3. Перенос данных и работа с зашифрованным разделом или файлом
Работаем с петлевым устройством, как с обычным разделом: монтируем, записываем на него данные и так далее. Монтирование зашифрованного раздела или файла выглядит так:

mkdir /mnt/cryptodisk <--- это если точка монтирования ещё не создана
mount /dev/loop0 /mnt/cryptodisk

Размонтирование:

umount /dev/loop0

Больше о монтировании можно прочитать в соответствующем посте.

4. Окончание работы с криптофайлом\криптоустройством
После отмонтирования нужно отвязать устройство или файл от петлевого устройства:

losetup -d /dev/loop0

На всякий случай, просмотреть список задействованных петлевых устройств (loop devices) можно командой:

losetup -a

Теперь петлевое устройство свободно, данные зашифрованы, враг не пройдёт.

А как теперь обратно прикрутить криптованный раздел или файл?
Легко - доступ к зашифрованным данным можно получить, опять привязав к петлевому устройству криптораздел\криптофайл и введя пароль, который вы назначили ранее. То есть в случае криптофайла:

losetup -e aes /dev/loop0 ~crypto.file

В случае криптораздела:

losetup -e aes /dev/loop0 /dev/sdd2

Вас снова попросят ввести пароль, который нужен для доступа к вашим файлам.

Теперь мы имеем раздел или файл, который невозможно примонтировать просто так (он зашифрован и Linux не увидит на нем файловую систему). Но после прикручивания к петлевому устройству все данные будут доступны (если вы знаете пароль, разумеется).

Альтернативы

более каноничный способ по мнению некоторых комментаторов ниже, это использовать штатный cryptsetup. Об этом есть хорошая заметка на блоге у Librarian и толковое руководство.
ещё можно попробовать Truecrypt, где есть возможность создания зашифрованного контейнера с "двойным" дном, т.е. двух уровней правдоподобного отрицания, на случай рассекречивания паролей.

Лирическое отступление
Не хотелось бы разочаровывать начинающих криптоанархистов, но ребята с xkcd в общем реалистично смотрят на вещи:

Тем не менее, светить своими данными не комильфо, и какое-то время вы выиграете.

Cкачать кешированное видео youtube из браузера в стиле UNIX

2012-04-16T03:36:00.002+04:00

Испорченные мышекликанием пользователи считают, как тот программист из UNIX коанов мастера Фу, что "средства командной строки UNIX грубые и отсталые - современные правильно спроектированные операционные системы делают все через графический интерфейс пользователя". Однако время, потраченное на изучение того, как работает UNIX под этой графической мишурой, окупается сторицей при решении повседневных задач быстрее и эффективнее мышекликания.

Эта заметка появилась из вопроса, заданного мне местным убунтушником, который никак не мог скачать видеолекции с YouTube: в Firefox плагин VideoDownloader не срабатывал по какой-то причине, как и скрипт youtube-dl. То есть видео закешировано, в броузере играет и поёт, но скопировать его в файл из броузера не получается. Здесь нам на помощь придёт файловая система proc и тот замечательный факт, что удалённый файл реально удаляется только после того, как он закрыт всеми приложениями, его использующими.

Вытаскивание кешированнго YouTube видео из-под Firefox
Для самых нетерпеливых, собственно, рецепт:

1. Заходим на YouTube, кликаем на интересующее видео и ждём, пока оно полностью загрузится.

2. В консоли запрашиваем список всех открытых видеороликов Flash:

$ lsof -n | grep Flash

Старые версии Firefox просто хранят кешированное видео в директории /tmp
и в этом случае видео можно просто скопировать. В этом случае вы увидите что-то вроде:

beast@notebeast:~/docs/mygtd$ lsof -n | grep Flash
plugin-co 6231 beast 15u REG 3,2 1938773 1746302 /tmp/FlasheY4skF

С обновлённым флеш-плагином этого не будет, а будет вот что:

beast@notebeast:~/docs/mygtd$ lsof -n | grep Flash
plugin-co 6231 beast 15u REG 3,2 1938773 1746302 /tmp/FlasheY4skF (deleted)

И ничего в /tmp мы, натурально, не найдём. Но файл всё-таки есть, так как в броузере он поёт, а значит, к нему в Linux можно добраться.

3. Запоминаем идентификатор процесса (в нашем случае 6231), который открыл вожделенное видео с утуба, и в консоли переходим в директорию /proc

Тут мы видим кучу подкаталогов с цифрами и странными названиями - нас интересует директория 6231 и она, как выясняется, не пуста. Переходим в подкаталог:

$ cd /proc/6231/fd

и после этого пытаемся просмотреть все файлы там:

$ ls -l

и увидим что-то вроде:

beast@notebeast:/proc/6231/fd$ ls -l
итого 0
lr-x------ 1 beast beast 64 2012-03-03 10:04 0 -> /dev/null
l-wx------ 1 beast beast 64 2012-03-03 10:04 1 -> /home/beast/.xsession-errors
lrwx------ 1 beast beast 64 2012-03-03 10:04 10 -> socket:[15270]
lrwx------ 1 beast beast 64 2012-03-03 10:04 11 -> socket:[15271]
lr-x------ 1 beast beast 64 2012-03-03 10:04 12 -> pipe:[15272]
l-wx------ 1 beast beast 64 2012-03-03 10:04 13 -> pipe:[15272]
lrwx------ 1 beast beast 64 2012-03-03 10:04 14 -> socket:[15284]
lrwx------ 1 beast beast 64 2012-03-03 10:04 15 -> /tmp/FlasheY4skF (deleted)
lr-x------ 1 beast beast 64 2012-03-03 10:04 16 -> /dev/snd/timer
lrwx------ 1 beast beast 64 2012-03-03 10:04 17 -> /dev/snd/pcmC0D0p
lrwx------ 1 beast beast 64 2012-03-03 10:04 18 -> /dev/snd/controlC0
l-wx------ 1 beast beast 64 2012-03-03 10:04 2 -> /home/beast/.xsession-errors
lrwx------ 1 beast beast 64 2012-03-03 10:04 3 -> socket:[15182]
lrwx------ 1 beast beast 64 2012-03-03 10:04 4 -> socket:[15183]
lr-x------ 1 beast beast 64 2012-03-03 10:04 5 -> pipe:[15268]
l-wx------ 1 beast beast 64 2012-03-03 10:04 6 -> pipe:[15268]
lr-x------ 1 beast beast 64 2012-03-03 10:04 7 -> pipe:[15269]
l-wx------ 1 beast beast 64 2012-03-03 10:04 8 -> pipe:[15269]
lrwx------ 1 beast beast 64 2012-03-03 10:04 9 -> anon_inode:[eventpoll]

4. Оказывается, что в директории /proc лежит наше вожделенное видео, только вместо имени там стоит номер, в данном случае 15 который указывает на видеофайл:

15 -> /tmp/FlasheY4skF (deleted)

Так как в UNIX действует принцип всё есть файл, мы просто копируем файл 15 в свою домашнюю директорию:

$ cp 15 ~/myNewCoolGreatFlashYouTubevideo.flv

Всё, теперь видео с тюбика в наших руках, и можно делать с ним всё, что душе угодно, в цветастом и мышастом Гноме (точнее, теперь уже Юнити).

Как это работает
После запуска, каждый процесс (и его подпроцессы) получает индетификатор (PID), при этом в каталоге /proc создаётся подкаталог с номером, соответствующем номеру PID вроде /proc/PID. Внутри создаются файлы и подкаталоги, которые содержат информацию о процессе. Вот ей-то мы и воспользовались в своих корыстных целях.

Среди прочего, о чём можно узнать из обновлённого поста о proc или другой документации, нас интересует каталог /proc/PID/fd. Этот каталог содержит символическую ссылку для дескрипторов файлов, которые открыты процессом. Это значит, что мы можем увидеть здесь ссылки на открытые файлы и устройства.

Внутри мы видим ссылки в виде номеров:

0 1 10 11 12 13 2 3 4 5 6 7 8 9,

но команда ls -l скажет вам намного больше интересного (об этом было выше). Ключевая строчка:

lrwx------ 1 beast beast 64 2012-03-03 10:04 15 -> /tmp/FlasheY4skF (deleted)

Ссылка 15 ведёт на файл с флеш-видео, который сейчас открыт. Помня, что в UNIX всё есть файл, мы скопируем ссылку 15 в свой домашний каталог. Только вместо ссылки копируется её содержимое. Ларчик открывается сравнительно просто, если знать как.

Заключение и выводы
На самом деле, подобные вопросы в процессе работы как раз и позволяют глубже понять принципы работы операционной системы, а не просто клацать мышкой по кнопкам. Тем более, что настоящая мощь UNIX как раз и находится под всей этой графической мишурой.

Главная проблема пользователей Windows-like дистрибутивов (Ubuntu, OpenSUSE, Fedora...) в том, что они тащят свои дурные привычки из Windows, которые в Linux\UNIX не позволяют добиться желаемого. Разница - в подходе ко взаимодействию системы и пользователя:

В UNIX схема работы ``от понимания - к действию'': чтобы что-то сделать, надо понимать (или хотя бы смутно догадываться), как оно устроено.
В Windows схема работы ``методом тыка'' (буквально): знаю КАК что-то сделать (куда нажать, какую галочку отметить) -> делаю.

Понимание устройства файловой системы в данном конкретном случае - ключ к решению проблемы. Но Windows-ориентированные дистрибутивы этому не способствуют. Никакого рокетсаенса в приведённом пример, конечно, нет, но тем не менее.

Эта заметка так же сподвигла автора обновить старый пост о /proc, немного почитать документацию, поработать Капитаном Очевидностью на полставки и, как говаривал Эркюль Пуаро, напрячь свои маленькие серые клеточки.

Навигационные программы для Android: в каменные джунгли вместе с OpenStreetMaps

2012-04-02T00:24:00.005+04:00

Всё началось с того, что автор этих строк, планируя поездку в другой город на выходные, забыл свой любимый GPS навигатор на работе. В ночь перед поездкой была проведена небольшая ревизия навигацкого софтвария под андроидные телефоны. Согреваемый памятью об OpenStreetMaps и укреплённый надеждою на опенсорц, автор отчаянно просеивал тонны пустой программной породы в надежде отрыть нечто работящее и непременно с офф-лайн броузингом карт.

Условия отбора участников забега

Аврал! Всех крокодилов за борт!
(С) Приключения капитана Врунгеля

Очень кратко:

офф-лайн просмотр и навигация по картам должны не только иметь место быть, но и всё-таки хорошо работать, ибо перспектива геройски умереть в австралийском буше автора пока что не прельщает;
желательно наличие интерфейса, в котором можно разобраться менее, чем за сутки и без наличия докторской степени по ракетным наукам;
запись треков, подгрузка координат ближайших рюмошных и пельменных, геокешинг и прочие бубенчики - опционально и строго не в ущерб основной деятельности программы, а именно, как это ни удивительно, выдача географических координат телефона с помощью системы глобальной навигации GPS и наложение оных координат на карту, сколько-нибудь напоминающую окружающую местность.

Философско-практическое обоснование:

Эти дети вебдваноля, которые пишут андроидный нафигационный софтварий, думают, что это ихнее трижэ и вайфай в 21 веке есть ну вот просто всюду и светлое беспроводное счастье беспощадно наступило. Для ознакомления с жестокой реальностью, этих пионэров хочется закинуть на денёк в какой-нибудь Шлайшиттаун с населением в 10.5 колхозника. И предложить им выбраться оттуда на шоссе с помощью их он-лайн нафигаторов в телефонах. Если они не склеют ласты от испепеляющей жары, то задумаются о пользе добавления функции офф-лайн броузинга карт в свои пародии на навигаторы.

По этой причине в забеге не участвуют многочисленные кривые поделки под навигаторы, элементарно тягающие Google Maps по ходу перемещения. Это несерьёзно: при таком подходе, вам потребуется аккумулятор от танка и спонсорство арабских шейхов (передача данных по телефону в наших краях стоит каких-то астрономических денег). Здесь, конечно, можно упрекнуть автора в том, что это всё-таки телефон, а не полноценный навигатор. И это правда. Но автор всё никак не может понять: включив GPS, максимальную яркость экрана и не дай бог вайфай - сколько всё это протянет на чахлой телефонной батарейке!?

Список участников навигационного марафона

Старший помощник Лом,
очистить левый борт от зелёных насаждений!
(С) Приключения капитана Врунгеля

Длинный список навигацкого счастья для андроидоводов можно найти здесь: http://wiki.openstreetmap.org/wiki/Android
Как и в случае с CAD-системами под Linux, это скорее кладбище разбитых кораблей: либо тягалки гуглокарт, либо сноповязалки с вертикальным взлётом, либо велосипеды с квадратными колёсами. Среди всего этого было выловлено:

1. Navit [скачать]
По утверждению автора, оно есть completely free and offline Navigation system for Android.
На самом деле, это не описание программы, а то, что автору хотелось бы видеть в далёком будущем от этого поделия. Интер, с позволения сказать, фейс:
страдает отчаянным минимализмом и падучестью. Программа признаёт только карты, скачанные лично ей - на попытку сделать это на HTC Desire HD программа вылетела и ничего не скачала. Утверждается, что это дорожный навигатор - тем более интерфейс должен быть прост и понятен. Я не знаю, каким образом это можно использовать в автомобиле. Судя по обилию отрицательных отзывов на сайте самой программы, это получается далеко не у всех. И судя по километровой простыне описания конфигурационного файла (и это для навигатора!), авторам сего поделия абсолютно плевать на пользователей.

Другая версия, ZANavi, основана на том же Navit, с похожим интерфейсом.

Итог: Заставить это работать не удалось. Подсунуть карты тоже. Navit отправляется в утиль, а автор продолжает поиск чего-нибудь работящего. И тут появляется...

2. MapDroyd [скачать]
Оно проприетарное, но бесплатное. Карты могут быть скомпилированы только производителем и это весьма огорчает (хотя при этом карты получаются очень компактными). Интерфейс вполне рабочий:
Карты, как выяснилось со стороннего форума, хранятся в /sdcard/MapDroyd/data
Неплохой обзор и обсуждение можно прочитать здесь. MapDroyd это не Google Maps, Garmin или TomTom, это не навигатор ни разу - оно просто программа, отображающая карту и ваше местоположение на ней.

Итог: как выяснилось, это рекламное приложение для NavDroyd, который платный. Нам такой хоккей не нужен.

3. OruxMaps [скачать]
Это оффлайн-навигатор, который кеширует карты Google Maps и способен потом работать без подключения к сетям, радуя вас отображением отличных гугловских карт. Впрочем, радовать он будет до тех пор, пока в кеше есть карты и они нужного размера:
В целом неплох и дело своё делает, но есть одна проблема: интерфейс.

Безусловно, все знакомы с интерфейсом Gimp, для которого нужно двадцать щупалец и девять глаз. Здесь щупальца вам тоже пригодятся, как и марсианские мозги в разгадывании того, что означает эта картинка в меню и что при этом произойдёт. Интерфейс безусловно могуч, но создан каким-то инопланетным разумом для порабощения землян, так что гуманоидам придётся несладко.

Оффлайн карты есть по этой ссылке, но формата MapsForge.

Итог: если вы сможете разгадать интерфейс OruxMaps и не живёте в какой-нибудь глуши типа Канады или Австралии, этим можно, наверное, пользоваться.

4. Osmand ^{выбор редакции :-)} [скачать]
Наконец, сравнительно простая, но тем не менее работящая реализация очевидной для гуманоидов идеи: взять файлы OpenStreetMaps и на лету растеризовать карту, выдавая её пользователю. При сравнительно базовом, прямо скажем, интерфейсе:
оно вполне себе рабочее и сразу подхватывает скачанные на флешку карты. Когда телефонный чип GPS наконец-то посчитает ваши координаты, на карте появится синяя точка, обозначающая ваше место на карте.

По умолчанию включён поворот карты, учитывающий значения акселерометра телефона, что лучше сразу выключить через Settings - General - Map Rotation - DON'T ROTATE. Иначе оно сведёт с ума пользователя, крутя карту на каждый чих.

Вопреки традициям опенсорца, оно имеет документацию, хотя несколько бестолковую. От пользовательской документации требуется быстро пояснить, как пользоваться этим программным барахлом, а не начинать теоретический курс спутниковой навигации. Вместо кучи теоретических изысков, нужно всего лишь:

зайти на сайт с картами
найти нужную и скачать её
распаковать скачанную карту и поместить на SD-карту /sdcard/osmand

И всё заиграет и запоёт. Больше про Osmand и Osmand+ можно узнать на блоге Павла Вязового. Авторы Osmand публикуют бесплатно полнофункциональные бинарные сборки (night builds).

5. И другие потенциально интересные варианты
Другие варианты, подсказанные уважаемыми комментаторами:

Yozi: офф-лайн навигатор по топографическим картам (использует платные карты Ozi Explorer).
Вместо Yozi можно использовать Androzic с OziMapper, который обновляется и развивается.
Locus: многообещающий навигатор с поддержкой онлайн карт (Openstreetmap - OSM, Freemap, SHOCart, MapQuest) и офф-лайн (SQLite, TAR maps, MBT maps, GEMF, Rmap).
Анонимус™ рекомендует® навигацкую софтину 7 Ways от Майл.ру, утверждая, что сие есть сбалансированное бесплатное решение, как в качестве транспортного, так и туристического навигатора. Карты OSM скачивать здесь, форма запроса на отсутствующие карты.

Итог: если хочется свободного и бесплатного, на при этом рабочего, навигацкого софта с OpenStreetMaps, то Osmand это видимо единственное пригодное решение.

На посошок: GPStest - утилита для тестирования GPS в андроидах
Это НЕ навигационная программа, но она очень пригодится для тестирования GPS в вашем телефоне. GPStest отображает уровень сигнала со спутников и их расположение. Когда координаты определены, показывает уровень возвышения (Elevation), среднюю скорость и число используемых спутников для расчёта координат:

В общем, полезная дополнительная утилита для работы с GPS: покажет, сколько спутников приёмник видит и каков их уровень.

Также можно посмотреть в сторону программы GPS Status:

Программа не только выводит информацию о спутниках, но и выступает как компас, умеет скачивать AGPS данные при наличии интернета (что потом ускоряет поиск спутников) и имеет режим «радара» (чтобы по компасу вернуться к заранее заданной точке).

Как редактировать в Vim без порчи и бибиканья

2012-03-12T22:12:00.000+04:00

Вступление

"Вим умеет только бибикать и портить текст!", - так обычно обороняются адепты секты Емакс во время очередных священных битв между поклонниками этих двух текстовых редакторов. Попробуем же освоить Вим так, что бы избежать таких приколов.

Терминология

Для начала давайте разберёмся с терминами, которые обычно используются при описании работы в Виме.


Экран: Это окно программы Vim

Окно: Представление (область экрана) буфера. Экран может включать одно или несколько окон, разделённых строкой статуса. Внизу экрана размещается командная строка Вима.

      +-------------------------------------+
экран | окно 1           | окно 2           |
      |                  |                  |
      |                  |                  |
      |= строка статуса =|= строка статуса =|
      | окно 3                              |
      |                                     |
      |                                     |
      |==== строка статуса =================|
      | командная строка                    |
      +-------------------------------------+


Буфер: Временное хранилище текста.

Именованный регистр: Именованное хранилище текста для множественных вставок.

Войти и выйти

Многие виммеры начинали своё знакомство с этим редактором с конфуза, а именно не смогли попросту выйти из программы! Давайте начнём с того, что раз и на всегда избавим пользователя от необходимости закрывать окно терминала (а так делал и ваш покорный слуга) с целью выхода из этого замечательного редактора :)

Чтобы начать редактировать произвольный файл и таким образом начать пользоваться Вимом достаточно набрать в консоли:

vim ~/foobar.txt

Отлично, первый шаг сделан - по ошибке или целенаправленно - это другой вопрос! Чтобы выйти из Вима без сохранения внесённых изменений достаточно набрать:

<Esc>:q[uit]<Enter>

В квадратные скобки заключена необязательная часть команды, которая дополнится, как традиционно в UNIX, по <Tab>. <Esc> же переведёт редактор в нормальный режим, если вы ещё не в нём (о режимах в Виме чуть позже). Чтобы уж совсем добить тему выхода — есть ещё и клавиатурная комбинация (одна из "миллиона" в Виме): ZQ - выход без сохранения изменений.

Режимы

Вим, как и его прародитель Vi, имеет модальный интерфейс. Это означает, что одни и те же клавиши в разных режимах работы выполняют разные действия. В Виме представлены следующие основные режимы:

Нормальный - главный режим, в котором вам придется работать. Когда вы запустили редактор, вы находитесь именно в этом режиме. Нажатие клавиш в нём воспринимается как команды. h, j, k, l - переместят курсор куда вам необходимо, x удалит символ под курсором, dd - целую строку и так далее. Вернуться в нормальный режим из любого другого можно всегда по нажатию Esc. Вообще использование Esc, ровно как и клавиш перемещения - это скорее историческое наследие.

Клавиатура терминала ADM-3A, на которой был написан Vi

Для тех же, кто всё-таки не считает Esc - самым удобным способом вернуться в нормальный режим Вима, есть целые подборки альтернатив. Я для себя выбрал комбинацию Ctrl-[.

Режим вставки - это тот самый режим, в котором вы и будете вводить текст. В этот режим можно перейти из нормального просто нажав i, что означет начать режим ввода текста перед курсором. На самом деле существует ещё наверно с дюжину клавиатурных комбинаций, которые вас переключат в этот режим.

Режим командной строки - перейти в него можно, набрав : в нормальном режиме, набрав далее необходимую команду. Это своего рода управляющий режим. С помощью его команд можно открыть файл на редактирование :edit ~/foobar.txt , сохранить правки и выйти :wq и многое другое. Так же частным его использованием является процедура поиска или замены текста.
По совету анонимного читателя упоминаю о так называемых "принудительных" команд:

:q! - выход БЕЗ сохнанения изменений
:w! - принудительно записать изменения
:e! - переоткрыть файл, не сохраняя изменений
:e! fname - открыть другой, не сохраняя изменений

Визуальный режим позволяет делать тоже самое, что и в нормальной, но с визуально выделенными блоками текста. Это позволяет не запоминать, сколько символов необходимо скопировать или строк удалить. Например, устанавливаем в нормальном режиме курсор на начала текстового блока, нажимаем v и выделяем необходимый кусок текста. Теперь его можно, например, скопировать y.
На самом деле в Виме есть ещё 2 режима: "Select mode" и "Ex mode", но они обычно редко используются и их описание выходит за формат данного поста.
Help: :help vim-modes

Вкладки

Начиная, кажется, с 7-ой версии в Виме появились наконец-то вкладки (или табы). С одной стороны, конечно хватало и буферов, а для удобной навигации по ним можно использовать bufexplorer.zip : Buffer Explorer / Browser. Но, с другой стороны, во "взрослых" IDE табы к тому времени стали уже стандартом и все поняли, что это удобно. В Виме вкладка по сути контейнер для окна/окон. Что бы открыть файлы для редактирования, каждый в своей вкладке, набираем в консоли:

vim -p file1.txt file2.txt

Перемещаться между вкладками можно как привычным сочетанием Ctrl-PageUp / PageDown, так и менее традиционными gt и gT в нормальном режиме. Иногда так действительно быстрее! :)

К сожалению, нет дефолтной комбинации для открытия новой вкладки, а привычные Ctrl-t заняты другими функциями (переход на один шаг назад в истории работы с тегами) :( Но я пришёл к тому, что можно пожертвовать этим и всё-таки переназначить эту клавиатурную комбинацию на открытие нового таба:

" C-T - new tab
call SMap("<C-t>", ":tabnew<cr>")

Функция SMap в этом куске конфига - это просто более удобный самописный способ назначения действий для клавиатурных комбинаций.
Как обычно много полезного можно почерпнуть из встроенной помощи: см. :help tabpage.

Поиск и замена

Что бы найти какую-либо строку в открытом файле достаточно в нормальном режиме набрать /somestring что бы искать с начала файла, либо ?somestring - с конца. n / N - переместит курсор к следующему вхождению строки. [I - недавнее открытие :) Позволяет быстро просмотреть строки, в которых содержится искомое слово. Вместо того, что бы набирать запрос поиска, можно нажать * / # и Вим переместит вас на место первого вхождения слова под курсором аналогично "старшим" командам.

С заменой всё тоже достаточно просто. Следующая команда заменит все вхождения строки "foo" на "bar":

:%s/foo/bar/gc

Разберём этот пример по частям:

% - диапазон по всему файлу
:s - сокращённая запись команды :substitute
"foo" - что заменяем
"bar" - на что заменяем
g - это флаг, указывающий на то, что заменить необходимо все вхождения для каждой строки текста
c - это флаг, указывающий на то, что перед заменой очередного вхождения строки необходимо спросить разрешение у пользователя

Метки

В Виме, как и в других продвинутых текстовых редакторах, есть возможность устанавливать закладки (в Виме они называются метками) в произвольных местах редактируемого документа. Например, можно поставить закладку на месте определения функции, что бы при необходимости быстро его найти. Суть такая же как и с книжными закладками. Что бы установить метку в месте расположения курсора достаточно набрать в нормальном режиме:

m{a-zA-Z}

{a-zA-Z} - это одна буква английского алфавита в соответствующем регистре, который кстати имеет значение! Метка, обозначенная буквой в нижнем регистре, существует в рамках текущего файла, в то время как большая буква позволяет существовать метке в рамках всех загруженных в Вим файлов.

Для того, что бы перейти к выставленной ранее метке достаточно набрать ' и соответствующую ей букву. Конечно запомнить все выставленные метки сложно, да и наверное не стоит пытаться. Список меток всегда можно посмотреть набрав в командном режиме:

:marks

Для более удобной навигации по выставленным метках можно использовать и одно из расширений, например Marks Browser : A graphical marks browser. Хотя и этот плагин не обновлялся аж с 2006 года, он вполне справляется с возложенной на него обязанностью!

Marks Browser - удобная навигация по меткам

Help: :help mark-motions

Аббревиатуры

Хочется немного упомянуть и функциональность аббревиатур в Виме. Они дают возможность быстро набирать часто употребляемые при написании длинные строки, используя их сокращённое написание. Например, когда набираете в тексте слово МГУ, Вим заменяет его на Московский государственный университет. Задать аббревиатуру для этого можно так:

:iabbrev МГУ Московский государственный университет

В аббревиатуры можно упаковывать целые конструкции, превращая их в мини-шаблоны:

iabbrev dbg echo '<pre>';<CR>var_dump(|);<CR>echo '</pre>';<CR>

В тоже время есть более удобные механизмы шаблонов для Вима, но они предоставляются уже плагинами. Например, snippetsEmu : An attempt to emulate TextMate's snippet expansion, для которого есть целые пачки готовых шаблонов для популярных языков программирования и разметки.
Help: :help abbreviations

~/.vimrc

~/.vimrc обычно наряду с ~/.bashrc и ~/.screenrc входит в состав т.н. "dotfiles", которыми пользователи любят делиться и разбирать :) ~/.vimrc - это файл настроек Вима. Сюда можно поместить, например, настройку, указывающую включать по умолчанию подсветку синтаксиса:

syntax on

или разрешать смену текущего буфера без необходимости сохранить файл:

set hidden

или расставить все точки над и при работе с отступами:

" Expand tab to spaces ?
set expandtab

" Default tab size
set shiftwidth=4
set softtabstop=4
set tabstop=4

или отключить то самое бибиканье!

" Turn off any bells
set novisualbell
set t_vb=

Расширения

Пользователи Mozilla Firefox оценят богатство расширений для Вима, их уж почти 4000! Причем найти среди них можно практически всё что угодно: от игр до вполне серъёзных вещей вроде плагинов для удобного ведения проектов.

Лучшая пятёрка расширений по загрузкам на vim.org:

Расширение	Описание
taglist.vim	Браузер исходного кода
The NERD tree	Навигатор по файловой системе
bufexplorer.zip	Удобная навигация по буферам
minibufexpl.vim	Ещё одно расширение, упрощающее навигацию по буферам
Color Sampler Pack	Отличная подборка цветовых схем

Небольшая подборка расширений от читателей блога:

Расширение	Пользователь
The NERD Commenter : A plugin that allows for easy commenting of code for many filetypes.	FancyWriter
ctrlp.vim : Fuzzy file, buffer, MRU, and tag finder with regexp support.	Roman V. Babenko
tComment : An extensible & universal comment plugin that also handles embedded filetypes	Roman V. Babenko
rails.vim : Ruby on Rails: easy file navigation, enhanced syntax highlighting, and more	Roman V. Babenko
pathogen	dimas

:help me

Вим имеет мощную встроенную систему справки, которая позволяет найти ответ на практически любой вопрос, касающийся работы в этом текстовом редакторе. Например, вы забыли как работать с именноваными регистрами. Набираем в командном строке:

:help registers

и читаем подробное описание того, какие бывают регистры и как их можно использовать. Если же вы решили изучить всю функциональность Вима, то можно не задавать запрос в команде, а просто просмотреть содержание справочника.
Для удобства читателя в этом посте используются специальные ссылки на онлайн версию этого справочника.

Заключение

Надеюсь, что этот небольшое введение в мир Vim, поможет вам при следующем открытии этого редактора чувствовать себя в нём более уверенно. Ну и конечно Вим при этом станет для вас мощным подспорьем при редактировании не только конфигов, но вполне полноценных текстов и исходников. Без бибикания и порчи текста ;)
Pento http://www.allaboutvim.ru/

P.S.

Этот пост был написан тоже в Виме!

P.P.S.

Дальнейшему освоению Vim может помочь такая шпаргалка:

Добавил ведущий блога virens, который благодарит Анонимуса, нашедшего это изображение.

Бумажные газеты против Блогов: беда пришла, и её совсем не ждали

2012-03-05T00:53:00.003+04:00

В продолжении поста о том, как сделать из веб-блога книгу, мне хотелось бы немного пополемизировать на тему бумажных и электронных изданий. Пищу для поста и размышлений подбросил, как ни странно, длительный авиаперелёт - процесс занудный и утомительный, как бы ни старались авиакомпании его скрасить. В этот раз мне предстоял сравнительно короткий 9-часовой полёт в Гонк Конг на конференцию. Моим соседом по креслу оказался австралийский журналист местной газеты, который с большим интересом и сопереживанием смотрел фильм "Page One: Inside the New York Times". Фильм показался интересным и мне, и в процессе беседы с ним я сознался, что до некоторой степени представляю "вражеский лагерь". Материалами поднятых вопросов мне и хотелось бы поделиться в этом посте.

Фильм Page One: Inside the New York Times
Это грустная повесть о нелёгких буднях журналистов и газетчиков старой закалки, которые с удивлением обнаружили конкуренцию со стороны блоггеров, Твиттера и WikiLeaks. Если раньше требовалось образование и куча дипломов, чтобы просочиться в коллектив газеты, то теперь можно за минуту завести блог и начать завоёвывать аудиторию. Как следствие, газеты стали читать всё реже, и вот интернет-братия активно перетягивает одеяло журналистики на себя.

Обложка DVD-диска

Редакторы и журналисты повествуют о своей нелёгкой (теперь) доле и о том, что доходы от рекламы стремительно падают. Известные газеты доведены до полного отчаяния: ``может нам в газете открыть секцию порнографии?''. О самой газете New York Times тоже поговарвали, что она закроется. Не то, чтобы журналисты в газетах стали намного хуже. Просто газеты не заметили, что Интернет и блоги стали большой силой: газетчики теперь выглядят как олень в свете фар несущегося на него грузовика.

Вот так безобидные блоггеры превратились в безжалостных акул пера и теперь лишают своей писаниной законного куска хлеба таких гигантов, как Нью Йорк Таймс :-)

Одна из старейших медиа компаний Tribune Company, подала заявление о банкротстве. Сама New York Times тоже не в лучшей форме и активно сокращает штат корреспондентов. Некоторые смотрят на это, как на временные трудности, говоря "Trees are still cut and the news are still delivered by newspapers". Но что-то в этой похвальбе мало уверенности.

Главная проблема в том, что с развитием электронных средств публикации, доходы от рекламы в газетах стали падать, причём неожиданно быстро. Люди начали всё больше и больше пользоваться сервисами, которые собирают новости из интернет-источников, зачастую копируя материалы известных газет. Модель бумажных газет, основанная на размещении рекламы для получения дохода, умирает.

Одной из сильных сторон интернет-изданий является обратная связь с читателями в виде комментариев. Многие сайты бумажных газет, если и удосуживают себя размещением формы для комментариев, почти никогда их не публикуют на сайте. И делают это совершенно напрасно: комментарии читателей зачастую содержат полезные поправки, ответную полемику и альтернативные мнения по поднятому вопросу. На этот счёт есть замечательная статья [перевод] от бывшего редактора The Washington Post в защиту анонимных комментариев на сайтах газет.

В печать!

Хуже того: авторитарный тон самой New York Times теперь - лишь один из многих голосов в разномастном хоре блогов, живых журналов, твиттера и других электронных средств массовой информации. Масла в огонь подлили WikiLeaks, которые вывалили в интернет секретные документы (и время от времени продолжают это делать).

На самом деле, Wikileaks не первые, кто вот так открыто публикуют секретные правительственные материалы, просочившиеся к ним. В своё время NYtimes сами подняли большой скандал: New York Times опубликовала документы, касающиеся войны во Вьетнаме. Этот инцидент, более известный как Pentagon Papers, повлиял на многие дальнейшие события и существенно поднял престиж самой газеты. NYtimes тогда пришлось выдержать неслабый натиск правительства, но они стояли на своём со словами "We are independent from the government".

Они не пытались опубликовать это в респектабельных газетах - они просто выложили это на открытые сайты типа YouTube, чтобы все могли это видеть. И теперь ведущие газеты оказались в неожиданном положении - они отстают от электронных СМИ даже в доступе к источникам. Проблема была в том, что Wikileaks опубликовали это всё в Интернет, и New York Times больше не нужна для того, чтобы донести это всё до широкой публики.

Собственно, это основной мотив фильма: бумажные газеты больше не нужны для того, чтобы доносить информацию до читателей. Разумеется, к газетам доверия больше: информация там тщательно проверяется, уровень изложения выше, освещение событий чаще всего беспристрастное (или во всяком случае не ярко ангажированное).

Блоггер не поедет в Афганистан или Ирак, рискуя собственной жизнью и здоровьем, чтобы сделать горячий репортаж. Опубликованный на блоге Васи Пупкина компромат на первых лиц страны едва ли станет широко известен, а критика Марьиванной политики кабинета министров скорее всего будет известна лишь бабкам у подъезда.

Другое дело - известная газета и её политические обозреватели. Если они выложат компромат или жёсткую критику властей, то это быстро станет известно широкой публике.
Если что-то серьёзное происходит в мире - газета об этом обязательно напишет, как правило, весьма аргументированно. И, в отличие от блога, опубликованное в газете уже не вернёшь, не поправишь и не уточнишь.

Немного критики
Фильм претендует на документальность, хотя сколько-нибудь внимательный зритель справедливо назовёт его заангажированным в сторону газет. Сами журналисты в фильме ведут себя так, как будто они и только они есть Рыцари Света и Правды, а тут набежала какая-то шпана с ноутбуками и теперь вот с ней надо считаться. Хуже того, теперь газете нечем платить Рыцарям и вот они вынуждены сидеть на пособии по безработице из-за этих вебдванольных мерзавцев.

В фильме часто мелькает малоадекватный, если не сказать хуже, David Carr: он безусловно добавляет эмоций и колорита в повествование, одновременно выставляя журналистов и репортёров в невыгодном свете. Пафос типа "если этого нет в NYtimes, этого не произошло в мире" и "апокалипсис сегодня - Nytimes помрёт в Мае" совершенно излишний.

Вообще, тон повествования время от времени становится очень самодовольным и обвиняющим в своих неудачах всех, кроме себя. Одна из причин угасания газет - снобизм, неспособность, нежелание адаптироваться к современным условиями и боязнь краткосрочных рисков.

В фильме сквозит выпячивание роли газет и выставление NYTimes в виде важного реликта прошлого, который не должен умереть или меняться ни при каких обстоятельствах. Любая организация, будь то газета или обычная бумажная почта, не отлиты в граните - они могут и должны адаптироваться к меняющимся внешним условиям.

Внутри редакции New York Times

Тем не менее, фильм весьма интересен: например, я в первый раз имел возможность наблюдать процесс выбора редакторами историй для публикации. Обсуждение цены ошибок: если статья написана с искажением фактов, это огромный удар по престижу и доверию к газете. Было интересно посмотреть, как репортёры на самом деле проверяют факты в статье.

Кто виноват и Что делать?
По фильму можно подумать, что виноваты подлые блоггеры и сделать с ними ничего нельзя ибо демократия. Естественно, первая идея - сделать на сайте газеты подписку и paywall. То есть посмотрел X статей - дальше только за деньги.

В фильме Page One: New York Times редакторы надеются отвоевать часть прибылей с помощью детища Apple под названием iPad, которое по сути является однозадачным терминалом по приёму платежей в AppStore. Здесь стоит отметить, что iPad не уникален и не единственный игрок на рынке планшетов - Android есть и для планшетов, и андроидные планшеты не хуже, а часто лучше iPad.

На мой скромный взгляд, одна из проблем классических газет в том, что они сами не хотят меняться. Почему бы не сделать так, как реализовано в Google Books - они отсканировали книги и вы немножко сможете почитать. Но то, что вы видите в браузере - не текст, а картинка. То есть вы не сможете вытащить из Google Books всю книгу или хоть сколько-нибудь значительную её часть, зато сможете искать по тексту книги и ознакомиться с ней перед тем, как купить (или наступить на горло собственной совести и найти пиратскую копию).

Вместо заключения
Автор журналистом не является и потому на экспертные заключения замахиваться не станет. Однако интересно посмотреть, как всего за два десятка лет Интернет изменил ход привычных вещей. Не то, чтобы в New York Times или других газетах резко перевелись хорошие журналисты - вовсе нет, просто газеты теперь читают всё реже и реже. Невероятная лёгкость ведения блогов открывает возможности попробовать себя в журналистском жанре всем. Да и возможность за несколько кликов мыши (и некоторую сумму денег) издать свою собственную книгу меняют ситуацию с издательтвами радикально: лет 20-30 тому назад возможность легко и просто заказать собственную книгу, сгенерированную из интернет-блога, выглядело безумной фантазией.

Но вот Blogger.com стал домом для тысяч и тысяч блогов, в которых простые люди без журналистского образования пишут и обозревают всё на свете. Точно так же, написанное в блогах можно найти поисковыми системами и прокомментировать при желании. POD-сервисы позволяют в несколько кликов мыши распечатать настоящую книгу из блога с доставкой на дом. По ту сторону баррикад стоят профессиональные журналисты и редакторы бумажных газет, которые не знают, что со всей этой веб-братией делать и из каких средств теперь платить журналистам за их работу.

Поживём-увидим.

GNU Octave: система численных математических расчётов и какая от неё польза в народном хозяйстве

2012-02-20T01:31:00.006+04:00

Расчёты бывают разной сложности: проверить, сколько будет 6*6, посчитать сумму стоимости товаров в чеке, решить систему линейных уравнений для домашней работы, или, скажем, рассчитать деградацию волнового фронта при прохождении многослойной турбулентной атмосферы. Если первые два примера можно посчитать на любом калькуляторе, то линейные уравнения решают инженерные калькуляторы. Последний пример могут решить только системы численных расчётов, которые используют для научных исследований - например GNU Octave. Вот о ней-то в этом посте и рассказывается.

Пояснения и предупреждения
Octave и MATLAB - это не просто "программа-калькулятор, которая может посчитать матрицу". Это интерактивные среды разработки и интерпретаторы языка в одном флаконе. На Октаве\Матлабе не просто считают матрицы - на них пишут программы. Нужно это для того, чтобы быстро набросать или протестировать новый алгоритм обработки изображений, сигналов, можно задизайнить цифровой контроллер или написать целый оптический симулятор.

Так что если вы не студент технического ВУЗа или университета, Octave вам скорее всего не нужна. Но для изучения линейной алгебры или теории вероятности Octave будет просто бесценна - собственно, на ней можно попробовать вычислить то, чему вас учили (и кучу всего, чему не научат) на курсе матричной\линейной алгебры.

Увы, но вопреки желаниям радетелей опенсорса, Octave это не замена MATLAB ни единого раза - это как старый ушастый Запорожец не замена для Lamborgini Diablo. Хотя и то, и то - ездит. Если даже после этих предупреждений вы твёрдо уверены, что оно вам надо - переходим к установке.

Установка GNU Octave в Debian GNU/Linux
Для нормальной работы нам нужна Octave 3.0 и выше, так что если в ваших репозиториях всё ещё валяется хлам в виде Octave 2.1 - не надо его ставить. Перед установкой пакетов лучше поискать:

apt-caсhe search octave

и установить самую свежую версию. Установка довольно проста:

aptitude install octave3.0 qtoctave

Первый пакет - собственно, система численных математических рассчётов GNU/Octave, а второй - это графическая оболочка QtOctave, о которой был отдельный пост.

Для Windows сборка Octave тоже есть, и тоже бесплатная. Кроме того, под Windows есть и графический интерфейс для Octave - GUIOctave, доступный по этой ссылке. Другие графические оболочки для октавы обсуждаются тут.

Всё вместе занимает около 50Мб на диске, но красота требует жертв:

From Debianist Notes: Так выглядит QtOctave

Установка Octave в Windows хорошо проиллюстрирована здесь в красивых цветастых картинках. Правда, после всего этого вас встретит чОрная страшная консоль Octave:

From Debianist Notes: ~~жуть~~Octave как она есть

Тем не менее, такой брутальный интерфейс стоит, чтобы его немного освоить.

Octave как иллюстрированное пособие по курсу линейной алгебры
Если вас учили или учат в институте старые советские преподаватели по старым советским книжкам, то GNU Octave вам сильно поможет понять линейную алгебру, без которой инженеру абсолютно нечего делать в повседневной деятельности.

Кстати, вместо старых советских учебников лучше купить \ найти на просторах Интернета замечательную книжку Linear Algebra and Its Applications за авторством Gilbert Strang. Ещё лучше вместе с книжкой посмотреть его видеолекции, чтобы сэкономить время, если требуется освежить разделы линейной алгебры.

Также автор этих строк настоятельно рекомендует купить \ достать превосходный, умопомрачительно подробный Handbook of Linear Algebra авторства несравненной Leslie Hogben. Эти 1400 страниц плотного математического справочника содержат все факты о линейной алгебре, которые вам могут когда-либо пригодиться в студенческой и научной жизни.

Вооружившись свежими книгами, смело идём постигать линейную алгебру до полного просветления.

Курс молодого бойца Линейной Алгебры
Для разбега посмотрим на набор матриц:

A=[1 2; 4 5 ]

A =

1 2
4 5

B = [1, 1; 1, 1]

B =

1 1
1 1

Столбцы матрицы можно набирать пробелом или запятой, разделение на строки - точка с запятой ;

Как нас учит линейная алгебра, матрицы можно
складывать

octave:3> A+B
ans =

2 3
5 6

вычитать

octave:4> A-B
ans =

0 1
3 4

и умножать друг на друга, если они подходят по размерностям:

octave:5> A*B
ans =

3 3
9 9

Делить матрицы друг на друга, как числа, нельзя, но можно умножить матрицу на инверсную. Octave, как и MATLAB, это знают, но пользователь об этом может не догадываться:

octave:> [1 2; 3 4]/[1 1; 1 1]
ans =

0.75000 0.75000
1.75000 1.75000

Такая операция приводит к умножению матрицы A на (псевдо)инверсную матрицу B:

octave:10> [1 2; 3 4]*pinv([1 1; 1 1])
ans =

0.75000 0.75000
1.75000 1.75000

То есть будет вычислено Least Squares решение, как намекает нам документация. Пойдём дальше и посмотрим на другие возможности Octave.

Системы линейных уравнений
На семинарах по линейной алгебре пытаются учить решению систем линейных уравнений, которые выглядят несколько устрашающе:

Эту систему можно переписать в компактном виде А*X = В где коэффициенты являются элементами матриц:

Простой пример для системы из 3 линейных уравнений:

Матрица коэффициентов А и свободных членов В для этой системы:

Для Октавы это будет две команды:

octave:9> A=[1 3 5; 3 1 3; 4 1 3]
A =

1 3 5
3 1 3
4 1 3

octave:10> B = [22;14;15]
B =

22
14
15

Решать системы уравнений можно по-разному, например так:

octave:11> A^(-1)*B
ans =

1
2
3

Но это в реальных задачах всегда стараются избегать такого решения. Часто бывает так, что уравнений больше, чем неизвестных - тут нам на помощь придёт метод наименьших квадратов (Least Squares). В Октаве и Матлабе решение в смысле least squares можно записать компактно:

octave:12> A\B
ans =

1
2
3

Это на самом деле (A^T * A)^(-1)*A^T * B или, в выражениях Октавы, inv(A'*A)*A'*B

Как вычислить собственные вектора и собственные значения в Octave

Это ещё один популярный сорт рыбьего жЫра, коим пичкают скубентов злые преподаватели высших учебных заведений, почти никогда не поясняя, зачем они (собственные вектора и значения) нужны. А они нужны, и даже очень - в обработке сигналов и изображений, для алгоритмов Face Detection и для анализа стабильности контроллеров в теории (и практике!) управления, и для много чего ещё.

В Octave/MATLAB вычислением оных собственных векторов и значений занимается команда eig и сейчас мы её пощупаем. Вводим матрицу

octave:13> A=[1 3 5; 3 1 3; 4 1 3]
A =

1 3 5
3 1 3
4 1 3

теперь считаем собственные вектора U и значения V вот так:

octave:15> [U,V] = eig(A)
U =

-0.62701 -0.82511 -0.22384
-0.51095 0.23555 -0.81183
-0.58804 0.51353 0.53928

V =

8.13398 0.00000 0.00000
0.00000 -2.96831 0.00000
0.00000 0.00000 -0.16567

Матрица выдаётся V в канонической форме, с собственными значениями по главной диагонали. Этим примером хотелось показать eigenvalue decomposition в действии:

[U,V] = eig(A);

и обратно:

U*V*inv(U)

получится опять А.

Отмечу, что Octave/MATLAB считают eigenvalue decomposition совсем не так, как вас учат в институте, поэтому знаки собственных значений могут отличаться от посчитанных вами. Матлабовская документация намекает на причины этого.

Едва ли в курсе линейной алгебре вам расскажут, как посчитать собственные вектора для матриц размерности более 3 или 4. Хотя метод iterative QR decomposition прекрасно реализован в Octave и умеет это делать. Книги Gilbert "наше линейное всё" Strang ждут своих заинтересованных читателей, коим откроется это и многое другое.

Детерминант и ранг матрицы

Эти важные свойства матриц, как правило, довольно просто посчитать вручную, но если это делать лень, можно запрячь Octave:

octave:16> det(A)
ans = 4

и ранг матрицы:

octave:17> rank(A)
ans = 3

На Октаве можно решать и другие задачи из курса алгебры.

Продвинутое использование Octave
Несколько примеров, приведённых ниже, используются уже для написания программ на Octave/MATLAB, а не просто для того, чтобы посчитать домашнее задание.

Matrix Reshape

Иногда удобнее всего работать с матрицей, если вытянуть её в одну строчку. Потом обычно её нужно собрать обратно, после того, как над ней сделали что-то. Для этого нам пригодится команда reshape.

Вот например:

>> x = [1 2 3 4 5 6 ]

x =

1 2 3 4 5 6

Мы хотим сделать этот вектор-строку в виде матрицы 2х3 - легко:

>> x1 = reshape(x,2,3)

x1 =

1 3 5

2 4 6

И обратно собрать:

>> x1 = reshape(x,1,6)

x1 =

1 2 3 4 5 6

Разреженые (Sparce) Матрицы
Иногда встречаются матрицы, в которых очень много нулей и очень мало ненулевых значений. Памяти занимают много, считаются долго. Для экономии ресурсов нам на помощь спешит Sparce Matrix.
Используя специально предназначенные алгоритмы для работы с разреженными матрицами, можно сильно сэкономить память и ускорить вычисления.

Например:

>> a = [1,0,0;0,2,0;0,0,3]

a =

1 0 0
0 2 0
0 0 3

Нулей в матрице много, а значений - всего два. Сделаем её разреженной:

octave:19> a_sparse = sparse(a)
a_sparse =

Compressed Column Sparse (rows = 3, cols = 3, nnz = 3)

(1, 1) -> 1
(2, 2) -> 2
(3, 3) -> 3

Отлично. Теперь, например, мы хотим выцедить из неё главную диагональ. Для этого заведём переменную:

>> d = [0]

d =

0

и воспользуемся специальной командой для разреженных матриц:

>> a_diag = spdiags(a_sparse,d)

a_diag =

1
2
3

Здесь d содержит номера диагоналей, которые надо вытащить: 0 - главная диагональ, 3 - третья справа от главной (выше на 3 позиции), а -2 это под главной диагональю на 2 позиции.

Использование структур для хранения данных

Помимо матиц, в Octave можно хранить ещё и структуры. Структура это удобный метод хранения различных типов данных в одной "переменной".
Например, в симуляторе есть данные, касающиеся параметров турбулентности атмосферы, и они все хранятся в одной структуре по имени atm.

Создание структуры дело нехитрое, и это можно делать в цикле:

for ii=1:4
atm.layer_height{ii} = height;
end

Для просмотра содержимого структуры достаточно вызвать её по имени.
>> atm

atm =

n_layers: 1
layer_height: {[5000]}
layer_thickness: {[100]}
Cn_squared: {[1.3514e-17]}
Cn_squared_model: 'pureHufnagel'
psi_cell: {[128x128 double]}
nx_grid_points: {[128]}
ny_grid_points: {[128]}
screen_width: {[16]}
outer_scale: {[1.9512]}
inner_scale: {[0.0021]}
sampling_delta: {[0.1250]}
sampling_delta_f: {[0.0625]}
r0: 0.1600
power_spectrum_model: 'kolmogorov'
phase_screenwidth: 16
Reynolds_number: 9000

Теперь, скажем, я хочу передать значение n_layers в цикл (это число слоёв турбулентной атмосферы). Пишем:

k = atm.n_layers

Но это просто число. Так как здесь используются слои, структура получается многомерной. Например, нужно получить высоту слоя турбулентности layer_height пишем:

>> k = atm.layer_height(1)

получаем:

k =

[5000]

Это первый элемент структуры, но он не просто число, а cell array:

>> whos k
Name Size Bytes Class

k 1x1 68 cell array

Grand total is 2 elements using 68 bytes

Что делать, как спрашивают классики? Фигурные скобки позволяют получить непосредственно значение элемента:

>> k = atm.layer_height{1}

k =

5000

Теперь это число и с ним можно работать.

>> whos k
Name Size Bytes Class

k 1x1 8 double array

Удобство структур в том, что их можно передавать в функции, как одну большую переменную. Если при этом вы захотите добавить новые переменные, корректировать вызов функций не придётся - вы передаёте всю структуру целиком, так что все необходимые переменные там будут.

Ссылки
На этот пост меня сподвиг Блог ни о чем и его заметки про Октаву. Из оных заметок может сложиться впечатление, что Октава это "типа калькулятор, только консольный". Что неверно: несмотря на прорву недостатков Октавы (обрывочную документацию, криво реализованные матлабовские функции, неспособность выдавать интерактивные графики и зачаточный графический интерфейс) это - вполне себе мощная система численных расчётов и язык программирования. В качестве пособия по линейной алгебре GNU Octave более чем достаточна.

Странное рождение и долгая жизнь UNIX

2012-02-06T00:15:00.017+04:00

Когда хотят утешить, то говорят, когда для вас закрывается одна дверь, открывается другая. Так и вышло для Кена Томпсона (Ken Thompson) и Дениса Ритчи (Dennis Ritchie), когда они создавали операционную систему UNIX - одну из самых вдохновляющих и влиятельных программ за всю историю компьютерной техники.

Copyright© 2011 IEEE. Reprinted from IEEE "The Strange Birth and Long Life of Unix" by Warren Toomey, IEEE Spectrum Magazine, December 2011.

This material is posted here with permission of the IEEE. Such permission of the IEEE does not in any way imply IEEE endorsement of any of mydebianblog’s products or services. Internal or personal use of this material is permitted. However, permission to reprint/republish this material for advertising or promotional purposes or for creating new collective works for resale or redistribution must be obtained from the IEEE by writing to pubs-permissions@ieee.org.

By choosing to view this document, you agree to all provisions of the copyright laws protecting it.

Copyright © 2011 IEEE. Перепечатано из IEEE "Странное рождение и долгая жизнь Unix" Уоррен Туми, IEEE Spectrum Magazine, декабрь 2011 года.

Данный материал публикуется здесь с разрешения IEEE. Такое разрешение IEEE ни в коей мере не означает одобрение IEEE любой из продуктов mydebianblog или услуг. Внутреннее или личное использование этого материала допускается. Тем не менее, разрешение на перепечатку / переиздание этого материала для рекламы или рекламных целях или для создания новых коллективных работ для перепродажи или перераспределения должно быть получено от IEEE, написав по адресу pubs-permissions@ieee.org.

Просматривая этот документ, вы согласны со всеми положениями законов об авторских правах, защищающих его.

Что было до UNIX: Эпоха Динозавров
Для Томпсона и Ритчи дверь закрылась в марте 1969 года, когда их работодатель, American Telephone & Telegraph Co. (AT&T), вышел из совместного с Массачусетским Институтом Технологий (MIT) и General Electric проекта по созданию интерактивных систем с разделением времени под названием Multics. Метод разделения времени (time-sharing), позволяющий нескольким людям использовать один компьютер одновременно, был изобретен всего десять лет назад и использовался в системе Compatible Timesharing System (CTSS).

Совместимая система с разделением времени, Compatible Timesharing System (CTSS), была одной из первой операционных систем такого типа. Разработанная в Вычислительном центре MIT командой, возглавляемой Fernando J. Corbató, система была продемонстрирована в 1961 на компьютере IBM 709. Усовершенствованная система CTSS запускалась на машине IBM 7094 и позволяла обслуживать до 30 пользователей одновременно через модемы.

Есть сохранившееся видео тех времён, где Fernando J. Corbató доступно объясняет принцип работы системы с разделением времени:

Multics объединяла режим разделения времени с другими техническими достижениями той эпохи, позволяя соединяться с компьютером через удалённые терминалы для чтения почты, редактирования документов, запуска вычислений, и много другого. Это должно было стать огромным шагом вперёд по сравнению с тем, как компьютеры использовались ранее. А до этого была утомительная подготовка и ввод пакетных заданий на перфокартах, запускаемых последовательно одно за другим.

Рискуя повредить психическому здоровью впечатлительной части юной вебдвальной аудитории, автор хотел бы напомнить, что до дискет и тем более флешек, люди использовали вот такие накопители:

Сие есть перфокарта, историю коих можно узнать на хорошо иллюстрированном сайте. А ниже показана перфолента:

Флешка приведена для сравнения того, насколько далеко и быстро ускакала Computer Science в деле хранения информации.

Компания AT&T более пяти лет инвестировала миллионы долларов в проект Multics, закупая мэйнфрэймы GE-645 и координируя усилия многих ведущих исследователей в Bell Telephone Laboratories (Bell Labs), в том числе Ken Thompson, Dennis Ritchie, Joseph F. Ossanna, Stuart Feldman, M. Douglas McIlroy, и Robert Morris. Но новая операционная система была слишком амбициозна, и оттого её разработка серьёзно отставала от графика. В конце концов, корпоративные слизняки из AT&T решили ударить по тапкам и выйти из проекта.

Мэйнфрэйм GE-645 выглядел примерно так, брутально и сурово.

После этого менеджеры Bell Labs сильно охладели к проекту разработки Multics. Такой поворот событий не мог не огорчать многих исследователей. Хотя операционная система Multics не достигла многих своих целей, она, по воспоминаниям Ритчи, предоставляла "удобный интерактивный сервис для вычисления, хорошую среду разработки, и систему, вокруг которой могло бы образоваться сообщество". Но беда пришла, и её совсем не ждали.

Справедливости ради, нужно отметить, что Multics ещё долгое время служила верой и правдой в разных академических и оборонных учреждениях. Некоторые машины с Multics составили части ARPAnet - то, что мы сейчас знаем как Internet, а тогда серьёзная сеть суровых американских вояк на случай ядерной войны. MIT's Multics был одним из первых сайтов в той сети.

Огорчённые этим событием, исследователи вернулись к использованию старой пакетной системы. В этот неблагоприятный момент, когда руководство было категорически против новых идей, казалось безрассудным продолжать разработку компьютерных операционных систем. Но это именно то, что Томпсон, Ритчи, и многие из их коллег по Bell Labs, отважились сделать. Теперь, 40 лет спустя, нам стоит поблагодарить этих исследователей за то, что они проигнорировали своих шефов и продолжили своё любимое дело, подарившее миру UNIX - одну из величайших компьютерных операционных систем всех времён и народов.

На фото - отцы UNIX: Ken Thompson [сидит] набирает программу на клавиатуре, Dennis Ritchie [стоит] рядом. Это 1972 год, вскоре после того, как они и их коллеги по Bell Labs создали UNIX.

Томпсон, Ритчи, и Rudd Canaday из Bell Labs, начали делать наброски дизайна для файловой системы. Томпсон написал основы новой операционной системы для мэйнфрейма GE-645, установленного в лаборатории. Но конец проекта Multics означал и конец GE-645. Томпсон понял, что дальнейшее программирование под GE-645 это путь в никуда.

Один из первых мануалов: Thompson (ken) и Ritchie (dmr) создали первый мануал для UNIX, один из которых показан выше. Первая версия мануала вышла в ноябре 1971.

С чего начался UNIX...
После кончины Multics в 1969 году, Томпсон потратил часть своего времени на создание компьютерной игры под названием Космические путешествия, которая моделировала все крупные тела в Солнечной системе. Игроку требовалось провести космический корабль вокруг них, пытаясь приземлиться на планеты.

Археологическая экспедиция экипажа блога во главе с автором откопала скриншот и описание игрушки Космические путешествия (Space Travel) дабы можно было заценить умопомрачительную графику:

тех времён и возможности игрушки, которые были не менее впечатляющими: лететь вперёд и назад, повернуть вправо и влево, а так же изменение масштаба экрана больше-меньше.

Важно, что Кен Томпсон фактически изобрёл UNIX только для того, чтобы поиграть в эту игрушку. А ещё говорят, что игр под UNIX/Linux нет. А они есть - вот ещё одна, крутой космический шутер Spacewar! образца 1962 года:

Проникнитесь, друзья. Это вам не Angry Birds на айфонах...

Игра, написанная для GE-645, была неуклюжа и очень дорогостояща - поиграть стоило примерно 75 долларов, потому как процессорное время стоило недёшево. Бродя по лаборатории, Томпсон наткнулся на PDP-7, мини-компьютер, созданный корпорацией Digital Equipment, и купленный его коллегами по Bell Labs. Выглядел мини-компьютер PDP-7 вот так:

PDP-7 выгодно отличался прекрасным видеовыводом, так что Томпсон переписал игрушку Космические путешествия для работы на PDP-7.

Это было куда сложнее, чем может показаться на первый взгляд. Так как отцы UNIX презирали всё существующее программное обеспечение, они должны были реализовать арифметику с плавающей точкой (отличная статья в тему, кстати - и это только основы...), и полную спецификацию графических символов для подсистемы отображения и отладки, которые непрерывно отображают содержимое положений игрушечного корабля в углу экрана. Все это было написано на ассемблере, и запускалось на компьютере GECOS, выдавая бумажные ленты для PDP-7.

После этого небольшого упражнения в программировании, произошло ещё одно событие: летом 1969 года жена Томпсона, Бонни, уехала к родителям, чтобы показать их новорожденного сына. Кен Томпсон решил воспользоваться своим временным холостяцким положением и написал за это время отличный код, который потом превратится в Unix для заброшенного мини-компьютера PDP-7.

Название Unix связана с шуткой одного из коллег Томпсона: новая операционная система поддерживает только одного пользователя (собственно, Томпсона), и он рассматривал её как выхолощенную версию Multics - потому и нарёк новую операционную систему "Un-multiplexed Information and Computing Service". Это название позже превратилось в Unix, и вот как об этом вспоминают Dennis M. Ritchie (dmr) и Ken Thompson (ken):

Всё это непотребство творилось за спиной начальства, которое ничего не подозревало об этих игрищах.

Изначально Томпсон использовал GE-645 для создания и компиляции программного обеспечения, который он затем загружал на PDP-7. Вскоре Томпсон начал разработку файловой системы и пользовательских утилит: копирование, печать, удаление, правка файлов и, естественно, командный интерпретатор. Все программы писались на компьютере GECOS и переносились на PDP-7 на бумажной ленте. Как только Ассемблер на PDP-7 заработал к концу 1969 года, Томпсон был в состоянии писать код операционной системы собственно на самом PDP-7. Это был шаг в правильном направлении. Однако Томпсон и другие исследователи знали, что миникомпьютер PDP-7 уже был устаревшей моделью, как знали они и то, что руководство лаборатории не собиралось больше разрешать исследований по операционным системам.

Подпольная разработка UNIX и первые успехи
Так что Томпсону и Ритчи нужно было проявить изобретательность, которую они блестяще продемонстрировали: в заявке они попросили начальство купить одну из новых мини-ЭВМ DEC, а именно PDP-11. Запрос был сформулирован в очень кучерявых терминах: они написали, что целью является создание инструментов для редактирования и форматирования текста (то, что мы сейчас назвали бы текстовый процессор). Тот факт, что они также должны были написать операционную систему для новой машины, чтобы запускать текстовый редактор, был всего лишь сноской.

Менеджмент клюнул на приманку, и заказ на PDP-11 был размещён в мае 1970 года. Хотя сам компьютер доставлен быстро, носители данных для него привезли лишь через полгода. В этом время, Томпсон, Ритчи и другие продолжали разрабатывать Unix на PDP-7. После установки носителей данных в PDP-11, исследователи перенесли свою навороченную операционную систему на новую машину. Затем они перетащили туда текстовый редактор roff.

Первыми ходовыми испытаниями для Unix стал патентный отдел AT&T, где машинистки стали использовать Unix для набора, редактирования и оформления патентов. И это был успех! Патентное ведомство с удовольствием приняло новую систему, что дало исследователям достаточно авторитета, чтобы убедить руководство приобрести ещё одну машину, обновлённую и более мощную модель PDP-11, позволяющие продолжить их подпольные работы по Unix.

Движок Unix: Ранние версии Unix запускались на мини-ЭВМ PDP-11 от Digital Equipment Corp. (DEC).

В первые дни Unix развивалась постоянно, так что идея выпуска именованных версий или релизов казалась неуместной. Но исследователи периодически выпускали новые издания руководства разработчика, так что ранние версии Unix назвались в честь каждого такого издания. Первое издание руководства было завершено в ноябре 1971 года.

Так что же предлагали первые версии Unix, сделавшие её столь привлекательной?
Главным козырем Unix было то, что она предоставляла иерархическую файловую систему, позволявшую то, что мы сейчас принимаем как нечто само собой разумеющимся: файлы могут быть размещены в каталогах и подкаталогах.

При инициализации системы, известно только одно устройство файловой системы
(корневое устройство, root device), и его имя встроено в систему. Другие устройства и накопители присоединяются за счет монтирования других устройств, каждое из которых содержит свою собственную структуру каталогов. Когда устройство установлено, его ``корень'' крепится к ``листьям'' уже доступной иерархии. [отсюда, PDF 200 Kb]

Каждый файл мог содержать не более 64 килобайт, и его имя могло быть не длиннее шести символов. Эти ограничения, кажущиеся такими неуклюжими сейчас, в то время были более чем адекватными.

Хотя Unix якобы создавался для обработки текстов, единственным доступным редактором в 1971 году был ориентированный на строки ed. Сегодня, ed по-прежнему является текстовым редактором, гарантированно присутствующим на всех системах Unix. Помимо обработки текстов и общесистемных приложений, первая версия Unix включала такие игры, как блэкджек, шахматы и крестики-нолики. Утилиты системного администратора включали сохранение и восстановления образов дисков на магнитную ленту, утилиты чтения и записи на бумажные ленты, а также программы для создания, проверки, монтирования и размонтирования съемных дисков.

Самое замечательное заключалось в том, что система предлагала интерактивную среду, которая позволяла работать в режиме разделения времени (time-sharing). Это позволяло нескольким пользователям использовать одну машину одновременно. Были доступны различные языки программирования, в том числе BASIC, Fortran, ассемблер и язык B. Собственно, язык B является потомком BCPL (Basic Combined Programming Language, базовый комбинированный язык программирования), и в конечном итоге превратился в чрезвычайно популярный язык C, созданный Ритчи во время работы над Unix.

UNIX имела хорошие показатели надёжности для программного обеспечения тех времён. Время автономной работы между сбоями программного обеспечения (в зависимости от того, как часто над ней экспериментировали) значительно превышало две недели. Главной причиной сбоев было аппаратное обеспечение и перебои в электросети. [отсюда, PDF 200 Kb]

Первая версия Unix позволяла программистам вызывать 34 различных низкоуровневых процедуры, встроенных в операционную систему. Почти все эти системные вызовы по-прежнему доступны и до сих пор активно используется на современных Unix и Linux системах четыре десятилетия спустя. Для своего времени, первая версия Unix предоставляла удивительно мощную среду для разработки программного обеспечения. И это несмотря на то, что сердцем Unix были всего лишь 4200 строк кода, занимавшие жалкие 16 КБ оперативной памяти при запуске.

Влияние UNIX
Огромное влияние Unix можно отчасти объяснить элегантностью дизайна, простотой, портируемостью и удачным стечением обстоятельств. Но, пожалуй, более важным было преданное сообщество пользователей, быстро выросшее вокруг Unix.

Всё было примерно так: в течение многих лет Unix оставались лишь исследовательским проектом Bell Labs, но к 1973 году авторы Unix сочли, что система была достаточно зрелой для того, чтобы выступить с докладом о ней на конференции Ассоциации вычислительной техники (Association for Computing Machinery). Доклад можно скачать и прочитать:

Thompson, Ken, and Dennis M. Ritchie, The UNIX Time-Sharing System, Communications of the ACM, Vol. 17, No. 7, July 1974, pp. 365-375 (revised and reprinted in [Ritchie 1978]) [mirror]

Статья была опубликована в 1974 году в трудах АСМ, и её появление принесло шквал запросов на копии программного обеспечения.

Это поставило AT&T в трудное положение. Дело в том, что в 1956 году AT&T пошло на соглашение с правительством США, по которому компании запрещалось продавать продукцию, не связанную напрямую с телефонами и телекоммуникациями, в обмен на её право монополии в междугородных телефонных услугах для всей страны. Так что Unix не мог быть продан в качестве продукта. Вместо этого AT&T выпустила исходные коды Unix под лицензией, позволяющей использовать их любому желающему по цене носителей. Важная деталь: по тому же соглашению, AT&T не могла оказывать поддержку Unix. На протяжении многих лет исследователи Bell Labs с гордостью демонстрировали это на Unix-конференциях слайдом, который гласил: "Без рекламы, без техподдержки, без багфиксов, деньги вперёд."

В отсутствии других источников техподдержки, первые пользователи Unix объединились для взаимопомощи, образуя свободную сеть групп пользователей во всем мире. У них были исходные коды, что было плюсом. Так что эти первые пользователи Unix сами исправляли ошибки, создавали новые утилиты, и улучшали систему по своему усмотрению.

Группа пользователей Usenix выступала в качестве центра по обмену программным обеспечением для Unix в США. Люди могли отправлять магнитные ленты с новым программным обеспечением или исправлениями и получать софт и исправления, которые Usenix получал от других. В Австралии, Университет Нового Южного Уэльса и Сиднейского университета, была создана более надежная версия Unix, Australian Unix Share Accounting Method, которая могла справиться с большим количеством одновременно работающих пользователей и отличалась более высокой производительностью.

К середине 1970-х годов, среда, возникшая вокруг Unix, напоминала движение Open Source, столь распространенное сегодня. Пользователи повсюду с энтузиазмом расширяли и улучшали систему, и многие из этих улучшений отправлялись обратно в Bell Labs для включения в будущие релизы. Однако с увеличением популярности Unix, стервятники из AT&T начали более пристально смотреть за тем, что пользователи делали с их системой.

Человеком, привлёкшим их внимание, был Jogn Lions, учёный, преподававший в Университете Нового Южного Уэльса в Австралии. В 1977 году он опубликовал книгу, ставшую самой известной в то время - A Commentary on the Unix Operating System, содержащую прокомментированный основной исходный код Unix.

Лицензионные условия Unix позволяли обмен исходным кодом, и изначально книга Лайонса продавалась лицензиатам Unix. Но к 1979 году адвокаты AT&T запретили распространение и использование книги в академических кругах. Сообщество Unix, будучи анти-авторитарным, отреагировало на это так, как и ожидалось: копии книги распространялись самиздатом со скоростью лесного пожара. Многие до сих пор держат почти нечитаемые фотокопии оригинальной книги тех лет.

Снующие всюду юристы AT&T стали привычным явлением, даже в Bell Labs. Например, между шестым релизом Unix в 1975 году и седьмым в 1979 году, Томпсон собрал множество важных исправлений ошибок. Он хотел исправить их для пользователей Unix, но юристы компании сочли, что это будет являться одной из форм техподдержки и запретили релиз. Тем не менее, эти исправления вскоре стали широко распространены по неофициальным каналам. Например, Lou Katz, основателю и президенту Usenix, позвонили в один прекрасный день и сказали, что если он придёт в определенное место на Mountain Avenue (где находилась Bell Labs) в 2 часа пополудни, он найдёт нечто интересное. Конечно же, Кац обнаружил магнитную ленту с исправлениями, которые быстро попали в руки бесчисленных пользователей.

К концу 1970-х годов, Unix, начавшаяся десять лет назад как бунт против потери комфортной среды программирования (Multics), росла, как сорняк, по всему научному миру и ИТ-индустрии. Unix расцвёл в начале 1980-х и достиг вершины своей популярности в начале 1990-х.

Упрощённая карта версий UNIX (позаимствовано на Викискладе). Есть более подробная карта в формате PDF.

По многим причинам, Unix с тех пор уступил дорогу другим коммерческим и некоммерческим системам. Но его наследие, эта элегантная, хорошо продуманная и комфортная среда разработки программного обеспечения, продолжает жить по сей день. В знак признания достижений, Томпсон и Ритчи получили Japan Prize в начале 2011 года, увеличив коллекцию наград, которая включает National Medal of Technology and Innovation и Turing Award от Association of Computing Machinery.

UNIX жил, UNIX жив, UNIX будет жить.
Unix действительно является одной из наиболее влиятельных операционных систем, когда-либо изобретённых. Прямые потомки Unix в настоящее время исчисляются сотнями. С одной стороны родословной находятся различные коммерческие версии Unix, появившиеся на рынке в 1980-х годах после падения монополии Bell System. С другой стороны - различные Unix-подобные операционные системы, предком которых была версия Unix, разработанная в Университете Калифорнии, Беркли (University of California, Berkeley), в том числе используемая Apple - OS X. Именно Unix-подобные: разработчики Berkeley Software Distribution (BSD) Unix много работали над тем, чтобы удалить весь оригинальный код AT&T, чтобы их и основанное на нём программное обеспечение могло распространяться свободно.

Результаты этих усилий, однако, были поставлены под вопрос, когда филиал AT&T, Unix System Laboratories, подал иск против Berkeley Design Software в 1992 году за права интеллектуальной собственности на данное программное обеспечение. Университет, в свою очередь, подал встречный иск против AT&T. Последовавшая за этим судебная тяжба замедлила развитие свободных Unix-подобных систем, в том числе 386BSD, которая была разработана для Intel 386 - процессора, который использовался во многих компьютерах IBM.

Линус Торвальдс говорил, что если бы эта операционная система была доступна в то время, он вряд ли создал бы Linux. А вышло так, что Unix передал эстафету Linux в двадцать первый век, работая на самых разных устройствах: от беспроводных роутеров, телевизоров, настольных компьютеров и смартфонов Android до кластеров и суперкомпьютеров.

Хотя AT&T быстро уладили правовые споры с Berkeley Design Software и Университетом Калифорнии, юридические тяжбы на тему украденной Linux интеллектуальной собственности Unix продолжаются до сих пор. К 2004 году было подано не менее пяти крупных исков. Не далее как в августе 2011 года, компания TSG Group (ранее известная как SCO Group), проиграла в суде дело о владении авторскими правами Unix.

Судебные тяжбы по Unix - это, конечно, печально. С самого начала авторы и пользователи Unix делали всё возможное, чтобы создавать и делиться, даже если для этого требовалось бросить вызов власть предержащим. Такая самоотверженность резко контрастирует с жадностью, повлекшей последующие судебные баталии за обладание Unix.

Отдавая дань истории...
Мир компьютерного железа и программного обеспечения движется вперед поразительно быстро. Быстрый темп изменений для ИТ-специалистов, как правило, замечательная вещь. Но он приводит к тому, что мы забываем наше собственное прошлое, в том числе и важные уроки оного. Для решения этой проблемы, Warren Toomey [автор оригинального текста], в 1995 году начал почтовую рассылку по поиску старых поклонников Unix. Эта работа переросла в Сообщество Наследия Unix (Unix Heritage Society). Цель сообщества - не только сохранить историю Unix, но также собрать и сохранить эти старые системы, вернув их к жизни. С помощью многих талантливых участников общества Наследия Unix, Warren Toomey смог восстановить большую часть старого программного обеспечения Unix в рабочем состоянии, в том числе первый компилятор C, созданный Ритчи в 1972 году, и первый релиз Unix, написанный на C в 1973 году.

Долго ускользавшая от нас Чаша Грааля - первое издание Unix. Затем, в 2006 году, Al Kosso из Музея компьютерной истории в Mountain View, штат Калифорния, откопал печатную версию Unix от 1972 года, которая не только описывала внутреннюю работу Unix, но также включала полный ассемблерный код ядра. Это была удивительная находка, примерно как обнаружение первого автомобиля Ford Model T, пылящегося в углу сарая. Но мы не просто хотели полюбоваться на это издалека - мы хотели запустить первую версию Unix снова.

В 2008 году Tim Newsham, независимый программист, и я [Warren Toomey], собрали команду единомышленников-энтузиастов Unix, и решили воскресить эту древнюю систему. Работа была технически трудной и зачастую разочаровывающей, но в итоге мы создали копию первой версии Unix, и заставили её работать на эмуляторе PDP-11/20. Мы разослали сообщения, извещающие о нашем успехе всем, кому, как мы думали, это будет интересно. Томпсон, как всегда кратко, ответил: "Потрясающе". В самом деле, его детище удивительно, и я [Warren Toomey] был рад сделать всё от меня зависящее, чтобы история Unix стала более известной.

Ссылки, собственно, в самом посте.
Узнать больше об истории UNIX можно по этой ссылке, и вообще на этом сайте собрано много исторического материала по вычислительной технике. Так же доступна хронология событий тех лет. Краткий пересказ истории есть на и русском. Для любителей техноистории, на сайте Lucent есть архивная полка с документами по UNIX. Также стоит заглянуть в статьи Bell System Technical Journal, особенно в эту. Автор перевода несколько добавил материала, отсутствующего в оригинальной статье, и получил огромное удовольствие от припадания к истокам UNIX, чего и вам желает.

Этот пост так же доступен в форматах:

Portable Document Format PDF [730 Kb]
Open Document ODT [35 Kb]

Copyrights
Этот пост является расширенным переводом статьи The Strange Birth and Long Life of Unix , автора Warren Toomey, из журнала IEEE Spectrum.

This post is a translated version of the article The Strange Birth and Long Life of Unix, written by By Warren Toomey, in the IEEE Spectrum Magazine, December 2011

Copyright© 2011 IEEE. Reprinted from IEEE "The Strange Birth and Long Life of Unix" by Warren Toomey, IEEE Spectrum Magazine, December 2011.

This material is posted here with permission of the IEEE. Such permission of the IEEE does not in any way imply IEEE endorsement of any of mydebianblog’s products or services. Internal or personal use of this material is permitted. However, permission to reprint/republish this material for advertising or promotional purposes or for creating new collective works for resale or redistribution must be obtained from the IEEE by writing to pubs-permissions@ieee.org.

By choosing to view this document, you agree to all provisions of the copyright laws protecting it.

Copyright © 2011 IEEE. Перепечатано из IEEE "Странное рождение и долгая жизнь Unix" Уоррен Туми, IEEE Spectrum Magazine, декабрь 2011 года.

Данный материал публикуется здесь с разрешения IEEE. Такое разрешение IEEE ни в коей мере не означает одобрение IEEE любой из продуктов mydebianblog или услуг. Внутреннее или личное использование этого материала допускается. Тем не менее, разрешение на перепечатку / переиздание этого материала для рекламы или рекламных целях или для создания новых коллективных работ для перепродажи или перераспределения должно быть получено от IEEE, написав по адресу pubs-permissions@ieee.org.

Просматривая этот документ, вы согласны со всеми положениями законов об авторских правах, защищающих его.

Установка Orphus на Blogspot - граммарнаци будут довольны

2012-01-30T00:12:00.005+04:00

В этой короткой заметке говорится о системe оповещения авторов об орфографических ошибках Orphus, установке её на Blogspot и результаты ходовых испытаний.

Чего, собственно?
Автор в целом грамотою владеет, но время от времени очепятки и ашыпки случаются, а также лишние слова и предлоги при переделывании поста уже после опубликования оного. Традиционно ревнители орфографии (граммарнаци) негодуют в комментариях, что комментарии несколько засоряет. Идея автоматизировать отправку и обработку ошибок автора этих строк посещала давно, но всегда натыкалась на технические сложности (загружать скрипты на Blogspot не представляется возможным).

И вот я получил электропочту, в которой предлагалось попробовать установить Orphus снова. И в этот раз оно всё-таки заработало. Установка сравнительно проста, хотя имеет свои особенности.

Установка Orphus на блог от Google Blogger
Всё довольно просто:

На сайте орфуса заполняем форму (адрес электропочты и язык) и скачиваем файл orphus.js
Закачать его на сам блогспот нельзя, зато можно воспользоваться каким-нибудь Dropbox и закачать джаваскрипт на Public folder, чтобы можно было загрузить.
Чтобы ревнители грамматики видели, что грамматический напалм совсем рядом и им можно попользоваться, нужно где-нибудь на сайте повесить плашечку или текстовый блок с кодом, который на сайте Орфуса расположен последним пунктом. Для этого легче всего воспользоваться стандартным для Blogger гаджетом "текст/HTML" и вставить туда код следующего содержания:
```
<script type="text/javascript" src="/orphus/orphus.js"></script>
<a href="http://orphus.ru" id="orphus" target="_blank"><img alt="Orphus system" src="/orphus/orphus.gif" border="0" width="141" height="25" /></a>
```
Без него система работать не станет:

Как не работает она у блоговодов, не захотевших скрипт скачать.
Сохраняем шаблон и проверяем работоспособность скрипта.

Теперь готовимся получать письма от благодарных ревнителей грамматики.

Как работает грамматический напалм от Orphus
Выделяем мышью ашыпку и нажимаем CTRL+Enter. Дальше появляется окно вида:
Если есть желание поехидничать, можно вписать комментарий, или отправить, как есть. Незамедлительно автору на почту придёт грозное письмо от Orphus вида

Орфографическая ошибка

URL страницы: http://mydebianblog.blogspot.com/2011/12/blog-post.html
Комментарий пользователя: убрать
Контекст:
и бибтеховские команды, на что автор этих строк сходу
и налетел. При этом вывод, как ни странно, в PDF
продолжаетс
Браузер: .0b8

Так что сразу видно, где и что поправить.

Ходовые испытания
Как и ожидалось, джаваскрипт тормозит (а что он ещё умеет делать?!) загрузку страницы, хотя и не катастрофически. Идеи ускорения сего крайне желательно отгружать в комментарии, желательно вместе с решениями.

Есть возможность просматривать сообщения об орфографических ошибках в админке, там же можно отмечать некоторые отчёты как спам (кстати, интересно, а спамеры этим будут пользоваться?). Кроме того, можно запросить в админке RSS-ленту с ошибками.

Вопрос читателю: альтернативы Orphus?
Собственно, вся идея Orphus - загружаемый джаваскрипт, в котором есть обработка события на нажатие клавиш и сравнение с Ctrl+Enter. Всё вроде бы хорошо, но это джаваскрипт (хотя и 11 Кб). Иногда при этом странно работает выделение с помощью мыши. Если такой системе есть альтернативы - с удовольствием поэкспериментирую.

[Обновлено] Не было печали - бабушка купила поросят :-)
После установки Orphus было отмечено удвоение посещаемости блога по сравнению с цифрами до этого. И это не из-за того, что пост вышел удачным - в графе Traffic sources тишина и никто с Хабра\Слешдота\ЛОРа не заходит. Вот что видно из Blogger Dashboard:
То есть получается так, что посещений стало почти в 2.5 раза больше, а ссылок и заходов нет. Здесь скорее всего имеет место быть баг в механизме подсчёта заходов: я не знаю, как он реализован в Блоггере, но знаю, что это происходит уже не в первый раз. Дело в том, что в Блоггере можно организовать опрос (Poll) - так вот, накручивание заходов там происходит точно так же:
В опросе столько народу участия не принимало, и я это знаю совершенно точно. А теперь такое же непотребство творится с Орфусом. Так что автор этих строк подумывает на время Орфус вырубить.

P.S> Раскраска кода для вставки в пост сделана с помощью http://hilite.me/