Cellar Door

Moving to LiveJournal

2007-01-01T18:08:00.000+02:00

Считайте это второй попыткой: http://callcc.livejournal.com/
О причинах:
1) Появилось желание поддержать контакты с людьми из других стран. Соответственно писать буду большей частью на английском. Насколько большей - пока не знаю сам. И я слишком ленивый, чтобы прикручивать тэги к blogger ;)
2) Давно не хватало возможности полноценно участвовать в разных ЖЖ-коммьюнити.
3) Обновлять блог раз в 4-5 месяцев в любом случае никуда не годится. Я посчитал, что лучше начать все заново...

Устанавливаем Xen

2006-08-12T17:30:00.000+03:00

Позволю себе проспустить теорию, на которой основываются техники виртуализации, и после краткого описания терминов перейду к делу. Итак, Xen - технология паравиртуализации (называемая также supervisor), предполагающая либо модификацию ядер гостевых ОС, либо аппаратную поддержку виртуализации со стороны CPU (Vanderpool, Pacifica). Без специальной аппаратной поддержки в качестве гостевых ОС могут выступать Free/NetBSD, GNU/Linux, Solaris, а с нею - также и Windows. В архитектуре Xen управление ресурами аппаратуры осуществляется на самом нижнем уровне, в административном домене Domain 0 (или Dom0), где запущен xend, а гостевые ОС работают в Domain U, DomU.

Нижеследующие инструкции ориентированы на Debian Etch, но, может с некоторыми правками, применимы к любой Debian/Ubuntu системе.

Устанавливаем пакеты собственно Xen и ядро:
# apt-get install xen-hypervisor-3.0-i386 xen-utils-3.0 xen-docs-3.0 linux-image-2.6-xen-k7 libc6-xen
Здесь и далее k7 следует заменить на название семейства Вашего CPU. Доступны также PAE-версии ядра.

Убедитесь, что установлены и следующие программы:
# apt-get install bridge-utils iproute sysfsutils,
а hotplug, наоборот, удалён.

Следующий шаг необходим:
# mv /lib/tls/ /lib/tls.disabled

Создаём initrd
# cd /boot
# mkinitramfs -o /boot/initrd.img-2.6.16-2-xen-k7 2.6.16-2-xen-k7

В файле /etc/xen/xend-config.sxp должны быть раскомментированы строки (network-script network-bridge) (номер строки 73) и (vif-script vif-bridge) (строка 104).

Наконец, добавляем секцию Xen в конфиг grub:
title Xen 3.0 / Debian GNU/Linux
kernel (hd1,4)/boot/xen-3.0-i386.gz console=vga
module (hd1,4)/boot/vmlinuz-2.6.16-2-xen-k7 root=/dev/hdb5 ro console=tty0 vga=791
module (hd1,4)/boot/initrd.img-2.6.16-2-xen-k7
boot

После прочтения официальной документации некоторая неясность возникает вследствие того, что в Debian ядро, которе мы установили, подходит для Dom0 и DomU одновременно. Можно построить разные ядра для Xen0 и XenU, взяв исходники на http://www.xensource.com/downloads/, но вряд ли выигрыш в быстродействии оправдает расход времени. При использовании же единого ядра главное не забывать указывать наш initrd в параметре ramdisk в конфиге каждой гостевой ОС. Всё общение между "хозяином" и гостевой ОС происходит по сети через ethernet-bridge. А чтобы "поделить" одну видеокарту между несколькими доменами (и соответственно запускать в них свои экземпляры X-сервера), надо настроить VNC или FreeNX.

Итак, после успешной перезагрузки (нам надо, чтобы работал демон xend и присутствовали мосты в выводе команды brctl show) приступаем к запуску гостевой ОС. Для начала проще воспользоваться одним из готовых образов с сайта jailtime.org.
# mkdir -p /xen/slackware
# mv slackware.10-2.20060210.img.tgz /xen/slackware
# cd /xen/slackware
# tar -xvzf slackware.10-2.20060210.img.tgz

Смотрим, чтобы в файле slackware.10-2.xen.cfg опции kernel и ramdisk указывали на текующие ядро и initrd, а в строке disk был правильно указан путь к образу корневого раздела гостевой ОС и свопа.

Запускаем гостевую ОС:
xm create slackware.10-2.xen.cfg -c
Список работающих систем можно посмотреть командой xm list или xentop. Отсоединиться от консоли можно нажав "Ctrl+]", зайти обратно - подсмотрев ID в выводе xm list и скомандовав xm console ID. Остановитьгостевую ОС можно командой xm shutdown Name, где Name - её имя в выводе xm list.

Для нормального функционирования гостевой ОС остаётся скопировать в её ФС каталог /lib/modules/2.6.16-2-xen-k7 мастера:
# mkdir /mnt/slackware<
# mount -o loop slackware.10-2.img /mnt/slackware
# cp -R /lib/modules/2.6.16-2-xen-k7 /mnt/slackware/lib/modules

Чтобы избежать сообщений типа
INIT: Entering runlevel: 5
INIT: Id "1" respawning too fast: disabled for 5 minutes
выполняем следующие действия:
# cd /mnt/slackware/dev
# ./MAKEDEV tty1 tty2 tty3 tty4 tty5 tty6
... и размонтируем ФС.

За кадром остались такие интересные возможности, как распределение аппаратных ресурсов между гостевыми ОС, "живая миграция" виртуальных машин с сервера на сервер, sHype/Xen Access Control, но может я ещё вернусь к этой теме :)

Полезные ссылки:

Статья "The Perfect Xen 3.0 Setup for Debian" (в ней описано пострение ядер Dom0 и DomU из исходников и установка Debian также и в качестве гостевой ОС): http://www.howtoforge.com/book/print/1169

HOWTO Xen and Gentoo - Gentoo Linux Wiki: http://gentoo-wiki.com/Xen

Xen User's Guide с полным описанием возможностей Xen: http://www.cl.cam.ac.uk/Research/SRG/netos/xen/readmes/user/user.html

Описание некоторых конфигураций, в которых используют Xen, на Xen Wiki: http://wiki.xensource.com/xenwiki/CoolConfigurations

Семинар по Xen

2006-08-11T23:05:00.000+03:00

Продублирую-ка я информацию о бесплатном однодневном семинаре "ПОЛИГОН 2006. Система виртуализации Xen", который будет проходить 14-23 августа в Учебном центре "Сетевые Технологии" компании TechExpert:

Занятия проходят в Киеве с 9-30 до 17-30 с перерывами на кофе-брейк и обед, по адресу: г. Киев, пр. Победы, 53, 4 этаж. УЦ «Сетевые Технологии»

План проведения тренинга:

Обзор технологий виртуализации и паравиртуализации
Основные направления использования виртуализации в современных сетях
Архитектура монитора виртуальных машин Xen
Сравнение производительности Xen и других виртуальных машин
Технологии аппаратной виртуализации Vanderpool от Intel и Pacifica от AMD
Преимущества использования серверов Hewlett-Packard в качестве платформы для виртуализации
Преимущества использования тонких клиентов Hewlett-Packard совместно с виртализированными серверами
Инструменты Hewlett-Packard для управления серверами

Практические работы по темам:

Инсталляция и конфигурирование монитора виртуальных машин Xen
Распределение ресурсов между виртуальными машинами
Мониторинг виртуальных машин
Живая миграция виртуальных машин
Использование тонких клиентов совместно с виртуальными серверами
Использование инструментов Hewlett-Packard по управлению серверами. Выполнение основных операций, необходимых при администрировании серверов Hewlett-Packard

Методическое пособие с материалами лабораторных работ по всем разделам практической части семинара.

Документ об окончании курса: Сертификат Учебного центра "Сетевые Технологии".

Регистрация здесь.

P.S. Всё-таки есть свои плюсы в том, чтобы работать всё лето без отпуска ,))

ICFP Programming Contest '06 глазами очевидца

2006-08-11T22:41:00.000+03:00

Не могу не пропиарить отчёт Дмитрия Остапова aka _adept_ о девятом ICFP Programming Contest, происходившем 21-24 июля. Автор входил в команду канала #haskell. Думаю, всем понятно, на каком языке они остановили свой выбор? ;)
Очень интересно, на самом деле...
Часть 1
Часть 2
Часть 3

News from beastie land

2006-07-17T00:33:00.000+03:00

Список наиболее интересных проектов Perforce-репозитория FreeBSD, составленный Joel@: freebsd-development-projects-in-perforce-summary

Киев, утро, почтовая площадь

2006-07-11T18:48:00.000+03:00

Совершенно спонтанно получился такой снимок :)

Nikon D50 Kit

2006-07-07T21:49:00.000+03:00

Наконец-то он мой :)

Splunk

2006-06-25T19:54:00.000+03:00

Splunk - централизованная система ведения и анализа логов, поданная в красивой обёртке AJAXифицированного веб-интерфейса. И речь идёт вовсе не о just another syslog-сервере, а системе, которая делает просмотр и анализ логов лёгким и приятным занятием. Группирование событий по их типам, тегам, хостам, источникам и типам источников, графическое представление времени регистрации событий, показ похожих и родственным событий, интеграция с онлайновой базой данных событий, работающий быстро благодаря механизму индексации расширенный поиск - вот далеко не полный перечень того, что Вы получите, потратив немного времени на скачивание и вопросы мастера установки.

Splunk независим от ОС, приложений или устройств, регистрацию событий с которых Вы осуществляете. Он с одинаковой лёгкостью работает с ФС (NFS, SMB/CIFS, ...), удалёнными файлами посредством (rsync, scp, ftp), клиентами, общающимися со Splunk по TCP или UDP, или же базами данных, поддерживающими ODBC. Сама серверная часть доступна для Linux, Solaris, FreeBSD или MacOS X. Что касается механизмов сбора данных, то их целых шесть:

Tailing Processor - берёт информацию о новых событиях из отдельного файла, например /var/log/messages (впрочем, логи Windows Events также поддерживаются)
Directory Monitor - сбор информации с указанного каталога
FIFO - применение IPC-метода даёт то очевидное преимущество, что журнальные файлы даже не нужно сохранять на диске
TCP-модуль, прослушивающий порт 514 подобно привычным syslog-серверам
ODBC-модуль, источником данных для которого выступает ODBC-совместимая БД
Splunk-2-Splunk модуль, позволяющий принимать/передавать данные другим Splunk-серверам. Возможен и вариант Splunk-2-Nagios, который легко мог бы называться и Nagios-2-Splunk, уж очень тесная там интеграция ;)

Бесплатная версия ограничена в том, что позволяет обрабатывать лишь до 500MB в сутки и не позволяет создавать множественные индексы. Веб-интерфейс наследует лучшие традиции AJAX и Google: так, строка поиска имеет автодополнение всех слов, проиндексированных в Ваших логах. Скриншотов не привожу, поскольку лучше посмотреть "вживую": demo.splunk.com

Официальный сайт: www.splunk.com

Think different :)

2006-06-09T18:15:00.000+03:00

Купил сегодня iPod nano white 4GB, теперь хожу с улыбкой до ушей :) Что интересно, этих 4GB хватает для всей музыки, которую я более-менее интенсивно сейчас слушаю, потому о 30-гигабайтовом iPod Video уже и думать перестал. Осталось заменить наушники на более качественные, такие как Sennheiser PX100 (которые решительно невозможно найти в белом цвете, кстати говоря) или Koss PortaPro.

Придя домой, едва не пожалел, что не взял вместо плеера Nikon D50 kit, который стоял на втором месте в списке покупок. Дело в том, что дома меня ждала новость, что я прошёл в финал второй студенческой олимпиады Cisco, который состоится в Москве 26-27 июня. Впрочем, ещё неизвестно, будет ли там время снимать. Препятствий поездке пока не вижу, на работе отнеслись с пониманием. Вот только надо написать в Инком с просьбой перенести мою регистрацию на семинар "Solaris Day - Что нового в Sun Solaris 10" с 26-го июня на 30-е :)

Fire :)

2006-04-29T12:27:00.000+03:00

Собственно сейчас вместе с учебным годом у меня заканчивается и первый из двух лет военной подготовки. Вчера получили распоряжение явиться на проведение стрельб в тир Минобороны, а поскольку планы на субботу и так разрушились, этот факт уже огорчить не мог :)
Субботнее утро, "спальный" район Оболонь, под слегка удивлёнными взлядами прохожих иду выполнять свой долг. Предварительно надев контактные линзы -1.0, без которых я последние две недели никуда не выхожу, ибо плохо вижу вдаль...
Я и раньше считал, что у меня есть некоторая предрасположенность к точной стрельбе, а тут выпал случай это проверить. Пистолет Макарова, 25 метров до мишени, два подхода по 3 боевых патрона. Результат - 10-8-6 и 10-7-7. Каждый из которых на 4 очка превышает норматив, необходимый для получения отметки "отлично" ;)

А завтра - первый день на работе, киевский офис PortaOne, куда я принят на должность support engineer. Поле деятельности - VoIP :)

Жизненное...

2006-03-18T19:32:00.000+02:00

Шутка ли, с 27 января не написал ни единого поста. При том, что информации, которой стоило либо хотелось бы поделиться, больше чем когда либо. Даже этот пост вряд ли появился бы, если бы не прочитал у Харуки Мураками слова, как нельзя точно (намекаю на первый абзац :) описывающие сложившееся положение...

- Скорее всего, ты сейчас пытаешься найти себе место в рамках нового литературного произведения. И пока ты в поиске, тебе незачем выражать свое состояние на бумаге. Наверняка это так. Или же тебе просто не до этого.
- Ничего не поняла, чего ты мне тут наговорил. Скажи лучше, ты что - мысленно переносишь себя внутрь какого-нибудь произведения?
- Думаю, большинство людей на Земле так делает. Конечно, и я тоже. Если вспомнить, как устроен автомобиль, это похоже на трансмиссию. Человеку нужна такая трансмиссия между ним и жестокой реальностью. Когда внешний мир наваливается на тебя всей своей мощью, ты меняешь положение шестеренок в коробке передач - просто переключаешь скорость, чтобы принять этот удар легко. Так живые существа оберегают свою хрупкую оболочку. Понимаешь, о чем я?
Сумирэ слегка кивнула.
- В общих чертах. Значит, я еще не готова вписаться в рамки нового литературного произведения? Ты это хотел сказать?
- Ты сама пока точно не знаешь, что это за произведение. Вот в чем самая большая проблема. Сюжета нет, стиль пока не определен. У тебя есть только имена главных героев. И все же это новое произведение на самом деле полностью изменит тебя как человека. А пройдет еще немного времени, и, скорее всего, оно начнет работать на тебя, возьмет под свою защиту, и, наверное, совершенно иной, новый мир откроется перед тобой. Но пока еще не время. И естественно, на этом пути тебя подстерегает опасность.
- Получается, прежнюю трансмиссию я сняла, а новую вместо нее еще не закрепила - как раз сейчас закручиваю болты. Но двигатель продолжает гнать обороты, стуча, как пропеллер. Можно так сказать? Похоже?
- Пожалуй, да.

Я не знаю, когда и как всё образуется, но благодарен всем, кто, судя по логам помещений, ещё помнит меня :)

Hello from Microsoft

2006-01-27T12:30:00.000+02:00

Получил по почте (похоже, благодаря Brainbench я становлюсь известным :)). Вдруг кому-то пригодится ;)

Holly S Peterson
Sr Technical Recruiter
International Recruiting Team
Microsoft Corporation
hollyp @ microsoft.com

If you have friends that may be interested please feel free to forward the posting below!

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Soon Microsoft will be interviewing interested and qualified candidates from Belarus for software development positions here in the USA at our corporate headquarters working on our major products.

If you know of anyone that might be interested, or a bulletin board where it would be appropriate to post this, please forward this email. There are multiple positions open and candidates will be in competition with themselves, not each other.

What is a qualified candidate?

Someone who has (or will be completing this year) a bachelor’s (four year or more) degree in Computer Science or a related field
Someone that has very strong abilities to write code in C/C++
Someone that is very driven and passionate about technology, desiring to make software products that will go all over the world
Someone with fluent English speaking skills

WHATEVER YOU DO, DO IT AT MICROSOFT

The reason so many people from various disciplines come to Microsoft is because we provide the most exciting challenges in the industry. Since our inception in 1975, Microsoft’s mission has been to create software for the personal computer that empowers and enriches people in the workplace, at school and at home. Microsoft’s early vision of a computer on every desk and in every home is coupled today with a strong commitment to Internet -related technologies that expand the power and reach of the PC and its users. You can help shape the industry in nearly countless ways, all while gaining invaluable experience. Our casual environment lends itself to freer thinking and therefore, creative problem-solving. However, the coolest part of all is the diversity of jobs. You’re guaranteed not to be bored.

We invite you to join us as we move toward the .NET age, the next generation of our products. You could create a world of change in one of these pivotal, Redmond, Washington USA area positions.

Software Design Engineer (SDE):
Are you proficient in C and C++? Would you like developing algorithms and writing code to be the core part of your job? You're the keeper of the code. A big kahuna of product development, an SDE puts all their technical talents and creativity to the test by writing code, constructing data structures and algorithms as well as working closely with the Program Manager to define and prioritize product features.

Skill Set: C/C++; problem solving; creativity; passion for technology.
Responsibilities: Constructing data structures and algorithms; writing code; testing and debugging code; prioritizing feature list; varying degrees of Program Management activities

Software Design Engineer in Test (SDET):
Would you like to create the tools used to test software? Are you the person who always asks why? Or what if? You break it to build it. An SDET puts the product through its paces, walking in the user’s shoes. You’ll break the product down—including creating the tools such as automation, standalone programs, and device drivers, then working with Software Design Engineers to take the product smoothly to beta stage.

Skill Set: C/C++, VB; problem solving; methodical; likes to break problems down; customer focus; creativity.
Responsibilities: Evaluating User Assistance documentation; writing creative code to test the product; writing automation programs, standalone programs, and device drivers; reporting and prioritizing bugs; stress testing

If you are interested, please email your CV in English to russiacv @ microsoft.com

C.V. instructions:

A CV is the only way to get to the next stage, the interview. Here are a few things to keep in mind when you are updating your CV to send to Microsoft:

Include your military status if your country mandates it. This will help us know if you are allowed to leave your country to work in the USA
Clearly state your graduation date, degree/major and University you attended, or are attending
Specify your technical skills (including programming languages and other development tools you are strong in), project details (both within university and at any jobs or internships you have held) and technologies you have used on those projects
Describe YOUR ROLE in the projects that you worked on, and what did you achieve
Provide an active email address, physical address and current phone number to best reach you

Microsoft is an equal opportunity employer.

Holly S. Peterson - International Talent Scout - Microsoft Corporation - hollyp @ microsoft.com

Echelon was my baby -- Interview with Margaret Newsham

2006-01-25T19:58:00.000+02:00

Писав статью, обнаружил интервью с одним из разработчиков системы Echelon, Margaret Newsham. Страшная и поучительная история...
URL: http://www.agitprop.org.au/stopnato/20000221echelbladn.htm
Часть 2: http://www.agitprop.org.au/stopnato/20000221eche2bladn.htm
Если на том же сайте произвести поиск по слову "Echelon", найдется и множество других материалов, например What is Project ECHELON?.

Tor

2006-01-13T18:33:00.000+02:00

Этот пост имеет особое значение для меня. Его тема в некотором роде сходна с моей заметкой о CipherSaber и отражает текущий статус моих взлядов и интересов. Дело в том, что Tor - децентрализованная анонимная сеть, созданная в ответ на контроль за электронными коммуникациями со стороны правительств, силовых структур и т.д., а это родственно тем целям, что преследовал Arnold G. Reinhold, представив на суд общественности CipherSaber. Так что, если Вы найдете заметку интересной, feel free сообщить о ней свим друзьям и коллегам :)

В последнее время я достаточно много узнал о сетях, основанных на P2P-технологии, и, как и большинство подобных разработок, Tor носит научно-исследовательский характер и преследует цель засекретности и анонимности электронных коммуникаций. Сразу стоит отметить, что P2P-технологии, о которых идет речь, не имеют ничего общего с пересылкой музыкальных и видеофайлов с помощью KaZaa, BitTorrent и других пиринговых систем, или тем более распространением почтового спама. Проект, о котором пойдет речь, предоставляет технологии для анонимного web-броузинга, IM, IRC, SSH-доступа и пр.

Сеть Tor можно представить как распределённую по планете систему из нескольких сотен открытых VPN-серверов, называемых "onion routers" и доступных любому пользователю Сети. Список всех серверов сети Tor вместе со слепками их ключей хранится на трех серверах каталогов (впрочем, они зеркалирутся и на других серверах сети), сами ключи меняются каждые 7 дней. То есть только регистрация серверов и ключей производится централизованно.

Протокол можно описать следующим образом. Клиентское приложение формирует цепочку передачи с тремя (по умолчанию) произвольно выбранными узлами. При этом команда на открытие цепи (а после установки соединения - и весь трафик) последовательно шифруется открытыми ключами этих узлов, начиная с последнего. Таким образом, первый узел не знает, какой узел будет замыкать цепочку (и сколько до него ещё звеньев), а последний не знает, кто открывал канал, т.е. ему неизвестна личность клиента. Собственно, название сети и протокола (TOR: The Onion Router) указывает на применение "луковичных" слоев шифрования. Межсерверные коммуникации защищены с помощью TLS. Образованные цепочки периодически перестраиваются, так что каждый узел сети в итоге пропускает очень незначительный объём данных от каждого клиента. Сессионные симметричные ключи шифрования после каждого изменения топологии удаляются как на узле-сервере, так и на узле-клиенте.

Оператор каждого Tor-узла волен выбирать собственную политику участия в сети, выполняя функции как посредника (middleman node), только передающего трафик другому узлу, так и выходного узла (exit node), трафик из которого выходит в большую Сеть, при этом можно выбирать, какие порты и сервисы оставлять открытыми для выхода.

В сети Tor есть определенное число ресурсов с доменным суфиксом .onion. Они используются для анонимных двусторонних соединений, и доступ к таковым ресурсам можно получить, только являясь узлом сети Tor. Собственно Вы можете сами анонимно публиковать информацию таким образом, организуя т.н. скрытые сервисы.

Тот факт, что проект снонсировался DARPA и Office of Naval Research, а "пилотная" сеть была впервые запущена в U.S. Naval Research Laboratory зачастую наталкивает на определенные мысли, озвученные, в частности, на форуме "PGP в России". Впрочем, учитывая открытость протокола, исходных текстов реализации и криптоалгоритмов, а также здоровую консервативность последних, я не намерен развивать тему подобных угроз. Замечу лишь, что некая могущественная третья сторона, способная производить пассивное или активное вмешательство в передачу данных в глобальных масштабах, безусловно способна установить соответствие между входящим в Tor трафиком и покидающим его сеть на любом из узлов.

Одна достаточно характерная цитата: "В приципе Tor действительно может быть чисто исследовательской игрушкой, несовершенной против очень продвинутого противника. Но это пока лучшее из всего что есть"... Оставлю её без комментариев.

Установка и настройка программного обеспечения, включающего собственно Tor и локальный прокси-сервер, для меня оказались делом считанных минут - всё исключительно просто и хорошо документировано. ПО может работать под управлением Windows, MacOS X, Linux, BSD. Репозиторий Debian GNU/Linux в моём случае содержит всё необходимое, присутствует Tor и в портежах Gentoo, портах Free/OpenBSD и pkgsrc. Наконец, все аспекты использования Tor (соксификация, скрытие DNS-запросов) досконально изучены и не составит труда получить помощь по любым возникающим вопросам.

Кроме того, IRC-сеть Freenode имеет канал #p2p-hackers, где Вы сможете адресовать интересующие Вас вопросы самим разработчикам сети, в частности, создателю Tor :)

"За кадром" остались такие интересные темы, как сети i2p, freenet, cebola, сети криптографических ремейлеров (Cipherpunk->Mixmaster->Mixminion) и многое другое. Постараюсь в будущем восполнить этот пробел. Тем более что данная статья, насколько мне известно, первая в русскоязычном блоге сколько-нибудь подробно описывает Tor и анонимные сети. А "если с чем-то бесполезно бороться (криптография, анонимность), то лучше это возглавить" :)

Ссылки:
Tor: An anonymous Internet communication system
Tor: Overview
TheOnionRouter/TorFAQ
PGP в России
"A Formal Treatment of Onion Routing", Jan Camenisch (IBM Research. Zurich research LAB) and Anna Lysyanskaya (Computer Science Department. Brown University) with respect of Ron Rivest
SATtva. Персональная страница
Анонимность: хорошая невостребованная технология
Tor: распределенная система анонимного серфинга

Если Вы еще сомневаетесь в потенциале P2P-технологий, надеюсь, что Вам будет интересно ознакомиться с целями проекта Randpeer человека по имени David Göthberg. Здесь можно посмотреть слайды, представленными им на 22-ом Chaos Communication Congress, - они дают довольное сильное представление о том, насколько солидную научную основу имеют P2P-технологии.

В статье были изложены и высказывания некоторых завсегдатаев форума "PGP в России", на котором я провел много времени. Склонен считать это данью профессионализму этих людей. Их высказывания здесь употреблены исключительно ради успеха непростого дела обеспечения приватности цифровых коммуникаций. Аспекты анонимных коммуникаций, в которых нуждается современное общество, являются малоисследованной областью криптографической науки, а информированность и того хуже. Так что, чем больше информированных пользователей сильной криптографии и продуктов open source, тем лучше станет мир :)

COMPLETE Hard Disk Encryption with FreeBSD, 22nd C3

2006-01-09T01:54:00.000+02:00

На 22ом Chaos Communication Congress, что прошел в Берлине с 27 по 30 декабря, некто Marc Schiesser представил доклад "COMPLETE Hard Disk Encryption with FreeBSD", с которым можно ознакомиться по следующей сслыке 586-paper_Complete_Hard_Disk_Encryption.pdf. Со списком всех представленных докладов можно ознакомиться на следующей странице: http://events.ccc.de/congress/2005/fahrplan/speakers.en.html

Cisco IOS: of course it runs Tcl :)

2006-01-07T18:58:00.000+02:00

Открытие дня: ОС Cisco IOS содержит интерпретатор языка Tcl. Узнал от этом на канале #tcl сети irc.freenode.net, документальные подтверждения найдены здесь: Cisco IOS Scripting with Tcl и здесь: TCL'ing Your Cisco Router. Также об этом упоминали на TaoSecurity Blog, который более чем рекомендую...

CipherSaber

2005-12-29T02:00:00.000+02:00

In George Lucas' Star Wars trilogy, Jedi Knights were expected to make their own light sabers. The message was clear: a warrior confronted by a powerful empire bent on totalitarian control must be self-reliant. As we face a real threat of a ban on the distribution of strong cryptography, in the United States and possibly world-wide, we should emulate the Jedi masters by learning how to build strong cryptography programs all by ourselves. If this can be done, strong cryptography will become impossible to suppress.

Такими словами Arnold G. Reinhold описывает мотивацию создания им CipherSaber - симметричного шифра, базирующегося на RC4, или ARCFOUR. Возможно, реальность таких намерений станет более ясной, если сказать, что потоковый шифр RC4, будучи по существу реализацией шифра Вернама, или схемы с одноразовым блокнотом (OTP, One Time Pad), крайне прост в реализации и - при должном качестве реализации - является исключительно надежным. Замечу, что это "должное качество реализации" подразумевает применение таких техник, как "multi-round initiation" или 2-байтового RC4. В подтверждение же простоты RC4 повторю слова Брюса Шнайера: "The algorithm is so simple that most programmers can quickly code it from memory."

Это описание было бы не полным, не упомяни я того факта, что автор всячески поощряет именно написание собственной реализации шифра, - это важная составляющая культуры CipherSaber.

В качестве "тестового вектора" на сайте CipherSaber размещен зашифрованный gif-рисунок, и в случае успешной реализации шифра (как это сделал я :) Вы сможете лицезреть следующее:

Более подробную информацию Вы найдете по нижеследующим ссылкам:
CipherSaber Home Page
RC4 - Wikipedia
CipherSaber - Wikipedia
A Stream Cipher Encryption Algorithm "Arcfour"

Мне же остается выразить благодарность людям из группы USENET'а sci.crypt и каналов ##c и #crypto сети irc.freenode.net.

"Сердце Пармы" Алексея Иванова

2005-12-06T00:54:00.000+02:00

Без преувеличения, одна из лучших книг в моей жизни. Тяжелая и великая книга о естественном ходе вещей и предрешенном трагическом их исходе в борьбе с судьбой и временем, о порождающем гораздо более сильные чувства, чем те, что можно передать словами...

Приведу лишь один характерный абзац, может и вовсе непримечательный на эпическом полотне книги, но несущий толику той непередаваемой древней и жуткой атмосферы Перми второй половины XV века, а также потрясающего языка и этнографического богатства, которые так талантливо переданы автором:

Михаил, Бурмот и Калина задержались возле седого старика‑шамана. Старик приносил в жертву щенков. Полуслепой, он нашаривал на земле щенка, нежно брал его в ладони, гладил его, беззубо улыбаясь, совал ему в рот пососать палец. И вдруг тихо, легко, незаметно прокалывал ему сердце тонкой иголкой из рыбьей кости, а потом бросал трупик в большой костер. Михаил глядел и не видел в лице, в руках старика ни злости, ни жестокости, ни безумия исступленной веры. На щеках шамана блестели слезы. Ему и самому было жаль щенков. Пушистые кутята бестолково ползали в прошлогодней траве у его ног, тыкались носами, взвизгивали, переваливались друг через друга.

«Зачем же он их убивает?..» — с гневом и щемящей нежностью к щенкам думал Михаил. Бурмот вдруг отвязал от шапки монету и положил на пенек возле костра. И Михаил неожиданно почувствовал, что эти гибнущие щенята — просто искорки, которые старик бережно выпускает в остывшие за долгую зиму угли жизни, такой хрупкой и быстротечной. Озноб инеем пробежал по груди и плечам князя, и князь поспешно отошел прочь.

— А наш Христос не та же ль искра? — вдруг спросил Калина, шагавший рядом. — Только такая, что вовеки не погаснет…

Михаил покосился на него, поразившись странной созвучности мыслей.

"Сердце Пармы" на OCR Альдебаран
Интервью с Алексеем Ивановым

Armouring the ELF, Phrack Magazine #58

2005-12-05T23:40:00.000+02:00

Крайне любопытную идею встретил, читая Armouring the ELF: Binary encryption on the UNIX platform by grugq and scut:

The following is a short list of encryption methods that have been used to protect the main object code of the executable:
[:..12 lines skipped..:]
Virtual CPUs: A painstaking and powerful method of securing a binary. The object code actually runs on a virual CPU that needs to be independantly analysed first. Very painful for a reverse engineer (and also the developer).

Весьма увлечен, отправляюсь на поиски примеров реализации такого подхода...

Season of change

2005-12-01T00:02:00.000+02:00

"Время Года открывает дверь и выходит, - а через другую дверь заходит другое Время Года. Кто-то вскакивает, бежит к двери: эй, ты куда, я забыл тебе кое-что сказать! Но там никого. А в комнате уже другое Время Года - расселось на стуле, чиркает спичкой, закуривает. Ты что-то забыл сказать, - произносит оно. - Ну так говори мне, раз такое дело, я потом передам. - Да нет, не надо, ничего особенного... А кругом завывает ветер. Ничего особенного. Просто умерло еще одно время года..."

Харуки Мураками "Пинбол-1973"

Scheme it!

2005-11-16T22:12:00.000+02:00

guile>  (define (factorial num)
         (let fact-aux ((k num) (result 1))
              (cond ((< k 0) #f)
                    ((< k 3) (* k result))
                    (else (fact-aux (- k 1) (* k result))))))
guile> (factorial 5)
120
guile> (factorial 20000)
1819206320230345134827641756866458766071609901478752648918062218634569461
0385575344538360958277587247391775023841899120416712453839265768657234754
6452493027570920462535787578952590049182341454271803607039252108504728338
3729296861580052404638841199526622379791066223341463393474395925629787482
1131634186476654555866604361840872239519462766155485616322089816515450918
7221843629440605187730639278335844593118641714839826008040014692810589564
3738692767105374763186090336511780868599512519843617384918221869858019078
1963391287596652958411577778134914894099392305781031059059887206914939526
[...following output not shown here...]

Интересные ссылки

2005-11-14T03:47:00.000+02:00

My Tech Blog via StraNNicK
Food for Thought
Xen Grows Up
Soekris Engineering
Soekris Router Project
TCP/IP Illustrated, vol. 1: The Protocols by W. Richard Stevens
List of countries by Human Development Index via vadim_kataev
Solaris Desktop Gaps at OpenSolaris.org
Сообщество пользователей BeOS
Virtual Memory: Issues of Implementation by Bruce Jacob, Trevor Mudge

developerWorks community blogs
The art of metaprogramming, Part 1: Introduction to metaprogramming
High-performance Linux clustering, Part 1: Clustering fundamentals
High performance Linux clustering, Part 2: Build a working cluster

OpenCON 2005:

OpenBSD Hackathon Report

Exploit Mitigation Techniques

OpenBSD Networking Update

OpenBSD Ports and Packages

Porting OpenBSD

Bell Labs Technical Journal

2005-11-14T03:20:00.000+02:00

Бесценное издание звездной кузни Bell Labs доступно для свободного просмотра. Размещены выпуски Bell Labs Technical Journal на сайте Wiley InterScience - обширного хранилища книг, журналов и исследований в разнообразных областях науки, среди которых не последнее место занимает и Computer Science. Увы, доступ к большиству размещенных там материалов предоставляется при покупке соответствующих лицензий; тем не менее, на странице Lucent размещены данные для свободного доступа к Bell Labs Technical Journal: URL.

20 дней молчания

2005-11-14T03:00:00.000+02:00

... прошли в банальной переоненке ценностей, ведомой внутренним стремлением к - и потребностью в - профессиональной реализации, и погоней за восходящим солнцем. К счастью, их плодотворность ни в коей мере не отражает частота обновления моего скромного блога :)

Ночь на исходе, за ёе чертой меня ждет полный событий день: военная подготовка, курсы Cisco CCNA, на которых я отныне обучаюсь, и работа для центра онлайн-тестирования RetraTech. Тем временем, намерен поделиться чем-то новым и достойным Вашего драгоценного внимания.

OpenVMS и Deathrow Cluster

2005-10-25T02:57:00.000+03:00

Открытие недели: ОС OpenVMS и одно конкретное сообщество, образованное вокруг неё. Речь идет о The Deathrow Cluster: свободно доступном для некоммерческого применения посредством SSH и telnet-доступа вычислительном комплексе, состоящем из машин Alpha и uVAX 3100/80, и ставящем своей целью целью популяризацию OpenVMS. Приведу фрагмент из описания проекта:

"The Deathrow Cluster" is a couple of computers acting as one large computer. The cluster currently consists of DEC Alphas (64 bit), and VAXen (32 bit - Some uVAX hardware, some emulated) running the OpenVMS operating system. The idea of the cluster is to promote the OpenVMS operating system and give people a chance to play with it. People are welcome to test the security features of the cluster, port non-commerical code and learn the basic in-and-outs of the OpenVMS operating system. The cluster supports many programming languages, including: BASIC, C/C++, Fortran, Cobol, ADA, Bliss, Macro32/64, DCL scripting, PL/I, Java, and Pascal.

Наиболее интересной стороной ресурса является система BBS-конференций, в которых участвуют профессионалы высокого класса. Среди наиболее интересных тем (несмотря на OpenVMS-ориентацию ресурса) - их мнения и воспоминания о Amiga, Apollo, Aegis, Domain/OS, SunOS и многом другом. Одна из характерных цитат:

Early 68000 workstations, Sun, Apollo, NeXT etc. had a *very* hackish setup with two CPUs; the other would handle the virtual memory issues when the other was trapped by a page fault. Some scheme, that; VM handling based on crashing the CPU. Hell, i'd love to have one of those! I think there was even a Tandy, with a Z-80 doing the VM.

Словом, такое сообщество серъезно отличается от всего, с чем приходилось сталкиваться до сих пор, и сулит множество интересных открытий.

URL:

PR Statistics

2005-10-24T21:49:00.000+03:00

Любопытные порой вещи встречаются среди страниц на people.freebsd.org: на сайте Brian S. Dean есть система PR Statistics, визуализирующая графики со статистикой Problem report'ов. Весьма полезны наглядные показатели того, в каких частях системы скопилось больше всего проблем и временную динамику их развития, в том числе за весь период существования проекта FreeBSD. Между прочем, на 12м месте самых активных авторов касающихся системы портов PR'ов неожиданно увидел себя :-)

OpenBSD 3.8: Hackers of the Lost RAID

2005-10-24T00:59:00.000+03:00

ONLamp.com опубликовала интервью с группой разработчиков OpenBSD, целиком посвященное новшествам грядущего релиза 3.8: механизму агрегирования линков trunk(4) (в котором, кстати говоря, планируется даже балансировка нагрузки между разнородными соединениями, например проводной сетью и WLAN), новому инструментарию для работы с RAID, улучшению поддержи Wi-Fi, CARP, IPSec, видоизмененной реализации malloc(3) и многим вещам, которые создают OpenBSD репутацию эталона качества.

URL: http://www.onlamp.com/lpt/a/6270

Изъяны протокола STP

2005-10-22T20:50:00.000+03:00

Выпал повод ознакомиться с некоторыми материала на тему изъянов протокола Spanning Tree Protocol. Правда все материалы относятся к 2002-2003 годам (интересно, каковы были изменения на этом фронте?), но внимания явно стоят.

Олег Артемьев и Владислав Мяснянкин известны исследованием спецификаций, описывающим возможные схемы атак и покрывающим вопросы взаимодействия STP и VLAN, распостранения STP-атак на WAN-линки, технологии защиты некоторых производителей (например, Cisco PortFast и BPDU Guard) и многое другое.

Данному ныне остановленному проекту посвящена страница http://olli.digger.org.ru/STP/, русскоязычный PDF-вариант исследования доступен по адресу http://olli.digger.org.ru/STP/STP.pdf. Заметьте: исследование защищено лицензией, текст которой можно просмотреть, например, в его html-версии на bugtraq.ru: http://www.bugtraq.ru/library/books/stp/index.html. Автора также опубликовали статью в журналах LAN: "Опасные деревья в сетевых лесах" и Phrack: Fun with the Spanning Tree Protocol.

Любопытные статьи о Ruby on Rails

2005-10-16T15:23:00.000+03:00

beta.plazes.com

2005-10-15T15:38:00.000+03:00

Самым же интересным пунктом в списке результатов проведенного с помощью GeoURL географического поиска стал сервис Plazes - открытая навигационная система, использующая для построения карт местности имеющиеся там локальные сети (точнее - MAC-адреса маршрутизаторов). Обнаруженное место можно рассмотреть на картах Google и Multimap. Есть возможность помечать тэгами с географическими координатами собственные посты на блогах и фотографии, организована система Karma, разработан API. Интересна и идея Historic Plazes, за описанием которой советую обратиться к подробному описанию.

Сами разработчики называют Plazes социальным ПО нового поколения, полагаясь, между прочим, на самих пользователей в развитии системы.

Напоследок - карта моего района.

GeoURL

2005-10-15T15:36:00.000+03:00

Взялся прикрутить к блогу GeoURL, описанный ранее у StraNNicK'a. На Maporama сколько нибудь подробной карты Киева не оказалось, зато Multimap - оказался на высоте, показывая детализированную до улиц карту. Пожалуй, еще стоит отметить MapQuest. Теперь кликнув по кнопке GeoURL внизу сайдбара или этой ссылке, можно получить географически близкие к моим координатам (указанным в метатэгах блога) сайты.

Maintaining FreeBSD Ports

2005-10-13T19:45:00.000+03:00

После прочтения ранее упомянутой Contributing to the FreeBSD Ports Collection by Sam Lawrance & Mark Linimon решил стать maintainer'ом некоторого количества портов. Текущий список можно просмотреть через freebsd.org или portsmon.freebsd.org. Рад выслушать любые пожелания, входящие в компетенцию maintainer'а.

Кстати, был несколько удивлен видеть, что "осиротели" такие разработки, как icon, moscow_ml, ohugs, smalltalk, tcl, tk, plugger, saint, scite, djvulibre... Полный текущий список можно просмотреть через portsmon.freebsd.org.

FreeBSDTrace Milestone #1 Achieved

2005-10-11T00:48:00.000+03:00

Devon O'Dell сообщил о достижении первой существенной цели его проектом портирования DTrace на FreeBSD: получить работающую связку CTF + libelf + libdtrace + dtrace binary. Некоторые подробности Devon изложил в своем блоге.

Официальная страница FreeBSDTrace: http://web.pulltheplug.org/dtrace

Пополнения в проекте документации FreeBSD

2005-10-10T17:56:00.000+03:00

Пара полезных дополнений к документации FreeBSD:

A practical guide to BSD rc.d scripting by Yar Tikhiy

Contributing to the FreeBSD Ports Collection by Sam Lawrance, Mark Linimon. Исходные тексты статьи доступны также в виде shell archive.

Have fun!

TCG, TPM и чипы безопасности

2005-10-09T19:12:00.000+03:00

Причиной написания данной заметки стали неожиданно родственные статьи Bruce Schneier Trusted Computing Best Practices и "Архитектура чипа безопасности" Виталия Зорина, напечатанная в PC WEEK/UA N9, 9/9/2005, а также доступная в Сети.

Итак, статья Шнайера исполнена аналитическими размышлениями по поводу документа "Design, Implementation, and Usage Principles for TPM-Based Platforms" и самой инициативы trusted computing. И если сам термин trusted computing, полагаю, в разъяснениях сегодня не нуждается, о инициативах и спецификациях конфорциума Trusted Computing Group (подозреваю, что ранее он назывался TCPA, Trusted Computing Platform Alliance), с работой которого, несмотря на неприятие сообществом отдельных элементов trusted computing (камень в огород DRM), разработчикам программных и аппаратных систем придется считаться, стоит сказать пару слов. Замечу, что наиболее весомые позиции в TCG имеют представители таких компаний, как Microsoft, Sony, AMD, Intel, IBM, SUN, HP...

Итак, спецификация TCG определяет функции доверенных модулей (TPM, Trusted Platform Module), являющихся аппаратной частью решения "trusted computer" и соответствующего ПО, призванных в сумме реализовать принципы конфиденциальности, целостности, взаимодействия, переносимости данных, обеспечения DRM. Здесь Шнайер делает следующее нарицание: "That sounds good, but what does "security" mean in that context? Security of the user against malicious code? Security of big media against people copying music and videos? Security of software vendors against competition? The big problem with TCG technology is that it can be used to further all three of these "security" goals, and this document is where "security" should be better defined." Более чем справедливые опасения, на мой взляд...

Наиболее интересна часть, анализирующая причины того, почему TCG, будучи организацией ответственной за спецификации ПО, не изложила вопросы реализации такой системы, а лишь функции её аппаратной составляющей, TPM. Брюс Шнайер объясняет такие манёвры влиянием Microsoft и её нежеланием ставить в угоду столь жестким требованиям планы выпуска Windows Vista.
Один из выводов, слкдующих из этого материала, - очень неприятно, если практика "trusted computing", не обретя должный баланс, станет оружием конкурентной борьбы, призванным укрепить монополию крупных компаний...

Напоследок обсуждения спецификации Design, Implementation, and Usage Principles for TPM-Based Platforms, приведу ссылку на Comments on the TCG Best Practices Committee Document Stefan Bechtold

Только что задался вопросом, каков прогресс инициативы Miscosoft Palladium, попытки реализации спецификаций TCG, объявленной некогда редмондской компанией, и очень широко освещавшейся в СМИ. Кажется, в поле моего зрения долгое время не попадало ничего, что могло бы пролить свет на судьбу "trusted" computer от MS. Тем не менее, как оказалось, инициатива жива и ныне называется NGSCB, Next-Generation Secure Computing Base.

Ради более подробней информации на эту тему разыскал "Trusted Computing' Frequently Asked Questions - TC / TCG / LaGrande / NGSCB / Longhorn / Palladium / TCPA" by Ross Anderson. Замечательный документ. Сам Ross Anderson является автором множества работ, доступных на его веб-странице и классифицированных по темам Economics of information security, Peer-to-Peer systems, Robustness of cryptographic protocols, Analysis and design of cryptographic algorithms, Information hiding (including Soft Tempest), Reliability of security systems, Security of Medical Information Systems, Public policy issues, а также книги "Security Engineering". Таким образом, сайт Ross Anderson, случайно мною обнаруженный в процессе написания статьи, становится и вовсе неоценимым источником информации...

Следующим пунктом следует перечень субъективно наиболее интересных черт тех самых TPM, Trusted Platform Module, в простонародье называемых чипами безопасности.

Интегральные микросхемы этого класса предназначены для хранения паролей, ключей и цифровых сертификатов. Криптографичесикй сопроцессор такого устройства выполняет функции хеширования (MD-5, SHA-1) и ускорения асиметричных RSA-алгоритмов. Обязательным компонентом состоит аппаратный генератор случайных (более уместно, конечно, слово "псевдослучайных") чисел: этот класс устройств представлен огромным разнообращием разработок - от копеечных АГСЧ до экзотических и курьезных проектов. По этой теме рекомендую статью Андрея Зубинского "В поисках случайности".

Самой "вкусной", на мой взгляд, частью таких микросхем являются механизмы защиты от физических воздействий, включающие: шифрование всех проходящих через чип данных, активное экранирование, сенсоры частоты, напряжения и импульсных помех, реализующие защиту от атак по питанию и тактовой частоте, световые и температурные сенсоры и даже запутывание топологии печатной платы.

FreeBSD.org redesigned

2005-10-06T12:59:00.000+03:00

Отныне каждый может оценить проведенную Emily Boyd работу по редизайну сайта FreeBSD.org

Творческий поиск

2005-09-28T13:32:00.000+03:00

На горизонте обозначился первый проект на ассемблере, не исключено что для FreeBSD. Следовательно нахожусь в процессе поиска благодатной почвы. Пока в голову лезет разве что исследование различных RNG-методик.

Речь идет о индивидуальной работе в ВУЗе, но свобода выбора оставлена мне. Собственно, хотел бы услышать мнение посетителей на этот счет и получить указания на в равной мере полезную и интересную (да еще умеренно сложную) предметную область.

FPWiki: Functional Programming Wiki

2005-09-28T07:46:00.000+03:00

_darcus_, популяризатор идей функционального программирования, преподающий этот предмет в российском МИФИ, не далее как вчера сообщил об открытии посвященного ФП Wiki. На нем можно ознакомиться с весьма интересными статьями - переводами иностранных авторов. Ссылка: FPWiki

Хочу отметить также три интересных и связанных с ФП блога, обнаруженных мною в последнее время:
кто убил кошку мадам Поласухер ?...
Mike Potanin
Заметки о прелести мироздания

Кроме того, декларативному (функциональному и логическому) программированию посвящены такие ЖЖ-коммьюнити, как ru_declarative и declarative

PC Week Ukrainian Edition

2005-09-22T18:47:00.000+03:00

Не иначе как открытием недели хочу назвать подхваченную на вчерашней конференции Sun газету PC Week Ukrainian Edition. Оказавшаяся одним из лучших IT-изданий, распостраняемых в Украине и России, она вызвала ощущения сродни тех, что возникают в случае упущения некоторой важной информации. Статья "Архитектура чипа безопасности" Виталия Зорина, перекликаясь с весьма интересными размышлениями Bruce Schneier по поводу TCG в сентябрьской Crypto-gram, похоже, вдохновит меня на написание отдельной заметки - разумеется, после более пристального изучения предметной области.

Пока же хочу привести самые интересные, на мой взляд, вещи из замечательной рубрики "Военные известия":

"Специалисты университета штата Монтана и Национальной администрации океанографии и атмосферных явлений США при поддержке DARPA отлаживают технологию обнаружения наземных мин с помощью пчёл. Учёные в течение нескольких дней подмешивали в пищу насекомым добавки со взрывчатыми веществами, и в результате голодные пчелиные рои стали обнаруживать очень малые концентрации таких примесей в воздухе над закопанными минами, отыскивая их в 97% случаев. Кружение пчёл над миной фиксируется с помощью лазерного радара. Недостаток данной технологии в том, что пчёлы могут отыскивать взрывчатые вещества только на открытой местности, днём и в хорошую погоду. Не всегда удаётся задействовать и радарные установки, поэтому есть планы помечать насекомых светящейся краской или оснащать радиометками.

DARPA также пытается разобраться с акульими органами чувств, которые помогают хищницам обнаруживать живые объекты в воде с больших расстояний по генерируемым жертвами слабым электрическим сигналам. В результате военные надеются более эффективно выявлять морские мины, как правило, оснащаемые электроаппаратурой бесконтактного взрыва..."

И следующая заметка:

"Французским спецназовцам, экипированным экспериментальной системой FELEN, придётся нести на себе 25 кг о-мундирования и оружия. В комплект, работоспособный без подзарядки в течение 72 ч, войдёт цифровая PowerPC-система на базе Linux, средства связи и GPS-навигации. ПО системы написано на Java, а выполняется с помощью Java-машины PERC фирмы Aonix (www.aonix.com), которая создавалась специально для встраиваемых систем реального времени и, по утверждению разработчиков, обеспечивает быстродействие Java-приложений на уровне программ на C++. FELEN разрабатывается фирмой Sagem и будет поступать в войска в период 2007-2015 гг."
Источник - PC Week/UE, 09.09.2005

К сожалению, поиски официальной страницы украинизированной версии успехом не увенчались. Сайте русскоязычной редакции издания находится по адресу http://pcweek.ru/. Там же представлены электронные версии PC Week Russian Edition. Хорош и ресурс PCWEEK On-line.

Pixel2Life.com

2005-09-22T18:43:00.000+03:00

Pixel2Life.com - обширнейшее собрание учебных материалов по различным программам, средам разработки, языкам и технологиям. На данный момент их количество исчисляется 13,972 единицами!
Найдено благодаря блогу inforedesign, заметке "Новые веб-сервисы".

Мини-отчет по конференции Sun Microsystems

2005-09-21T20:41:00.000+03:00

Данное мероприятие, носящее название "День технологий Java", состоялось - впервые в Украине - 21 сентября в большом конференц-зале готеля "Русь". Дабы преждевременно не убить интереса не имеющих профессионального интереса к Java людей, скажу, что, судя по всему, это мероприятие составило немалый интерес и для простых пользователей этой технологии (которых, учитывая степень распостранения всевозможных мобильных "гэджетов", великое множество), сторонников Solaris и всех людей, интересующихся самым широким спектром IT.

Основания так считать у меня самые веские: несмотря на мое весьма поверхностное знакомство со спектром технологий Sun, данное мероприятие вызвало достаточно сильный интерес для того, чтобы начать планировать свое вторжение на благодатную почву Java :)

Главным действующим лицом, собравшим - несмотря на языковый барьер, впрочем с целью преодоления последнего работала система синхронного перевода, - львиную долю аплодисментов и простого неподдельного слушательского интереса, стал Simon Ritter, выступивший с целыми тремя докладами. Остальные докладчики являлись специалистами Центра Высоких Технологий Sun в Санкт-Петербурге. Сами же доклады носили нижеописанный характер.

Стратегия Sun: развитие, миссия и видение; Simon Ritter. Пожалуй, самый насыщенный доклад. Я привожу лишь самые запоминающиеся его моменты.
Изначально ключевыми темами доклада были такие плоды информатизации, как блоги и Вики, их родство с contributing-процессами, имеющими место в opensource-движении, и их значение для Sun. Не забыли упомянуть и о такой тенденции, как Service Oriented Architecture.
Было сообщено и о планах выпуска следующих версий Java-систем: так, из их названия будет убрана лишенная смысла цифра 2, т.е. они будут именоваться следующим образом: Java SE 6 (codename "Mustang"), Java SE 7 (codename "Dolphin").
Было рассказано и о трех видах лицензий на Java-машину: Research License, Internal Use и Distribution License. Не были обойдены вниманием и IDE, предлагаемые Sun для Java-разработки, а также Sun Developers Network и Java Community Process.

JSF & Java Studio Creator; Михаил Матвеев. Выступление о тенденциях веб-разработки и интегрированной среде Sun Java Studio Creator, построенной на базе NetBeans и предназначенной для создания проектов преимущественно малого и среднего размера. В качестве ее главных достоинств были названы ориентация на визуальную разработку, интеграция с PointBase DB, System Application Server Platform Edition, Visual SourceSafe, реализация технологий Enterprise JavaBeans, JSF и JSP, наличие средств отладки и рефакторинга. Демонстрировалась early-access редакция Sun Java Studio Creator 2.

J2SE & J2EE: как разрабатывать приложения; Simon Ritter.
Данный доклад был адресован в первую очередь разработчикам, нуждающимся по долгу своей работы в глубоком понимании таких аспектов, как разнообразные методы garbage collection (описанию которых и была посвящена большая часть доклада), и профилирование.

Перспективные технологии виртуальных машин для мобильных устройств; Данила Синопальников.
Здесь речь шла о преимуществах, которые сулит применение в мобильной технике таких приемов, как динамическая адаптивная компиляция, предварительная компиляция, Hot-Spot, In-place Execution, многозадачность. Были обрисованы более чем радужные перспективы, воплощения которых в жизнь следует ждать в новых версиях J2ME и JSR'ах.

Новые возможности Solaris 10: DTrace и Zones; Simon Ritter.
Наиболее ожидаемый с моей стороны доклад о двух самых сильных сторонах 10-й версии Solaris (к слову, оказавшихся гораздо менее известными среди участников конференции, чем Java-технологии), а также технологии Predictive Self-Healing, вполне себе оправдал ожидания. Дополнительно хотелось бы пожелать разве что проведения практической демонстрации таких решений :)

Desktop Java Technology: Mustang Update; Александр Поточкин.
Выступление было посвящено планируемым в Java SE 6 новшествам и улучшениям. Основное внимание уделяли совершенствованию AWT, Swing и Java 2D.

Sun Microsystems: программа поддержки разработчиков; Виталий Суховский.
Ключевые моменты этого доклада: стратегическая инициатива Sun Partner Advantage Program, а также рассмотрение спектра серверных решений компании Sun и применяемых в них достояниях современного процессоростроения. Особо заострили внимание на сотрудничестве Sun и AMD, воплощающемся в виде построенной на основе AMD Opteron продукции, а также разрабатываемым процессорам RISC-архитектуры под кодовыми названиями Rock, ориетированном на интенсивные вычисления в составе, к примеру, центров баз данных, и Niagara - будущий 8-ядерный вычислитель, позиционируемый как обладающий беспрецендентной производительностью в задачах одновременного обслуживания большого числа клиентов.

Напоследок действительно хочу выразить благодарность докладчикам и организаторам столь нужного и информативного мероприятия. Прекрасно отдаю себе отчет в том, что не хватает в моем мини-репортаже фотоснимков, но, увы, ничего кроме 0,3Mp-сенсора телефона под рукой не оказалось :) В качестве компенсации разыскал блог Simon Ritter: http://blogs.sun.com/simonri

ru.reader2.com

2005-09-18T17:12:00.000+03:00

Последовав примеру StraNNicK'a, воспользовался сервисом Reader2. Искренне хотелось бы пожелать дальнейшего распостранения этому полезному и нужному начинанию. Мои книги.

RAQdevil

2005-09-17T18:46:00.000+03:00

Занимающийся портированием DTrace на FreeBSD, о чем я писал в предыдущем посте, Devon O'Dell, оказался причастным - при спонсировании OffMyServer - к еще одному интересному проекту. А именно - RAQdevil, портированный на FreeBSD Sun Cobalt RaQ550, комплекное решение Web-хостинга, исходные тексты которого были открыты Sun в декабре 2003г. Более подробно об этом было написано на bsdforums.org, а пресс-релиз находится по адресу http://www.prweb.com/releases/2005/9/prweb282859.htm
Официальный сайт: http://www.raqdevil.com/

DTrace, Sun и FreeBSD

2005-09-17T18:36:00.000+03:00

Решил собрать воедино все известия, касающиеся портирования DTrace на FreeBSD, и ресурсы, посвященные ходу этого проекта и самому DTrace.

Если бы нужно было дать наиболее краткое описане DTrace, думаю достаточно было бы сказать, что DTrace - единоличный монарх королевства профилирования, отладки и security forensics для UNIX, дающий наиболее полное представление происходящих в системе процессов. И благодаря этому, DTrace стал по-настоящему неоценимым для разработчиков и системных администраторов, имеющих по долгу своей непростой службы дело с Sun Solaris.

Итак, после некоторого обсуждения в списке рассылки freebsd-hackers, Devon O'Dell, разработчик FreeBSD, работающий на компанию OffMyServer, сообщил о начале работ над переносом DTrace на платформу FreeBSD. Это известие получило огласку от ZDNet Australia и множества других изданий.

За ходом разработки можно следить на блоге Devon O'Dell: http://www.sitetronics.com/wordpress/.

Портал, посвященный DTrace, находится по адресу http://www.sun.com/bigadmin/content/dtrace

Довольно любопытна и статья Peer deep with DTrace. Среди всех материлов, посвященных DTrace, хотелось бы отметить DTrace -- Most Exposing Solaris Tool Ever от Sys Admin и Sun delivers Unix shocker with DTrace от The Register.

Блоги разработчиков, стоявших в 1997г. у истоков этого самого мощного в индустрии средства:
Bryan Cantril
Adam Leventhal
Mike Shapiro
Нельзя не заметить, какое важное место в информационной инфрастуктуре Sun заняли блоги ее разработчиков.

Между прочем, на киевской конференции Sun, которая планируется 21 сентября, будет доклад о DTrace и Solaris Zones...

audio/emu10kx

2005-09-17T13:12:00.000+03:00

Утренняя почта от FreshPorts Watch Daemon заинтриговала новым портом audio/emu10kx, который есть не что иное, как альтернативный драйвер для звуковых плат Creative SB Live!, Audigy и Audigy2.

Лично я им крайне доволен - исчез эффект кратковременного "зацикливания" звука при переходе из сеанса X Windows в консоль высокого разрешения. Да и даже на максимально возможной в микшере громкости звук лишен каких-либо шумов. Прекрасная работа :)

Заметьте - утилита emuctrl, равно как и ее man-страница, а также man-страница самого модуля, при использовании системы портов не устанавливается.
Домашняя страница находится по адресу http://chibis.persons.gfk.ru/audigy/, а документацию следует поискать внутри архива с последней версией драйвера.

Debugging Kernel Problems by Greg Lehey

2005-09-17T11:58:00.000+03:00

Благодарю списку рассылки FreeBSD cvs-src было обнаружено превосходное руководство по отладке ядра, точнее - книга, находящаяся еще в процессе написания. Прошу любить и жаловать -
Debugging Kernel Problems by Greg Lehey. В высшей степени великолепный материал. Чтобы не быть голословным, приведу здесь вступительную часть:

Operating systems fail. All operating systems contain bugs, and they will sometimes cause the system to behave incorrectly. BSD kernels are no exception. Compared to most other operating systems, both free and commercial, BSD kernels offer a large number of debugging tools. This tutorial examines the options available both to the experienced end user and also to the developer.
This tutorial bases on the FreeBSD kernel, but the differences in other BSDs are small. We’ll look at the following topics:
• How and why kernels fail.
• Understanding log ﬁles: dmesg and the ﬁles in /var/log, notably /var/log/messages.
• Userland tools for debugging a running system.
• Building a kernel with debugging support: the options.
• Using a serial console.
• Preparing for dumps: dumpon, savecore.
• The assembler-level view of a C program.
• Preliminary dump analysis.
• Reading code.
• Introduction to the kernel source tree.
• Analysing panic dumps with gdb.
• On-line kernel debuggers: ddb, remote serial gdb.
• Debugging a running system with ddb.
• Debugging a running system with gdb.
• Debug options in the kernel: INVARIANTS and friends.
• Debug options in the kernel: WITNESS.
• Code-based assistance: KTR.

FreeBSD: редизайн сайта и не только

2005-09-16T22:02:00.000+03:00

В списках рассылки появилось сообщение о том, что Emily Boyd завершила редизайн сайта www.FreeBSD.org в рамках проекта Summer of Code. В списках рассылки был приведен адрес http://beastie.emilyboyd.com/~emily/data/, но на данный момент ссылка не работает. Может Вам повезет больше... Судя по исключительно положительной реакции членов проекта и пользователей, обновление основного сайта будет происходить в достаточно скором времени.
Также в последние дни претерпели изменения такие страницы, посвященные 6.0-RELEASE:
http://www.freebsd.org/releases/6.0R/todo.html
http://www.freebsd.org/releases/6.0R/schedule.html

Upcoming OpenBSD 3.8

2005-09-16T15:51:00.000+03:00

На официальном сайте опубликован список новшеств в OpenBSD 3.8, релиз которого намечен на 1 ноября. Более насыщенная подробностями версия документа находится здесь.

Bookreader

2005-09-16T15:47:00.000+03:00

Радуюсь замечательному J2ME-мидлету для мобильников, носящему незамысловатое название bookreader. Протестировано с успехом - весьма приятно скрасить особо скучную лекцию чтением, например, Phrack Magazine или рассылки Bruce Scheier :)
Подробнее читайте на eth0_blog, оф. сайт - http://tequilacat.nm.ru/dev/br/.
Есть и вторая разработка такого рода - ReadManiac, но она ориентирована на телефоны Siemens и устройства, Java-машина которых поддерживает MIDP 2.0. Разработчики пишут, что, в случае поддержки MIDP версии лишь 1.0, книгу можно загрузить только по HTTP.

Архив Интернета

2005-09-10T13:43:00.000+03:00

http://www.archive.org/
Сервис, называемый The Internet Archive Wayback Machine, позволяет просматривать заархивированные версии сайтов Сети, в том числе за определенный промежуток времени. Возможные запросы проиллюстрированы примерами. Каталогизированы тексты, музыка и фильмы.
Одним словом, как минимум любопытно, а полезные примеры пользования таким сервисом также несложно представить...
Немного статистики: объем накопленной в архиве информации измеряется 1PB (petabyte), а растет со скоростью 20TB/month.

Introduction to Reverse Engineering Software

2005-09-10T13:35:00.000+03:00

Introduction to Reverse Engineering Software by Mike Perry, Nasko Oskov.
И почему в сутках только 24 часа?..

Security Tools

2005-09-10T13:30:00.000+03:00

К Вашему вниманию три списка самых распостраненных Security Tools - по версии CERT, CIAC и Fyodor'a соответственно:
http://www.cert.org/tech_tips/security_tools.html
http://www.ciac.org/ciac/SecurityTools.html
http://www.insecure.org/tools.html
Показалось довольно полезным...

FreeBSD Mailing Lists

2005-08-31T14:26:00.000+03:00

Добрый час подписывался на списки рассылок FreeBSD. Таковых заинтересовало ровно четверть сотни :) Вот на всякий случай перечень:

cvs-doc
cvs-projects
cvs-src
freebsd-announce
freebsd-arch
freebsd-audit
freebsd-cluster
freebsd-current
freebsd-doc
freebsd-emulation
freebsd-fs
freebsd-gnome
freebsd-hackers
freebsd-libh
freebsd-net
freebsd-performance
freebsd-pf
freebsd-platforms
freebsd-ports
freebsd-ports-bugs
freebsd-qa
freebsd-realtime
freebsd-security
freebsd-security-notifications
freebsd-stable

Эх, как же я люблю сообщество и инфраструктуру, организованные вокруг BSD UNIX :)

Альтернативные Window Managers: wmi, wmii

2005-08-30T15:29:00.000+03:00

На этот раз у нас целых два поколения программ, а значит и два этапа развития представлений разработчиков о идеальном WM. Безусловно наибольшее внимание хочется уделить второму поколению - wmii, - но и wmi заслуживает как минимум упоминания. Благодаря подкупающе простой и элегантной реализации подхода, в котором сочетаются традиционный и "фреймовый" подход к организации рабочего пространства. Есть и еще одна характерная для обоих wmi и wmii особенность - традиционное меню заменяет удобная строка, вмещающая все обнаруженные в PATH команды, и поддерживающая автодополнение (к сожалению, имена файлов-параметров в автодополнении не участвуют). Второй такой же модуль открывает доступ ко всем внутренним командам wmi. Есть один нюанс: при установке wmi из портов FreeBSD каталог styles рискует остаться незамеченным. Формат каждого файла настройки описан в отдельных man-страницах. Наличествует и графический конфигуратор wmizer, написанный с использованием py-gtk2...

Так уж сложилось, что разработчики, проникшись концепциями Plan 9, Oberon и Larswm, веско заявили, что будущее за реализацией динамического управления окнами, и следующее поколение их детища предстало в совершенно новом виде. Попутно переписанное с С++ на С и уменьшенное в размере со 190 до 66KB. А главным новшеством стала реализация весьма любопытного метода IPC-взаимодействия - библиотека Libixp, построенная на основе UNIX-сокетов и предстающая нашему взору в виде оригинальной виртуальной ФС. Нетрудно догадаться, что спроектирована она по образу и подобию протокола 9P из Plan 9, получившего развитие в виде 9P2000 в четвертом издании данной ОС, Styx из Inferno OS и нескольких opensource-реализаций - v9fs, Portable 9P client and server на Python и Portable 9P/Styx client and server на Java. Подобная реализация IPC делает wmii открытой для взаимодействия с любыми - не только скриптовыми - языками программирования и позволяет модифицировать каждый аспект интерфейса и поведения wmii в реальном времени.

Влияние Plan 9 проявляется и в реализации механизма - тоже в некотором роде IPC - Plumbing. Его суть, значительно упрощая, состоит в том, что текст в буфере обмена анализируется на предмет соответствия регулярным выражением для определения того, какой программе его следует передать. В Plan 9 это одна из центральных идиом пользовательського интерфейса, правда там действия механизма программно-зависимы и сочетаются с чем-то вроде mouse gestures. Реализацию, содержащуюся в самом wmii, вряд ли можно назвать полноценной, но в разделе Tools сайта есть и гораздо более функциональный Ruby-вариант, а принципы описаны здесь.

Каталог contribs архива с исходным текстом wmii содержит несколько приложений на Python, в числе которых графический (py-gtk2) браузер пространства имен IXP и средство для монтирования дерева каталогов IXP в заданную точку файловой системы. В наличии и реализации самой Libixp на Python...
Порт последней версии wmii-2 на данный момент доступен только в базе GNATS.
Не вдаваясь в дальнейшие подробности - например описания всех 4 способов организации рабочего пространства, - замечу, что данная разработка, несмотря на некоторые недочеты, на мой взляд, представляет наиболее интересную концепцию организации рабочего пространства... Да и IPC-методику решительно стоит взять на заметку.

URL: http://wmi.modprobe.de/index.php/WMI/Home
Manual: http://www.inf.tu-dresden.de/.../beginnersguide.html

Альтернативные Window Managers. Ion

2005-08-30T13:45:00.000+03:00

Разработчики таких программ веско заявляют, что современные GUI более чем неудобны. Следовательно, у нас есть возможность оценить их взляд на проблему организации рабочего пространства, воплощенный в таких экспериментальных продуктах, как larswm, ion, ratpoison, orion, wmi и wmii.

Разработчик Ion намеревается решить извечную проблему, разделив рабочее пространство на неперекрывающиеся фреймы, между которыми можно свободно перемещать клиентские окна, либо обьединять последние в группы. Управление целиком и полностью клавиатурно-ориетировано, причем сами сокращения клавиш продуманы и интуитивно понятны. При обретении определенной сноровки вовсе не потребуется когда-либо использовать мышь для навигации или управления рабочим пространством, а последнее пребывает всегда в идеальном порядке...

Нельзя не заметить, что ветка ion-3ds развивается весьма динамично, - обновления исправно выходят каждый месяц, а все изменения подробно описаны... В портах FreeBSD последней на данный момент версией является ion-3ds-20050728, но обновление ion-3ds-20050820 не составит труда отыскать в базе данных GNATS.

Сильнейшей стороной Ion является применение языка Lua для описания всех настроек, тем и расширений. На сайте доступно великолепное 89-страничное руководство Configuring and extending Ion3 with Lua, документирующее все аспекты применения Lua для настройки и расширения Ion. Любопытно, что больше половины объема документа занимает описание собственного API. Нужно ли говорить, что, будучи подобным образом документированным, встроенный движок Lua-скриптинга открывает практически неограниченные возможности. На сайте проекта есть определенное количество готовых Lua-расширений, в частности расширения для не в меру функционального ion-statusbar.

Превосходная командная строка с автодополнением имен программ и путей делает традиционное меню вовсе ненужным, есть аналогичный модуль для быстрого запуска Lua-кода, да и полезно расширение Execute and display. Применение данного действительно удобного WM может быть омрачено лишь проблемами при запуске приложений, не удовлетворяющих стандарту ICCCM, или же сложностями с организацией работочего простанства для приложений из разряда, к примеру, Instant Messaging. Впрочем, есть возможность создать отдельный рабочий стол с более традиционным путем управления окнами.

URL: http://iki.fi/tuomov/ion/

BSD Unix: Power to the people, from the code

2005-08-28T17:12:00.000+03:00

Три месяца лежала в ScrapBook'e одна статья - до тех пор пока, наконец, не нашел время прочитать... Оказалось - весьма емко и интересно. Более чем стоит требуемого для чтения времени.
BSD Unix: Power to the people, from the code, by Andrew Leonard :: Page 1

Graphviz - Graph Visualization Software

2005-08-23T13:56:00.000+03:00

Теория графов предоставляет формальный способ представления знаний, - записи множества элементов и связей между ними. GraphViz представляет собой набор инструментальных средств, нацеленных на прикладную область под названием graphdrawing - рисования графов. Данный набор инстументальных средств вышел из стен AT&T и Bell Labs.

Фактически сердцем системы является программа dot, реализующая собственный проблемно-ориенированный язык dgl (dot graph language) - в равной мере простой и выразительный. Мощные способности dot позволяют управлять представлением всех элементов результирующего графа.
Полное описание атрибутов dot занимает скромных 36КВ. К чести Bell Labs, graphviz оснащена и настолько качественными руководствами, что документированность системы может служить объектом для подражания...
Всего в инструментальный набор вошли 24 команды, среди которых, кроме средств создания направленных и ненаправленных графов, наборы фильтров, преобразователей графов, препроцессоров, просмотрщик и редактор для системы X Windows.
Спектр поддерживаемых графических форматов выходного файла весьма широк и покрывает, вероятно, все возможные требования.

GraphViz является крайне полезным средством из области "графического представления знаний".
Разработчикам ПО он способен помочь просто и элегантно решить проблему высокоуровневого документирования, облегчить создание предпроектной документации. Широта применения graphviz ограничена главным образом фантазией разработчика: так, встраивание в программные системы кода, генерирующего dgl-описания, открывает неожиданные перспективы отладки, профилирования или изучения самой программной системы, представляя наглядное изображение компонентов и происходящих процессов. Широки перспективы применения данного средства и в инженерном деле, и даже в работе системного администратора... Тем временем, большинство упомянутых областей применения остаюся потенциальными. Особенно удивляет отсутствие особого интереса со стороны разработчиков ПО, тогда как в качестве средства создания документации graphviz получил определенное признание - так, среди исходных текстов, созданных в рамках проекта документации FreeBSD, присутствует некоторое количество dgl-описаний...

URL: http://www.graphviz.org/. Список ресурсов, посвященных Graph Drawing можно найти на странице проекта open directory: dmoz.org/Science/Math/Combinatorics/Software/Graph_Drawing/.

Небезполезная экзотика

2005-08-20T12:09:00.000+03:00

Так выглядит функция быстрой сортировки на языке J:
qsort =: ]`(($:@:((}.<:{.)#}.)),{.,($:@:((}.>{.)#}.)))@.(*@#)
Лаконично, не так ли? А предшественник этого языка - APL - знаменит тем, что его символьный набор выходил за рамки привычного ASCII, заставляя применять специальные клавиатуры вроде следующего:

Причем Array Processing Language - крайне мощный язык, получивший некоторую популярность в научных и финансовых применениях. Любопытная цитата Edsger Dijkstra:
"APL is a mistake, carried through to perfection. It is the language of the future for the programming techniques of the past: it creates a new generation of coding bums."

FreeTechBooks.com

2005-08-19T11:37:00.000+03:00

А на данном ресурсе собраны ссылки на свободно распостраняемые в электронном виде книги... Умеренное количество оных компенсируется наличием некоторых весьма любопытных экземпляров.

Packit

2005-08-19T11:26:00.000+03:00

Средство аудита сети, предназначенное для инжекции пакетов и мониторинга трафика. Позволяет определить практически все заголовки пакетов протоколов TCP, UDP, ICMP, IP, ARP, RARP и Ethernet, объединять различные опции с помощью логических операторов.
Кажется, весьма полезный инструмент для разнообразных задач аудита: тестирования пакетных фильтров, IDS-систем, симулирования сетевого трафика и, в конце концов, - для изучения сетевых протоколов...
URL: http://packit.sf.net
Доступно для Free/Net/OpenBSD, MacOS X и Linux...

Снова о FORTH

2005-08-17T18:55:00.000+03:00

По адресу http://forthfreak.net/jsforth.html есть онлайн-интерпретатор Форта, дающий возможность ознакомится с языком посредством JavaScript без установки транслятора.
То, что на Форте написан начальный загрузчик (loader) системы FreeBSD, - довольно известный факт, но мне показалась интересной та деталь, что он основан на FICL. В целом, загрузчик имеет весьма широкие командные возможности; на страницах руководства описан командный язык и расширения, привнесенные проектом FreeBSD.
Раз уж упомянул об этом, нельзя оставить без внимания и написанную на Форте систему Open Firmware, которая с успехом заменяет SPARC'ам и Mac'ам традиционный для нас BIOS.
Еще пара полезных ссылок: список проектов NASA, использующих Форт, книга "The Evolution of FORTH" (сайт компании FORTH, Inc располагает и другой документацией...) и не менее любопытная книга Ф. Купмана "Stack Computers: the new wave". К тому же ссылка Random на панели навигации Forth Programming Webring может привести к интересным тематическим ресурсам...

Разное...

2005-08-17T13:18:00.000+03:00

Наконец-то нормально организовал секцию ссылок.

Пришло время отправиться читать эту книгу:
С.В. Зубков "Ассемблер для DOS, Windows и UNIX"

Интересно: оказалось, что это единственная изданная в Украине, да и России тоже, книга, где хоть немного внимания уделено языку ассемблера для UNIX. Да и в мировом масштабе ситуация, по-моему, не намного лучше. Нашел электронное издание знаменитой книги Randall Hyde "The Art of Assembly Language"; свободно доступны ее версии, ориентированные на Linux, Windows и DOS, а также статьи-сравнения ассемблеров; есть документация и другие ресурсы, касающиеся HLA (High Level Assembly). Сайт обнаружен благодаря FreeTechBooks.com Последний также возьму на себя смелость порекомендовать.

FORTH

2005-08-16T14:45:00.000+03:00

Forth Programming Webring

FORTH, детище гениального инженера Чарльза Мура, создано им для управления телескопами в Национальной радиоастрономической обсерватории в конце 60х. Это черезчур ёмкое слово, чтобы дать его полное определение, но попытаться следует. Форт - это:

язык высокого уровня
язык ассемблера
язык проектирования
операционная система
набор инструментальных средств
философия решения задач

Прежде всего языковая составляющая вселенной Форт - это "метаязык" для создания собственных проблемно-ориентированных языков... Суть этого процесса состоит в реализации необходимого для решения задачи инструментального набора, словаря. Форт, будучи использован правильно, приближается к уровню функционального языка. Ключевым отличием от традиционных языков является то, что: "Язык Форт предлагает вместо фиксированного набора порождающих понятий единый механизм порождения таких порожающих понятий." [Баранов, Ноздрунов "Язык Форт и его реализации"]

Язык предоставляет максимальный доступ ко всем средствам его реализации и потоку исполнения "шитого" кода. Неделимые в остальных языках операции, например конструкция процедурного вызова, здесь разложены на элементарные составляющие, доступные программисту без какого-либо контроля (так, для упомянутой конструкции процедурного вызова доступно управление точкой возврата). Доступна и внутренняя структура каждого слова, семантика слов-определений как времени исполнения, так и времени компиляции. Сама форт-система постепенно расширяется по мере разработки... Здесь нет нерушимых правил. Сохраняется соответствие между исходным текстом и результирующим машинным кодом. Во главу поставлена простота, свобода и расширяемость. Отстутствие какого-либо контроля является еще одной характерной чертой языка Форт. Следствием такой неограниченной свободы видится то, что программирование на Форте представляется в гораздо большей степени искусством, чем на любом другом языке...

Средства, которые предоставляет язык Форт, позволяют реализовать практические любые недостающие расширения языка (например локальные переменные, многопоточность или реализация Модула-подобных модулей размером в 3 строки текста...) и перекроить по своему опыту и разумению все существующие средства... В случае четкого понимания поставленой задачи, простота и элегантность профессиональной реализации ни с чем не сравнимы. Результирующий код становится концентрированной смесью концепций, чистейшим выражением абстрактного замысла.

Несмотря на то, что Форт интерпретируемый язык, он исполняет скомпилированный код. В целом Форт превышает все другие высокоуровневые языки по скорости работы, а по компактности - и ассемблерный код. Критичные к скорости исполнения участки кода на любом этапе разработки могут быть переписаны на встроенном ассемблере.
В полной инструментальной среде многозадачная Форт-система с интерпретатором, компилятором, ассемблером, редактором, операционной системой и другими утилитами поддержки занимает около 16 КБайт, при этом вполне заурядный размер для ядра системы со словарем - около 4К, а для встроенного ассемблера - 1К.
О еще одном важном свойстве - переносимости - форт-кода свидетельствует наличие многих микроконтроллеров и DSP-процессоров, основанных на Форте...

Форт имеет достаточно широкое применение в научных и промышленных целях, а также встраиваемых системах, с начала 70-х. Хотя его можно считать языком будущего, популярность Форта стабильна в течение продолжительного периода времени и, увы, вряд ли можно ожидать её скачкообразного роста.

Процесс разработки ПО на Форте совмещает фазы планирования, анализа, проектирования, реализации, изменения, отладки и поддержки; он может свободно сочетать методологии "снизу-вверх" и "сверху-вниз"; реализуемая таким образом модель жизненного цикла разработки сходна с хорошо известной и весьма эффективной инкрементной моделью... О эффективности такого подхода свидетельствуют сроки разработки проекта с использованием Форта, которые могут крайне удивить сторонников традиционных языков и методов...

Осталось ответить на еще несколько вопросов...

Трансляторы Форта
Для системы FreeBSD и остальных opensource-систем семейства UNIX доступны реализации Gforth проекта GNU, PFE http://pfe.sourceforge.net/ (Portable Forth Environment), а также интерпретируемый язык FICL http://ficl.sourceforge.net/ (Forth Inspired Command Language). Последний дополняет стандартный Forth объектно-ориентированными свойствами и идеально подходит для интеграции с другими приложениями и "встраиваемых" применений.

Литература
Её немного, но качество и ценность имеющихся изданий поразительны. Книга "Starting FORTH" Leo Brodie послужит более чем удачным вводным курсом. "Язык ФОРТ и его реализации" С.Н. Баранова, Н.Р. Ноздрунова также заслуживает наивысших оценок. А "Thinking FORTH" Leo Brodie, освещающий вопросы техники и стиля в цикле разработки программного обеспечения, представляет исключительную ценность для программистов на любых языках и может занять достойное место рядом с "Искусством программирования" Дональда Кнута, "Мифическим человеко-месяцем" Фредерика Брукса или "Совершенным кодом" Стива Макконнелла...

Все перечисленные книги можно найти на сайтах forth.org и forth.org.ru. Второе издание Thinking FORTH легально доступно на SourceForge, в т.ч. в виде исходных текстов системы LaTeX. Также стоит посетить Forth Programming Webring, страницу проекта Open Directory и домашнюю страницу Чарльза Мура.
О самом изобретателе лучше всего говорит цитата из статьи Дж. Фокса "Тощий компьютинг": "...Это самый продуктивный программист, которого я когда-либо видел. За последние 15 лет он написал 15 KB кода: несколько десятков популярных ОС, систему проектирования СБИС, с помощью которой создал работающие микропроцессоры, и десяток масштабных систем управления, функционирующих по сей день...".

Одним словом, перед нами еще одна крошечная бездна, нечто крайне отличное, как по своей структуре, так и по философии, от всего, с чем приходилось иметь дело до сих пор, средство открывающее совершенно иные пути решения "вечных" проблем.
В заключение еще одна цитата: "Форт подобен Дао: это Путь, и осознается он, когда ему следуешь. Хрупкость его есть его сила; его простота есть его направление." (Майкл Хэм, победитель конкурса Mountain View Press на описание Форта в двадцать пять слов или меньше.)

ELF shell

2005-08-05T21:39:00.000+03:00

...или elfsh - интерактивная скриптинговая среда для изучения и модификации исполняемых файлов и разделяемых библиотек формата ELF. Поле её применения охватывает модификацию, внедрение стороннего кода, исследование бинарников в таких областях, как reverse ingeneering (не могу найти адекватный перевод данного термина...), аудит безопасности и обраружение вторжений. Работает на архитектурах x86, SPARC32, SPARC64, MIPS32, ALPHA64 и ОС Linux, Solaris и семейства BSD.
В готовящейся к выходу версии 0.65 множество нововведений, в т.ч. модуль, добавляющий возможность генерации графов в формате системы graphviz, о которой напишу отдельно.

Официальный сайт проекта ELF shell, его зеркало.
Спецификация формата ELF лежит здесь, а описание SPARC ABI (вдруг кому-то надо?) здесь.

Разработчики elfsh проделали большую работу по разработке на его базе встраиваемого отладчика, не использующего системный вызов ptrace, а значит - лишенного многих его недостатков и способного успешно работать в средах, не реализующих данный системный вызов. Также была проделана большая работа по его портированию на многие архитектуры (x86, alpha, sparc, mips) и решению вопросов работы в средах с технологией защиты PaX.
Одним словом, по-моему более чем перспективная разработка...

Великолепный источник дополнительной информации - журнал Phrack, точнее статьи Embedded_Elf_Debugging из выпуска #63 и The_Cerberus_ELF_interface из #61.

Scientific software

2005-07-28T15:52:00.000+03:00

Краткий экскурс в область свободного ПО для научных вычислений был вдохновлен прочтением посвященного данной теме цикла А. Зубинского. Я описываю лишь краткие впечатления, вызванные упомянутыми там инструментальными средствами. Сами статьи можно легко найти, введя в форму поиска на странице itc.ua фразу "научные вычисления"...

Nickle
Скриптовый язык Nickle известен в первую очередь как язык быстрого прототипирования научных задач. Вторая область применения вычислительных способностей Nickle состоит в качестве более мощной замены классических UNIX-вычислителей bc, dc и expr. Синтаксис Nickle предельно приближен к таковому у C, а семантика обнаруживает общие черты с функциональными языками программирования, например LISP или ML. В документе, представленном на USENIX, разработчики отмечают, что идеи, впоследствии реализованные в Nickle, были заимствованы из C, C++, Icon, ML, Java, Modula-3, Perl, Python, Scheme, sed, awk, bc, dc, expr. Компактность и мобильность реализации же косвенно указывают на происхождение из академической среды [и почему ине вспоминается Lua?]. Присутствует реализация основных примитивов многопоточного программирования, например реализована работа с семафорами и мьютексами. Среди установленных примеров нашлась библиотека, реализующая алгоритм RSA в менее чем 30 строках кода (размер импортируемого модуля с реализациями некоторых численных алгоритмов - еще около 30 строк). А на сайте был обнаружен и порт референсной ANSI C реализации алгоритма шифрования Rijndael на языке Nickle.
Для меня Nickle оказался более чем интересной разработкой, видимо, способной заставить меня отложить запланированное знакомство с Forth.

Yorick
Yorick - универсальная языковая среда для решения вычислительных задач. Среда предсавляет собой интерпретатор "еще одного" скриптового языка. Yorick содержит весьма обширную библиотеку функций, в т.ч. для обработки данных в распостраненных в научной среде формате HDF и NetCDF, допускает использование сторонних расширений на C и Fortran. Фактически Yorick принадлежит к тому же классу ПО, что и коммерческий Matlab или GNU Octave...
Есть возможность интеграции Yorick с Emacs, и сие таинство не сложнее, чем подключение Slime, описанное мною ранее в заметке о Lisp.
Подсистему визуализирования данных Yorick разработчик характеризует как наипростейшую из возможных реализаций набора из базовых графообразующих функций, способных производить основные графические элементы, которыми изобилуют научные издания. Впрочем системы визуализации научных данных крайне сложны, среди них к классу свободного ПО относится OpenDX, основанная на "освобожденных" IBM исходных текстов системы IBM Data Explorer. Приведу лишь цитату из описания соответствующего порта системы FreeBSD:

Data Explorer can be used to add visualization capabilities to existing applications. It is used by companies and institutions for applications in a large variety of visualization fields including computational fluid dynamics, medical imagery, computational chemistry, and engineering analysis. For example, it is currently
being used to:

* Identify and manage portfolio risk worldwide for a large multinational banking group.
* Depict oil-flow simulations to improve drilling success-rates and increase reservoir yields.
* Piece together over 5,000 ceiling fragments from a 1,200-year-old temple in Peru.
* Help insurance agents identify opportunities to cross-sell product offerings.
* Visualize developing weather patterns to improve the accuracy of weather forecasts.

Итог краток: в свободных версиях UNIX, по сей день являющейся основной инструментальной ОС в научной среде, достаточно элегантных и полезных разработок, зачастую балансирующих на тонкой грани искусства и ремесла, способных увлечь человека далекого от основных областей их применения и имеющего крайне поверхностное представление о них.
Все упомянутые прогаммные системы присутствуют в коллекции портов FreeBSD, а также в виде прекоммпилированных пакетов на ftp-сервере проекта.
Ссылки: язык Nickle, официальная страница среды Yorick, unofficial home page, а также посвященная ей страница на dmoz.org, сайт проекта OpenDX.

FreeBSD 6.0-BETA1

2005-07-18T23:46:00.000+03:00

Уже несколько дней как cvsupом обновил верой и правдой служивший мне FreeBSD 5.4 до 6.0-BETA1, произошло это кажется на следующий день после того, как эта ветка утратила статус CURRENT. Положительных впечатлений вобщем-то побольше, чем отрицательных. Из последних главное то, что в связи с переменой версии glib абсолютно все программы, использующие gtk (и первой и второй версии), да и некоторые другие, станут ругаться на локаль при запуске. Большинство из них при этом работоспособности не теряют (в т.ч. GNOME и XFCE), но особо проблемные потребуют либо пересборки (или поиска соответствуего пакета на ftp-сервере FreeBSD), либо запуска в режиме совместимости с помощью порта /usr/ports/misc/localedata. Perl тоже следует пересобрать. Идеальным вариантом конечно был бы глобальный portupgrade... Плюсов было замечено больше. Более быстрая реакция на действия пользователя (может следствие изменения частоты системных часов - кто читал, например, "The Design and Implementation of the FreeBSD Operating System" by Marshall Kirk McKusick, George V. Neville-Neil вспомнит что их есть четыре штуки - hardclock, softclock, statclock, profclock :)), так или иначе "шестерка" собранная с уровнем оптимизации -O визуально быстрее, чем 5.4 с -O2. Очень порадовали изменения в звуковой подсистеме, фактически это лучшее, что могло случится со стареньким emu10k1. Еще радуют включение VESA-патча, работа в режиме чтения с reiserfs и ext2fs, drm-драйвера (в т.ч. для readeon) и PF той же версии, что и в OpenBSD 3.7
Кстати и в 5.4 и 6.0 мною по разу были замечены досадные зависания, на которые можно было ответить только reset'ом.

OpenBSD Packet Filter

2005-07-10T21:54:00.000+03:00

Сегодня разбирался с пакетным фильтром pf. Краткие впечатления - божественно. ИМХО о таком сочетании простоты, мощи и гибкости остальные open-source файрволы (и, как пишут, многие коммерческие - сам pf нередко приравнивают к продукции небезызвестной CheckPoint) могут только мечтать. Рабочий конфиг (без nat) можно поместить менее чем в 10 строчек, превосходно читабельных кстати. А функции stateful inspection, scrub, ALTQ дают понять, что это творение совсем другого класса, чем iptables, ifpw или ifpilter... Вот результат моих сегодняшних экспериментов, конфиг для DHCP-подключения (без NAT):

ext_if="ppp0"
udp_serv = "{ domain }"
tcp_serv = "{ 6 }"
priv_nets = "{ 127.0.0.0/8, 192.168.0.0/16, 172.16.0.0/12, 10.0.0.0/8 }"

#set loginterface $ext_if

scrub in on $ext_if all fragment reassemble no-df min-ttl 20 max-mss 1440
scrub on $ext_if all reassemble tcp
scrub out on $ext_if all random-id no-df

# silently drop TCP non-SYN packets, the remaining ruleset only deals with
# TCP SYNs, which always create state when passed. the ruleset basically
# deals with 'connections', not packets, beyond this point.
#
block out quick proto tcp all flags /S
block in quick proto tcp all flags /S
block out quick proto tcp all flags A/A
block in quick proto tcp all flags A/A
#
# Some anti-fingerprinting techniques
#
block in quick proto tcp all flags SF/SFRA
block in quick proto tcp all flags SFUP/SFRAU
block in quick proto tcp all flags FPU/SFRAUP
block in quick proto tcp all flags F/SFRA
block in quick proto tcp all flags U/SFRAU
block in quick proto tcp all flags P/P

# block and log everything by default
#
block in log all
block out all

# block anything coming from source we have no back routes for
#
block in log from no-route to any

# block and log outgoing packets that don't have my address as source, they are
# either spoofed or something is misconfigured (NAT disabled, for instance),
#
block out log quick on $ext_if inet from !($ext_if) to any

# silently drop broadcasts (cable modem noise)
#
block in log quick on $ext_if from any to 255.255.255.255

# RFC 1918 - block private networks
#
block in log quick on $ext_if inet from $priv_nets to any
block out log quick on $ext_if inet from ($ext_if) to $priv_nets

pass quick on lo0 all keep state

# ICMP
#
pass out on $ext_if inet proto icmp from ($ext_if) to any icmp-type 8 code 0 keep state
#pass in on $ext_if inet proto icmp from any to ($ext_if) icmp-type 8 code 0 keep state

# UDP
#
pass out on $ext_if inet proto udp from ($ext_if) to any keep state
#pass in on $ext_if inet proto udp from any to ($ext_if) port $udp_serv keep state

# TCP
#
pass out on $ext_if inet proto tcp from ($ext_if) to any modulate state flags S/SA
#pass in on $ext_if inet proto tcp from any to ($ext_if) port $tcp_serv synproxy state flags S/SA

Историческая справка: pf был написан в течении лета-осени 2001 года Daniel Hartmeier и сообществом разработчиков OpenBSD, к чему их вынудили проблемы с лицензированием кода ipfilter, а сейчас он доступен пользователям OpenBSD, FreeBSD, NetBSD и DragonFly.

Вот два лучших ресурса по теме:
http://www.benzedrine.cx/pf.html
https://www.solarflux.org/pf/
А русскоязычная документация например здесь: часть 1, часть 2.

Два трюка с Lisp/Scheme

2005-06-29T01:25:00.000+03:00

1) (format nil "~r" 9876543212345678987654321)
"nine septillion eight hundred seventy-six sextillion five hundred forty-three quintillion two hundred twelve quadrillion three hundred forty-five trillion six hundred seventy-eight billion nine hundred eighty-seven million six hundred fifty-four thousand three hundred twenty-one"
No comments...
2) Вот кусочек кода для guile:
(define (factorial n)
(let loop ((total 1)
(n n))
(cond ((= n 0) total)
(else (loop (* n total) (- n 1))))))
Можно смело ввести такое:
(factorial 10000)
Результат не привожу :)) Но он есть, правда последние n чисел нули, не уверен что так должно быть, во всяком случае не проверял корректность такого ответа. Но всё равно забавно.
Common Lisp тоже весьма способен в решении данной задачи, но 10000 для него уже перебор :)

О языке Lisp. Часть 2

2005-06-28T13:42:00.000+03:00

Лучшей книгой для начала изучения Lisp по-моему более чем заслуженно считают Practical Common Lisp, есть еще такая инструкция, книги Common Lisp the Language и Successful Lisp. Вот еще пара ссылок: The Common Lisp Cookbook, страницы Peter Norvig и Paul Graham. Дополнительные ресурсы здесь, да и на тех страницах Wikipedia наверняка еще есть что-то любопытное. Осталось упомянуть портал cons.org, dmoz.org и два Вики - ALU Wiki и CLiki.
Пока всё. Удачи!
---------------------
А подтолкнули меня к знакомству с данным языком его упоминания в статьях Андрея Зубинского, за это и то влияние, что он оказал на формирование моих интересов и способностей, ему низкий поклон.

О языке Lisp. Часть 1

2005-06-28T13:15:00.000+03:00

Пару дней назад началось мое знакомство с языком функционального программирования Lisp, вернее Common Lisp, и это отличный опыт. "The programmable programming language", язык о котором пишут "the best programming language ever". Говорят, "люди его или фанатично любят, или не менее фанатично ненавидят" (А. Зубинский). Так что здесь попытаюсь подытожить свои скромные опыты с данным языком. Впрочем язык и без меня достаточно распостранен, особенно в Unix-среде с ее Emacs Lisp, так что этот пост будет чем-то вроде наставления для начинающих.
В поисках описания языка можно обратиться к Wikipedia - Lisp, Common Lisp, Scheme (Scheme - один из диалектов Lisp. А интерпретатор guile, который присутствует в большинстве дистрибутивов Linux, реализует именно язык Scheme).
Начинают подготовку среды для работы Lisp с выбора реализации (интерепретатора), каковые отличаются степенью соответствия ANSI-стандарту и наличием дополнительных фич. Основные варианты - это CMUCL (Carnegie Mellon University Common Lisp), SBCL (Steel Bank Common Lisp), CLISP, GCL (GNU Common Lisp) и ECL. Под Mac есть OpenMCL. Для изучения языка любая из этих реализаций отлично подойдет, и все они хорошо документированы: GCL и ECL имеют руководства в info-формате, подробная документация по CMUCL есть на официальном сайте, помочь в её выборе призвана EncyCMUCLopedia. CLISP и SBCL также прекрасно документированы, еще стоит поставить clisp-hyperspec (/usr/ports/devel/clisp-hyperspec), reference-мануал, производный от ANSI-стандарта. Вторым компонентом среды станет SLIME (usr/ports/editors/slime) - Superior Lisp Interaction Mode for Emacs. Чтоб подключить его к Emacs'у, добавляем следующие строки в ~/.emacs:

(add-to-list 'load-path "/where/you/put/slime")
(require 'slime)
(setq inferior-lisp-program "yourlisp")
(add-hook 'lisp-mode-hook (lambda () (slime-mode t)
(local-set-key "\r" 'newline-and-indent)
(setq lisp-indent-function 'common-lisp-indent-function)
(setq indent-tabs-mode nil)))

Не забудьте подставить свой "/where/you/put/slime" (у меня это "/usr/local/share/emacs/21.3/site-lisp/slime/") и заменить "yourlisp" на команду запуска выбранного интерпретатора. Затем запускаем Emacs, M-x, команда slime.

О эпиграфе

2005-06-27T02:56:00.000+03:00

Да-да, о той самой фразе Дж. Локка. Пожалуй это самая глубокая мысль, которую мне поведали на лекции по философии (за что безмерно благодарен лектору), она в тяжелый для меня момент выразила всю ту силу, которой может стать для меня истинное увлечение. Силу колоссально притягательную и в то же время внушающую безграничную тревогу, доводящую до отчаяния, силу дающую возможность оценить насколько жалким и в то же время величественным есть человек, дающую стимул подняться и продолжать бой.
Нашел на одном блоге бесконечно красивую фразу - "Я попросил ангела, чтобы он поцеловал тебя. Но он вскоре вернулся и сказал, что ангел ангела не целует". Я поражен.
P.S. Кажется нет у меня подходящей фотки, чтоб запостить сюда, не знаю чем ее заменить... может какой-то рисунок найду :=)
А теперь - спать ))

Welcome this solemn night

2005-06-27T01:15:00.000+03:00

Добро пожаловать! Наконец решил обзавестись web-дневником. Зачем? Кроме информативного его смысла, подозреваю, что тому есть причины на подсознательном уровне, желание ликвидировать недостаток общения или, в более широком смысле, стену разделяющую человека и общество? Наверное... Есть много всего, что хочется изменить в своей жизни, и не меньше того в чем следует разобраться. Примерно так как в песне группы Katatonia:

What I am supposed to be
In my life
In your life
In our life
I shut the door and close my sight
At the end of the day

А словосочетание solemn night тоже слышал у них, и что-то меня в нем привлекает, какая-то тайна, непостижимость, благородство в конце-концов, как и в cellar door.
Блог может помочь мне упорядочить собственные мысли... такой эффект мне недавно принесло написание своего психологического портрета (этим заданием обязан своему универу). Впрочем, здесь "нагружать" Вас психолоческими деталями не намерен, хотя о себе наверное вкратце напишу. Это если меня читать будут, иначе это что ж получается, снова о себе для самого же себя писать?
Так или иначе, блог перед Вами.
О названии: свою интерпретацию этого словосочетания я уже изложил, что касается его происхождения, то видевшие фильм "Донни Дарко" поймут, остальным посоветую посмотреть. Кстати сегодня - [смотрит на asclock] - вернее вчера, видел вот такую его рецензию.
О цели: помню первым блогом, что я видел, был оный у StraNNicK'a, и мой наверняка будет похож, по крайней мере в том, что своим опытом с Unix (и не только) обязательно буду делится, и если это принесет пользу другим, прекрасно. И факты из жизни наверняка будут, а что еще здесь окажется я предсказать не силах, ибо для человека совершенно естественно делится с окружающими тем, что его обуревает. Могу лишь обещать, что не будет ничего нарушающего правила сетевого этикета, и т.д. Соответственно к Вашим комментариям те же либеральнейшие требования, это на случай если меня еще кто-то будет читать :))
В добрый путь!