Skip to content

software

Android vs. IOS

Судилище между Самсунгом и Эпплом вынесло на свет отличный документ, который подробно с фотографиями и пояснениями рассказывает чем Андроид хуже iOS.

Я считаю что его надо в обязательном порядке давать тем, кто подумывает о переходе с iPhone на дешёвые телефоны. Если бы я видел такой документ в 2010ом, когда он был написан, я бы не перешёл на Андроид.

Virtialbox, VMWare, Xen, kvm

На работе меня поставили главным по виртуализации билд сервера. Он и сейчас виртуализован, но основная ОС в нём Windows 7, а не всеми любимый Линух. Было решено убрать эти форточки, воняющие мышами и взгромоздить туда линух и на нём запускать много-много других виртуальных линухов и чуть чуть виртуальных виндузов.

Выбор, естесственно, пал на главный линуховый виртуализатор – Xen. Он, типа, мейнстрим и все под ним работают и огого какой быстрый. Зенификация бокса была поручена мне, никогда этот зен не видевшему в глаза. Я человек осторожный в плане предчувствия того, что хорошую вещь зеном не назовут, поэтому решил сначала потренироваться на кошках на лаптопе, который валялся заброшенным в углу. Лаптоп имеет в себе Core 2 Duo+4GB RAM, самое оно для экспериментов. Скопировал виртуальные машины с билд сервера (они под VirtualBox сделаны), сконвертировал их в raw images (согласно повсеместным рекомендациям).

Столько зена я не имел давным давно! Было попробовано следующее:

Citrix XenServer – установился, но не нашёл сетевую карту. В баш консоле она есть, но зен ее не видит.
XenSource Xen Cloud Platform – установился, нашёл сетевую карту, но отказался монтировать NTFS диск. Я специально для него сделал ext3 partition на внешнем диске, оно диск смонтировало, но всё равно отказалось монтировать raw images. Эти файлы её же родной fdisk великолепно видит как файловые системы, но вот опаньки…
Debian Squeeze – не имеет LiveCD, влезающий на CD. Плюс не даёт выбрать зеркало, откуда его, собственно, можно скачать. На специальной странице с зеркалами половина зеркал не имеет этой версии в наличии. Поставил при помощи network CD, попутно выяснив, что это чудо не знает ничего, кроме WEP, когда дело доходит до установок пароля в WiFi. Установил, поставил dom0 xen kernel, но обломался на зене с установками сети для виртуальных машин. Все гайды в сети о том, как сделать нетворк бридж, мне же надо нат – хз как его делать. Не видят гостевые машины сети и всё тут. Плюс хз как их запускать в графическом режиме.
Ubuntu Natty Narvahl – не имеет dom0 (hypervisor) kernel. Можно взять и самому его скомпилировать. Скомпилировал, ошибок нет, но вот не работает. Не даёт создать гостевую машину.

Короче плюнул я на этот зен!

Пошёл и поставил kvm в Natty – и оно сразу заработало! Всё вместе, и сеть, и графический режим, и прочесть имеющуюся файловую систему из файла, и запустить новую машину из имеющегося файла! Ну то есть всё на уровне “работает прямо из коробки, уберите ваш напильник”! Вот только гость для виндовз ну очень тормозливый… Но я пока валю это на то, что я запускаю уже установленные окны, и оне там как-то не так вставлены. Буду дальше копать в направлении переустановки виндовза.

Такое вот веселье у меня на работе.

Windows/Linux

Купил внешний терабайтный диск для резервной копии всех выкаченных фильмов. Принёс домой, воткнул в домашний театр, в Windows Explorer выбрал пару каталогов и мышью перенёс их на новый диск. Виндовс начало копировать, как всегда показав Microsoft Time с оценкой времени: 48 минут на 700Gb.
После третьего часа копирования explorer.exe отъедал 70% от обоих ядер процессора и не давал сделать практически ничего. Свободной памяти не было, зато размер кэша был равен всей памяти. Виндовс занималось паническим освобождением памяти путём складирования файлового кэша в своп.
Точно такая-же картина, как я наблюдал в 1996ом году, ещё в Москве, когда копирование большого файла с сетевого сервера через полчаса копирования останавливало весь Windows файлсервер. За почти двадцать лет этот баг не пофиксили!
Короче, остановил я это копирование и запустил его на ночь – к утру всё было ок.
А ещё эта Виндовс не умеет играть видео по сети с зашаренного диска. Сеть у меня N, в принципе её должно хватать на 1080р траффик пакованного x264 (или какой там номер?), но вот в Виндовс не хватает. Заикается и спотыкается.
Установил на внешний USB диск Убунту. Запустил видеопроигрыватель, Dragon Player, сказал ему играть видео с сетевого диска – играет без запинок. И 720р и 1080р!
Ну и что теперь делать? Я так думаю, что надо провести эксперимент и установить на домашний театр Линух. Чем я и займусь в сентябре, после всех отпусков, если не передумаю.

Couch Potato

В дополнение к домашней автоматизации выкачки сериалов установил сервер для автоматической выкачки кинофильмов – Couch Potato.

Оно не выкачивает всё подряд, а только то, что я установил в список выкачки. Раз в пару дней оно заходит в злачные места и проверяет – нет ли чего из листа. Тем самым решена извечная проблема: смотришь на будущие фильмы и думаешь, как бы не забыть посмотреть понравившиеся.

Добавлять в список можно двумя способами:

  1. Пользуясь поиском, встроенным в Couch Potato.
  2. Пользуясь скриптом для GreaseMonkey, устанавливаемым через Couch Potato. Скрип срабатывает на всяких киношных сайтах (IMDB, trakt.tv, sharethe.tv, moviemeter.nl, whiwa.net): если зайти на страницу какого-нибудь фильма, то в правом нижнем углу окна бровсера появляется полупрозрачное окошко, ткнув в которое фильм автоматом добавится в список для будущей выкачки.

Я пару вечеров посидел и добавил возможность ставить в очередь фильмы с Apple Trailers и с TheMovieDb.org. Сегодня мои изменения внесли в исходники проекта на Github. Правда эти два сайта работают только в Firefox, расширение для Chrome сделаю чуть позже.

Ещё одна прелесть этой программы – при добавлении фильма в список выбирается и качество. Я по умолчанию выставил в 720p, но можно и всякие другие варианты. Плюс можно делать свои комбинации качества. Я, например, сделал качество “HD”, где сказал, что мне брать 720p или 1080p, приоритет в 1080p (если есть оба варианта – качать только 1080p), ожидание лучшего варианта (если кино появилось в 720p, то ждать Х дней появления 1080p, и если за это время не вышло в таком разрешении, то качать 720p, если вышло – качать его). Весьма удобно!

Да, чуть не забыл – Couch Potato сам ничего не качает, он просто находит NZB или торрент и передаёт это выкачивающему серверу или программе. Плюс он, вродебы, умеет выкачивать автоматом и субтитры, но мне пока это не удалось заставить работать.

Так что рекомендую взглянуть!

Virus/Rootkit

В пятницу совершенно случайным образом словил себе на компьютер какую-то заразу. Зашёл на страницу в wikia.com, файрфокс вдруг открыл новое окно с какой-то совершенно идиотской страницей, без текста, но с какими-то квадратами от отсутствующих плагинов. Я это дело прибил, но оно успело установиться в самую глубину системы и стало в файрфоксе раз в пять минут открывать таб с какими-то рекламными сайтами, плюс кликанье на результаты поиска в гугле через раз открывало откровенно спамерские сайты с “поиском” тех слов, что я искал на гугле. Плюс Гугль Хром вообще отказывался запускаться, а Интернет Эксплорер 9 открывал исключительно не те страницы, что я хотел, а те, что кому-то там надо было рекламировать.
Прочесал систему всеми сподручными средствами, антивирусами и анти-руткитами – ничего нет. Но проблема всё равно есть! Плюс система стала раз в полчаса падать с синим экраном… Попробовал восстановить из Windows Restore – не удалось, так как все ресторы были инвалидными, видно зараза по ним прошлась первым делом.
Перегрузившись в очередной раз, решил я глянуть – а не подключён ли я к кому-то сразу после загрузки. Набрал “netstat -abno” – и правда, подключён по HTTPS к какому-то хосту, расположенному на server.lu Пошёл в настройки Windiws Firewall и запретил доступ к этой подсети. Посмотрел что за процесс установил соединение, оказалось svchost.exe. То есть та штуковина, которая запускает все сервисы. Хм, посмотрел на сервисы – вроде бы только майкросовтовские, обычные, запущены… Перегрузился. Опять нетстат – неа, нет никакого соединения, файрволл сработа… БАБАХ – Синий экран!
Перегружаюсь – “MISSING BOOTRECORD” Опаньки! Получается что руткит, которому отрезали связь с мастером, просто берёт и убивает системный диск! И это – несмотря на всякие Data Execution Protection на Hardware уровне, на всяческие пляски с escalation если программа лезет куда-то не туда. Windows 7 64bit, хвалёная…
Короче делать было нечего, пришлось найти запасённый двд с Windows 7 и установить всё заново. Данные, которые жалко потерять, у меня хранятся в отдельных от системного диска местах, плюс они задублированы. Но потерялся файл от iTunes, где вся музыка была отсортирована и почти вся оценена… Потерялся только потому, что ненатуралы из Майкрософта все программные настройки и My Documents кладут рядом с Windows, то есть на системном диске.
Теперь на домашнем компьютере новые правила: по сети буду ходить исключительно из виртуальной машины. На реальную машину будет ставиться только что требует реальных ресурсов: программы для обработки фоток и игры. Плюс всё свежескачанное из пиратских мест барахло будет проходить проверку на вшивость путём предустановки в специально отведённую для таких целей виртуальную машину без доступа к сети. Пусть там удаляют партишн таблицу, хаха!
Видимо словил какой-то 0-day руткит… Теперь буду осторожничать и бэкапить, бэкапить, бэкапить!

Android

Окончательно взломал свой HTC Desire – root+s-off. Рут там нужен для того, чтобы устанавливать всякие нестандартные прошивки, а s-off для того, чтобы выкусывать из прошивок ненужные программы. Для меня самая ненужная – это Adobe Flash. Оно занимает аж 10мегабайт из 150 мегабайт, отведённых на моём телефоне для всяческих программ. Да, уродливость андроида в том, что несмотря на то, что он поддерживает сколько угодно места на легкозаменяемой SD карте, но вот софт размещается по-умолчанию в специально отведённом месте внутри телефона. В новой версии андроида разрешили размещать программы и на SD карте, но оставили эту возможность на вкус разработчиков. Не всем разработчикам это по вкусу, поэтому львиная доля программ не перемещаема. Есть, конечно, хакерские способы перемещения программ, но они реально для закалённых юниксоидов.

Вот это ограничение на размер всех установленных программ меня лично выводит из себя постоянно! Вот, хочется поставить Angry Birds, а некуда – места нет. Вон, на карте 5 гигов, но ставить туда нельзя. Надо поставить внутрь телефона и уж потом переместить на карту. Ну что за ё?

То есть вместо того, чтобы просто пользоваться программами, надо преодолевать какие-то идиотские преграды и узнавать всякие ненужные подробности о внутреннем устройстве телефона.

А теперь ещё выходят всякие андроидные аналоги айпада – там 100% будут точно такие-же проблемы.

Не знаю, что меня держит на этом уродливом устройстве. Думаю позвонить в O2 и спросить о возможности обратного перехода на айфон…

Home downloads setup

Решил описать свою домашнюю полуавтоматическую систему выкачки всего подряд из интернета.

Немного истории.

Гигазы варезов я качал всю жизнь, сначала посредством модема на работе, по ночам прокачивались огромные, на начало 90х, объёмы. Затем на работе появился выделенный канал в интернет, аж на 64 килобита, и он тоже по ночам использовался для выкачки теперь уже с приватных фтп серверов. Затем, в 1999ом, появился Napster, кое-что ещё можно было найти на вебе, затем в 2000ом появился eDonkey. Потом битторрент. Осенью 2006ого мне рассказали как пользоваться news/nntp и с тех пор я пользуюсь на 99% только этим методом.

Network News

NNTP – Network News Transfer Protocol, специальный сетевой протокол для распространения сообщений и дискуссий в сети Usenet. На заре интернета, когда ещё не было ЖЖ и прочих форумов, народ общался при помощи специальных программ, которые соединялись с NNTP серверами и выкачивали обсуждения оттуда. Теперь обсуждения перешли на другие технологии, а сервера преимущественно стали хранилищем всяких файлов. Из-за того, что технология была сделана для обмена сообщениями, то файлы все разбиты на кучу “сообщений”, которые надо раскодировать, проверить на ошибки и склеить вместе. Для выкачки нужного файла используется специальный метафайл, .nzb, который содержит в себе номера “сообщений”,  составляющих искомый файл. Некоторые сообщения могут “потеряться”, но это не страшно, так как для этого придуманы файлы, содержащие избыточную информацию для восстановления оригинального содержания – эти файлы называются .par или .par2

NNTP Серверы

Файлы хранятся на серверах не вечно, а порядка полугода-года (это называется server retention).  То есть что-то выпущенное давным давно скачать может и не получиться.

Доступ к серверам не бесплатный, видов оплаты много разных, надо смотреть на то, как часто вы будете выкачивать, важна ли скорость и удобство оплаты.

Я пользуюсь AstraWeb, они хранят файлы 785 дней и у них есть поддержка SSL, планом пользуюсь pay-by-download 180Gb.

Качать файлы можно вручную, при помощи программы NewsBin Pro, а можно и при помощи программы-робота. Я пользуюсь ручным средством если надо скачать что-нибудь маленькое, а для всего остального использую SABNZBD – это многоплатформная программа-сервис, которая выкачивает файлы, склеивает их и раскладывает по заданным директориям.

Ссылки на файлы

Откуда брать файлы чтобы это всё заработало? С серверов, аггрегаторов NZB файлов:

nzbmatrix.com
newzbin.com
nzbrus.com

или с серверов, поисковиков в news:

binsearch.info
newzleech.com

На серверах аггрегаторах лежат уже готовые и рассортированные NZB, на поисковиках же показывают, как правило, разрозненные файлы, но позволяют их объединить в NZB.

Я пользуюсь nzbmatrix.com и binsearch.info. Nzbmatrix за деньги продаёт возможность подписки на RSS фид его категорий, что делает процесс выкачки сериалов практически автоматическим.

Процесс выкачки: сериалы

SABNZBD поставлен мониторить RSS фид HD сериалов на nzbmatrix – при этом ему сказано смотреть только за теми, что мне интересны. Как только NZB с новым эпизодом появляется – SABNZBD автоматически его выкачивает, при этом процесс выкачки самого NZB скрыт и видно только, что начал выкачиваться сам файл. По окончании выкачки файл будет проверен на наличие ошибок и присутствие всех частей, если что-то отсутствует, то будут выкачаны PAR/PAR2 файлы и будет сделана попытка восстановить утраченное. Если всё просто ок или утраченное восстановилось, то файл будет декодирован, обычно это будет несколько RAR архивов, архивы будут распакованы, и удалены – на выходе будет просто один файл, который будет положен в нужную директорию.

Я настроил у себя так, что все сериалы идут в e:TV и там расскладываются в сабфолдеры с именем сериала.

Процесс выкачки: всё остальное

Фильмы и всё остальное надо выкачивать вручную – на автомат это не поставить так как всё подряд мне не надо. Но и тут присутствие SABNZBD упрощает весь процесс выкачки и сортировки – ему только дай NZB файл, а дальше он сам знает что с ним делать. Даёт ему файл небольшой плагин для Firefox: nzbStatus, он понимает форматы всех основных сайтов, раздающих NZB, и показывает иконку для старта выкачки прямо в SABNZBD: alt

Нажимаешь – и сразу пошло выкачиваться, без лишних вопросов. Плюс плагин понимает категории в NzbMatrix.com и устанавливает правильную категорию в SABNZBD, дабы тот правильно отсортировал файл по окончании выкачки.

Чем не пользуюсь

Не пользуюсь XBMC. Несколько раз пытался заставить себя, но – не идёт. То невозможно ему сказать, что он неправильно распознал название фильма, то он отказывается проигрывать некоторые файлы, которые радостно проигрывал ещё вчера. Документации нет, а сидеть на форумах радости мало.

Планы

На днях узнал о программе-сервисе, которая автоматизирует поиск, сортировку и выкачку сериалов – SickBeard. Работает она параллельно с SABNZBD и смотрит за коллекцией сериалов: находит пропущенные серии и позволяет их выкачать, переименовывает файлы(из, например, “S02E02-1.mkv в “Series Name – S02E02 – EpisodeName.mkv”), показывает краткое содержание серий и расписание будущих эпизодов и т.д. и т.п.

Пока поставил тестировать, посмотрю на неё недельку-другую.

Итого

Пока владельцы копирайтов бегают за пиратами и плачут на каждом углу, что тиграм в клетке недокладывают мяса денег неизвестно как зарабатывать, пираты в это время научились собирать деньги с доморощенных пиратов. Я плачу, с учётом годовой подписки на NzbMatrix, где-то £18 в месяц, но за это имею практически нелимитированный доступ к фильмам, сериалам, музыке, книгам и софту. Был бы вариант точно такой-же выкачки сериалов с легального сайта или сервера – я бы подписался. Но, увы, сайта такого нет и не предвидится для тех, кто вне Штатов.

В далёком 2006ом всё приходилось выкачивать и сортировать вручную, сейчас же всё это происходит автоматом. Мне нравится!

New hosting

Наткнулся в сети на обзор скоростей дешёвых VPS хостеров, затем пошёл посмотреть на то, что сейчас предлагают и как-то так осознал, что я переплачиваю несколько копеек довольно тормозному провайдеру eapps.com. Прочесал интернет по поводу предложений VPS и выбрал себе недорогой хостинг, где ресурсов в два раза побольше, а денег в два раза поменьше. Перетащил свой блог туда – работает, вродебы, побыстрее.

Ещё один плюс: это то, что выбранный план у хостера – unmanaged. То есть мне дали виртуальную машину с линухом и я что хочу, то с ней и делаю. И никто грязными руками не будет переправлять конфигурацию вебсервера, если я в ней что-то поменял. Так делал несколько раз eapps, по каким-то неведомым причинам. Мелочь, а неприятно.

А ещё этот eapps в последнее время стал ронять вебсервер и не стартовать его автоматически. В логах ничего не было. Служба поддержки сказала что это апачу не хватает памяти и предложила заплатить побольше. Каким это они образом узнали – не ответили. Нехорошие, короче. Ушёл я от них.