downloads – Весёлые деньки http://blog.ctpeko3a.com Mon, 11 Oct 2010 16:11:09 +0000 en-US hourly 1 Home downloads setup http://blog.ctpeko3a.com/2010/10/11/home-downloads-setup/ http://blog.ctpeko3a.com/2010/10/11/home-downloads-setup/#respond Mon, 11 Oct 2010 16:11:09 +0000 http://blog.ctpeko3a.com/?p=793 Решил описать свою домашнюю полуавтоматическую систему выкачки всего подряд из интернета.

Немного истории.

Гигазы варезов я качал всю жизнь, сначала посредством модема на работе, по ночам прокачивались огромные, на начало 90х, объёмы. Затем на работе появился выделенный канал в интернет, аж на 64 килобита, и он тоже по ночам использовался для выкачки теперь уже с приватных фтп серверов. Затем, в 1999ом, появился Napster, кое-что ещё можно было найти на вебе, затем в 2000ом появился eDonkey. Потом битторрент. Осенью 2006ого мне рассказали как пользоваться news/nntp и с тех пор я пользуюсь на 99% только этим методом.

Network News

NNTP – Network News Transfer Protocol, специальный сетевой протокол для распространения сообщений и дискуссий в сети Usenet. На заре интернета, когда ещё не было ЖЖ и прочих форумов, народ общался при помощи специальных программ, которые соединялись с NNTP серверами и выкачивали обсуждения оттуда. Теперь обсуждения перешли на другие технологии, а сервера преимущественно стали хранилищем всяких файлов. Из-за того, что технология была сделана для обмена сообщениями, то файлы все разбиты на кучу “сообщений”, которые надо раскодировать, проверить на ошибки и склеить вместе. Для выкачки нужного файла используется специальный метафайл, .nzb, который содержит в себе номера “сообщений”,  составляющих искомый файл. Некоторые сообщения могут “потеряться”, но это не страшно, так как для этого придуманы файлы, содержащие избыточную информацию для восстановления оригинального содержания – эти файлы называются .par или .par2

NNTP Серверы

Файлы хранятся на серверах не вечно, а порядка полугода-года (это называется server retention).  То есть что-то выпущенное давным давно скачать может и не получиться.

Доступ к серверам не бесплатный, видов оплаты много разных, надо смотреть на то, как часто вы будете выкачивать, важна ли скорость и удобство оплаты.

Я пользуюсь AstraWeb, они хранят файлы 785 дней и у них есть поддержка SSL, планом пользуюсь pay-by-download 180Gb.

Качать файлы можно вручную, при помощи программы NewsBin Pro, а можно и при помощи программы-робота. Я пользуюсь ручным средством если надо скачать что-нибудь маленькое, а для всего остального использую SABNZBD – это многоплатформная программа-сервис, которая выкачивает файлы, склеивает их и раскладывает по заданным директориям.

Ссылки на файлы

Откуда брать файлы чтобы это всё заработало? С серверов, аггрегаторов NZB файлов:

nzbmatrix.com
newzbin.com
nzbrus.com

или с серверов, поисковиков в news:

binsearch.info
newzleech.com

На серверах аггрегаторах лежат уже готовые и рассортированные NZB, на поисковиках же показывают, как правило, разрозненные файлы, но позволяют их объединить в NZB.

Я пользуюсь nzbmatrix.com и binsearch.info. Nzbmatrix за деньги продаёт возможность подписки на RSS фид его категорий, что делает процесс выкачки сериалов практически автоматическим.

Процесс выкачки: сериалы

SABNZBD поставлен мониторить RSS фид HD сериалов на nzbmatrix – при этом ему сказано смотреть только за теми, что мне интересны. Как только NZB с новым эпизодом появляется – SABNZBD автоматически его выкачивает, при этом процесс выкачки самого NZB скрыт и видно только, что начал выкачиваться сам файл. По окончании выкачки файл будет проверен на наличие ошибок и присутствие всех частей, если что-то отсутствует, то будут выкачаны PAR/PAR2 файлы и будет сделана попытка восстановить утраченное. Если всё просто ок или утраченное восстановилось, то файл будет декодирован, обычно это будет несколько RAR архивов, архивы будут распакованы, и удалены – на выходе будет просто один файл, который будет положен в нужную директорию.

Я настроил у себя так, что все сериалы идут в e:TV и там расскладываются в сабфолдеры с именем сериала.

Процесс выкачки: всё остальное

Фильмы и всё остальное надо выкачивать вручную – на автомат это не поставить так как всё подряд мне не надо. Но и тут присутствие SABNZBD упрощает весь процесс выкачки и сортировки – ему только дай NZB файл, а дальше он сам знает что с ним делать. Даёт ему файл небольшой плагин для Firefox: nzbStatus, он понимает форматы всех основных сайтов, раздающих NZB, и показывает иконку для старта выкачки прямо в SABNZBD: alt

Нажимаешь – и сразу пошло выкачиваться, без лишних вопросов. Плюс плагин понимает категории в NzbMatrix.com и устанавливает правильную категорию в SABNZBD, дабы тот правильно отсортировал файл по окончании выкачки.

Чем не пользуюсь

Не пользуюсь XBMC. Несколько раз пытался заставить себя, но – не идёт. То невозможно ему сказать, что он неправильно распознал название фильма, то он отказывается проигрывать некоторые файлы, которые радостно проигрывал ещё вчера. Документации нет, а сидеть на форумах радости мало.

Планы

На днях узнал о программе-сервисе, которая автоматизирует поиск, сортировку и выкачку сериалов – SickBeard. Работает она параллельно с SABNZBD и смотрит за коллекцией сериалов: находит пропущенные серии и позволяет их выкачать, переименовывает файлы(из, например, “S02E02-1.mkv в “Series Name – S02E02 – EpisodeName.mkv”), показывает краткое содержание серий и расписание будущих эпизодов и т.д. и т.п.

Пока поставил тестировать, посмотрю на неё недельку-другую.

Итого

Пока владельцы копирайтов бегают за пиратами и плачут на каждом углу, что тиграм в клетке недокладывают мяса денег неизвестно как зарабатывать, пираты в это время научились собирать деньги с доморощенных пиратов. Я плачу, с учётом годовой подписки на NzbMatrix, где-то £18 в месяц, но за это имею практически нелимитированный доступ к фильмам, сериалам, музыке, книгам и софту. Был бы вариант точно такой-же выкачки сериалов с легального сайта или сервера – я бы подписался. Но, увы, сайта такого нет и не предвидится для тех, кто вне Штатов.

В далёком 2006ом всё приходилось выкачивать и сортировать вручную, сейчас же всё это происходит автоматом. Мне нравится!

]]> http://blog.ctpeko3a.com/2010/10/11/home-downloads-setup/feed/ 0 New ISP http://blog.ctpeko3a.com/2009/11/07/new-isp/ http://blog.ctpeko3a.com/2009/11/07/new-isp/#respond Sat, 07 Nov 2009 11:22:27 +0000 http://blog.ctpeko3a.com/2009/11/07/new-isp/

Вчера переключили. Скорость постоянна, лимитов нет, P2P не блокируют. Теперь качаю фильмы в полный рост.

]]> http://blog.ctpeko3a.com/2009/11/07/new-isp/feed/ 0 Twitter http://blog.ctpeko3a.com/2009/06/29/twitter/ http://blog.ctpeko3a.com/2009/06/29/twitter/#respond Mon, 29 Jun 2009 13:06:15 +0000 http://blog.ctpeko3a.com/2009/06/29/twitter/ Как-то так получилось, что я в последнее время постоянно пишу в Твиттере, а тут совсем перестал писать. Чем мне нравится твиттер? Тем, что он более располагает к персональному общению, чем блог. Плюс я более расположен кратко излагать свою мысль, не люблю разводить воду.

Большинство моих френдов тоже склонны писать кратко, но пишут это по привычке в ЖЖ. Давайте уже переходите в твиттер – это удобнее.

Заводите эккаунт на www.twitter.com, затем выкачивайте специальный редактор с www.tweetdeck.com или с seesmic.com, и добавляйте меня в друзья: @ctpeko3a (по-русски), @lechat (по-английски).

Как там всё организовано?

  • Просто пишете о том, что делаете, или о чём думаете, или делитесь ссылкой на интересное. 140 символов. Ссылки рекомендуется сокращать при помощи http://bit.ly или http://is.gd (это встроено в редакторы под именем “Shorten URL”)
  • Если хотите кому-то ответить, то пост надо начинать с символа “@” перед именем. Например: “@ctpeko3a Привет!” Соответственно, можно смотреть специальным образом на сообщения, адресованные вам (это называется Mentions)
  • Если хотите поделиться чьим-то сообщением со своими друзьями, это называется re-tweet и обычно начинается с букв “RT @<username>” и далее идёт сообщение, которым вы делитесь.
  • Можно посылать и прямые, direct, сообщения, которые будут видны только вам и вашему адресату. Для этого сообщения надо начинать вот так: “D @<username>”

То есть получается, что твиттер – это как ICQ, но с перманентным хранением сообщений и с необязательным ответом на них. Попробуйте, может вам понравится.

]]> http://blog.ctpeko3a.com/2009/06/29/twitter/feed/ 0 Piracy http://blog.ctpeko3a.com/2009/03/23/piracy/ http://blog.ctpeko3a.com/2009/03/23/piracy/#respond Mon, 23 Mar 2009 19:22:17 +0000 http://blog.ctpeko3a.com/2009/03/23/piracy/ А ещё я решил сделаться на недолгое время честным и не пиратом. Заказал в онлайн рентовалке, LoveFilm.com, блурей диски первого сезона The Tudors. Второй диск оказался слегка поцарапанным предыдущими непиратами. Фильм на месте поцарапанности превращался в слайд шоу без звука и смотреть его стало тяжко.

Несомненно можно обозначить диск как поцарапанный и негодный, пришлют новый без проблем. Но займёт это неделю времени. Поэтому пришлось нацепить повязку на один глаз и выкачать эпизод обычным образом. Правообладатели опять остались не у дел.

А ещё британские уродливые правообладатели не поделили кусочек пирога с Ютубом вследствие чего Ютуб заблокировал туеву хучу видеоклипов для людей, гордых от обладания IP адресов британских интернет провайдеров. Опять приходится обращаться к одноглазому Роджеру и Билли Бонзу – у них есть всё.

]]> http://blog.ctpeko3a.com/2009/03/23/piracy/feed/ 0 Doing good http://blog.ctpeko3a.com/2008/09/24/doing-good/ http://blog.ctpeko3a.com/2008/09/24/doing-good/#respond Wed, 24 Sep 2008 22:39:02 +0000 http://blog.ctpeko3a.com/2008/09/24/doing-good/ В феврале этого года компания NVIDIA, производящая видеокарты для компьютеров, приобрела компанию Ageia, производившую технологию для расчёта физики в играх. Прошло полгода и NVIDIA интегрировала эту технологию в видеокарты, которые давно уже содержат не узкоспециализированные графические процессоры, а практически обычные, программируемые.

Так что теперь видеокарта умеет и считать совершенно посторонние вещи. Вот, например, видеокарта в компьютере, на котором я это пишу, в данный момент не только показывает картинку моего десктопа и буквы на нём, но и рассчитывает как сворачиваются молекулы белков. При этом основной процессор, естесственно, не загружается и вентиляторы в компьютере не ревут.

К чему я это всё? К тому, что если у вас достаточно современная видеокарта от NVIDIA (от 8x и выше), то почему бы и вам не помочь науке в поиске лекарств от рака?

Для этого всего-то и надо выкачать Release 177 драйвера и программку для расчётов (Folding @ Home) вот отсюда. Выкачать и, естественно, запустить.

]]> http://blog.ctpeko3a.com/2008/09/24/doing-good/feed/ 0 Downloading http://blog.ctpeko3a.com/2008/09/20/downloading/ http://blog.ctpeko3a.com/2008/09/20/downloading/#comments Sat, 20 Sep 2008 10:27:47 +0000 http://blog.ctpeko3a.com/2008/09/20/downloading/ Выкачиваю медленно и печально Crysis Warhead из торрентов. 6 гиг образ диска. Начал было качать из News, но там, судя по всему, файлик удалили… Поэтому пришлось воспользоваться модной, но медленной технологией. Радует то, что количество seeds постепенно увеличивается: начал с одного сида вчера вечером и сейчас уже есть пять. Прогноз такой, что весь файлик придёт ко мне завтра утром.

]]> http://blog.ctpeko3a.com/2008/09/20/downloading/feed/ 1