Скачивание файлов с сайта через torrent
 

Есть идея о подключении торрент-трекера к нашему Download, чтобы все скачивалось быстрее и лучше. Стандартный Download сервер никуда не денется и не закрывается, это просто будет дополнительный способ скачивания, если покажет себя с хорошей стороны.

В качестве примера предлагаю скачать весь пак видео в одном торренте, 761 файл, объем 16 Гб.

В торренте указан web-сид - наш сервер Download, так что в начале скачки видео будет скачиваться напрямую с нашего сервера, потом, как будет все больше и больше сидов, друг у друга.

Используется свой трекер, без регистрации, без рейтингов и т.п.

Итак, ссылка на торрент файл ЖД-Видео, 16Gb:
[url]http://tracker.trainsim.ru/torrents/video2017.torrent[/url]

[B]добавлен [/B]Маршрут "Метрополитен Им. Штильмарка и Субботина", 1.53Gb, с патчем, ПС и точками старта
[url]http://tracker.trainsim.ru/torrents/Metro.torrent[/url]

[B]UPD[/B]:
Все файлы в Download доступны для скачивания через торрент: [url]www.trainsim.ru/download/[/url]

качаю, пораздаю

Уже начал качать. Так гораздо удобней - не надо все оп кусочку качать.

Присоединяюсь. Наконец-то ввели самый быстрый и удобный способ скачки. Мой комп включен чуть не круглые сутки, так что если я как-то разузнаю что именно нужно людям - заведу, пожалуй, локальную "свалку".
Все равно диски сколько ни стараюсь забить не могу! 700 гигов пропадает! :)

Спасибо:drinks:ещё бы зделать что бы МСТС все допы скачать через торрент:)

[QUOTE=Механист;284334]Присоединяюсь. Наконец-то ввели самый быстрый и удобный способ скачки. Мой комп включен чуть не круглые сутки, так что если я как-то разузнаю что именно нужно людям - заведу, пожалуй, локальную "свалку".
Все равно диски сколько ни стараюсь забить не могу! 700 гигов пропадает! :)[/QUOTE]

Офф:

Мне бы твою проблему. У меня 1ТБ хлама, и 3 ТБ блю-рэя)


p.s. качаю, отдача пока выше. Потом постою на раздаче..

700 гигов не так и много на самом деле)
[QUOTE]Используется свой трекер, без регистрации, без рейтингов и т.п.[/QUOTE]Это главное, что свои удобные условия. Контент у нас довольно популярный, думаю дополнения быстро станут доступны)
правда, кто ищет, и сейчас паки на рутрекере найдет.

[QUOTE]Мне бы твою проблему. У меня 1ТБ хлама, и 3 ТБ блю-рэя)[/QUOTE]Я просто хлама не держу - постоянно зачищаю (без этого работать не могу). В итоге диски забиты едва на четверть...
[QUOTE]700 гигов не так и много на самом деле)[/QUOTE]Для "раздаточной свалки" - нормально. Когда надо больше - на рабочей машине есть [I]десятки терабайт[/I] свалки в которую никто никогда не полезет и уж никто не знает что там вообще есть. Но столько мне не забить, даже если никогда ничего не буду удалять. Жаль, нельзя там шару сделать - секьюрити, мать ее.
16 ГБ - это всё что ли?
[QUOTE]правда, кто ищет, и сейчас паки на рутрекере найдет[/QUOTE]там не так много раздачи... тут всяк повыше будет, народ сознательный (кроме "отдыхающих")

На данный момент:
[FONT="Courier New"]Seeders 3
Leechers 14
Completed D/Ls 3
Bytes Transferred 125 GB
Speed (rough estimate) 10.3 MB/sec[/FONT]

Всем спасибо кто сидирует.

Боялся, что отдача медленной будет - не, все возможные 1000 Кб/сек раздаются.
Нельзя ли выложить еще торрентов? Видео это конечно интересно, но не видео единым живы :)

Добавлен торрент "Маршрут "Метрополитен Им. Штильмарка и Субботина".

[size="1"][color="Silver"]Добавлено через 25 секунд[/color][/size]
[QUOTE=Механист;284381]Боялся, что отдача медленной будет - не, все возможные 1000 Кб/сек раздаются.
Нельзя ли выложить еще торрентов? Видео это конечно интересно, но не видео единым живы :)[/QUOTE]

Выложим еще. Надо сначала все протетировать, посмотреть насколько людям это нужно и удобно.

[QUOTE]Выложим еще. Надо сначала все протетировать, посмотреть насколько людям это нужно и удобно[/QUOTE]Это сильно зависит от того, где будет ссылка на эти торренты. Форум не все читают, кто-то приходит со стороны.
И если ссылки будут только в этой теме - это будет одна "статистика популярности", а если например на главной странице - совсем другая.

А кто-то наоборот, на главной редко бывает. Желательно ссылки и там, и там.

А давайте я переименую немного тему в [B]"Тестирование [U]скачивания[/U] через torrent (жд-видео)"[/B], а то при просмотре заголовка первая мысль была об ипподроме...

Качаю метро-маршрут. Скачивание идет довольно резво (в районе 400 кБ/с), несмотря на единственный "сид".
В пределах часа должно скачаться. Оставлю на раздаче - домашний компьютер работает 24 часа.:)

[QUOTE=Шурикан;284424]А кто-то наоборот, на главной редко бывает. Желательно ссылки и там, и там.[/QUOTE]

[QUOTE=Механист;284413]Это сильно зависит от того, где будет ссылка на эти торренты. Форум не все читают, кто-то приходит со стороны.
И если ссылки будут только в этой теме - это будет одна "статистика популярности", а если например на главной странице - совсем другая.[/QUOTE]

Ссылки будут в соответсвующей Download-категории на сайте

[QUOTE=vicente;284451]Качаю метро-маршрут. Скачивание идет довольно резво (в районе 400 кБ/с), несмотря на единственный "сид".
В пределах часа должно скачаться. Оставлю на раздаче - домашний компьютер работает 24 часа.:)[/QUOTE]

Единственный сид - наш Download-сервер dl.trainsim-portal.com ;)

Качаю метро, чтобы пораздавать. А так сидел всю ночь и по сейчас раздавал Видео. Качать начали только в 8 утра до 12. И с 14:00 и по сейчас. Раздал 12 гб..

Тоже качаю метро.
Но если видео отдача уже ого-го, то метро пока что-то никто не берет :(

Да, шикарно, конечно. Хочется надеяться, что это только начало. Глядишь - увидим раздел download в таком же виде, удобно очень. Спасибо вам ;)

[QUOTE=Andrey;284624]Да, шикарно, конечно. Хочется надеяться, что это только начало. Глядишь - увидим раздел download в таком же виде, удобно очень. Спасибо вам ;)[/QUOTE]

Каждый файл будет доступен через торрент в Download-е, также сейчас тестируем как делать и обновлять торренты автоматически для разделов.

Еще наверное будет глобальный торрент со всем содержимым Download вообще, но обновлять его часто будет достаточно затратно в плане ресурсов, насчет него пока неясно, кроме того хорошо бы туда включить всех упомнятуных авторов, какие-то ридми, что достаточно непросто.

Если есть еще какие-то соображения - пишите.

[size="1"][color="Silver"]Добавлено через 1 час 26 минут[/color][/size]
Торренты активированы для всех файлов в Download, 1 торрент - 1 файл дополнения,
все файлы что доступны для скачки теперь доступны для скачки через торрент.

С разделами пока решаем вопрос.

Налетай :) :cool:

Кто качает - тестируем, отписываемся пожалуйста.

Вижу кто-то качает vl80_tarskaya.avi со скоростью 2.83 KB/sec - напишите почему так, интересно в чем дело.

Если человек который держит наше зеркало разрешит - будет уже два веб-сида для каждого торрента и, по моим тестам, скорость скачивания около 1 Мбайт/сек.

У меня за два дня, скачивание с 0% даже не шелохнулась, сидов 2, пиров 23. Скачивание и отдача торрентов со сторонних сайтов протекает на отлично.

[QUOTE=Евгений.;284755]У меня за два дня, скачивание с 0% даже не шелохнулась, сидов 2, пиров 23. Скачивание и отдача торрентов со сторонних сайтов протекает на отлично.[/QUOTE]

Какой торрент клиент и о каком торрент-файле говорим?

[size="1"][color="Silver"]Добавлено через 59 секунд[/color][/size]
Используешь ли ipfilter.dat?

Торрент файл который можно скачать с главной страницы сайта.

ipfilter.dat включен в настройках.

[QUOTE]обновлять его часто будет достаточно затратно в плане ресурсов, насчет него пока неясно[/QUOTE]Обновлять его часто и не нужно - если на видном месте указывать даты выхода контента и дать возможность нормальной сортировки по дате, пользователь легко докачает себе все что нужно. Когда критическая масса нового контента накопится - можно и обновить "большой" набор.
[QUOTE]хорошо бы туда включить всех упомнятуных авторов, какие-то ридми, что достаточно непросто[/QUOTE]Хорошо бы сделать одну большую хорошую подборку качественного контента, тематически сгруппированную, с ридми, описаниями и т.п. Труд большой, но если всем миром сделать - новичкам будет житься в разы легче.
[QUOTE]Если есть еще какие-то соображения - пишите[/QUOTE]Есть не столько соображение, сколько вопрос. Почему рейтинга нет? Я понимаю, что ограничивать закачки на основании рейтинга - весьма спорная штука (и по мне, ненужная). Но чисто для информации было бы очень приятно видеть.
[QUOTE]Кто качает - тестируем, отписываемся пожалуйста[/QUOTE]На данный момент скачал оба. Видео раздается хорошо (хотя и меньше чем раньше), метро по-прежнему почти никто не берет (отдача 5 кб/сек), несмотря на высший приоритет отдачи.

Торрент же позволяет выкладывать папками с файлами, если торрент обновляется при перепроверке скачиваются только замененные файлы ИМХО самое оно, только надо большие каталоги по 1000-1500 файлов потестить, может быть долго будет перепроверять, но это все равно лучше, чем качать по ГБ из-за 10-15 обновленных файлов.

[QUOTE=Евгений.;284758]Торрент файл который можно скачать с главной страницы сайта.

ipfilter.dat включен в настройках.[/QUOTE]

Какой торрент клиент? Полное название и версия.
Прога должна поддерживать веб-сидирование.

Если uTorrent, в файле c:\Users\.. user ...\AppData\Roaming\uTorrent\ipfilter.dat есть заблокированный диапазон ip? Делал ли что-нибудь такое?
Слышал что некоторые люди блокируют IP Сша-Европы либо наоборот России чтобы не было проблем.

uTorrent 1.8.5 (build 17414). С ipfilter.dat не трогал, стандарт так сказать.

[QUOTE=Евгений.;284893]uTorrent 1.8.5 (build 17414). С ipfilter.dat не трогал, стандарт так сказать.[/QUOTE]

Скачал точно твою версию - проверил - качает.
Посмотри, может на вкладке Logger какая-то информация есть.

Если у торрента нет сидов должно качаться с dl.trainsim-portal.com, этот хост либо его ip (74.208.80.29:80) должен быть в списке пиров.

[size="1"][color="Silver"]Добавлено через 39 секунд[/color][/size]
Только что вышедшие и обновленная Утэшки доступны через торрент [url]http://www.trainsim.ru/download/106/[/url]

Качать начал 11.09 примерно в 11 утра. Video скачалось часов за 20. Отдача идет практически круглосуточно, но не очень быстро. За все время отдано около 8 гб.

Качаю новые допы, скорость на уровне 50-100 КБ/с. Посмотрим как будут раздаваться :)

Описание закачки на русском языке у меня отображается в виде "??? ?? ??????".

Новые допы качаются на ура, но их пока никто не берет. Метро таки стали брать где-то 100 Кб/сек

[QUOTE=E69;285024]Качаю новые допы, скорость на уровне 50-100 КБ/с. Посмотрим как будут раздаваться :)

Описание закачки на русском языке у меня отображается в виде "??? ?? ??????".[/QUOTE]

Какой файл? Все описания должны быть по-английски там.

[QUOTE=Механист;285050]Новые допы качаются на ура, но их пока никто не берет. Метро таки стали брать где-то 100 Кб/сек[/QUOTE]

Ну на небольших файлах наверное много личеров и не будет, а вот на маршрутах и больших фильмах (и будущих больших раздачах) - другое дело.

[size="1"][color="Silver"]Добавлено через 15 минут[/color][/size]
[QUOTE=Zabor;284805]Торрент же позволяет выкладывать папками с файлами, если торрент обновляется при перепроверке скачиваются только замененные файлы ИМХО самое оно, только надо большие каталоги по 1000-1500 файлов потестить, может быть долго будет перепроверять, но это все равно лучше, чем качать по ГБ из-за 10-15 обновленных файлов.[/QUOTE]

Да, но при выкладке 1-2 новых файлов, чтобы их не качать отдельно, нужно пересоздавать весь большой торрент, или лучше все торренты разделов по цепочке вверх от этого файла, пример для выкладки 2ТЭ10Ут-0079:
1. создать торрент 2ТЭ10Ут-0079
2. пересоздать торрент Download - Тепловозы - 2ТЭ10У/2ТЭ10Ут/2ТЭ10Утк
3. пересоздать торрент Тепловозы
4. пересоздать торрент Download

Сейчас надо понять сколько ресурсов это будет отнимать, скорее всего это рельно сделать. И иметь один большой торрент которым все будут пользоваться это конечно очень удобно и обеспечит много сидов.

Весь Download занимает 27Гб на данный момент, сколько будет проверять это хороший вопрос.

[QUOTE=Механист;284803]Есть не столько соображение, сколько вопрос. Почему рейтинга нет? Я понимаю, что ограничивать закачки на основании рейтинга - весьма спорная штука (и по мне, ненужная). Но чисто для информации было бы очень приятно видеть.[/QUOTE]

Трекер, что мы используем, это не поддерживает.

[QUOTE]Какой файл? Все описания должны быть по-английски там.[/QUOTE]
2ТЭ10УТ-0078 v4.0
Он кстати до сих пор скачался только до 50%, в отличие от недавних допов.

[QUOTE=E69;285134]2ТЭ10УТ-0078 v4.0
Он кстати до сих пор скачался только до 50%, в отличие от недавних допов.[/QUOTE]

Это один файл такой. Описание по русски потому что тот, кто выкладывал, не перевел ни название файла ни описание, либо не вставил это во время создания.

Должен скачиваться, эти файлы я проверял.

[size="1"][color="Silver"]Добавлено через 1 час 29 минут[/color][/size]
Количество сидов и пиров теперь отображается для каждого файла в Download.

[QUOTE]Должен скачиваться, эти файлы я проверял[/QUOTE]Должен, но не скачивается - второй день застыл на 57%, притом что все остальные качались секунд по 15 каждый.

[QUOTE=Механист;285185]Должен, но не скачивается - второй день застыл на 57%, притом что все остальные качались секунд по 15 каждый.[/QUOTE]

Без подробных логов проблему не исправить, в uTorrent на вкладке Logger нужно включить все логи и тогда будет ясно. Возможно клиент банит пиров по какой-то причине.

[QUOTE]Без подробных логов проблему не исправить, в uTorrent на вкладке Logger нужно включить все логи и тогда будет ясно. Возможно клиент банит пиров по какой-то причине.[/QUOTE]Включил все возможные логи, через 24 часа думаю информации будет немало. А пока есть вот что (негусто, но вдруг поможет):
Сидов 0(0), пиров 1(7)
[CODE]
[2011-09-14 12:51:13] Ошибки при загрузке языкового файла. Возможно, языковой файл для другой версии программы. Просмотрите файл uTorrent.exe.log в папке приложения.
[2011-09-14 12:51:13] Ошибки при загрузке языкового файла. Возможно, языковой файл для другой версии программы. Просмотрите файл uTorrent.exe.log в папке приложения.
[2011-09-14 12:51:23] Error opening Windows firewall: 0x80070005 Отказано в доступе.
[2011-09-14 13:05:02] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 144 FAILED HASH CHECK
[2011-09-14 13:05:02] Banned 74.208.80.29:80
[2011-09-14 13:38:11] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 145 FAILED HASH CHECK
[2011-09-14 18:51:29] Error opening "C:\Documents and Settings\Freak\My documents\Downloads\tsrLoco_2TE10Ut-0079_v4_1.exe":
[/CODE]Вижу волшебное слово BANNED

[QUOTE=Механист;285210]
[CODE]
[2011-09-14 13:05:02] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 144 FAILED HASH CHECK
[2011-09-14 13:05:02] Banned 74.208.80.29:80
[2011-09-14 13:38:11] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 145 FAILED HASH CHECK
[2011-09-14 18:51:29] Error opening "C:\Documents and Settings\Freak\My documents\Downloads\tsrLoco_2TE10Ut-0079_v4_1.exe":
[/CODE]Вижу волшебное слово BANNED[/QUOTE]

Вот это уже что-то.

Был получен пакет у которого не совпала контрольная сумма по какой-то причине, потом еще один и твой клиент забанил временно наш сервер для скачивания, т.к. подумал что он раздадает какую-то лажу.

Удали торрент целиком с файлом, (Remove and delete .torrent and data), перекачай его с сайта [url]http://www.trainsim.ru/download/106/[/url], скажи что получилось.

Я этот файл проверял несколько раз - нормально скачивается, не понимаю почему возникает проблема.

[size="1"][color="Silver"]Добавлено через 13 секунд[/color][/size]
Какая версия uTorrent?

Проделал описанное дважды. Первый раз сид был забанен немедленно, второй - после 6% закачки.
[code][2011-09-14 23:27:28] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 176 FAILED HASH CHECK
[2011-09-14 23:27:28] Banned 74.208.80.29:80
[2011-09-14 23:29:11] *** tsrLoco_2TE10Ut-0078_v4_0.exe: PIECE 256 FAILED HASH CHECK
[2011-09-14 23:29:11] Banned 74.208.80.29:80
[/code]Не только у меня возникли проблемы, так что дело таки скорее в файле.
Версия uTorrent 1.8.2.