Подписаться Бесплатный дискуссионный лист Подписчиков 97

←   Ноябрь 2004   →
1 01.11.2004 10:22:58 17:09:03 21:47:04	2 02.11.2004 02:39:08 02:39:50 08:19:28 09:36:01 10:01:45 18:05:19 20:18:30 22:42:49 22:43:01 23:14:37 23:14:47	3 03.11.2004 17:32:13 17:33:44	4	5	6	7
8 08.11.2004 01:28:36 19:47:52	9	10 10.11.2004 11:45:59 11:47:08 16:46:48 16:58:32 18:13:31 18:19:10 22:35:10 23:03:30	11 11.11.2004 11:21:49 11:41:50 14:55:01 21:26:10	12 12.11.2004 07:06:24 08:20:27 14:19:15 14:20:26 15:22:35 15:29:22 23:12:52 23:48:17	13 13.11.2004 04:40:42 09:17:33 09:26:21 12:34:35	14
15 15.11.2004 08:14:16 13:28:24 13:49:22 15:48:22 15:52:39 21:52:36 22:59:09	16 16.11.2004 08:49:32 10:44:37 11:16:12 11:32:00 11:45:56 12:53:11 13:07:37 17:26:44	17 17.11.2004 00:09:00 00:45:47 14:51:24 18:06:39	18 18.11.2004 11:02:02 15:48:01 16:17:26	19 19.11.2004 02:31:08 08:17:13	20	21
22 22.11.2004 08:53:45 12:45:51	23	24 24.11.2004 06:17:17 10:11:48 10:13:01 15:40:48 15:46:11 16:34:10 19:21:26	25 25.11.2004 10:29:59 10:35:43 18:00:15 22:33:59 22:34:08	26 26.11.2004 04:40:03 05:00:05 08:18:53 11:21:57 12:39:33 14:22:08 16:23:23 17:47:38 17:50:45 20:00:24 20:50:43	27	28
29 29.11.2004 08:35:51 08:39:42 09:09:56 09:35:57 09:36:57 09:54:36 09:55:53 09:58:30 11:41:14 12:15:13 12:15:26 13:03:32 16:02:04 16:10:20	30 30.11.2004 11:04:43 22:49:29

За последние 60 дней ни разу не выходила

Сайт листа: http://kirov.lug.ru
Открыт: 15-09-2003
Пре-модерация: Нет
Адрес для писем в лист: comp.soft.linux.kirovlug-list@subscribe.ru

Модератор

Alexander Kolotov

Статистика

97 подписчиков
0 за неделю

• Выпуски
• Статистика

размышление на тему http, ftp и p2p

Мысль реализовать ниже описанное елозит по моему мозгу довольно давно....

Вводная: у диалапщиков (и не только) иногда случается следующая
проблема: качаем здоровый файл (архив или документ), в итоге получаем
локальную копию файла, но оказывается, что она битая - т.е. где-то в
каком-то месте что-то не срослось, передалось не так и т.д. и т.п.
Получается, что нужно качать файл снова, а если он большой, то это долго
и в итоге упирается в проблему траты лишних денег (тем более если
говорить про скачанные мегабайты)

Предложение: хотелось бы иметь такой сервис (наверное, требуется должны
быть серверная и клиентская части): некоторой тулзе я скармливаю битый
файл и размер "кластера", тулза логически разбивает файл на "кластера" и
вычисляет CRC (MD5 и пр.) для каждого файла, потом мы посылаем
результаты вычислений на сервер, а также файл (URL) и размер "кластера".
Серверная часть также разбивает файл на "кластера", вычисляет CRC,
сравнивает полученные CRC cо своими. И высылает ответ клиенту. В итоге,
клиентская тулза выводит пользователю, что ему нужно скачать
определенный "кластер" (или несколько) из сети снова (начальное и
конечное смещение) или даже сама предлагает скачать их и скачивает.

Итог: Данный сервис можно реализовать как довески к http и ftp, p2p. В
зависимости от файла (по размеру, для каждого разный) и пропускной
ширины канала должна быть свой размер "кластера".

Ответить  

Kolotov Alexandr

Wed, 10 Nov 2004 16:47:05 +0300 (#260788)

 

Ответы:

› показать цитату

> Мысль реализовать ниже описанное елозит по моему мозгу довольно давно.... > Вводная: у диалапщиков (и не только) иногда случается следующая > проблема: качаем здоровый файл (архив или документ), в итоге получаем > локальную копию файла, но оказывается, что она битая - т.е. где-то в

Идея полезная, но только для UDP-соединений. Для ТСР вероятность ошибки
очень мала (ее практически нет, вроде бы, потому что с каждым пакетом идет
контрольная сумма). Ну, я не раз выкачивал диалапом файлы под 60 мб и MD5
сумма сходилась. Тут нетрудно посчитать мизерность ошибки...

А вообще - да, идея хорошая. Надо расширять *tp - протоколы...

-*Информационный канал Subscribe.Ru
Подписан адрес:
Код этой рассылки: comp.soft.linux.kirovlug
Написать в лист: mailto:comp.soft.linux.kirovlug-list@subscribe.ru
Отписаться: mailto:comp.soft.linux.kirovlug--unsub@subscribe.ru?subject=comp.soft.linux.kirovlug

http://subscribe.ru/ http://subscribe.ru/feedback

Ответить  

"Vlad Tushevskij"

Wed, 10 Nov 2004 18:20:42 +0300 (#260857)

 

Vlad Tushevskij writes:

› показать цитату

>> Мысль реализовать ниже описанное елозит по моему мозгу довольно давно.... >> Вводная: у диалапщиков (и не только) иногда случается следующая >> проблема: качаем здоровый файл (архив или документ), в итоге получаем >> локальную копию файла, но оказывается, что она битая - т.е. где-то в

rsync поддерживает такие вещи. При синхронизации через rsync можно
восстанавливать битые файлы, выкачая при этом объём не значительно больший
чем, размер битой части.

Всё уже решено давно, зачем голову ломать?

› показать цитату

> Идея полезная, но только для UDP-соединений. Для ТСР вероятность ошибки > очень мала (ее практически нет, вроде бы, потому что с каждым пакетом идет > контрольная сумма). Ну, я не раз выкачивал диалапом файлы под 60 мб и MD5 > сумма сходилась. Тут нетрудно посчитать мизерность ошибки... > > А вообще - да, идея хорошая. Надо расширять *tp - протоколы...

IPv6? контрольная сумма/хеш для каждого пакета, независимо от типа
протокола. Кстати, не пора ли внедрять? :)

-*Информационный канал Subscribe.Ru
Подписан адрес:
Код этой рассылки: comp.soft.linux.kirovlug
Написать в лист: mailto:comp.soft.linux.kirovlug-list@subscribe.ru
Отписаться: mailto:comp.soft.linux.kirovlug--unsub@subscribe.ru?subject=comp.soft.linux.kirovlug

http://subscribe.ru/ http://subscribe.ru/feedback

Ответить  

"Васильев Макси м"

Wed, 10 Nov 2004 22:34:57 +0300 (#261043)

 

› показать цитату

> IPv6? контрольная сумма/хеш для каждого пакета, независимо от типа > протокола. Кстати, не пора ли внедрять? :)

Угу, будем одни на свете с 6-м :)

-*Информационный канал Subscribe.Ru
Подписан адрес:
Код этой рассылки: comp.soft.linux.kirovlug
Написать в лист: mailto:comp.soft.linux.kirovlug-list@subscribe.ru
Отписаться: mailto:comp.soft.linux.kirovlug--unsub@subscribe.ru?subject=comp.soft.linux.kirovlug

http://subscribe.ru/ http://subscribe.ru/feedback

Ответить  

"Vlad Tushevskij"

Wed, 10 Nov 2004 23:06:21 +0300 (#261050)

 

Hello Vlad,

Wednesday, November 10, 2004, 11:06:21 PM, you wrote:

› показать цитату

>> IPv6? контрольная сумма/хеш для каждого пакета, независимо от типа >> протокола. Кстати, не пора ли внедрять? :)

› показать цитату

VT> Угу, будем одни на свете с 6-м :)

+ еще миллиард китайцев ;)

Ответить  

alex

Thu, 11 Nov 2004 22:44:50 +0300 (#262027)

 

Vlad Tushevskij пишет:

› показать цитату

>>IPv6? контрольная сумма/хеш для каждого пакета, независимо от типа >>протокола. Кстати, не пора ли внедрять? :) >> >> > >Угу, будем одни на свете с 6-м :) > > >

Нет, скоро останемся последними. :(

Уже половина точек обмена траффиком в европе работают в режиме
инкапсуляции IPv4 через v6.

Осталось только дождаться выхода протокола как финального стандарта.

-*Информационный канал Subscribe.Ru
Подписан адрес:
Код этой рассылки: comp.soft.linux.kirovlug
Написать в лист: mailto:comp.soft.linux.kirovlug-list@subscribe.ru
Отписаться: mailto:comp.soft.linux.kirovlug--unsub@subscribe.ru?subject=comp.soft.linux.kirovlug

http://subscribe.ru/ http://subscribe.ru/feedback

Ответить  

Vasilev Max

Fri, 12 Nov 2004 23:46:26 +0300 (#262837)

 

› показать цитату

> rsync поддерживает такие вещи. При синхронизации через rsync можно > восстанавливать битые файлы, выкачая при этом объём не значительно больший

› показать цитату

> чем, размер битой части. > > Всё уже решено давно, зачем голову ломать?

и что? описанный мною сервис уже предоставляется? Понятно, что если у
некоторого сайта есть доступ к файлам по rsync, то я скорее всего
пожелаю им воспользоваться, а если нет, то я могу попасть в "битую"
ловушку... Речь идет именно о расширении существующих сервисов или о
создании в сети некоторого ресурса предоставляющего данный сервис
относительно внешних для него серверов.

Ответить  

Kolotov Alexandr

Thu, 11 Nov 2004 11:22:12 +0300 (#261344)

 

{#template MAIN} <div id="loginForm" style="display:none;" class="subscriberu_popup"> <div class="popup_register"> {#include js_tmpl_auth_reg_tab} {#if $P.login_register_tab == 1} <form class="authentication-form" method="post" action="/MEMBERLOGIN_authen_cred"> <dl class="rg_block_options"> <dt id="js_tap_panel_auth"> <h1>Войти на сайт</h1> {* {#include js_tmpl_auth_reg_button} *} {#include js_tmpl_auth_reg_action} <hr class="logreg_line noPhones"> <div class="logreg_descr noPhones"><p>{#include js_tmpl_auth_reg_descr} </p></div> <div class="logreg_advice noPhones"> Если вы еще не с нами, то начните с <a href="#" onclick="rgNav('js_tab_reg');return false;" class="dashed" data-func="registr">регистрации</a> </div> <br><br> <a class="dashed auth-enter" href="/manage/author/"><b>Вход для авторов</b></a> </dt> </dl> </form> {#/if} {#if $P.login_register_tab == 2} <div class="rg_block_options"> <div id="js_tap_panel_auth"> <h1>Регистрация</h1> <div class="social_reg"> {* <div class="rg_description">{#include js_tmpl_soc_auth_reg_descr}</div> *} {#include js_tmpl_auth_reg_soc} <div class="rg_soc_auth_agree">{#include js_tmpl_auth_reg_agree}</div> </div> <div class="subscribe_reg"> {* <div class="rg_description"> #include js_tmpl_auth_reg_descr </div> *} {#include js_tmpl_auth_reg_action} </div> {* {#include js_tmpl_auth_reg_button} *} <div class="clr"> </div> <hr class="logreg_line noPhones"> <div class="logreg_descr noPhones">{#include js_tmpl_auth_reg_descr} {#include js_tmpl_soc_auth_reg_descr} </div> </div> </div> {#/if} </div> {* <div class="gray_bg register_shadow"></div> *} </div> {#/template MAIN} {#template js_tmpl_auth_reg_tab} <ul class="rg_nav"> <li id="js_tab_auth" class="{#if $P.login_register_tab == 1} rg_active_nav {#/if} rg_first_nav"><a onclick="rgNav('js_tab_auth');return false;" href="">Вход на сайт</a></li> <li id="js_tab_reg" class="{#if $P.login_register_tab == 2} rg_active_nav {#/if}"><a onclick="rgNav('js_tab_reg');return false;" href="">Регистрация </a></li> </ul> <span onclick="hidebo();" class="rg_closed"> </span> {#/template js_tmpl_auth_reg_tab} {#template js_tmpl_auth_reg_action} {#if $P.login_register_tab == 1} {#include js_tmpl_auth_reg_soc} {#/if} <div class="rg_forms"> <input type="hidden" id="login_register_destination" value="{$P.login_register_destination}"/> {#if $P.login_register_tab == 1} <div class="rg_for_input"> <span class="rg_text_inner">E-mail или код подписчика</span> <input id="credential_0" class="js_keydown_selector rg_input_text" data-js_submit="no" data-js_next_input_name="credential_1" name="" type="text" /> </div> <div class="rg_for_input"> <span class="rg_text_inner">Пароль</span> <input id="credential_1" class="js_keydown_selector rg_input_text" data-js_submit="yes" data-js_action="js_loginFormBut" name="" type="password" onkeyup="showAttention(this,!!window.event.shiftKey)" /> <span class="pswd_attention" id="attention_pswd"> <span class="icon_attention"></span> <span class="pswd_attention-text" id="attention-text_pswd1">Русская раскладка клавиатуры!</span> <span class="pswd_attention-text" id="attention-text_pswd2">У вас включен Caps Lock!</span> <span class="pswd_attention-text" id="attention-text_pswd3">У вас включен Caps Lock и русская раскладка клавиатуры!</span> </span> </div> <div class="rg_for_input input-alien"> <span class="chk noPhones"><input id="chk_alien" name="" type="checkbox" /></span><label for="chk_alien" class="noPhones"> Чужой компьютер</label> <a class="forgot_pass" href="/member/totalrecall">Забыли пароль?</a> </div> <div class="rg_for_input"> <em id="auth_msg" class="reg_error"></em> <input id="lf_typeauthid" value="email" type="hidden"> <input type="submit" class="button button-red logreg_submit" id="js_loginFormBut" value="Войти"> <!--</a>--> <div class="loading loading-cover" style="display: none;"><div class="loader"></div></div> </div> {#/if} {#if $P.login_register_tab == 2} <div class="rg_for_input"> <span class="rg_text_inner">E-mail</span> <input id="arfemail" class="js_keydown_selector rg_input_text" name="" type="text" data-js_submit="yes" data-js_action="js_regFormBut"/> </div> <div class="rg_for_input rg_set_lineh rg_for_input_wide"> <label class="js_tap_panel_checkbox"> <span class="chk"><input name="" id='js_tap_panel_checkbox_terms' type="checkbox" data-js_submit="yes" /></span> Я ознакомился и согласен с <a class="link_txd logreg_accLink" href="/faq/vereinbarung.html">условиями сервиса Subscribe.ru</a> </label> <br /> <label class="js_tap_panel_checkbox"> <span class="chk"><input name="" id='js_tap_panel_checkbox_personal' type="checkbox" data-js_submit="yes" /></span> Нажимая на кнопку "Готово!", я даю <a class="link_txd logreg_accLink" href="/faq/persverordnung.html">согласие на обработку персональных данных</a> </label> </div> {* <div style="float: left;position: absolute;left: 11em;"> <img src="http://www.kupivip.ru/images/vip/logo.png?1604" style="width: 86px; vertical-align: middle;display: block;"> </div> <div class="rg_for_input rg_set_lineh"> <label class="js_tap_panel_checkbox"><input name="" id="js_tap_panel_checkbox_kupivip" type="checkbox" data-js_submit="yes"> Я хочу получать новости о скидках на одежду</label> </div> *} <div class="rg_for_input"> <em id="reg_msg" class="reg_error rg_for_input_wide"></em> <em id="reg_msg2" class="reg_error rg_for_input_wide"></em> <input id="rf_typeauthid" value="email" type="hidden"> <a class="button button-red logreg_submit" id="js_regFormBut" href="#">Готово!</a> <div class="loading loading-cover" style="display: none;"><div class="loader"></div></div> </div> {#/if} </div> {#/template js_tmpl_auth_reg_action} {#template js_tmpl_auth_reg_agree} <div class="rg_for_input rg_set_lineh rg_for_input_wide"> <label class="js_tap_panel_checkbox"> <span class="chk"><input name="" id='js_tap_panel_checkbox_terms_reg' type="checkbox" data-js_submit="yes" /></span> Я ознакомился и согласен с <a class="link_txd logreg_accLink" href="/faq/vereinbarung.html">условиями сервиса Subscribe.ru</a></label> <em id="reg_msg_soc" class="reg_error rg_for_input_wide"></em> </div> {#/template js_tmpl_auth_reg_agree} {#template js_tmpl_auth_reg_button} <div class="rg_butons_socials"> {#if $P.login_register_tab == 1} <a class="rg_btn_soc rg_bs_01 js_tap_panel_selector" action="auth_email" href="#"><span><i></i>Email</span></a> <a class="rg_btn_soc rg_bs_01 js_tap_panel_selector" action="auth_openid" href="#"><span><i></i>OpenID</span></a> <a class="rg_btn_soc rg_bs_02 js_tap_panel_selector" action="auth_vkontakte" href="#"><span><i></i>Вконтакте</span></a> <a class="rg_btn_soc rg_bs_02 js_tap_panel_selector" action="auth_mailru" href="#"><span><i></i>Mail.Ru</span></a> {#/if} {#if $P.login_register_tab == 2} <a class="rg_btn_soc rg_bs_01 js_tap_panel_selector" action="reg_email" href="#"><span><i></i>Email</span></a> <a class="rg_btn_soc rg_bs_01 js_tap_panel_selector" action="reg_openid" href="#"><span><i></i>OpenID</span></a> <a class="rg_btn_soc rg_bs_02 js_tap_panel_selector" action="reg_vkontakte" href="#"><span><i></i>Вконтакте</span></a> <a class="rg_btn_soc rg_bs_02 js_tap_panel_selector" action="reg_mailru" href="#"><span><i></i>Mail.Ru</span></a> {#/if} </div> {#/template js_tmpl_auth_reg_button} {#template js_tmpl_auth_reg_descr} {#if $P.login_register_tab == 1} Для оформления подписки на выбранную рассылку, работы с интересующей вас группой или доступа в нужный вам раздел, просим авторизоваться на Subscribe.ru {#/if} {#if $P.login_register_tab == 2} Для регистрации укажите ваш e-mail адрес. Адрес должен быть действующим, на него сразу после регистрации будет отправлено письмо с инструкциями и кодом подтверждения. {#/if} {#/template js_tmpl_auth_reg_descr} {#template js_tmpl_soc_auth_reg_descr} Или зарегистрируйтесь через социальную сеть. {#/template js_tmpl_soc_auth_reg_descr} {#template js_tmpl_auth_reg_soc} <div class="rg_soc"> {#if $P.login_register_tab == 1} <a onclick="return _checkSocConfirm(event)" href="https://oauth.vk.com/authorize?client_id=3954260&scope=wall,offline,photos,groups,video,audio,email&redirect_uri={location.protocol+'//'+location.host}/member/login/vk/&response_type=code&v=5.15" class="login_register_vk_button"> <span class="login_register_vk_icon"></span> </a> {#/if} {#if $P.login_register_tab == 2} <a onclick="return _checkSocConfirm(event)" href="https://oauth.vk.com/authorize?client_id=3954260&scope=wall,offline,photos,groups,video,audio,email&redirect_uri={location.protocol+'//'+location.host}/member/join/vk&response_type=code&v=5.15" class="login_register_vk_button"> <span class="login_register_vk_icon"></span> </a> {#/if} </div> {#/template js_tmpl_auth_reg_soc}

{#template MAIN} <div id="loginForm" style="display:none;" class="subscriberu_popup"> <div class="popup_register"> {#include js_tmpl_auth_reg_tab} <dl class="rg_block_options"> <dt id="js_tap_panel_auth"> <p class="rg_description">{#include js_tmpl_auth_reg_descr}</p> <div class="clr"> </div> {#include js_tmpl_auth_reg_action} <div class="clr"> </div> </dt> </dl> </div> <!-- <div class="gray_bg register_shadow"></div> --> </div> {#/template MAIN} {#template js_tmpl_auth_reg_tab} <ul class="rg_nav"> <li id="js_tab_reg" class="rg_active_nav rg_first_nav"><a href="" onclick="return false;" >Регистрация</a></li> </ul> <span onclick="hidebo();" class="rg_closed"> </span> {#/template js_tmpl_auth_reg_tab} {#template js_tmpl_auth_reg_descr} <strong>Пожалуйста, подтвердите ваш адрес.</strong><br><br>Вам отправлено письмо для подтверждения вашего адреса {$P.register_confirm_mail}.<br>Для подтверждения адреса перейдите по ссылке из этого письма. {#/template js_tmpl_auth_reg_descr} {#template js_tmpl_auth_reg_action} <div class="rg_forms confirm_code_from_letter"> <div class="rg_for_input"> <span class="rg_inp_descr" style="width:15em;">Или введите код из письма:</span> <input type="text" value="" id="confirm_code" name="" data-js_submit="yes" data-js_action="js_confirmFormBut" class="js_keydown_selector rg_input_text_conf" > </div> <div class="rg_for_input"><label>Не пришло письмо? <b>Пожалуйста, проверьте папку Спам</b><br /> (папку для нежелательной почты).</label><br />  <a href="" onclick="ajax_recall_code();return false" >Вышлите мне письмо еще раз!</a></div> <div class="rg_for_input"> <em class="reg_error" id="confirm_msg"></em> <a href="#" class="button button-red" id="js_confirmFormBut">Готово</a> <div class="loading loading-cover" style="display: none;"><div class="loader"></div></div> <br> </div> </div> {#/template js_tmpl_auth_reg_action}