Форум » О проекте » Наш сайт » Новая система антилинча : обсуждаем ...
 
Предыдущая страница Следующая страница [1] [2] > 3 < [4]

Автор Сообщение

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#270   2006-05-13 00:02 GMT      
Итак, по просьбам пользователей, ввёл разграничения по времени :

Настроики системы антилинча сформированы следующем образом :

Общее число потоков :

c 8.00 - до 17.00 - 90
c 17.00 - до 00.00 - 140
c 00.00 - до 8.00 - 180

Количество потоков с одного IP : 3

Время ссесии : 24 часа
Ограничения по скорости : нет


Так что тестим дальше, думаю всё должно быть хорошо!
Предупреждаю, что антилинч я ещё тестю, так что во время тестирования обрубаю все закачки!
(не качайте пока большие файлы, т.к. я временами правлю антилинч, копаясь в кодах скрипта и затираю сессии)
В понедельник работы уже будут закончены и вы сможете не бояться, что вас прервут на самом интересном месте, когда докачать то остаётся пару килобайт : )

Сообщение было отредактировано Amro (2006-05-13 02:04 GMT, назад)
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/

Dimitri

Members


Онлайн статус

11 сообщений

Местоположение: Ukraine
Род занятий: Студент
Возраст: 35

#271   2006-05-13 03:17 GMT      
Цитата
в пики активности админу приходится перезагружать Apache

Тут все упирается не в в ширину канала, а в сам устаревший принцип Апача, просто к примеру 1.3.х обрабатывает каждое паралельное соединение отдельной копией Апача (дочерним процессом), т.е. на каждое соединение нужно приблезительно 2 метра памяти. Отсюда простой подсчет, что на 10 соединений, потребуется 20 метров оперативки, на 100 соеденений 200 метров, на 1000 соеденений 2000 и т.д.

Т.е. владельцам Dial-Up модемов нестоит огорчаться, что мол из-за челов с выделенками поставили эту защиту, даже вы очень сильно на гружаете сервер, даже скажу так, что у Апача геморойно работает с большим подключением низкоскоростных подключений и поэтому дочерний процесс может достигать почти с 10 метров.

Apache очень старый HTTP сервер и принципы передачи им данных практически неизменены под современные рамки, только адаптированы под высокоскоростные подключения, Апач просто ужасно работает со статикой!

Я конечно тоже поучаствовал в этом издевательстве, одну только Энциклопедию по Oracle 8 я качал болшьше месяца, на своем Диал-Апе со скоростью потока в 3 кила(конечно частями).

Так что загрузка канала не главная проблема, а в текущей проблеме нестоит различать как владельцев ADSL(and other) вредителями, а Dial-Up невинными


Цитата
Вот теперь и думайте, что лучше ограничения? или закрытие проекта?

Цитата
Когда посещаемость залезет за несколько тысяч хостов в сутки и университет не закупит новый сервер -- тогда возможно об этом и подумаем, но скорее всего это наврядли!

ГЛУПО... Непойму зачем вам нужно закупать новый сервер если вы ненаучились использовать этот, если Админ не тупой и не лентяй, то нагрузку на сервер можно уменьшить непросто в десятки раз, но даже и в сотню и при этом не надо было и вас заставлять делать меры с антиличингом с угрозами закрытия хоста http://asvu.ru

Вот к примеру могу привести решение... Апач просто никакой с кешированием данных и работой со статикой, так почему бы не установить какой нибудь кеширующий прокси сервер на фронтенд для работы со статикой, а еще лучше использовать какой нибудь сервер по приличней чем Апач.
Хотя с Апачем раставаться не указываю, но рекомендую к примеру установить его на бекенд(обработка динамики сайта), а на фронтенд установить какой нибудь сервер по современей, который имеет более современные и менне затратоемкие методы передачи данных чем доисторический Апач.
Например Установите на фронтенд(на обработку статики сервера) HTTP сервер nginx и я думаю результаты снижения нагрузки на сервер где то под сотню раз, вас удивлят


То что Апач, самый лучший HTTP сервер - это выроботавшийся стереотип еще очень давно, но время идет, а его технология не уходит далеко вперед и он не является таковым(лучшим).


Dimitri[StreetRAVEN] aka DMTR-soft

Sania

Members


Онлайн статус

3 сообщений

Местоположение:
Род занятий:
Возраст:

#272   2006-05-13 11:05 GMT      
Опять не здоровая херня! Когда же это кончится?
Предисловие. Количество посетителей сайта на 07.00 13.05.06 равно 4 (и это-то в субботу). Удивлён?К чему бы это?...
Вчера в 22.00 12.05.06 начал качать книгу~90Mb. Скачал 1MB, потом сам разорвал соединение. Думаю, ночью докачается (я всегда так делаю). По расписанию, время второго соединения 02.01 13.05.06. И что? Продолжение закачки (ссесии) не произошло, ни одного килобайта. Вот так подарок!!! Догадки: Антилинч думает, что произошла смена суток (уже прошло 24 часа), ссесия закрывается автоматически. ИЛИ, ведь при 2-ом соединении у меня произошла смена IP, значит я чужой (другой IP), или при смене IP докачка не поддерживается, так задумано. У пользователей локалок IP постоянен (поэтому проблем у них не должно быть). С такой проблемой я раньше (6 месяцев назад) не сталкивался, после 02.00 докачка была всегда (когда-то, но не сейчас).
И ещё, что такое 24 часа для меня. Начал качать книги (по очереди), например, 50 Mb+56Mb. А успеваю я за 7 часов 100 Mb. Имеем: недокаченных 6Mb, реально скаченных: 1 книга = 50 Mb ; + 50 Mb потраченных в пустую. УВАЖАЕМЫЕ ПОЛЬЗОВАТЕЛИ ВАС ЭТО УСТРАИВАЕТ!!! Увеличение с 24 часов до ? даст большую вероятность, что такое с вами будет приключаться очень редко, хотя потерь трафика пользователю всё равно не избежать (но свести к минимуму удасться). А бывшее заявление в 6 часов меня вообще рассмешило (хохотал минуты 3).
Ваш сайт был как спасательный круг в просторах Интернета. Все книги, которые здесь выложены я знаю где скачать, но там не поддерживается докачка, а с обрывами Dual-Up, качать как-то рискованно (rapide).… Для меня главное НОРМАЛЬНАМ докачка, т.к. обрыв связи бывает по 4 раза за ночь. Но теперь всё изменилось. Какая разница, иметь свой сайт с невозможностью нормальной докачки, или скачивать книги с файлообменников. На рапиде, за 10 у.е. в месяц: неограниченное кол-во потоков + ПОЛНОЦЕННАЯ ДОКАЧКА. А если за бесплатно, то ничем не отличается от вашего сайта. Что мы как иностранные буржуи? Разницы не вижу, пока. Как долго будет продолжаться этот бардак? Я не знаю. Всё зависит от желания и мастерства администраторов. Как мы ВСЕ увидели, увеличение наворотов привело к логарифмическому увеличению количества багов.
Мне остаётся только повеситься. Другого выхода я не вижу.
P.S. Я не хочу быть бета-тестером движка, антилинча! Не для этого я покупал карточку, не для этого я зашёл на этот сайт, да и инет у меня не халявный (выходит в круглую сумму). Я хотел просто (до)качать книги и наслаждаться их прочтением. Все эти вые..оны с антилинчем меня уже достали. Другие владельцы серьёзных сайтов с книгами при смене двигателя полностью закрывают доступ к сайту на двое суток, или делают зеркало. Экспериментируйте на себе, на других хостингах (сайтах), а не используйте (во всех смыслах этого слова) нервы, время, деньги посетителей сайта. Сайт превратился не в большое собрание электронных книг, а в большое собрание БАГОВ. Я уверен, что сейчас я выражаю общее мнение. ПОЛЬЗОВАТЕЛЬ ДОЛЖЕН ПОЛЬЗОВАТЬСЯ УСЛУГАМИ САЙТА, А НЕ ИСПЫТЫВАТЬ НА СЕБЕ КАКУЮ-ТО ВЫГОДУ (ДАЖЕ ЕСЛИ ОНА КОСВЕННАЯ, ТЕСТИРОВАНИЕ)! ПОЛЬЗОВАТЕЛЮ НУЖЕН РЕЗУЛЬТАТ, А КАКИМИ СПОСОБАМ ОН БУДЕТ ПОЛУЧЕН - ЭТО УЖЕ НЕ ЕГО ПРОБЛЕМЫ!

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#273   2006-05-13 11:46 GMT      
Чё нить придумаем, а проблема как я понял одна -- это смена вашего IP, при разрыве связи!! т.к. сессия закреплена за определённым IP адресом, при его утери она становиться недоступной! Если ваш IP постоянен то проблем никаких! Думаю к понедельнику все вопросы решим и тему закроем! А пока если найдёте ещё глюки не забывайте о них писать ...
Сегодня попробую сделать докачку, даже при смене IP адреса (смысл в том что из запроса буду выдирать вашу сессию и менять старый IP на новый). В общем посмотрим что выйдет!
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#274   2006-05-13 12:17 GMT      
Чесное слово, скоро у меня крыша съедит!

Итак сделал следующее!

Теперь IP адрес не зависим от сессии, сессия уникальна и её будет достаточно для определения вас.
При смене вашего IP в базе антилинча, ежели имеется и ещё не стёрлась ваша сессия (в зависимости от времени), старый IP заменяется новым!!
Жду новой критики!
Настройки остались теже!
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#279   2006-05-13 16:49 GMT      
Цитата
Опять не здоровая херня! Когда же это кончится?
Предисловие. Количество посетителей сайта на 07.00 13.05.06 равно 4 (и это-то в субботу). Удивлён?К чему бы это?...

В выходные всегда так, хотя в 08.00 13.05.06 их было 20. И ваша ругань здесь не к месту, ради вас же стараемся, а вы что ?
Цитата
Вчера в 22.00 12.05.06 начал качать книгу~90Mb. Скачал 1MB, потом сам разорвал соединение. Думаю, ночью докачается (я всегда так делаю). По расписанию, время второго соединения 02.01 13.05.06. И что? Продолжение закачки (ссесии) не произошло, ни одного килобайта. Вот так подарок!!! Догадки: Антилинч думает, что произошла смена суток (уже прошло 24 часа), ссесия закрывается автоматически. ИЛИ, ведь при 2-ом соединении у меня произошла смена IP, значит я чужой (другой IP), или при смене IP докачка не поддерживается, так задумано. У пользователей локалок IP постоянен (поэтому проблем у них не должно быть). С такой проблемой я раньше (6 месяцев назад) не сталкивался, после 02.00 докачка была всегда (когда-то, но не сейчас).

Вчера я антилинч переделывал, ввёл разграничения по времени на общее количество потоков, сегодня его доделал чтоб он сессию не обрывал при смене IP, теперь сессия не зависима от IP!
Цитата
И ещё, что такое 24 часа для меня. Начал качать книги (по очереди), например, 50 Mb+56Mb. А успеваю я за 7 часов 100 Mb. Имеем: недокаченных 6Mb, реально скаченных: 1 книга = 50 Mb ; + 50 Mb потраченных в пустую. УВАЖАЕМЫЕ ПОЛЬЗОВАТЕЛИ ВАС ЭТО УСТРАИВАЕТ!!! Увеличение с 24 часов до ? даст большую вероятность, что такое с вами будет приключаться очень редко, хотя потерь трафика пользователю всё равно не избежать (но свести к минимуму удасться). А бывшее заявление в 6 часов меня вообще рассмешило (хохотал минуты 3).

Хохотал ? Но всё таки грусный хохот наверное был : ) Знаешь больше суток поставить можно, но нужно ли? Мне кажется этого вполне достаточно! Хотя решение об увеличении сессии я приму потом, вначале надо всё остальное подправить!
Цитата
Ваш сайт был как спасательный круг в просторах Интернета. Все книги, которые здесь выложены я знаю где скачать, но там не поддерживается докачка, а с обрывами Dual-Up, качать как-то рискованно (rapide).… Для меня главное НОРМАЛЬНАМ докачка, т.к. обрыв связи бывает по 4 раза за ночь. Но теперь всё изменилось. Какая разница, иметь свой сайт с невозможностью нормальной докачки, или скачивать книги с файлообменников. На рапиде, за 10 у.е. в месяц: неограниченное кол-во потоков + ПОЛНОЦЕННАЯ ДОКАЧКА. А если за бесплатно, то ничем не отличается от вашего сайта. Что мы как иностранные буржуи? Разницы не вижу, пока. Как долго будет продолжаться этот бардак? Я не знаю. Всё зависит от желания и мастерства администраторов. Как мы ВСЕ увидели, увеличение наворотов привело к логарифмическому увеличению количества багов

Он и сейчас как спасительный круг, потому то ты и не на рапиде, а здесь! А увеличение наворотов всегда ведёт к багам, не будет просто работать то, что нормально не тестировалось, а вводилось по требованию начальства сервера! А баги мы исправим, дело времени! Неужто нельзя подождать несколько дней ? ...
Цитата
Мне остаётся только повеситься. Другого выхода я не вижу.

С этим можно повременить, рано ещё, да и не нужно этого ...
Цитата
P.S. Я не хочу быть бета-тестером движка, антилинча! Не для этого я покупал карточку, не для этого я зашёл на этот сайт, да и инет у меня не халявный (выходит в круглую сумму). Я хотел просто (до)качать книги и наслаждаться их прочтением. Все эти вые..оны с антилинчем меня уже достали. Другие владельцы серьёзных сайтов с книгами при смене двигателя полностью закрывают доступ к сайту на двое суток, или делают зеркало. Экспериментируйте на себе, на других хостингах (сайтах), а не используйте (во всех смыслах этого слова) нервы, время, деньги посетителей сайта. Сайт превратился не в большое собрание электронных книг, а в большое собрание БАГОВ.

Помимо библиотеки здесь есть много другого, так что сайт закрывать нельзя было! И я вроде на главной писал новость о том что проходит тестирование антилинча, а не его внедрение и оставление без усовершенствования и исправления глюков!
Цитата
Я уверен, что сейчас я выражаю общее мнение. ПОЛЬЗОВАТЕЛЬ ДОЛЖЕН ПОЛЬЗОВАТЬСЯ УСЛУГАМИ САЙТА, А НЕ ИСПЫТЫВАТЬ НА СЕБЕ КАКУЮ-ТО ВЫГОДУ (ДАЖЕ ЕСЛИ ОНА КОСВЕННАЯ, ТЕСТИРОВАНИЕ)! ПОЛЬЗОВАТЕЛЮ НУЖЕН РЕЗУЛЬТАТ, А КАКИМИ СПОСОБАМ ОН БУДЕТ ПОЛУЧЕН - ЭТО УЖЕ НЕ ЕГО ПРОБЛЕМЫ!

Возможно, не спорю, однако ты неплохо постарался и только благодаря тебе я исправляю баги, а всем посетителем видать нет до них дела, за исключением некоторых постоянных! Не парься всё наладиться!
Жду новой критики от тебя, щас ничего обрываться не должно!
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/

topper

Members


Онлайн статус

4 сообщений

Местоположение: Russia SPb
Род занятий: программист
Возраст:

#281   2006-05-13 18:23 GMT      
качнул 1 книгу flashgetом, скачалось 30мб из 55, комп грузанулся, попытался продолжить качнуть или даже сначала - пишет что лимит 3 потока и вабще не дает качать... а поток-то 1...

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#282   2006-05-13 19:31 GMT      
Цитата
topper :
качнул 1 книгу flashgetом, скачалось 30мб из 55, комп грузанулся, попытался продолжить качнуть или даже сначала - пишет что лимит 3 потока и вабще не дает качать... а поток-то 1...



Стучись в асю, разберёмся 292303865, по теории такого не должно быть, возможно это из-за збоя!
Спасибо за найденный баг, попробовал повторить его искусственно, вырубив модем, вышло тоже самое!
Попробую исправить это дело!
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/

ksander

Members


Онлайн статус

6 сообщений

Местоположение: Russia
Род занятий:
Возраст:

#283   2006-05-13 20:27 GMT      
В общем такой глюк:
Качал одну книгу, состоящую из 2 архивов ... первый архив скачался отлично, второй архив скачался наполовину, потом вылетает ошибка, что удалённый комп закрыл соединение ... потом начала вылетать ошибка, что файл не найден ... и всё ... качаться вообще всё перестало ... я снёс у себя этот недокачанный файл ... зашёл на ваш сайт, чтобы попытаться скачать его заново. Когда нажал на ссылку нужного мне архива, то получил от антилинча вот это сообщение: You cannot download more than 3 threads at the same time! Хотя я в тот момент ничего не качал. Перезагрузился попробовал опять тоже самое и опять получил тоже сообщение.

З.Ы. В тот момент было:
Активных потоков: 78
Потоков с вашего IP: 3 (я ничего не качал в этот момент )
Потоковый лимит: 140

Amro

Administrators


Онлайн статус

147 сообщений
http://asvu.ru
Местоположение: Russia Астрахань
Род занятий: Студент
Возраст: 35

#284   2006-05-13 23:37 GMT      
Цитата
В общем такой глюк:
Качал одну книгу, состоящую из 2 архивов ... первый архив скачался отлично, второй архив скачался наполовину, потом вылетает ошибка, что удалённый комп закрыл соединение ... потом начала вылетать ошибка, что файл не найден ... и всё ... качаться вообще всё перестало ... я снёс у себя этот недокачанный файл ... зашёл на ваш сайт, чтобы попытаться скачать его заново. Когда нажал на ссылку нужного мне архива, то получил от антилинча вот это сообщение: You cannot download more than 3 threads at the same time! Хотя я в тот момент ничего не качал. Перезагрузился попробовал опять тоже самое и опять получил тоже сообщение.

З.Ы. В тот момент было:
Активных потоков: 78
Потоков с вашего IP: 3 (я ничего не качал в этот момент )
Потоковый лимит: 140


В общем фича в том, что просто скрипт, котрый раздаёт потоки нормально не завершил свою работу, а значит не стёр из базы кол-во соединений с вашего IP адреса.
Дело в том что при закачке файла всё время активен скрипт download.php, когда в качалке вы нажимаете на паузу, либо просто вырубаете качалку -- это равнозначно тому что вы завершаете работу скрипта (ему отсылаются соответствующие данные). Когда же случаются какие либо неполадки, ну например рвётся соединение, скрипт соответствующих данных не получает и он завершает свою работу в соответствии с таймаутом установленом в настройках PHP.
Другими словами нужно просто подождать, пока пройдёт время таймаута и попробовать возобновить закачку!
Попробуйте в этом случае начать закачку минут через 20!
Качали по этой ссылке ?

_http://asvu.ru/download/84f6b0dff26cc2ae38d851458dcd4c7f/Microsoft Corporation Proektirovanie i realizaciia baz dannyh Microsoft SQL Server 2000. Uchebnyy kurs MCAD MCSE, MCDBA_.part2.rar
/*
Пусть дни бегут, идут года, ПК не бросим никогда!!!
*/