Сохранен F 43
https://2ch.hk/d/res/111915.html
Аноним ID:  ShdQxbJu Чтв 17 Окт 2013 03:23:23  #1 №111915 

Абу, разбань айпишник архивача. Годные треды надо сохранять.

Loading...
Аноним ID:  rJr44Khv Чтв 17 Окт 2013 19:44:33  #2 №111944 

>>111915
Плюсую, куча тредов уже потерялась, что же ты делаешь, абу?

Аноним ID:  hqIUN2qY Чтв 17 Окт 2013 19:51:30  #3 №111945 

Для тех, кто не понял - сохроненные треды слишком часто использовали в качестве вещдоков беспредела модерации, в результате чего было принято такое решение. Если в следующий раз где-нибудь на просторах /вм удалят релейтед тред, или в /б - тред инакомыслящих, то доказать это будет сложнее. Это так, к сведению.

Аноним ID:  i1IWXK82 Чтв 17 Окт 2013 19:56:15  #4 №111946 

>>111945
Кокая дедукция.

Аноним ID:  rJr44Khv Птн 18 Окт 2013 00:41:35  #5 №111988 

Разбанивайте давайте. Люди ждут.

Аноним ID:  xMiz1gmM Птн 18 Окт 2013 05:23:55  #6 №112003 

Бамп.

Аноним ID:  KoDKKv+D Птн 18 Окт 2013 05:47:15  #7 №112004 

>>111915
Забанили кококонкурента. Архивач жи гораздо интереснее мизулина, годноты полно, ридонли форсированный, куча плюсов.

Аноним ID:  xMiz1gmM Птн 18 Окт 2013 05:50:06  #8 №112005 

>>112004
>конкурента
Это ты так шутишь?

Аноним ID:  C9/hZlud Птн 18 Окт 2013 05:54:52  #9 №112006 

абу, сука, я тебя ненавижу. твою вонючую самодовольную хачежидовскую харю.

Аноним ID:  KoDKKv+D Птн 18 Окт 2013 06:05:49  #10 №112007 

>>112005
А ТО!
Хотя в каждой шутке... Может свой архивач на макабе пилят бесплатный и без смс.

Аноним ID: Heaven Птн 18 Окт 2013 12:05:22  #11 №112038 

>>111915
+++ Поддерживаю. Хуле вы как на эстраде? Кругом бизнес, годные тред теряются.

Аноним ID:  aByQKz3c Птн 18 Окт 2013 12:06:27  #12 №112039 

>>112038

Аноним ID:  boTLuTX8 Птн 18 Окт 2013 17:08:19  #13 №112079 

АРХИВАЧ МНЕ СДЕЛАЛ БЛЯДЬ!!!!
совсем уже охуели, то Таиланд целиком забанят, теперь это

Абу, нахуя? Аноним ID:  YNDbquaW Суб 19 Окт 2013 01:11:29  #14 №112106 

Нахуя, абу?

Аноним ID:  JCq10JE4 Суб 19 Окт 2013 05:35:57  #15 №112113 

>>111915
Вы совсем дебилы что ли, не знаете с кем дело имеете.
Скачивать треды надо другим ИП, отдельным.
Не можете - значит лохи и дебилы ебанные, нахуй архивач такой.

Аноним ID:  Ct3LXAMe Суб 19 Окт 2013 15:32:52  #16 №112137 

>>112113
1. IP прикрыт CloudFlare.
2. Абу одобрил архивач.
Судя по всему, он сейчас просто не может отреагировать.

Аноним ID:  Rk0SKs90 Суб 19 Окт 2013 16:41:18  #17 №112139 

>>112137
>>112110
>>112106
>>112079
Кукарекелы, вам же ясно объяснили, почему так, и почему разбанивать айпи архивача никто никогда не будет → >>111945

Аноним ID:  Ct3LXAMe Суб 19 Окт 2013 17:13:03  #18 №112141 

>>112139
Кукарекло это ты, а мы ждем официального ответа Абу.

Аноним ID:  xkL5WJ3F Срд 23 Окт 2013 01:46:58  #19 №112478 

>>112141
Он уже был. Это хорошая новость.
Он куда-то пропал. А вот это уже навевает смутные сомнения.

Аноним ID:  Aa9NLZQZ Срд 23 Окт 2013 18:02:35  #20 №112579 

После непродолжительной переписки с Архивачем создалось впечатление, что создатель/админ - ленивое хуйло, не способное преодолеть малейшие сложности, и Абу тут даже не особенно при чём. Готов был бы даже предложить конкретную техническую помощь, но что-то и потребности в ней не заметно. Сервис не для пользователей, а для ЧСВ?

Аноним ID:  eT6uw0Yz Срд 23 Окт 2013 18:33:05  #21 №112585 

>>112579
Ну подумай сам. Для обновления всех тредов нужно 400+ запросов, не учитывая загрузки пикч, пусть даже большинство только по хедеру. И так каждые 2-5 минут, ну пусть 10. Многопоточность не используется. Как с такими масштабами можно притворяться обычным пользователем? Даже с запросом доп файлов (кол-во запросов++) и подстановкой кук/рефереров етц? Я не против конструктивной беседы, но тут какой то разговор ради ЧСВ получается.

Аноним ID:  eT6uw0Yz Срд 23 Окт 2013 18:34:06  #22 №112586 

>>112585
*какой-то
быстрофикс

Аноним ID:  Aa9NLZQZ Срд 23 Окт 2013 19:00:19  #23 №112592 

>>112585
>нужно 400+ запросов
>так каждые 2-5 минут, ну пусть 10
Прям овер дохуя. Любой современный браузер с настройками по умолчанию шлёт сразу несколько десятков запросов почти параллельно, и ничего, никого же не банят за это. Алсо, в HTTP есть keep-alive, чтобы не пилить отдельное соединение на каждый последующий запрос (и следовательно не напрягать всякие rate limiter'ы). Да и никто не мешает прикрутить хотя бы с десяток постоянно ротируемых шустрых прокси, если уж совсем уныло.

>Многопоточность не используется
Why so slow bad?

>Даже с запросом доп файлов (кол-во запросов++)
Хуй бы с ними с файлами.

>подстановкой кук/рефереров
Зачем куки, если это АИБ? Там ничего полезного не хранится. И сервер что, банит всех, кто не указал сраный реферрер?

Аноним ID:  eT6uw0Yz Срд 23 Окт 2013 21:16:03  #24 №112641 

>>112592
>многопоточное скачавиние овердохуя тредов
>нормальное использование
Ну ты понял.
>Любой современный браузер с настройками по умолчанию шлёт сразу несколько десятков запросов почти параллельно
Если ты про pipelining, то только сопутствующих файлов блеать (js/css/img). И IE/FF не поддерживают его по дефолту.

>Зачем куки, если это АИБ? Там ничего полезного не хранится. И сервер что, банит всех, кто не указал сраный реферрер?
Но как-то же детектируются атаки.
Конечно, самый очевидный способ детектировать - нормальный пользователь не будет круглосуточно скачивать 400 тредов со всеми пикчами каждые 10 минут. Если для тебя это не очевидно, то ты поехавший странный.
Да и вопрос у нас не стоит в обходе тех препятствий вместе с ддосерами лол, а в добавлении в вайт-лист, что сейчас, судя по всему, не предоставляется возможным, в связи с продолжением атак.

Аноним ID:  so1SP1Ij Чтв 24 Окт 2013 11:41:13  #25 №112699 

>>112641
Так это не АБу виноват, лел?

Аноним ID:  Z0C5DCzG Чтв 24 Окт 2013 12:37:24  #26 №112706 

http://nyamo.org внезапно, нормально скачивает, заговор?

Аноним ID:  muehBaCU Чтв 24 Окт 2013 13:45:00  #27 №112713 

>>112706

Аноним ID:  gZC2wLqs Чтв 24 Окт 2013 15:17:18  #28 №112725 

>>112699
Почему ты решил, что кто-то виноват?
>>112706
Не-а, скорее всего они сами обошли. Ваш ОП тоже может, но там работы достаточно, да и ленивое хуйло он немного.

Аноним ID:  gZC2wLqs Чтв 24 Окт 2013 17:20:26  #29 №112745 

Вроде заработало. Нету гарантий, что через 5 минут не отвалится, но там защита вроде уровня /б была.
Перенесу это дело на многопоточность, если хк позволит.

Аноним ID:  I14iepaK Пнд 28 Окт 2013 05:06:41  #30 №113252 

На днях нас добавили в исключения, так что функционируем в обычном режиме. Состояние же сего форума остается под вопросом.

Аноним ID:  TLiog1xU Втр 05 Ноя 2013 19:46:50  #31 №114572 

Абу, опять сломалось, чини.

Аноним ID:  DLhf/RIG Чтв 07 Ноя 2013 07:04:05  #32 №114712 

+

Аноним ID:  XN7M//qB Суб 09 Ноя 2013 02:19:05  #33 №114807 

И снова сломалось. Да что же за пиздец творится?

ЧИНИ АРХИВАЧ Аноним ID:  bvfyM9Qi Чтв 14 Ноя 2013 15:27:16  #34 №115112 

БББИИИИИИИИИИИСТРА БЛЯДЬ!!!!!!1

Аноним ID: Heaven Птн 15 Ноя 2013 01:13:05  #35 №115170 

>>115112
Дык работает уже давно.

Аноним ID:  RdxrzJig Суб 16 Ноя 2013 00:41:42  #36 №115310 

>>115112
БАМП!1

Аноним ID:  ueKStcgR Суб 16 Ноя 2013 12:51:18  #37 №115347 

Опять эта хуйня!

Аноним ID:  Wmt0mM1H Суб 16 Ноя 2013 18:57:57  #38 №115362 

Краулер Архивача опять соснул? Дайте угадаю, не можете обойти клаудфлэровский anti-DDoS и эмулировать полноценного юзера? Предлагаю запилить краулер поверх WebKit движка (PhantomJS и т.п.).

Аноним ID:  nsxzcTZh Суб 16 Ноя 2013 22:08:05  #39 №115383 

>>115362
Судя по 502 Bad Gateway, блокурует запросы конечный сервер, а не клаудфлара. Кроме того, мы в клаудфларовском вайтлистепо крайней мере были. За PhantomJS спасибо.

Аноним ID:  V79Y4Lsg Втр 19 Ноя 2013 16:53:06  #40 №115569 

СЦУК ППЦ((((
ОПЯТЬ НЕ РОБОТАЕТ(((((9

Аноним ID:  ks/wnnyF Срд 20 Ноя 2013 03:09:30  #41 №115596 

Разраб Архивача, ты как будто ещё криворучестее Абу. Ну понятно же, что тепличных условий не будет, пора бы уже не надеяться ни на какой whitelist, а соответствующим образом адаптировать краулер.
Если нужны идеи - давай обсудим. Или иначе скоро будет проще запилить собственный архивач.

Аноним ID:  aKDtmfo9 Чтв 21 Ноя 2013 18:06:25  #42 №115657 

>>115596
Опять ты, лол. К твоему сведению, сейчас ни один из существующих онлайн архивов не может скачивать треды.
А теперь по Архивачу. Кравлер пытается получить треды раз в 2 минуты. Уже недели две как, после хотя бы одного отказа он сразу останавливается, до следующего запуска. И все равно, через некоторое время сервер начинает постоянно отдавать 503. Возможно, считается количество запросов за промежуток времени. Если 1 запрос в 2 минуты - это слишком много, то как тогда обновлять 600 тредов?
Если имеешь предложения по делу, то пиши, не стесняйся.

Аноним ID:  95SEYTxG Птн 22 Ноя 2013 20:42:15  #43 №115717 

>>115657
>Если 1 запрос в 2 минуты - это слишком много, то как тогда обновлять 600 тредов?
Пили лог/статистику запросов твоего краулера, поглядим.
Моя реализация тред-краулера выкачивает весь /biz/ за полминуты без каких-либо добавленных пауз, никто не банит.

comments powered by Disqus

Отзывы и предложения