Социальная сеть для всех живет , нам 12 лет!
Здравствуйте. Вы попали на форум родителей, где нет
вообще никакой назойливой рекламы!
Сайт сделан для людей, для вас, для тех, кто ищет новые знания и ответы
на свои вопросы.
Вкусные рецепты, неспешное общение, узнать законы и льготы,
вопросы отношений,
скачать прямой ссылкой книги, новые знакомства, истории людей,
воспитание детей, завести блог и писать свои мысли, все о свадьбах,
здоровье и уход за собой, полезные идеи для вашего дома - море
информации в нужных разделах!
У нас есть: сам форум, фотоальбомы, чат, блоги, доска объявлений,
микроблоги, слушать онлайн радио, онлайн игры и многое другое.
Мы не воруем Ваше время - мы даем возможность узнать мир лучше!
Просмотров темы Кто куда, а некоторых отправляю в баню: 6611 Общая оценка: 0.00 :: Минимальная оценка: 0 :: Максимальная оценка: 0 :: Всего оценило: 0
Понравилось? Оцените по пятибальной шкале!
Страница 1 из 1
Автор
Сообщение
администратор
администратор Не онлайн
Зарегистрирован: 2011-09-27 Рейтинг: живет тут 4807 день
Если посмотреть, то можно удивится как яндекс уже в точности наоборот грузит форум в следствии моих манипуяций для индексации всего. Теперь яндекс уже гоняю так, что ставлю ему палки в ходули. В роботс стоит ограничение сканировать все в 40 секунд. Это значит, каждые 40 секунд заходят боты стучалки и шастают. Периодически можно наблюдать на главной сайта сколько онлайн висят.
Каждый день мне на почту приходили уведомления что превышен лимит. Это значит еще кто то нагружал. Мне прислали отчет и увидел особенности. Забанил одну сетку полностью с этого vprmz.rempm.ru. ай пи 188.128.19.46. Также в этом отчете было превышено количество заходов гуглебота. Вот не люблю этого поисковика, терпеть его не могу. Пришлось идти в панель управления и ставить минимальный тайминг для посещения домена. То есть, и ему тоже ограничил индексировать. Это жесть. Куда нафиг)
Забанил в хтассес один непонятный поисковый паук под названием synthesia вот такой строкой:
Код:
SetEnvIfNoCase User-Agent "^Synthesio" bot
Вчера этот гаденыш выкачивал чего то с форума 461.27 МБ. Что он выкачал, не стал дальше смотреть. Тупо ему заходить запретил.
Бот Phantom непонятен тоже. В сети его сложно найти описание что он такое, что же он творит с сайтами. У меня он вчера выкачал 15.88 МБ чего то.
Вот этот айпи 52.29.26.11 отображается как паук амазона, что его местоположение показывается как в Германии. Пока он на заметке. Теоретически, насколько я знаю, этот паук амазона посещает интернет-банкинги и магазины. У меня этого тут нет вообще. Как это логически?
Форум, видел, периодически атаковывали программами-регистраторами с почты gmail.com и с других почт. Сейчас дошли руки и тупо начал тоже банить все сетки в хтассесе. Проверить айпи можно вот тут:https://cleantalk.org/. Пример, что пытались регистрировать профили вот тут и тут.
Как только буду манипулировать что то опять, параллельно сюда буду дописывать в записи
Сейчас снова смотрел статистику и увидел что уже давно программы-авторегистаторы типа хрумера и зеуса лезут, пытаясь проспамить или зарегистрировать левый профиль.
Уже собрал целую коллекцию всех зловред-ботов программ, регистраторов.
Это 3.14ец.
Целая коллекция и думаю тоже ее выложить, но уже в осмысленной форме в теме о ботах, которых тоже нужно банить. Кстати, эти зловреды, насколько прошерстив все форумы и поспрошав у друзей, шалят на сайтах как и с тиц10, так и с тиц40. Им пофигу сколько у вас тиц и посещалка. Так что, эти боты кладут намертво слабые сайты на слабых хостингах.
Я не все строчки с ботами выложил. Просто показал, что сегодня сделал в очередной раз на этом форуме.
Кстати, если прояндексить про синтесио, его полное имя также выводится как Synthesio Crawler release MonaLisa
Знаете что обидно? В хтассес занес еще 7 сеток айпи с америки, с нидерланды, с россии (провайдер Ростелеком). Обидно то, что люди, находясь в запрещенном айпи в сетке не смогут попросту зайти на этот форум - им покажется белый экран.
Также снова в форуме прописал в черный список почтовиков (иностранных и российских однодневок), с которых хрумер, зеус и прочие авторегистраторы пытаются зайти на сайт.
_________________ Быть иным среди других сложно, но удивляя окружающих, можно быть Богом
Все мои манипуляции по яндексу пришли в полный порядок и вместо 180 лимит на яндексботов (стучалок, индексаторов картинок и краулеров) понизил в 2 минуты, то есть сейчас поставил в 120. Такая же проблема у людей на их сайтов, кто получил тиц в большую сторону, видимо, боты и краулеры яндекса активизировались и чаще индексируют, хотя я не знаю что там можно искать, если все есть в базе запросов и в логах.
Руки дошли и до гуглебота. То, что сделал в панели управления, конечно помогло, но такая вещь как дубли страниц гуглебот также начал к себе кидать. Не понятно все это, зачем ему такое вытворять. На сайте searchengines.guru нашел как запретить в роботс дубли для гугл. Ссылка вела на поддержку вебмастерам в гугле как правильно составить роботс для гуглебота, чтобы запретить дубли страниц. Вот она - пользуйтесь на здоровье.
Сейчас смотрел на моих сайтах, где тиц поднялся в 20 и в 40 очков и тоже приметил, что и там зашалили боты яндекса и гугл. Основной роботс на форум родителей перекинул в корень сайтов, где шалят, чуть поправив папки. А так, ниче, все срабатывается. Интересно, как дела стоят у других людей с тиц, у кого поднялся? Не замечают или не видят нихрена что их грузят. Мне очень нравится и помогает то что установил заране скрипт статистики визитов ботов, где могу видеть, что яндекс и гугл сканируют и посещают. На основе его несуществующие папки и подпапки в роботс запрещаю. Почитать и скачать скрипт можно в соседнем подразделе вебмастеру .
Уже дней 5 назад полностью прекратил работать с социальными сетями. Это заметно на главной странице в низу, в плавающих кнопках поделиться. Циферки остановились расти. Считаю, что с лета и до получения тиц150 работа в социальных сетях сильно помогло форуму! Этот же алгоритм уже давно мною протестирован на других сайтах и применять начал к форуму родителей. Кстати, нихрена не вложил рубля в такой способ поднятия форума.
Я не хвастаюсь, просто виден результат...
_________________ Быть иным среди других сложно, но удивляя окружающих, можно быть Богом
Сейчас все устаканилось. Все мои манипуляции помогли справится с напастями:
1. лишний траффик с каких то сайтов
2. нагрузка поисковых ботов
3. убрал все дубли страниц, форумов и разделов.
Единственное, играюсь с ограничением лимита для яндекс-ботов. Было 50, сейчас выставил буквально минуту назад в 10. И оповестил яндекс об изменении. Хочу посмотреть эти 2 дня что яндекс будет делать с форумом. Если снова нагрузит, то поставлю как было раньше в 30.
Сложно все-это как-то, прочитала внимательно, не очень поняла в этих настройках. Нужны познания, уж точно! Хотя понятие о роботс имеется
Посмотрела Ваш роботс, у меня намного короче, но мне его рекомендовал программист, я особо туда не лезла сама. Хорошо, когда в этом разбираешься!
У вас движок вордпресс на Вашем блоге и в роботс закрывают от индексации папки. Там, если не ошибаюсь 2 или 4 строчки.
Кстати, полезный блог очень интересный. Почитал и много узнал полезного! Так держать!
Если желаете, обращайтесь за помощью, проконсультирую и сделаю бесплатно и безвозмездно.
Эта тема будет передавать вам тицулю на ваш блог, так как домен блога упомянут. Яндекс тоже увидит помимо вашего профиля.
И если честно. у вас очень грамотно составлено, я бы так не смог.
На главной странице Инструментов для веб-мастеров выберите нужный сайт.
В меню Конфигурация сайта нажмите Настройки.
В разделе Скорость индексации выберите требуемое значение.
Новая скорость индексирования будет действовать в течение 90 дней.
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете голосовать в опросах Вы не можете прикреплять файлы к сообщениям Вы можете скачивать файлы
