Поисковой робот или краулер (от англ. crawler) - программа, являющаяся составной частью поисковой системы, которая обходит страницы Интернета, скачивает ее и заносит в базу поисковика. По своей сути краулер больше всего напоминает обычный браузер. Он сканирует содержимое страницы, забрасывает его на сервер поисковой машины, которой принадлежит, и отправляется по ссылкам на следующие страницы. Глубина проникновения поискового робота внутрь сайта обычно ограничена.

Часто вебмастера сталкиваются с вопросом о юзер-агенте (User-agent) ботов той или иной поисковой системы. Зная значения User-agent для поисковых ботов, можно запретить, либо наоборот, открыть доступ тому или иному боту.















Базовый Robots.txt можно создать здесь

Бекап - или Резервное копирование ваших данных
Одним из самых больных потерь, является потеря всех ваших сайтов из-за нерадивых хостеров.

Уважаемые клиенты нашего хостинга, на всех серверах запущена процедура полного обновления панели управления (cPanel), а так же ее надстроек и дополнений.
Доступ к ней на это время будет отключен. Просим вас не паниковать, т.к. на работе сайтов это не отразиться.
Примерное окончание работ по обновлению 18 00 по МСК.

С Уважением администрация 100mbps.ru

обсуждение на форуме

Дополнительные (паркованные) домены.
Если честно, то до сих пор не могу понять, почему многие клиенты считают, что добавление еще одного сайта называется парковкой домена.
А потому отойду от терминов и расскажу как создать несколько сайтов на одном аккаунте.

Сервера VPS и VDS - это возможность перепродавать, предоставлять услуги хостинга под своей маркой на законных основаниях.
Вы самостоятельно создаете тарифные планы и устанавливаете цену на них. Заказав услугу Сервера VPS и VDS, в Вашем распоряжении будут индивидуальные NS-сервера, что обеспечит конфиденциальность нашего сотрудничества. Для полной анонимности, рекомендуем заказать выделенный IP-адрес.
Откройте свою хостинг компанию и начните зарабатывать самостоятельно!

Не раз получалось так, что реселлер вырастал в хорошую хостинговую компанию.

Любой тариф VPS и VDS включает в себя ограничение по трафику, но не имеет ограничений по количеству доменов, MySQL баз, и общему количеству сайтов.
Любой тариф реселлинга включает в себя «оверселлинг» – это возможность продавать гораздо больше дискового пространства, чем выделяется по тарифу.
Важно помнить, что ни один тариф реселлинга не включает в себя предоставления вам биллинг панели, т.е. панели, которая делает за вас все работу по учету и контролю клиентов и их сайтов.

Группа тарифов «Unlimited» - это тарифы, предназначенные для трех групп людей.
Первая группа – люди, которым просто лень, неохота, и не любят считать сколько же им осталось разместить сайтов, а то вдруг лимит тарифа превышен.
Вторая группа – люди, у которых очень большое количество сайтов, но на VPS пока переходить рано.
Третья группа – клиенты, у которых один сайт, но по своим масштабам и размаху превосходящий все вместе взятые сайты клиентов на тарифах «Pro».
Чем же отличаются эти хостинг тарифы от прочих? Отличительной их особенностью является абсолютный безлимит по всем параметрам и большое дисковое пространство, предоставляемое клиенту в личное пользование. И не важно, какой тариф вы в этой группе выберете, все они отличаются только размером, минимальный размер предоставляемого места на хостинге составляет 10 GB.
На всех тарифах «Unlimited» можно ставить абсолютно любые CMS, начиная с Satellite-X и заканчивая DLE и DRUPAL, наш хостинг со всеми этими CMS прекрасно работает.
Единственное, на что мы хотим обратить внимание, так это на то что у нас не файловый хостинг, а потому мы не советуем вам ставить каталоги файлов, видео и пр. В противном случае вам будет поставлено ограничение на трафик, при превышении которого, придется покупать еще дополнительно. И касается это не только тарифов этой группы, а всех групп без исключения.
Еще одна важная особенность этой группы хостинга, это то, что подключение Shell бесплатно, какой бы вы тариф не выбрали.

Группа тарифов «Pro» - это тарифы , которые могут выдержать куда большую нагрузку на сервер по сравнению с тарифами группы «Lite». В данной группе тарифов изначально заложено больше функциональности и опций. Вам доступно на порядок большее количество MySQL баз для использования, вы можете воспользоваться опцией парковки домена. (не перепутайте, парковка – это не значит добавление еще одного домена(сайта) на свой аккаунт).
Естественно любой тариф данной группы отличается и большей ценой, но уверяем вас, что исходя из небольшого анализа рынка хостинг-услуг, мы по-прежнему предоставляем самый дешевый хостинг. Раньше мы предоставляли и бесплатный хостинг, но со временем отказались от этой услуги, т.к. очень большое количество клиентов пытались рассылать спам и прочую деятельность, негативно сказывающуюся на работе хостинга в целом. Мы немного ушли от темы и давайте все-таки вернемся к продолжению.
Итак, любой тариф группы «Pro» был рассчитан на размещение сайтов, построенных на более ресурсоемких CMS, допустим таких как: DLE, DRUPAL, Mambo, Joomla, Bitrix и прочих. Под данный вид тарифов был отведен специально отдельный сервер, дабы обеспечить постоянную и бесперебойную работу ваших сайтов.
Хотим отметить одну важную деталь, какой бы не был мощным сервер, и какой бы вы тариф хостинга не выбрали, неправильная настройка скриптов и модулей в любом случае ведет к большой нагрузке. Относитесь к этому моменту особо внимательно, что бы избежать автоматического отключения сайта при превышении допустимых норм нагрузки.

Группа тарифов «Lite» - это тарифы рассчитанные в основном на один два сайта, но вы можете разместить их и больше, если знаете что сайты не будут нести большой нагрузки.
Любой хостинг тариф данной группы легко подойдет под размещение сайтов, построенных на CMS Satellite-X , AutoBlog-X или CMS Satus, т.к. эти системы не используют БД , работая только с текстовыми файлами. Если вы спросите – почему такой тариф, а не дугой больший, то ответ очень прост. На прочих тарифных планах заложено в стоимость большее количество MySQL баз, так зачем вам платить больше?!
Возьмем за основу пример размещения сайтов на тарифе «XM 100», он включает в себя 100 mb дискового пространства и неограниченное количество сайтов для размещения.
Допустим, у вас уже есть 20 сайтов, которые занимают 90 mb, это практически уже предел, но ведь вам надо еще 20 разместить, тогда вы просто берете и модернизируете тариф, увеличивая место до 200 мегабайт. Если и этого окажется мало, тогда пользуйтесь вторым способом, смените тариф «XM 100» на «XM 300», и вы получите в распоряжение 300 мегабайт вашего личного пространства на нашем хостинге.
Опережая ваш вопрос, заранее отвечаем, что вне зависимости от тарифного плана на нашем хостинге установлены самые последние версии PHP, MySQL , Apache и Zend Optimizer. Возможно единственным минусом является для клиента, это не возможность смены PHP5 на PHP4, т.к. у нас это не предусмотрено технически.

Сообщаем вам приятную новость. Теперь на всех тарифных планах нашего хостинга количество сайтов неограниченно.
Мы надеемся, что данная новость вас порадует.

Важно.
Всем, кто еще остался на тарифах Х100, Х300, Х500, рекомендуем сменить тариф на более подходящий, т.к. на эти тарифы наши нововведения не распространяются.
Список тарифов хостинга

Обсуждение темы на форуме здесь

Вирус на сайте или тег IFRAME
Это делает новый троян, похищающий пароли доступа и часто не определяющийся антивирусными программами.

При открытии индексной страницы сайта (хостинг значение не имеет, платный или бесплатный) на компьютер начинал подгружаться вирус-троян. Оказывается, в код страницы были внесены изменения - добавлена ссылка на сайт-вирусоноситель, с которого собственно и загружался троян. Некоторые индексные страницы вообще "стирались", то есть, на них не оставалось ни одного тега, в итоге виден был просто чистый лист бумаги :).

Соответственно прокатилась волна претензий и обвинений к хостерам, из-за "взлома" хостов пользователей, которое приняло такие масштабы, что впору было обвинять именно хостеров, однако они тут не причем, это практически в 99% выяснялось при анализе системных журналов.
Суть вносимых изменений заключается в том.........