Блокировка лишних ботов средствами nginx
Туторы, Советы и рекомендации, Nginx
UPDATE (2017.10.19):
Дополнительные списки ботов.
Зачастую наши сайты посещают абсолютно не нужные нам боты, которые тем самым лишь создают лишнюю нагрузку на сервер. Не понимаю зачем некоторые используют для этих целей .htaccess , ведь апач жрет куда больше ресурсов для решения этой задачи. В общем, на данный момент я использую такой способ блокировки ботов...
Туторы, Советы и рекомендации, Nginx
UPDATE (2017.10.19):
Дополнительные списки ботов.
Зачастую наши сайты посещают абсолютно не нужные нам боты, которые тем самым лишь создают лишнюю нагрузку на сервер. Не понимаю зачем некоторые используют для этих целей .htaccess , ведь апач жрет куда больше ресурсов для решения этой задачи. В общем, на данный момент я использую такой способ блокировки ботов...
19.10.2017 15:58:13
stk
3484
2
С Новым 2017 годом!
Лытдыбр
Дорогие друзья, знакомые и прочие посетители моего блога. Желаю вам успехов в новом году, реализации ваших планов, хороших результатов, денег море, ну и главное здоровья.
Планов на новый год более чем много. Идем реализовывать и исполнять свои желания! Удачи! ;)
P.S. За 2016 год было всего две записи в блоге, при чем предыдущая так вообще в феврале. Отпишитесь в комментариях кто тут еще бывает. Я при написании этого поста забыл даже что и как тут делать :D Писать что ли почаще.
Лытдыбр
Дорогие друзья, знакомые и прочие посетители моего блога. Желаю вам успехов в новом году, реализации ваших планов, хороших результатов, денег море, ну и главное здоровья.
Планов на новый год более чем много. Идем реализовывать и исполнять свои желания! Удачи! ;)
P.S. За 2016 год было всего две записи в блоге, при чем предыдущая так вообще в феврале. Отпишитесь в комментариях кто тут еще бывает. Я при написании этого поста забыл даже что и как тут делать :D Писать что ли почаще.
Вышел новый Sublime text 3 3103 (+ключ)
Софт, Верстка, PHP
Вышел недавно новый, 3103 билд, великолепного текстового редактора Sublime text 3, что то они там поменяли, что привело к слетанию лицензии...
Софт, Верстка, PHP
Вышел недавно новый, 3103 билд, великолепного текстового редактора Sublime text 3, что то они там поменяли, что привело к слетанию лицензии...
Чиним таблицу mysql с помощью myisamchk
Туторы, MySQL, Debian
Случилось однажды у меня что полетела таблица в бд, и простые способы починить, проверить, оптимизировать таблицу mysql не помогали. При попытке починить базу, появлялась следующая ошибка:
Я починил mysql таблицу на своём сервере с Debian следующим способом...
1. идем в папку:
2. и уже там выполняем команду для починки таблицы:
расширение .TMD нам не нужно указывать в названии таблицы.
Я не проверял, но думаю что и в CentOS должно быть примерно так же.
Туторы, MySQL, Debian
Случилось однажды у меня что полетела таблица в бд, и простые способы починить, проверить, оптимизировать таблицу mysql не помогали. При попытке починить базу, появлялась следующая ошибка:
error : Can't create new tempfile: './mysuperbd/mysupertable.TMD'
status : Operation failed
status : Operation failed
Я починил mysql таблицу на своём сервере с Debian следующим способом...
1. идем в папку:
cd /var/lib/mysql/<название_базы>2. и уже там выполняем команду для починки таблицы:
myisamchk -r -v -f ./<название таблицы>расширение .TMD нам не нужно указывать в названии таблицы.
Я не проверял, но думаю что и в CentOS должно быть примерно так же.
Включаем лог медленных запросов MySQL
Туторы, MySQL
Чтобы включить лог медленных запросов открываем mysql конфиг:
ищем настройку именяем её на следующие параметры:
log_slow_queries - путь до файла в который будут записываться медленные запросы.
long_query_time - время в секундах, запросы выполняющиеся дольше указанного времени попадут в лог.
перезапускаем mysql
Туторы, MySQL
Чтобы включить лог медленных запросов открываем mysql конфиг:
nano /etc/mysql/my.cnfищем настройку именяем её на следующие параметры:
log_slow_queries = /var/log/mysql/mysql-slow.log
long_query_time = 1log_slow_queries - путь до файла в который будут записываться медленные запросы.
long_query_time - время в секундах, запросы выполняющиеся дольше указанного времени попадут в лог.
перезапускаем mysql
/etc/init.d/mysql restart
Как удалить большое количество файлов в linux и windows?
Туторы, Debian, CentOS
Рассмотрим варианты удаления огромного количества файлов в папках и подпапках...
Туторы, Debian, CentOS
Рассмотрим варианты удаления огромного количества файлов в папках и подпапках...
Как пинговать гугл и яндекс через XML RPC
Туторы, PHP
Пинг сайта и его страниц, для загона в гугл и возможно яндекс:
1. пинг страниц:
В интернете есть море списков с кучей RPC сервисов, но работают из них единицы. Методом долгих тестов и исключения были отобраны эти 4. Последний здесь для яндекса, не понятно работает он или нет, потому как сразу бот яндекса точно не приходит, но я всё же его использую, потому как других инструментов для rpc пинга в яндекс нет.
В общем, качаем тут: класс для работы с xml rpc, он вам понадобится для использования в следующем скрипте.
Набросал код для пинга страницы, у меня в цмс код работает со всеми сервисами и пингует что нужно автоматически, его тут выкладывать не к чему. Для примера дам следующий код, дописывайте и внедряйте как вам нужно.
Думаю тут всё вполне понятно. Три параметра - Тайтл/Страница/Сервис RPC
2. пинг сайтмапа:
Тут всё гораздо проще, нужно отправить запрос на определённую страницу гугла с параметром в качестве которого будет адресс сайтмапа на нашем домене.
Как то так...
Туторы, PHP
Пинг сайта и его страниц, для загона в гугл и возможно яндекс:
1. пинг страниц:
В интернете есть море списков с кучей RPC сервисов, но работают из них единицы. Методом долгих тестов и исключения были отобраны эти 4. Последний здесь для яндекса, не понятно работает он или нет, потому как сразу бот яндекса точно не приходит, но я всё же его использую, потому как других инструментов для rpc пинга в яндекс нет.
http://blogsearch.google.com/ping/RPC2
http://rpc.weblogs.com/RPC2
http://rpc.pingomatic.com
http://ping.blogs.yandex.ru/RPC2В общем, качаем тут: класс для работы с xml rpc, он вам понадобится для использования в следующем скрипте.
Набросал код для пинга страницы, у меня в цмс код работает со всеми сервисами и пингует что нужно автоматически, его тут выкладывать не к чему. Для примера дам следующий код, дописывайте и внедряйте как вам нужно.
include 'class.ixr.php';
$siteName = "Тайтл страницы";
$pageURL = "http://domain.tld/page.html";
$url = parse_url("http://rpc.pingomatic.com");
$pingClient = new IXR_Client($url['host'],(isset($url['path']) ? $url['path'] : '/'));
if (!$pingClient->query('weblogUpdates.extendedPing', $siteName, $pageURL, '', $feedURL)) {
$pingClient = new IXR_Client($url['host'],(isset($url['path']) ? $url['path'] : '/'));
$pingClient->query('weblogUpdates.ping', $siteName, $pageURL);
}Думаю тут всё вполне понятно. Три параметра - Тайтл/Страница/Сервис RPC
2. пинг сайтмапа:
Тут всё гораздо проще, нужно отправить запрос на определённую страницу гугла с параметром в качестве которого будет адресс сайтмапа на нашем домене.
http://www.google.com/ping?sitemap=http://domain.tld/sitemap.xmlКак то так...
Как сохранить правила iptables после перезагрузки в Debian 7
Туторы, Советы и рекомендации, Debian
Существует в дебиан такая проблема, что после рестарта все созданные правила удаляются. Для этого ставим дополнительный пакет:
При установке пакета будет вопрос о сохранение текущих правил ipv4 и ipv6, отвечаем "да" если в этом есть нужда.
Теперь правила будут храниться в:
/etc/iptables/rules.v4 и /etc/iptables/rules.v6
Мы можем редактировать правила в этих файлах. Для применения правил используем команду:
Туторы, Советы и рекомендации, Debian
Существует в дебиан такая проблема, что после рестарта все созданные правила удаляются. Для этого ставим дополнительный пакет:
apt-get install iptables-persistentПри установке пакета будет вопрос о сохранение текущих правил ipv4 и ipv6, отвечаем "да" если в этом есть нужда.
Теперь правила будут храниться в:
/etc/iptables/rules.v4 и /etc/iptables/rules.v6
Мы можем редактировать правила в этих файлах. Для применения правил используем команду:
service iptables-persistent reload
Выполнение sudo -s при авторизации WinSCP в Debian7/8 и CentOS 7
Туторы, SSH, Debian, CentOS
В записи Первоначальная настройка SSH в Debian7/8 и CentOS 7 я писал о том как сделать дополнительного пользователя и запретить авторизацию с помощью root пользователя, но в таком случае при входе нашим новым пользователем через WinSCP мы не имеем root прав и не можем прописать sudo -s, а ведь не редко очень нужно.
Туторы, SSH, Debian, CentOS
В записи Первоначальная настройка SSH в Debian7/8 и CentOS 7 я писал о том как сделать дополнительного пользователя и запретить авторизацию с помощью root пользователя, но в таком случае при входе нашим новым пользователем через WinSCP мы не имеем root прав и не можем прописать sudo -s, а ведь не редко очень нужно.