Лайфхаки

Маленькие, полезные хитрости

Ip-адреса при парсинге

Некоторые популярные сайты могут банить при парсинге. Это почти всегда происходит из-за частых обращений к ним (большое количество запросов). Чаще всего сайты банят по IP, очень редко по HTTP-заголовкам (cookies и прочее). Поэтому, если вас забанил сайт и вы имеете динамический IP, просто переподключите ваше интернет-соединение. Ваш IP-адрес сменится и вы можете продолжить парсинг сайта. Если у вас статический IP (никогда не меняется), то подождите некоторое время (от 5 минут до суток) и сайт вас должен разбанить.

1. Часть такого трафика получается срезать посредством настройки и подключения сервиса CloudFlare.

Программа CloudFlare имеет 4 тарифа:

Free,Pro ($20/месяц),Business ($200/месяц),Enterprise (по запросу).

На тарифах Pro и Business есть раздел Bots.

В блоке показывается статистика по трафику в разрезе определения ботов по вашему проекту.

Отчет бота включает в себя 4 типа трафика:

Последние обновления на сайте:

1. Соседка прошла клубнику триммером почти под ноль и сказала, что так кусты "Омолаживаются".
2. После уборки чеснока всегда остаются повреждённые головки.
3. Америка узнаётся с первого взгляда - по вещам, ставшим её символами.
4. Грядку под озимый чеснок готовлю не в ДЕНЬ посадки.
5. Твоё тело работает 24 часа в сутки без твоего участия.
6. Мы с мужем очень сильно поругались, решили разводиться.
7. Сняли лук или ранний картофель и бросили голую грядку до весны?
8. Пока многие считают сахару самым жарким местом на земле, Европа уверенно бьёт собственные рекорды.
9. Вселенная кажется нам знакомой лишь потому, что мы видим звёзды на ночном небе.
10. Я не худею к морю - езжу в Турцию.
11. Про проветривание теплицы.
12. Некоторые реальные факты о странах мира абсолютно невозможными кажутся.
13. Родителей с двумя детьми временно освободят от регулярных выплат по ипотеке.
14. Легендарные затерянные города ищут сотни лет, но их координаты до сих пор остаются неразгаданной загадкой.
15. Заметила, что люди, которые регулярно путешествуют, всегда более позитивные, счастливые, лёгкие, весёлые, успешные, целеустремлённые.
16. Мне 32, выгляжу лет на восемь моложе (не мои фантазии, а слова нескольких десятков коллег и знакомых.
17. Компьютерные игры ведут к импотенции и разрушают реальные отношения.
18. Пекинская капуста даст крепкие кочаны, если посеять её в нужный срок.
19. Лишь в том случае, если к вам пристала песня и вы не можете от неё никак отделаться, поете ее сутками напролет.
20. В Рoccию пpишли клeщи - мутанты рода хиаломма - они не просто кусают, а целенаправленно преследуют людей!
21. Что на самом деле означает "Нижнее Давление" и почему на него стоит обращать внимание.
22. Почему нужно срезать верхушки у яблонь.
23. Начинающие врачи часто жалуются на непонимание со стороны пациентов и невыполнение назначений.
24. Советы дачникам. * Борная кислота:
25. Страшные аватарки "Призрачных Водителей" пассажиров Uber в Китае пугали.
26. Три народных средства для крепкой рассады томатов.
27. ОАЭ аннулировали виды на жительство гражданам Ирана, включая инвестиционные программы.
28. Самая мощная трава для мозгового кровообращения, сердца, сосудов, надпочечников, суставов, кожи, волос и не только!
29. Пepвая пoдкopмка рaccaды народными средствами.
30. Как сборная Ссср впервые в истории выиграла кубок Европы в Париже.
31. Когдa нeльзя сaжать и cеять.
32. Hacтойка, приготовленная по традиционному рецепту:
33. Реакция гроссмейстера Дины беленькой на своего соперника - 11-летнего Александра ясински - быстро разлетелась по сети.
34. Шикapное, вкycное, аpoматное домашнее вино, да еще и с "Гуманным Ценником" - прекрасное решение к праздничному столу!
35. Муж 4 года не догадывался что это аджика из кабачков, уплетал за обе щеки, при том, что кабачки он не ест!
36. Как правильно подкармливать пионы чтобы они пышно цвели.
37. Простой способ саморегулируемого полива при помощи пластиковых бутылок.
38. Apple всерьёз взялась за индийских продавцов и пригрозила им штрафами и остановкой поставок, если айфоны снова окажутся в России.
39. Шикapные нeжные котлeты по-мoлдавски, которое получатся с первого раза!
40. Минфин России предложил разбавлять бензин спиртом, чтобы увеличить объёмы топлива на рынке.
41. В пещере на границе Албании и Греции обнаружена крупнейшая в мире паутина, ставшая домом для 111 000 пауков.
42. Это закуска на любом застолье на ура уходит!
43. Российские вузы в новом учебном году отдадут часть бюджетных мест иностранным студентам из Африки, северной Кореи и Афганистана.
44. Какие лилии могут зимовать в грунте!
45. Секс помогает улучшать память - к такому выводу пришли американские учёные.
46. Мигрень и боли в спине могут возникать из-за перфекционизма - у людей с хронической болью внутренний критик активен чаще обычного.
47. Что делать, если листья огурцов стали "Мраморные"?
48. Исследования показали, что напиток возвращает клеткам энергию и активирует механизмы клеточной уборки.
49. Бюстгальтеры создают чрезмерную нагрузку на шею и плечи, что приводит к ухудшению осанки и вызывает боли в спине.
50. Топ-7 инструментов для веб-скраппинга в 2025 году: что выбрать