Сканирование страниц
Фоновое сканирование через cron: kupitsrubbani.ru
Браузер только создает задание. Cron-воркер обрабатывает URL маленькими пачками, чтобы не ловить 504 и не упираться в max_execution_time.
URL в базе
100
Просканировано
100
Успешно
98
Ошибок
2
1. Создать задание сканирования
Задание только кладет URL в очередь. Сам обход страниц делает cron-воркер.
2. Команда cron
Поставь запуск раз в минуту. Один запуск берет небольшую пачку URL и завершается.
* * * * * php /var/www/job/data/www/17.alkk.ru/cron/crawl-worker.php --limit=10 >/dev/null 2>&1Для более мягкого режима поставь --limit=5. Для более быстрого — --limit=20. На слабом хостинге лучше начать с 5–10.
Задания сканирования
| ID | Статус | Прогресс | Ошибки | Создано | Действия |
|---|---|---|---|---|---|
| #3 | done | 100 / 100 · 100% | 2 | 2026-06-11 12:36:46 | Открыть |
| #2 | done | 90 / 90 · 100% | 2 | 2026-06-11 11:26:09 | Открыть |
| #1 | done | 10 / 10 · 100% | 0 | 2026-06-11 11:24:18 | Открыть |
Последние просканированные страницы
| URL | HTTP | Статус | Title | H1 | Дата |
|---|---|---|---|---|---|
| /vypolnennye-proekty | 200 | ok | Выполненные проекты | Выполненные проекты | 2026-06-11 12:46:04 |
| /sruby-s-terrasoj-i-mansardoj | 200 | ok | Срубы с террасой и мансардой | Срубы бань с террасой и мансардой | 2026-06-11 12:46:04 |
| /sruby-s-terrasoj | 200 | ok | Срубы бань с террасой | Срубы бань с террасой | 2026-06-11 12:46:03 |
| /sruby-domov/7x8/ | 404 | error | 2026-06-11 12:46:03 | ||
| /sruby-domov-iz-brevna-nedorogo | 200 | ok | Купить сруб дома из бревна по цене от 229 900 руб. недорого | Срубы домов из бревна недорого | 2026-06-11 12:46:03 |
| /sruby-ban/6x8/ | 404 | error | 2026-06-11 12:46:02 | ||
| /srub-doma-9x9 | 200 | ok | Сруб дома 9x9 от 1 099 900 руб | Сруб дома 9x9 | 2026-06-11 12:46:02 |
| /srub-doma-8x8 | 200 | ok | Сруб дома 8х8 от 859 000 руб | Сруб дома 8х8 | 2026-06-11 12:46:02 |
| /srub-doma-8x10 | 200 | ok | Сруб дома 8х10 купить | Сруб дома 8 на 10 цена от 1 098 000 руб | Сруб дома 8х10 | 2026-06-11 12:46:01 |
| /srub-doma-7x9 | 200 | ok | Купить сруб дома 7 на 9 цена от 849 900 руб | Сруб дома 7x9 | 2026-06-11 12:46:01 |
| /srub-doma-7x8 | 200 | ok | Сруб дома 7х8 от 739 900 руб | Сруб дома 7х8 | 2026-06-11 12:45:14 |
| /srub-doma-6x8 | 200 | ok | Сруб дома 6х8 от 629 900 руб | Сруб дома 6х8 | 2026-06-11 12:45:14 |
| /srub-doma-6x9 | 200 | ok | Сруб дома 6х9 от 729 900 руб | Сруб дома 6х9 | 2026-06-11 12:45:14 |
| /srub-doma-7x7 | 200 | ok | Купить сруб дома 7 на 7 цена от 654 900 руб | Сруб дома 7x7 | 2026-06-11 12:45:14 |
| /srub-doma-6x7 | 200 | ok | Сруб дома 6х7 от 549 900 руб | Сруб дома 6х7 | 2026-06-11 12:45:13 |
| /srub-doma-6x6 | 200 | ok | Сруб дома 6х6 от 489 900 руб | Сруб дома 6х6 | 2026-06-11 12:45:13 |
| /srub-doma-5x6 | 200 | ok | Сруб дома 5х6 от 419 900 руб | Сруб дома 5х6 | 2026-06-11 12:45:13 |
| /srub-doma-5x5 | 200 | ok | Сруб дома 5х5 от 344 900 руб | Сруб дома 5х5 | 2026-06-11 12:45:07 |
| /srub-doma-4x6 | 200 | ok | Сруб дома 4х6 от 329 900 руб | Сруб дома 4х6 | 2026-06-11 12:45:07 |
| /srub-doma-4x5 | 200 | ok | Сруб дома 4х5 от 294 900 руб | Сруб дома 4х5 | 2026-06-11 12:45:07 |
| /srub-doma-4x4 | 200 | ok | Сруб дома 4х4 от 249 900 руб | Сруб дома 4х4 | 2026-06-11 12:44:04 |
| /srub-doma-11x11 | 200 | ok | Сруб дома 11х11 | Дом 11 на 11 купить от 1 729 900 руб | Сруб дома 11x11 | 2026-06-11 12:44:03 |
| /srub-doma-12x13 | 200 | ok | Сруб дома 12х13 | Купить дом 12 на 13 от 2 169 900 руб | Сруб дома 12x13 | 2026-06-11 12:44:03 |
| /srub-doma-3x6 | 200 | ok | Сруб дома 3х6 от 264 900 руб | Сруб дома 3х6 | 2026-06-11 12:44:03 |
| /srub-doma-3x5 | 200 | ok | Сруб дома 3х5 от 229 900 руб | Сруб дома 3х5 | 2026-06-11 12:44:03 |
| /srub-doma-10x13 | 200 | ok | Сруб дома 10x13 от 1 349 900 руб | Сруб дома 10x13 | 2026-06-11 12:44:02 |
| /srub-doma-10x11 | 200 | ok | Сруб дома 10х11 от 1 469 900 руб | Сруб дома 10х11 | 2026-06-11 12:44:02 |
| /srub-doma-10x10-cena | 200 | ok | Сруб дома 10х10 цена от 1 469 900 руб | Сруб дома 10х10 цена | 2026-06-11 12:44:02 |
| /srub-bani-s-mansardoj | 200 | ok | Срубы бань с мансардой | Срубы бань с мансардой | 2026-06-11 12:44:01 |
| /srub-bani-cena | 200 | ok | Сруб бани цена | Стоимость сруба бани | Сруб бани цена | 2026-06-11 12:44:01 |
| /srub-bani-7x8-iz-brevna-cena | 200 | ok | Сруб бани 7х8 из бревна от 655 000 руб | Сруб бани 7х8 из бревна | 2026-06-11 12:43:04 |
| /srub-bani-6x8-iz-brevna-cena | 200 | ok | Сруб бани 6х8 из бревна цена от 559 000 руб | Сруб бани 6х8 из бревна цена | 2026-06-11 12:43:04 |
| /srub-bani-6x7-iz-brevna-cena | 200 | ok | Сруб бани 6х7 из бревна цена от 490 000 руб | Сруб бани 6х7 из бревна цена | 2026-06-11 12:43:04 |
| /srub-bani-6x6-iz-brevna-cena | 200 | ok | Купить сруб бани 6х6 из бревна по цене от от 403 000 руб | Сруб бани 6х6 | 2026-06-11 12:43:04 |
| /srub-bani-4x4-cena | 200 | ok | Сруб бани 4х4 | Цена сруба бани 4х4 от 204 000 руб | Сруб бани 4х4 | 2026-06-11 12:43:03 |
| /srub-bani-3x4-cena | 200 | ok | Купить сруб бани 3х4 по цене от 180 000 руб | Сруб бани 3х4 | 2026-06-11 12:43:03 |
| /srub-bani-4x6-cena | 200 | ok | Купить сруб бани 4х6 по цене от от 295 000 руб | Сруб бани 4х6 | 2026-06-11 12:43:03 |
| /srub_bani_8x8_terrasa_mansarda | 200 | ok | Сруб бани 8х8 с террасой и мансардой купить от 825 000 руб | Сруб бани 8х8 с террасой и мансардой | 2026-06-11 12:43:02 |
| /srub_bani_8x8_terrasa | 200 | ok | Сруб бани 8 на 8 с террасой купить от 797 000 руб | Сруб бани 8x8 с террасой | 2026-06-11 12:43:02 |
| /srub_bani_8x8_mansarda | 200 | ok | Сруб бани 8 на 8 с мансардой купить | Баня 8 8 цена от 790 000 руб | Сруб бани 8х8 с мансардой | 2026-06-11 12:43:02 |
| /srub_bani_8x8 | 200 | ok | Сруб бани 8 на 8 купить | Сруб бани 8x8 цена от 757 000 руб | Сруб бани 8х8 из бревна | 2026-06-11 12:42:04 |
| /srub_bani_7x8_terrasa_mansarda | 200 | ok | Сруб бани 7х8 с террасой и мансардой от 745 000 руб | Сруб бани 7х8 с террасой и мансардой | 2026-06-11 12:42:04 |
| /srub_bani_7x8_terrasa | 200 | ok | Сруб бани 7х8 с террасой от 735 000 руб | Сруб бани 7х8 с террасой | 2026-06-11 12:42:04 |
| /srub_bani_7x8_mansarda | 200 | ok | Сруб бани 7х8 с мансардой от 710 000 руб | Сруб бани 7х8 с мансардой | 2026-06-11 12:42:03 |
| /srub_bani_7x7_terrasa_mansarda | 200 | ok | Купить сруб бани 7 на 7 с террасой и мансардой от 680 000 руб | Сруб бани 7х7 с террасой и мансардой | 2026-06-11 12:42:03 |
| /srub_bani_7x7_terrasa | 200 | ok | Купить сруб бани 7 на 7 с террасой от 640 000 руб | Сруб бани 7x7 с террасой | 2026-06-11 12:42:03 |
| /srub_bani_7x7_mansarda | 200 | ok | Купить сруб бани 7 на 7 с мансардой от 655 000 руб | Сруб бани 7х7 с мансардой | 2026-06-11 12:42:02 |
| /srub_bani_7x7 | 200 | ok | Cруб бани 7 на 7 купить от 575 000 руб | Сруб бани 7х7 | 2026-06-11 12:42:02 |
| /srub_bani_6x9_terrasa_mansarda | 200 | ok | Купить сруб бани 6 на 9 с мансардой и террасой от 675 000 руб | Сруб бани 6х9 с террасой и мансардой | 2026-06-11 12:42:02 |
| /srub_bani_6x9_terrasa | 200 | ok | Проект бани 6 9 (6х9) с террасой купить от 650 000 руб | Сруб бани 6x9 с террасой | 2026-06-11 12:42:01 |