mykvartira

Страницы ?city_id= и другие в поиске

Recommended Posts

Добрый день.

 

Сегодня обнаружил приток страниц и не успел обрадоваться, как пришло огорчение и вопросы. В ПС яндекс заметил такие страницы:

city_id= и другие 

2017-12-24_214551.jpg.b137bdbee0f7bbb215318a18235e757c.jpg

После минимального анализа, я понял что это критерии выборки поиска на сайте.

Но это критерии непонятно откуда пришедшие.

Пример 1 проблемы:

Это страница из поиска

?city_id=102&street_id=66

2017-12-24_214908.jpg.11e833933e8cb53e2607dabde4795db3.jpg

Все как бы здоров, но если мне нажать кнопку Искать, то урл станет немного другим, а результат тем же

country_id=0&region_id=0&geoautocomplete%5Bcity_id%5D=Севастополь&city_id=102&topic_id=0&geoautocomplete%5Bstreet_id%5D=Марсовая&street_id=66&price_min=0&price=75+000+000

Мне кажется это как минимум странно, даже если страницы останутся в поиске, мы получаем как минимум дубли, а так как у этих страниц нет разных тайтлов и тд. В результате это и трайблы, четыряйблы и т.д.)))

Откуда пс получают эти страницы и как отключить? Как преобразовать эти страницы, например через линк менеджер?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Получают со ссылок на странице - напрмер с педжеров, с сортировочных ссылок, если они есть и т.д. + допускаю, что с метрики и подобных аналитических инструментов. Преобразовать их через линк-менеджер маловероятно, та ккак в зависимости от количества параметров на форме количество вариантов таких адресов начинает стремиться к огромным цифрам.

Такие адреса следует закрывать в robots.txt. Например директивами

Disallow: /?*

Адреса, содержащие параметры в себе, обычно априори являются дублями основного адреса - так как параметры - это модификаторы чего-то.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
Только что, abushyk сказал:

Получают со ссылок на странице - напрмер с педжеров, с сортировочных ссылок, если они есть и т.д. + допускаю, что с метрики и подобных аналитических инструментов. Преобразовать их через линк-менеджер маловероятно, та ккак в зависимости от количества параметров на форме количество вариантов таких адресов начинает стремиться к огромным цифрам.

Такие адреса следует закрывать в robots.txt. Например директивами


Disallow: /?*

Адреса, содержащие параметры в себе, обычно априори являются дублями основного адреса - так как параметры - это модификаторы чего-то.

закрывать - это с одной стороны хорошо, а с другой плохо
поскольку есть например ссылка сайт.ру/стреет5-сити6-район8  это фактически форма запроса, а есть такая же ссылка например в линк менеджере, фактически содержание страницы будет одно и тоже но наверное метрика будет ругаться на это, 
и как мы думаем изза этого будет снижаться рейтинг в выводе сайта в ТОПЕ?  правы ли мы ?
И какой все же способ использовали вы 
1) оставить все как есть и будет выводиться 2 ссылки -полная и короткая из линк менеджеоа
2) запретить длинную и оставить только из линк менеджера, но в итоге кол-во проиндексированных страниц будет меньше

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
23 минуты назад, doma сказал:

и как мы думаем изза этого будет снижаться рейтинг в выводе сайта в ТОПЕ?

сайт не выводится в топ. в топ выводятся отдельные страницы сайта. а теперь представьте, что у вас есть две страницы, отвечающие на один запрос своим контентом. естественно, что они будут конкурировать друг с другом, отбирая вес друг у друга. и при этом им еще нужно конкурировать со страницами других сайтов. именно поэтому и делаются лендинговые и посадочные страницы, заточенные под конкретный запрос по самое нехочу и продвигаются всеми способами от общедоступных, до платной рекламы. А дальше с этих страниц уже начинается разводка ссылками на другие страницы. Продвигать эфективно одну страницу всегда легче чем "больше, чем одну".

мы использовали следующий способ - сначала закрывали вообще все. потом раскрывали только страницы типа раздел-страна - групп ирующие. потом открывали уже карточки. что бы вес первыми набрали именно нужные страницы. ссылки на результаты поиска, на сортировки списков, на страницы в пейджере - банились сразу и навсегда. результаты тех же списков далее первой страницы робот всегда найдет через сайтмап. сортировки и фильтры поиска возвращают дублирующиеся результаты в неописуемых количествах страниц - мне не нужно миллион страниц в индексе, которые будут шататься на 100-й странице. Мне лучше иметь 10-20 страниц в 1-3 странице результата. Зацепившийся за топовую страницу клиент попадет на сайт и там уже сам будет путешествовать. хоть через фильтр, хоть через страницы.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
Только что, abushyk сказал:

сайт не выводится в топ. в топ выводятся отдельные страницы сайта. а теперь представьте, что у вас есть две страницы, отвечающие на один запрос своим контентом. естественно, что они будут конкурировать друг с другом, отбирая вес друг у друга. и при этом им еще нужно конкурировать со страницами других сайтов. именно поэтому и делаются лендинговые и посадочные страницы, заточенные под конкретный запрос по самое нехочу и продвигаются всеми способами от общедоступных, до платной рекламы. А дальше с этих страниц уже начинается разводка ссылками на другие страницы. Продвигать эфективно одну страницу всегда легче чем "больше, чем одну".

мы использовали следующий способ - сначала закрывали вообще все. потом раскрывали только страницы типа раздел-страна - групп ирующие. потом открывали уже карточки. что бы вес первыми набрали именно нужные страницы. ссылки на результаты поиска, на сортировки списков, на страницы в пейджере - банились сразу и навсегда. результаты тех же списков далее первой страницы робот всегда найдет через сайтмап. сортировки и фильтры поиска возвращают дублирующиеся результаты в неописуемых количествах страниц - мне не нужно миллион страниц в индексе, которые будут шататься на 100-й странице. Мне лучше иметь 10-20 страниц в 1-3 странице результата. Зацепившийся за топовую страницу клиент попадет на сайт и там уже сам будет путешествовать. хоть через фильтр, хоть через страницы.

Костя правильно ли мы понимаем свои неправильные действия, суть в том что например в линк менеджере сделали 2-3 страницы по одним и тем же параматрам и заметили что вместо того чтобы максимально попасть в запрос пользователя получили что то не тот результат. сначала все было хорошо но сейчас видим что что то пошло не так. суть в следующем. в линк менеджере создали 3 страницы с одинаковыми параметрами но титл сделали разный
форма запроса например такая сайт.ру/стреет6-сити5
1) титл Купить квартиру в Краснодаре
2) титл Купить квартиру в Краснодаре недорого
3) титл Купить квартиру в Краснодаре от застройщика

В итоге если раньше набирали купить квартиру в краснодаре от застройщика то выходили ближе к 1 позициям, а сейчас очень и очень далеко и вообюще не видно, но например набирая запрос "купить квартиру в новостройке в краснодаре" выходим ближе к топу на 20 месте.
На наш взгляд была видимо конкуренция по этим квартирам и роботу они не очень стали нравиться?


Что сделали не правильно и как быть чтобы восстановить позиции

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
1 час назад, doma сказал:

Disallow: /?*

Прописал в роботс это значение.

Здорово конечно что страниц стало больше, но смогут ли эти страницы привести трафик это вопрос!

Мне кажется что смысла от этих страниц нет. Следовательно решил и закрыть.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Хорошо что этот вопрос тоже подняли я тоже закрыл Disallow: /?*  

Может еще что закрыть, что у меня нету в файле робот txt

Может что то пропустил например Disallow: /client/order/buy_property/ так правильно указать или правильно так Disallow: /buy_property/

Screenshot_6.png

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Давно уже обсуждали эту тему.

Оптимальный robots.txt уже идет в стандартной поставке CMS. А учитывая некоторые хотелки Гугла, лично у меня такой вариант:

User-Agent: * 

Disallow: /*?
Disallow: /account/
Disallow: /add/
Disallow: /admin/
Disallow: /apps/
Allow: /apps/client/js/
Allow: /apps/system/js/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /ckeditor/
Disallow: /ckfinder/
Disallow: /contactus/
Disallow: /getrent/
Disallow: /inc/
Disallow: /ipotekaorder/
Disallow: /mailbox/
Disallow: /mysearch/
Disallow: /realty*
Disallow: /realtylogs/
Disallow: /remind/
Disallow: /template/
Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/
Disallow: /third/
Disallow: /webstat/
Host: https://realty-centrum.com

Sitemap: https://realty-centrum.com/sitemap.xml

У вас, к стати, не мешало-бы перекинуть инструкцию Host прямо под последнюю строку Disallow, перед ней не должно быть пустых строк. И строку с Sitemap логично прописать уже после Host...

Еще, поисковики рекомендуют и даже настаивают на указании протокола http или https у вашего домена в инструкции Host.

А еще, не лишним будет Яндекс Вебмастеру и Гугл Аналитике скормить все варианты вашего сайта, c http и c https (если такой имеется), с www и без www, укажите какой вариант будет основным (он-же должен быть прописан в инструкции Host), поисковики вскоре склеят все ваши варианты как зеркала основного домена и пересмотрят в индексе имеющиеся варианты дублей страниц с www и без www к единому варианту. 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

По поводу строк 

Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/

и еще 

 

Allow: /apps/client/js/
Allow: /apps/system/js/

У меня прописано было Disallow: /js    что такое js

Можно мне так же прописать?

и еще этих строк не было что они значат

Disallow: /realty*
Disallow: /realtylogs/

 

Disallow: /webstat/

сейчас так все прописал

User-Agent: * 

Disallow: /?*
Disallow: /account/
Disallow: /admin
Disallow: /add/
Disallow: /apps
Allow: /apps/client/js/
Allow: /apps/system/js/
Disallow: /cache
Disallow: /cgi-bin/
Disallow: /ckeditor/
Disallow: /ckfinder/
Disallow: /inc
Disallow: /install
Disallow: /template
Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/
Disallow: /third
Disallow: /remind/
Disallow: /getrent/
Disallow: /contactus/
Disallow: /mailbox/
Disallow: /mysearch/
Disallow: /ipotekaorder/
Disallow: /webstat/
Host: http://rumagnolia.ru

Sitemap: http://rumagnolia.ru/sitemap.xml

и этого у вас не было у меня есть что с этим делать Disallow: /install

И еще основной домен у меня http://rumagnolia.ru на https переходить не вижу смысла так как расчетов по сайту не ведется. и еще если перевести https то сайт начинает глючит а именно картинки итд

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
10 часов назад, dima сказал:

По поводу строк 


Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/

и еще 


Allow: /apps/client/js/
Allow: /apps/system/js/

У меня прописано было Disallow: /js    что такое js

Можно мне так же прописать?

Это можно не прописывать, я разрешил Гуглу доступ к css, скриптам, изображениям и библиотекам, чтобы он адекватно оценивал содержимое сайта (поскольку указывает на ошибки). В принципе, не критично.

10 часов назад, dima сказал:

и еще этих строк не было что они значат


Disallow: /realty*
Disallow: /realtylogs/

Disallow: /webstat/

Это я закрыл доступ к временным файлам, логам и статистике на сайте. Зачем это поисковикам?

10 часов назад, dima сказал:

и этого у вас не было у меня есть что с этим делать Disallow: /install

И еще основной домен у меня http://rumagnolia.ru на https переходить не вижу смысла так как расчетов по сайту не ведется. и еще если перевести https то сайт начинает глючит а именно картинки итд

Этим закрывается доступ в папку /install. После установки она и не нужна, раньше её удаляли сейчас вроде автоматом удаляется сразу после установки, по этому и смысла нет её прописывать.

У меня сайт на https и ничего не глючит.

Относительно перехода на https, основной момент заключается не столько в защищенности электронных платежей (защищенность спорная :) ), сколько в том, что защищенные сайты поисковиками выше ранжируются, поскольку вызывают больше доверия. При прочих равных, защищенный сайт поисковиками предлагается в первую очередь чем не защищенный. Соответственно, не жалеем 990 руб. на 3 года, покупаем сертификат SSL и прикручиваем его к сайту. Про переход на https, возможные проблемы и их решение уже много сказано на форуме. Сейчас, в январе-феврале, спроса на недвижимость особого не будет, а значит самое время для перехода на https. В течении месяца-полутора поисковики переключат ваш сайт на https и переиндексируют его, возможно и рейтинг немного прибавят. Так что ничего не потеряете.

Удачи!

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Сейчас у меня роботtxt вот такой так оставить?

User-Agent: * 

Disallow: /?*
Disallow: /account/
Disallow: /admin
Disallow: /add/
Disallow: /apps
Allow: /apps/client/js/
Allow: /apps/system/js/
Disallow: /cache
Disallow: /cgi-bin/
Disallow: /ckeditor/
Disallow: /ckfinder/
Disallow: /inc
Disallow: /template
Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/
Disallow: /third
Disallow: /remind/
Disallow: /getrent/
Disallow: /contactus/
Disallow: /mailbox/

Disallow: /mysearch/
Disallow: /ipotekaorder/
Disallow: /webstat/
Host: http://rumagnolia.ru

Sitemap: http://rumagnolia.ru/sitemap.xml

 

Это условие решил оставить вы сказали не критично

Allow: /template/frontend/realia/css/
Allow: /template/frontend/realia/img/
Allow: /template/frontend/realia/js/
Allow: /template/frontend/realia/libraries/

и еще 

Allow: /apps/client/js/
Allow: /apps/system/js/

а эти строки как прописать или они для реалия одинаковы

Disallow: /realty*
Disallow: /realtylogs/

И еще у вас все Disallow с обеих сторон слеши у меня не везде как правильно Disallow: /inc  или Disallow: /inc/

SSL-сертификат я заказал сегодня выпустят 

на скинах показал где нужно добавить букву s. Может еще где нужно поставить s. или что то поменять для правильного перехода

на https?Screenshot_9.png.9e5e34653c5464c6c156a09e8d3397c3.pngScreenshot_10.png.37cdb3d7cb0b0ce838b94107bf02239d.png

Сертификат выпущен но как установить его в .htaccess точнее перейти наhttpsScreenshot_13.png.d9e28993ad57647779c4f3f8ac9be955.pngScreenshot_11.thumb.png.6eaea05ae3b72a2353f8005350958f8f.pngScreenshot_12.thumb.png.5c9c8b9aa9fe63a1c6b1708fc22dc1f9.png

 

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Есть на формуе тема про переход на https, поищи.

Основное,

  • в настройках указать что сайт работает через https
  • в robots.txt инструкции Host и Sitemap переписать на https://...
  • в .htaccess 5 и 6 строки переписать на 
    RewriteCond %{SERVER_PORT} !^443$
    RewriteRule .* https://%{SERVER_NAME}%{REQUEST_URI} [R=301,L]

    или вышеуказанный вами в красной рамке, этим будет осуществляться переход из http://... и http://www... на защищенный протокол https без www по 443 порту. Если будут глюки, уточните у хостинг провайдера какой именно у них порт для https. Могут быть и другие варианты записи, эта вроде наиболее универсальная.

  • далее нужно смотреть на смешанный контент. Возможно понадобится переписать некоторые ссылки в шаблонах на https, если там такие еще остались. Возможно прийдется через phpMyAdmin скачать базу сайта SQL и используя Notepad++ массово заменить в ней http на https или оставить варианты без протокола, типа /arenda и закинуть базу обратно. Сначала сделайте резервные копии сайта и базы, на всякий пожарный :) Перед загрузкой базы обратно на хостинг, надо будет удалить все таблицы в базе, иначе при загрузке будут возникать сообщения о том, что уже такие таблицы/колонки в базе уже есть и правленная база не загрузится.

Далее всё должно работать без проблем

После этого переходим в Яндекс Вебмастер и в Гугл Аналитикс и добавляем новые сайты - https://rumagnolia... и https://www.rumagnolia... Назначаете первый - основным, далее ждете, когда поисковики изменят главное зеркало и приклеят к нему остальные варианты сайта - 2 недели - 1 месяц

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Сертификат в .htaccess не устанавливается. Он прописывается в настройках домена на хостинге. У вас уже установлен сертификат и действует до 27.03.2018, вам ничего с ним больше делать не надо.

Вам теперь надо решать вопросы смешанного контента:

  • шрифты Гугла - изменить ссылку в header.tpl

Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure stylesheet 'http://fonts.googleapis.com/css?family=Open+Sans:400,700,300&subset=latin,cyrillic'. This request has been blocked; the content must be served over HTTPS.

  • там-же изменить ссылки для Яндекс карты и Гугл карты (наверное есть смысл неиспользуемое выкинуть)

(index):1 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure script 'http://api-maps.yandex.ru/2.0-stable/?load=package.standard&lang=ru-RU'. This request has been blocked; the content must be served over HTTPS.
(index):1 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure script 'http://maps.googleapis.com/maps/api/js?v=3&sensor=true'. This request has been blocked; the content must be served over HTTPS.

  • изменить ссылки картинок

(index):1 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure image 'http://rumagnolia.ru/img/fon5.jpg'. This content should also be served over HTTPS.
4(index):1 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure image 'http://rumagnolia.ru/img/fon3.jpg'. This content should also be served over HTTPS.
(index):2498 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure image 'http://rumagnolia.ru/img/google.png'. This content should also be served over HTTPS.
(index):2500 Mixed Content: The page at 'https://rumagnolia.ru/' was loaded over HTTPS, but requested an insecure image 'http://rumagnolia.ru/img/vimeo.png'. This content should also be served over HTTPS.

Это видимо фоновые картинки на сайте и последние 2 - похоже значки Google+ и Vimeo в футере, они почему-то скрыты, хотя в наличии.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
В 26.12.2017 в 20:00, Chernetskiy сказал:

Это можно не прописывать, я разрешил Гуглу доступ к css, скриптам, изображениям и библиотекам, чтобы он адекватно оценивал содержимое сайта (поскольку указывает на ошибки). В принципе, не критично.

Это я закрыл доступ к временным файлам, логам и статистике на сайте. Зачем это поисковикам?

Этим закрывается доступ в папку /install. После установки она и не нужна, раньше её удаляли сейчас вроде автоматом удаляется сразу после установки, по этому и смысла нет её прописывать.

У меня сайт на https и ничего не глючит.

Относительно перехода на https, основной момент заключается не столько в защищенности электронных платежей (защищенность спорная :) ), сколько в том, что защищенные сайты поисковиками выше ранжируются, поскольку вызывают больше доверия. При прочих равных, защищенный сайт поисковиками предлагается в первую очередь чем не защищенный. Соответственно, не жалеем 990 руб. на 3 года, покупаем сертификат SSL и прикручиваем его к сайту. Про переход на https, возможные проблемы и их решение уже много сказано на форуме. Сейчас, в январе-феврале, спроса на недвижимость особого не будет, а значит самое время для перехода на https. В течении месяца-полутора поисковики переключат ваш сайт на https и переиндексируют его, возможно и рейтинг немного прибавят. Так что ничего не потеряете.

Удачи!

Доброго времени суток. Подскажите пожалуйста Disallow: /realty* не закрывает доступ к объявлениям?

К примеру:

https://banzai72.ru/prodam/doma-dachi-kottedji-prodaja/realty49892937

https://banzai72.ru/prodam/kommercheskaya-prodaja/realty49882309

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

User-Agent: * 

Disallow: *?*
Disallow: /account/
Disallow: /admin
Disallow: /add/
Disallow: /apps/
Allow: /apps/client/js/
Allow: /apps/system/js/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /ckeditor/
Disallow: /ckfinder/
Disallow: /inc/
Disallow: /template/
Allow: /template/frontend/real-spaces/css/
Allow: /template/frontend/real-spaces/img/
Allow: /template/frontend/real-spaces/js/
Allow: /template/frontend/real-spaces/libraries/
Allow: /prodam
Allow: /prodam/kvartiri-prodaja
Allow: /prodam/zemelnie-uchastki-prodaja
Allow: /prodam/kommercheskaya-prodaja
Allow: /prodam/garaji-prodaja
Allow: /sdam
Allow: /sdam/kvartiri-arenda
Allow: /sdam/doma-dachi-kottedji-arenda
Allow: /sdam/zemelnie-uchastki-arenda
Allow: /sdam/kommercheskaya-arenda
Allow: /sdam/garaji-arenda
Allow: /sdam/posutochno-arenda
Allow: /agents
Allow: /contact
Allow: /review
Allow: /articles
Disallow: /arenda
Disallow: /arenda/jilaya
Disallow: /arenda/jilaya/kvartira
Disallow: /arenda/jilaya/kottedj
Disallow: /arenda/kommercheskaya
Disallow: /arenda/kommercheskaya/manufacturing
Disallow: /arenda/kommercheskaya/retail
Disallow: /prodaja
Disallow: /prodaja/jilaya
Disallow: /prodaja/jilaya/dom-s-uchastkom
Disallow: /prodaja/jilaya/kvartira
Disallow: /prodaja/jilaya/komnata
Disallow: /prodaja/jilaya/kottedj
Disallow: /prodaja/jilaya/uchastok
Disallow: /prodaja/kommercheskaya
Disallow: /prodaja/kommercheskaya/retail
Disallow: /prodaja/kommercheskaya/warehouse
Disallow: /client/order/ipoteka
Disallow: /documentation
Disallow: /References
Disallow: /third/
Disallow: /remind/
Disallow: /getrent/
Disallow: /contactus/
Disallow: /client/order/buy_property/
Disallow: /client/order/raschet/
Disallow: /mailbox/
Disallow: /realtylogs/
Disallow: /remind/
Disallow: /mysearch/
Disallow: /ipotekaorder/
Disallow: /webstat/
Allow: /sitemap.xml?page=1
Allow: /sitemap.xml?page=2
Allow: /sitemap.xml?page=3
Host: banzai72.ru

Sitemap: https://banzai72.ru/sitemap.xml

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Вот так вышло у меня

Disallow: /realty* убрал

Disallow: /prodaja закрыл категории созданные при приеме xml

Allow: /prodam открыл категории структуры

 

К сожалению так и не сообразил как убрать

realty

https://banzai72.ru/prodam/doma-dachi-kottedji-prodaja/realty49872210

И сделать как у вас

https://realty-centrum.com/uchastki/dlya-ijs/poddube-poddube-2-dnp-1535500260/

 

 

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Я задумался, когда после изменений в robots.txt гугл написал:

1366179151_000.thumb.jpg.fc6ac5cbf43ccf538d792bb2528f458b.jpg

:)

Но вроде бы ничего страшного нет

Так как нажимая на фразу "Некоторые важные страницы" переходит на :

https://banzai72.ru/?page=343

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
5 часов назад, banzai72 сказал:

Я задумался, когда после изменений в robots.txt гугл написал:

1366179151_000.thumb.jpg.fc6ac5cbf43ccf538d792bb2528f458b.jpg

:)

Но вроде бы ничего страшного нет

Так как нажимая на фразу "Некоторые важные страницы" переходит на :

https://banzai72.ru/?page=343

 

Linkmanager в помощь.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
6 часов назад, banzai72 сказал:

Вот так вышло у меня

Disallow: /realty* убрал

Disallow: /prodaja закрыл категории созданные при приеме xml

Allow: /prodam открыл категории структуры

К сожалению так и не сообразил как убрать 

realty

https://banzai72.ru/prodam/doma-dachi-kottedji-prodaja/realty49872210

И сделать как у вас

https://realty-centrum.com/uchastki/dlya-ijs/poddube-poddube-2-dnp-1535500260/

Для формирования алиаса добавь в таблицу data строку translit_alias

Таблица* - data

  • Тип записи - hidden
  • Колонка активна - v
  • Название колонки (системное только латиница)* - translit_alias
  • Название колонки (для человека)* - Транслит. ЧПУ
  • Доступен для групп (по-умолчанию доступно всем) - у меня установлена доступность только для Админа
  • Активно в категории (по-умолчанию активно везде)
  • Подсказка (для человека) 
  • Значение по-умолчанию 
  • Хранить значение поля в таблице - V
  • Обязательное поле 
  • Уникальное поле 
  • Параметры 
  • Имя вкладки в форме.

Еще глянь Настройки - SEO оптимизация, у меня так:

  • Включить .html постфиксы в конце URL объявлений(apps.seo.html_prefix_enable)
  • Включить SEO-режим с многоуровневым URL для каталогов. Прежде чем включить этот режим, внимательно ознакомьтесь с инструкцией(apps.seo.level_enable) - V
  • Включить SEO-режим с расширенными ссылками объявлений.(apps.seo.data_alias_enable) - 1
  • Разрешить установку нестандартных алиасов(apps.seo.allow_custom_realty_aliases) - 0
  • Набор полей нестандартных алиасов(apps.seo.allow_custom_realty_aliase_fields)
  • Добавить информацию о стране в карточку объекта(apps.seo.country_info_in_realty_view) - V
  • Добавить информацию о регионе в карточку объекта(apps.seo.region_info_in_realty_view)  - V
  • Добавить информацию о городе в карточку объекта(apps.seo.city_info_in_realty_view)  - V
  • Не перехватывать алиасы стран(apps.seo.no_country_url)
  • Не перехватывать алиасы регионов(apps.seo.no_region_url)
  • Не перехватывать алиасы городов(apps.seo.no_city_url)
  • Не использовать концевые слеши(apps.seo.no_trailing_slashes)
  • Подстановочная часть стандартного алиаса объявления(apps.seo.realty_alias) - realty (вроде по умолчанию)
  • Не перехватывать алиасы станций метро(apps.seo.no_metro_url)

По умолчанию подставляется /realtyXXX, если есть translit_alias, то ссылка из него в приоритете, она генерируется автоматически при добавлении объявления, на счет генерации в имеющихся объявлениях точно не скажу, надо уточнять у разработчиков.

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
В 31.08.2018 в 17:32, banzai72 сказал:

User-Agent: * 

Disallow: *?*
...
Allow: /sitemap.xml?page=3
Host: banzai72.ru

Sitemap: https://banzai72.ru/sitemap.xml

Алексей, забыл добавить, явно укажи протокол в robots.txt для Host: https://banzai72.ru, чтобы поисковики это однозначно понимали 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
10 часов назад, Chernetskiy сказал:

Алексей, забыл добавить, явно укажи протокол в robots.txt для Host: https://banzai72.ru, чтобы поисковики это однозначно понимали 

Спасибо.

А то я где то читал, что наоборот не стоит) и убрал

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
4 часа назад, banzai72 сказал:

Спасибо.

А то я где то читал, что наоборот не стоит) и убрал

Уже года полтора как надо ?

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Войти

Уже зарегистрированы? Войдите здесь.

Войти сейчас

  • Похожие публикации

    • Автор: Анна Иванна
      На сканере недвижимости http://www.etown.ru/  поступают данные от сайтов, на которых реально работают риэлторы. 
      Также подключен парсер объявлений с досок объявлений avito.ru, irr.ru, realty.yandex.ru, cian.ru, sob.ru, youla.io, n1.ru, egent.ru, mirkvartir.ru и moyareklama.ru
      1. Чтобы получить доступ к отсканированным собственникам регистрируемся тут https://www.etown.ru/

      2. Подключаем тариф Премиум

      3. После оплаты вы увидите это сообщение и переходим во вкладку База собственников

      4. Теперь у нас есть доступ к скрытым полям телефонов собственников



      Иконкой с глазом можно посмотреть подробности объекта, перейти на страничку объекта и посмотреть фотографии.
      5. Если нужно отфильтровать по определенному гороуд объявления, тогда используем фильтр как показано на скриншоте. Если вы не нашли объявления по своему городу напишите нам на почту dkondin@gmail.com и мы добавим ваш город в парсер.

      Можно добавлять в фильтр несколько городов

       
      Также есть сканер для объявлений с авито.
      Они сами зарегистрировались по партнерской программе тут.
      В чем преимущество etown.ru ?
      В том, что когда объявления попадают на сайт, то вы получаете обратно ссылку на ваш сайт. Таким образом увеличивается поток трафика.
       
      Основной поток квартир мы получаем с одного источника, исключающего информацию, размещённую агенствами. То есть, объявления от собственников. Сканер платный, 500р в месяц. Но, безумно выгодно. Огромнейшая экономия времени. За сутки сканер выдаёт нам 20-30 квартир (аренда), только по нашему городу. Автоматически. Только обновляй страницу. 
      http://rent-scaner.ru/
      Вот, собственно ссылка. У кого есть более дешёвые, бесплатные или альтернативные сайты - делитесь.

    • Автор: iFedia
      Добрый день! У меня стоит разделенный доступ для риелторов и админов. Администратор видит все объявления, а група  риелторов только свои. Когда добавляешь объявление через админа, то поиск работает коректно и можна искать по заданным параметрам. Если объявление публикуется через групу риелторов, поиск не выводит результаты.
      Подскажите куда копать? Спасибо за ответы 
    • Автор: mykvartira
      Добрый день. Пока база городов не такая большая проблема с дублирование города не возникало, но все не вечно)))
      Обратил внимание, что есть объявление с городом Николаевка, который имеет Донецкую область. И тут человек все верно указал. Посмотрел в базу у себя и город Николаевка относится к Республике Крым и тут все верно. Все города привязаны к регионам!
      Нужно ли добавлять город Николаевка для Донецкой области? Получим в поиске и подачи 2 города.
      Будут ли проблемы если не добавлять дубль города, а вывод города привязать к региону/области?
      Как лучше реализовать все это, сайт работает по 10 странам и соответственно дубли будут! 
    • Автор: Realtor
      Некоторые собственники не хотят , чтобы их объекты распространялись через открытые СМИ
      Cоздаем поле чек бокс в таблице data например - поле MLSN
      Публикуем объект в базе с установленным чекбоксом MLSN-1 .
      В поиске поле MLSN показывается только для определенных групп к примеру - Агентство, Риэлтор, Помощник Риэлтора и в результате поиска объект  появляется  только для этих групп и карточка соответственно.(типа снятое с активации) и чтобы поисковики его не сканировали.
      Подскажите как реализовать?
    • Автор: Real
      Здравствуйте. С помощью мастера установил на хостинг шаблон agency. Ничего еще не делал, но при открытии расширенного поиска, кнопка "Найти" уходит под правый блок. Да и поля Город, Район, Метро и Улица то же выходят за рамки блока. Дело в том, что я этот шаблон очень давно покупал, но, в силу обстоятельств, им не занимался. Теперь вот решил поставить и такая неудача. Вроде как брак получается  Можно это как-то исправить?