Извините, ничего не найдено.

Не расстраивайся! Лучше выпей чайку!
Регистрация
Справка
Календарь

Вернуться   forum.boolean.name > Веб-программирование > Общее

Общее Веб-разработка в целом, идеи, проекты...

Ответ
 
Опции темы
Старый 10.12.2014, 10:59   #1
ABTOMAT
Ференька
 
Аватар для ABTOMAT
 
Регистрация: 26.01.2007
Адрес: улица Пушкина дом Колотушкина
Сообщений: 10,741
Написано 5,461 полезных сообщений
(для 15,675 пользователей)
Вопрос об индексации в поисковиках

Ситуация: есть сайт, на сайте том sitemap.xml

В sitemap.xml записано около 400 страниц контента c <changefreq>yearly</changefreq>
И это правдиво, так как комменты там бывают в среднем раз в полгода, а кроме них там поменяться особо нечему.

На каком-то этапе я, модифицировав движок сайта, заставил эти страницы рендериться по-другому (вывел дополнительные данные, ранее не показывавшиеся) и хотел бы, чтобы поисковики их проиндексировали (желательно не через год).

Вопрос: стоит ли временно установить <changefreq> другой или же поисковики всё равно рано или поздно обновят у себя данные? Есть ли сведения, когда и как это делается? Если месяц то ок, если больше то стоит отрывать жопенцию и что-то сделать.
__________________
Мои проекты:
Анальное Рабство
Зелёный Слоник
Дмитрий Маслов*
Различие**
Клюква**

* — в стадии разработки
** — в стадии проектирования
Для проектов в стадии проектирования приведены кодовые имена

(Offline)
 
Ответить с цитированием
Старый 10.12.2014, 11:24   #2
DStalk
Разработчик
 
Аватар для DStalk
 
Регистрация: 27.06.2009
Адрес: Рязань-Москва
Сообщений: 471
Написано 401 полезных сообщений
(для 1,072 пользователей)
Ответ: Вопрос об индексации в поисковиках

Судя по ощущениям, роботы мало обращают внимания на changefreq, и проверяют чаще, или реже если daily стоит...
Но на всякий случай лучше подстраховаться и поставить weekly или daily.

В Яндекс.вебмастер про индексацию сайта глянуть можно. Да и в гугле есть (давно только не пользовался).
(Offline)
 
Ответить с цитированием
Эти 2 пользователя(ей) сказали Спасибо DStalk за это полезное сообщение:
ABTOMAT (10.12.2014), St_AnGer (10.12.2014)
Старый 10.12.2014, 12:55   #3
tormoz
Гигант индустрии
 
Аватар для tormoz
 
Регистрация: 14.12.2005
Сообщений: 2,785
Написано 1,183 полезных сообщений
(для 4,437 пользователей)
Ответ: Вопрос об индексации в поисковиках

Уже давно пофиг. Роботы сами себе на уме.
Гугль в основном руководствуется средним периодом между обновлениями и засылает бота по своему расписанию.
Яндекс никакому анализу и логике не поддается, тут действуют не СЕО факторы:
цена на железо, шаловливые ручки разработчиков, придумывающих супер-алгоритмы, наличие кофе в автомате, настроение жены Платона Щукина, и главный фактор - швабра уборщицы бабы Маши...
__________________
(Offline)
 
Ответить с цитированием
Эти 5 пользователя(ей) сказали Спасибо tormoz за это полезное сообщение:
ABTOMAT (10.12.2014), DStalk (10.12.2014), moka (16.12.2014), Randomize (10.12.2014), St_AnGer (10.12.2014)
Старый 10.12.2014, 13:09   #4
ABTOMAT
Ференька
 
Аватар для ABTOMAT
 
Регистрация: 26.01.2007
Адрес: улица Пушкина дом Колотушкина
Сообщений: 10,741
Написано 5,461 полезных сообщений
(для 15,675 пользователей)
Ответ: Вопрос об индексации в поисковиках

Насчёт <changefreq> спасибо, понял. Менять не буду.

Про Яндекс.вебмастер у меня вообще отдельный вопрос.
Может, кто знает, куда копать.

Ситуация случилась примерно такая:
Раньше на сайте не было ни роботс.тхт, ни сайтмапа, нихрена.
Тем не менее свёрстан он добротно, h1 везде где надо есть, ссылки на всё есть, тайтлы страниц, ну, как у людей. Так что и Гугл и Яндекс его индексировали нормально, все страницы видели, всё находили. В-общем-то насколько мне известно, сайтмап в принципе вещь необязательная, если есть ссылки на страницах, то роботы сами везде слазят.

Летом этого года что-то случилось в недрах Яндекса, и он перестал искать страницы с этого сайта вообще. Я ничего не трогал, разве что контент добавлял как и всегда.
В Гугле всё нормально. Даже из него количество приходящих юзеров (крайне лениво, но всё же) увеличивается.
Есть второй сайт на таком же движке, идентичный по структуре практически (только контент другой). С ним всё нормально.

Мне летом было некогда, летом у меня был диплом. С сайтов я денег не зарабатываю, так что в-общем-то мне было наплевать. Потом как-то забылось за другой суетой. Около месяца назад всё же решил выяснить в чём дело-то?

Зарегал сайт в Яндекс.вебмастере. Он мне радостно пишет: страниц в поиске 1 (конкретно это главная страница), загружено роботом 1 исключено 0. Никаких ошибок нет, всё в шоколаде.

Ну то есть Яндекс почему-то думает, будто сайт одностраничный. И никаких ссылок на другие страницы не видит (хотя они там есть, он их раньше видел, и гугл их видит), и внешние ссылки тоже есть.

Ну блин думаю, может и правда надо сделать сайтмап? Ок, сделал, в роботс.тхт прописал. Через несколько дней зырю чё почём. Гугл (который и так всё видел хорошо) сожрал сайтмап и стал видеть ещё лучше. Яндекс — ноль внимания. Полдждал ещё, Яндексу всё ещё наплевать. А в Вебмастере он пишет, что робот наведывается регулярно. А робот при всяком посещении читает роботс.тхт и, соответственно, не видеть там ссылку на сайтмап он не мог. Сайтмап, кстати проверял в валидаторах, всё ок.

Ладно, добавил сайтмап через интерфейс Вебмастера. Покряхтев, Яндекс таки схавал ссылку и написал:

"статус: в обработке добавлен 25.11.2014"
В подсказке: "Файлы, находящиеся «в обработке», как правило, обрабатываются в течение двух недель после добавления." Сегодня уже прошло 2 недели, сайтмап всё ещё «в обработке», в поиске всего одна страница, воз и ныне там.

На втором сайте делал всё то же. Сайтмап был схаван по ссылке из роботс.тхт без напоминания и обработан через несколько дней.

Вывод: Яндекс за что-то на тот сайт обиделся и не признаётся. Никаких ошибок не пишет, всё типа нормально.

Вопрос: как повлиять на ситуацию?
Стоит ли писать в техподдержку (а такая у Яндекса вообще есть?) и спросить хотя бы почему при здравствующем сайтмапе и активных ссылках машина никаких страниц кроме главной не видит?
Миниатюры
Нажмите на изображение для увеличения
Название: N7LfbV9o.png
Просмотров: 950
Размер:	12.7 Кб
ID:	21248  
__________________
Мои проекты:
Анальное Рабство
Зелёный Слоник
Дмитрий Маслов*
Различие**
Клюква**

* — в стадии разработки
** — в стадии проектирования
Для проектов в стадии проектирования приведены кодовые имена

(Offline)
 
Ответить с цитированием
Старый 10.12.2014, 16:18   #5
tormoz
Гигант индустрии
 
Аватар для tormoz
 
Регистрация: 14.12.2005
Сообщений: 2,785
Написано 1,183 полезных сообщений
(для 4,437 пользователей)
Ответ: Вопрос об индексации в поисковиках

Это АГС
ничивонисделать, это яндек-с...

зы. можно в поддержку написать, но 99.99999999% что ответ будет от робота "наши алгоритмы блаблабла, развивайте сайт блаблабла, читайте наши мануалы блабла"
Зарегь новый домен а старый забудь. Это самое лучшее решение проблемы.
__________________
(Offline)
 
Ответить с цитированием
Эти 2 пользователя(ей) сказали Спасибо tormoz за это полезное сообщение:
ABTOMAT (10.12.2014), St_AnGer (11.12.2014)
Старый 10.12.2014, 17:34   #6
ABTOMAT
Ференька
 
Аватар для ABTOMAT
 
Регистрация: 26.01.2007
Адрес: улица Пушкина дом Колотушкина
Сообщений: 10,741
Написано 5,461 полезных сообщений
(для 15,675 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от tormoz Посмотреть сообщение
Это АГС
ничивонисделать, это яндек-с...

зы. можно в поддержку написать, но 99.99999999% что ответ будет от робота "наши алгоритмы блаблабла, развивайте сайт блаблабла, читайте наши мануалы блабла"
Зарегь новый домен а старый забудь. Это самое лучшее решение проблемы.
Ну ничего себе, этот домен уже широко известен в узких кругах.
Даже встречаю время от времени такой феномен: в Яндекс юзер вбивает домен (без доменной зоны). Кстати это единственный запрос, по которому Яндекс соизволит сайт всё-таки отыскать.
Короче придётся просто принять как данность что Яндекс единолично решил за юзеров, на какие сайты им, юзерам, ходить можно, а на какие нельзя, и ориентироваться на Гугл.



Господа знатоки! Следующий вопрос относительно sitemap.

https://support.google.com/webmaster...r/178636?hl=ru
У гугла для сайтмапов есть спецтеги для картинок. Но валидатор Яндекса упорно ругается "неизвестный тег" (можете скопипастить ему пример гугла чтоб позырить что к чему).

<?xml version="1.0" encoding="UTF-8"?>
 <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
  xmlns:image="http://www.google.com/schemas/sitemap-image/1.1">
 <url>
   <loc>http://example.com/sample.html</loc>
   <image:image>
     <image:loc>http://example.com/image.jpg</image:loc>
   </image:image>
   <image:image>
     <image:loc>http://example.com/photo.jpg</image:loc>
   </image:image>
 </url> 
</urlset>
Буржуйские же
https://www.xml-sitemaps.com/validate-xml-sitemap.html
http://www.validome.org/google/
Говорят что всё ок.

Вопрос: "неизвестный тег" мешает Яндексу индексировать сайтмап или нет?
Насколько я читал, он просто игнорирует и всё остальное читает, но, как мы уже могли не раз убедиться, Яндекс напишет одно, а себе на уме у него другое.
Вопрос к тем, кто делал подобный сайтмап на своём опыте, как это повлияло?

Неужели нужно разносить сайтмапы или подсовывать Яндексу отдельно для него?
__________________
Мои проекты:
Анальное Рабство
Зелёный Слоник
Дмитрий Маслов*
Различие**
Клюква**

* — в стадии разработки
** — в стадии проектирования
Для проектов в стадии проектирования приведены кодовые имена

(Offline)
 
Ответить с цитированием
Старый 10.12.2014, 18:12   #7
Arton
Быдлокодер
 
Аватар для Arton
 
Регистрация: 05.07.2009
Адрес: Проспит
Сообщений: 5,019
Написано 2,312 полезных сообщений
(для 5,349 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от ABTOMAT Посмотреть сообщение
Яндекс напишет одно, а себе на уме у него другое.
Яндекс — она?
(Offline)
 
Ответить с цитированием
Эти 2 пользователя(ей) сказали Спасибо Arton за это полезное сообщение:
ABTOMAT (11.12.2014), St_AnGer (11.12.2014)
Старый 11.12.2014, 01:51   #8
LLI.T.A.L.K.E.R.
Мастер
 
Аватар для LLI.T.A.L.K.E.R.
 
Регистрация: 24.06.2009
Адрес: Набережные Челны
Сообщений: 930
Написано 292 полезных сообщений
(для 504 пользователей)
Ответ: Вопрос об индексации в поисковиках

поисковик Яндекс
(Offline)
 
Ответить с цитированием
Старый 11.12.2014, 06:38   #9
Phantom
Элита
 
Аватар для Phantom
 
Регистрация: 14.06.2008
Адрес: Украина, Киев
Сообщений: 2,273
Написано 754 полезных сообщений
(для 1,833 пользователей)
Ответ: Вопрос об индексации в поисковиках

Живём без сайтмапов вообще, всё индексируется итак. Это фильтр 100%. Если сайт нормальный и не посвящён какому-нибудь зелёному слонику, то пиши в поддержку Яндекса, могут ответить нормально. Нам отвечают. Скинь ссылку в личку, может сразу скажу, на что стоит внимание обратить и изменить до того, как обращаться в техподдержку.
(Offline)
 
Ответить с цитированием
Эти 2 пользователя(ей) сказали Спасибо Phantom за это полезное сообщение:
ABTOMAT (11.12.2014), St_AnGer (11.12.2014)
Старый 11.12.2014, 06:59   #10
Randomize
[object Object]
 
Аватар для Randomize
 
Регистрация: 01.08.2008
Адрес: В России
Сообщений: 4,354
Написано 2,470 полезных сообщений
(для 6,850 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от Phantom Посмотреть сообщение
Если сайт нормальный и не посвящён какому-нибудь зелёному слонику
Есть основания говорить, что твоё "нормально" больше чем моё "нормально"?
__________________
Retry, Abort, Ignore? █
Intel Core i7-9700 4.70 Ghz; 64Gb; Nvidia RTX 3070
AMD Ryzen 7 3800X 4.3Ghz; 64Gb; Nvidia 1070Ti
AMD Ryzen 7 1700X 3.4Ghz; 8Gb; AMD RX 570
AMD Athlon II 2.6Ghz; 8Gb; Nvidia GTX 750 Ti
(Offline)
 
Ответить с цитированием
Старый 11.12.2014, 07:05   #11
Phantom
Элита
 
Аватар для Phantom
 
Регистрация: 14.06.2008
Адрес: Украина, Киев
Сообщений: 2,273
Написано 754 полезных сообщений
(для 1,833 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от Randomize Посмотреть сообщение
Есть основания говорить, что твоё "нормально" больше чем моё "нормально"?
В данном вопросе есть только одно "нормально" - по меркам Яндекса.
(Offline)
 
Ответить с цитированием
Сообщение было полезно следующим пользователям:
St_AnGer (11.12.2014)
Старый 11.12.2014, 11:01   #12
St_AnGer
Элита
 
Аватар для St_AnGer
 
Регистрация: 21.01.2010
Адрес: Россия, Рязанская область, г.Михайлов
Сообщений: 2,067
Написано 1,185 полезных сообщений
(для 2,828 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от LLI.T.A.L.K.E.R. Посмотреть сообщение
поисковик Яндекс
Название мужского рода не мешает ему быть блонлинкой


По делу - сайт без сайтмапа вполне индексируется в хуяндексе, имею только robots.txt. Скорее всего тех.поддержка поможет, если это не "особенность" самой поисковой машины.
__________________
Main PC:
Intel Core i5 4260U 1.44 GHz + LPDDR3 1x4096 1600 MHz + Intel HD Graphics 5000.

Asus Ёжик T101-MT:
Intel Atom N-570 1.66 Ghz + DDR2 2x1024 800 Mhz + Intel GMA 3150 128 Mb DDR2


Скачать Doom 2D: Remake v0.3.8a
(Offline)
 
Ответить с цитированием
Старый 11.12.2014, 11:32   #13
DStalk
Разработчик
 
Аватар для DStalk
 
Регистрация: 27.06.2009
Адрес: Рязань-Москва
Сообщений: 471
Написано 401 полезных сообщений
(для 1,072 пользователей)
Ответ: Вопрос об индексации в поисковиках

По поводу индексирования сайта и только одной главной странице в поиске:
https://ru.wikipedia.org/wiki/АГС_(фильтр)
(Offline)
 
Ответить с цитированием
Сообщение было полезно следующим пользователям:
ABTOMAT (11.12.2014)
Старый 11.12.2014, 14:19   #14
ABTOMAT
Ференька
 
Аватар для ABTOMAT
 
Регистрация: 26.01.2007
Адрес: улица Пушкина дом Колотушкина
Сообщений: 10,741
Написано 5,461 полезных сообщений
(для 15,675 пользователей)
Ответ: Вопрос об индексации в поисковиках

Сообщение от Arton Посмотреть сообщение

Яндекс — она?
Говорит одно, а себе на уме другое.
Обиделся и говорит что не обиделся.

Хмм, по всей видимости именно так себя и ведут бабы. Так что наверное ты прав.

Сообщение от DStalk Посмотреть сообщение
По поводу индексирования сайта и только одной главной странице в поиске:
https://ru.wikipedia.org/wiki/АГС_(фильтр)
Спасибо, не знал! По всей видимости это оно!
__________________
Мои проекты:
Анальное Рабство
Зелёный Слоник
Дмитрий Маслов*
Различие**
Клюква**

* — в стадии разработки
** — в стадии проектирования
Для проектов в стадии проектирования приведены кодовые имена

(Offline)
 
Ответить с цитированием
Сообщение было полезно следующим пользователям:
LLI.T.A.L.K.E.R. (11.12.2014)
Старый 16.12.2014, 05:30   #15
moka
.
 
Регистрация: 05.08.2006
Сообщений: 10,429
Написано 3,454 полезных сообщений
(для 6,863 пользователей)
Ответ: Вопрос об индексации в поисковиках

Если нужен google, то можно принудительно в webmasters запросить переиндексацию.
Работая с SEO, webmasters весьма полезная штука для google поисковика, и там много полезной инфы.
(Offline)
 
Ответить с цитированием
Ответ


Опции темы

Ваши права в разделе
Вы не можете создавать темы
Вы не можете отвечать на сообщения
Вы не можете прикреплять файлы
Вы не можете редактировать сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.


Часовой пояс GMT +4, время: 13:21.


vBulletin® Version 3.6.5.
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Перевод: zCarot
Style crйe par Allan - vBulletin-Ressources.com