Комментарии в блоге "Битрикс - Сергей Рыжиков" на "Google и Yandex должны научиться работать с сайтами иначе..." http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php ru http://backend.userland.com/rss2 Tue, 23 Jun 2026 16:25:12 +0300 Обратил внимание, что изменения первой страницы на Грек ру на Гугл отражаются на след день.
И он логично выдает результат по канонам поисковой оптимизации.

А вот с Яндексом же большие проблемы, обновляется раз в две недели и он с конца января три слова:
Греция
Греции
греция
воспринимает как совершенно разные слова.]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11951#com11951 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11951#com11951 Sat, 13 Mar 2010 23:28:14 +0300 ====quote====
     
Поисковые машины обходят все сайты "с улицы" как обычные посетители. Собирают все что "видят", индексируют и делают доступным для поиск. Если на сайте 100 страниц, то вроде и проблем нет. А если на сайте 10 миллионов документов? И информация обновляется несколько раз в минуту? Как повторно определить где что меняется и индексировать только новую информацию?      

=============
     
Для этого есть sitemap в котором указывается адрес страницы и дата изменения      
доступ разрешаем гигантам таким яндекс гугл ... - остальных отсеиваем nginxксом
   
     

====quote====
     
В итоге все более менее крупные сайты хотят и делают свой поиск только с основной целью - искать быстро и давать актуальную информацию. Написал пользователь на форуме новое сообщение - оно должно быть сразу доступно в результатах поиска. Вышла активная новость - она так же должна быть доступна в результатах поиска.      
     
Именно по этой причине нам в своем продукте пришлось сделать модуль Поиска, который немедленно индексирует все содержимое в момент публикации и делает результаты поиска доступными посетителям. Модуль отличный, хорошо работает да еще и ищет с учетом прав доступа.      

=============
     
Сразу вопрос - доступна в каких результатах поиска ?      
   
1. на ya.ru или google.com ?      
модуль поиска битрикса не публикует их в яндексе      
эх пингаторы .... пингаторы .... пингаторы ....      
   
2. на сайте через поисковую форуму яндекса/гугла      
для этого есть платные услуги Google Site Search у яндекса нечто подобное тоже возможно появиться      
   
3. через поиск битрикса ?      
будет новость на сайте но не будет в поисковых системах )      
     
эх поиск поиск )))    
Авто дополнение строки поиска а-ля Google - так и не реализовано      
Сфинкс - все понятно      
Поикс по одной букве "а" - у нас много ресурсов      
     
Порой не все инфоблоки нужно индексировать - вырубая индексацию в одном - мы также вырубаем создание для него sitemapа - и где же после этого seo гармония ?      
     
     
==================================      
Пару ссылок по теме      
     
http://www.google.com/sitesearch/      
http://company.yandex.ru/technology/server/features/      
http://sphinxsearch.com/]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11859#com11859 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11859#com11859 Thu, 11 Mar 2010 07:23:39 +0300  

====quote====
# Впечатлила демка с FriendFeed'ом, который показывает в браузере новый пост в ленте через примерно 1.5 секунды после его написания в совершенно другом месте.  
# Да, FriendFeed оказывается поддерживает hubbub, и реализация заняла у них что-то типа одного дня.
=============
]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11766#com11766 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11766#com11766 Fri, 05 Mar 2010 22:55:08 +0300 ====quote====
Мне попалась на глаза заметка "Google научится мгновенно индексировать контент"
=============
Сергей, сдаётся шумиху они подняли по поводу относительно молодой технологии - PubSubHubbub.
====quote====
Протокол PubSubHubbub позволяет существующим фидам RSS и Atom превращаться в потоки в реальном времени. Он создаёт равные условия для всех, децентрализуя контроль над "живым" контентом в сети. Протокол не принадлежит ни одной компании, а участником может стать каждый - вот самые важные условия, благодаря которым Интернет достиг таких высот. PubSubHubbub легок в интеграции, хорошо масштабируется и продолжает набирать популярность. На этом выступлении мы расскажем, как уже сегодня площадки могут публиковать свой контент real-time. Вы узнаете подробности того, как PubSubHubbub даёт единый API для разработчиков, потребляющих огромные массивы информации.
=============
Будучи на GDD смотрел их презентацию. Действительно занятная штука получается.    
   
Ребята оказывается ходили и в Яндекс. Говорит Иван Сагалаев:    

====quote====
У нас в Яндексе вчера был Бретт Слаткин и мы тёплой компанией инженеров общались про его с Брэдом Фицпатриком детище — PubSubHubbub.Будем ли мы что-то делать в рамках Яндекса, пока не знаю. Это всё пока требует внутреннего технического евангелизма. Но мне очень хочется    

=============
Уже сейчас ваши разработчики могут ооочень легко улучшить доступность информации для ВСЕХ форумов и блогов на платформе 1С-Битрикс.    
   
Поисковый робот, который обходит форумы и блоги пытается найти специальный XML-фид для более удобной и быстрой индексации. Т.е. это не обычный RSS, а специально размеченный, который и описывет структуру постов и комментариев к ним. И листая этот фид яндекс прочитает весь форум или ту часть что отдаётся для обычных посетителей.    
   
http://nano.yandex.ru/project/yarss/    

====quote====
С помощью этого RSS Яндекс сможет скачать и проиндексировать ваш форум целиком  и быстро.
=============
Я вообще сторонник того, что если сайт может, то он должен так же отдавать информацию в структурированном, машино-читаемом виде.]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11765#com11765 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11765#com11765 Fri, 05 Mar 2010 22:51:17 +0300
http://pcmag.ru/columns/detail.php?ID=5473 -- старая, но по сути заметка ]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11762#com11762 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11762#com11762 Fri, 05 Mar 2010 19:28:50 +0300
Я считаю, что с точки зрения Гугла идти на разработку каких-то индивидуальных API можно только в исключительных случаях (как, например, twitter). Решений на каждый случай тут не придумаешь, поэтому с их точки зрения логичнее продолжать тянуть обычные html-страницы. А вот какие страницы "тягать" - это уже дело вебмастеров. Они заинтересованы в том, чтобы запретить к индексации все лишнее (типа результатов поиска) и подпихнуть в sitemap все обновления.
]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11759#com11759 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11759#com11759 Fri, 05 Mar 2010 18:03:18 +0300 ]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11758#com11758 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11758#com11758 Fri, 05 Mar 2010 17:59:16 +0300 Apple вот все подряд, что не придумает тут же патентует, а потом зарабатывает уйму денег только на патентах.
У нас же в стране по-моему еще не научились делать деньги только на идее, вовремя получив патент, как это уже давно делают в америке.]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11757#com11757 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11757#com11757 Fri, 05 Mar 2010 17:43:01 +0300 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11756#com11756 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11756#com11756 Fri, 05 Mar 2010 17:38:34 +0300 ]]> http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11754#com11754 http://dev.1c-bitrix.ru/community/blogs/rsv/1713.php?commentId=11754#com11754 Fri, 05 Mar 2010 17:32:15 +0300