Меня все больше беспокоит эффективность веб-спама

Если вы долгое время спрашивали меня о рассылке спама в поисковых системах, будь то жесткая тактика «черной шляпы» или просто получение серой ссылки, я бы сказал, что в долгосрочной перспективе это не будет правильным шагом. Я всегда выбирал создание отличного сайта и отличного бренда с помощью упорного труда, белых ссылок, надежного контента и маркетинговых стратегий. Это все еще так, но моя вера определенно колеблется.

Почему?

За последние 12 месяцев я увидел (или, по крайней мере, почувствовал) меньший прогресс со стороны команды Google по борьбе со спамом, чем за любой предыдущий год, который я могу припомнить. Популярные сервисы платных ссылок, о которых специалисты по качеству поиска Google четко знают, работали месяцами (некоторые работали годами). Грязные, низкокачественные каталоги и обмены ссылками вернулись после больших остановок в 2007-8 гг. Даже обмен ссылками не по теме, испытавший в 2006-2007 гг. Свою собственную неудачу, снова заработал. Ужасающе плохие сайты занимают первые места в результатах, используя лишь точное совпадение доменных имен и несколько ссылок низкого качества. Произошло даже возвращение ссылочных ферм начала 2000-х, когда операторы создают (или покупают старые домены и конвертируют их в) бесполезные одностраничные сайты, чтобы повысить свою собственную ссылочную популярность.

Почти во всех коммерчески прибыльных результатах поиска, которые я получаю в наши дни, я вижу, что плохие ссылки подталкивают плохие сайты к верхним позициям в Google.

Примеры веб-спама в рейтингах

Я пообещал Аарону, что не буду «избавляться» от спама, и хотя я до сих пор не верю, что это неправильно с моральной точки зрения (это вредит каждому поиску / веб-опыту, почему оптимизаторы должны объединяться, чтобы защищать его?) , Я действительно хочу сдержать это обещание. Итак, хотя я не могу указать вам какие-либо конкретные ссылки или сайты, вот хороший набор запросов, в которых множество манипуляций со ссылками удерживает несколько, некоторые или многие из сайтов с самым высоким (5-10) рейтингом на этих позициях:

• Программное обеспечение для SEO
• Стратегии Starcraft 2
• Товары Для Дня Рождения
• Валютная торговля онлайн
• Отзывы о теннисных ракетках
• Товары для изготовления кожи
• Услуги няни
• Идеи для домашнего бизнеса
• Французские двери
• Вьетнамские туры
• Антиоксидантные добавки
• Рейтинги домашних эспрессо-машин

Просто запустите несколько отчетов по OSE на некоторых сайтах, которые имеют здесь высокий рейтинг, и вы поймете, что я имею в виду. В этих списках много игроков, у которых нет ни одной естественной или одобренной редакцией ссылки. И не нужно ограничиваться этими запросами.

3 шага, чтобы найти множество случаев манипулирования ссылками

Шаг №1: Найдите «SEO Friendly Directory» и посетите несколько разделов, включенных в появившиеся в результате сайты.

Шаг № 2: Найдите основные ключевые слова, на которые нацелены сайты из списка каталогов, в их тегах заголовков или в тексте привязки, который они получили из каталогов.

Шаг № 3: Просмотрите топ-5-10 списков в рейтинге, и вы найдете множество сайтов с небольшим количеством «естественных» ссылок или вообще без них.

Почему Google не наказывает так много спама и манипуляций?

Я не знаю. Но у меня есть некоторые предположения:

• Масштабируемость тактики борьбы со спамом — возможно, возможности команды Google по борьбе со спамом уменьшились из-за увеличения размера, сложности и спроса на поиск. Возможно, борьба со спамом на сотнях миллиардов страниц — гораздо более сложная проблема, чем на десятках.
• Они работают над чем-то большим — в течение многих лет Google пропускал большое количество спама, о котором они явно знали … какое-то время. Затем они выпустят обновление алгоритма, чтобы победить огромный слой спама или серьезно помешать определенным типам манипуляций со ссылками. Если это так сегодня, это был бы один из самых длинных промежутков времени между обновлениями, которые мы видели (MayDay оказал небольшое влияние, но это не было целью манипулирования ссылками из всего, что я видел).
• Слишком много ребенка выброшено с водой из ванны — возможно, по мере роста популярности манипуляций со ссылками и спама, Google обнаружил, что они не могут наказывать технику или сайты, использующие их, без резкого снижения полезности их индекса (потому что так много «хороших», «релевантных» сайтов / страниц делают тоже грязные штучки). Если это так, им нужно будет работать над гораздо более тонкими, целевыми системами обнаружения и устранения, и их может быть значительно труднее использовать.
• Утечка мозгов от команды WebSpam — Команда по борьбе со спамом, созданная Мэттом Каттсом в 2001–2006 годах, была лучшими из лучших в Google. Он лично отбирал инженеров из отдела качества поиска (и из других отделов) для борьбы с угрозами в виде черной шляпы в первые дни роста Google. SEO-специалисты могли часто взаимодействовать со многими из этих сумасшедших умных людей, от Брайана Уайта до Аарона Д’Сузы, Эвана Роузмана и многих других. Это взаимодействие сегодня в основном ограничивается командой инструментов для веб-мастеров, что может быть подходящим пиар-ходом, но трудно сказать, справится ли новая команда с этой задачей. У нас действительно есть один новый, частично открытый член команды по борьбе со спамом, Моултано, в Hacker News (вы можете увидеть все обсуждения, в которых он / она участвовал по теме спама, с помощью этого запроса).

  Сам Мэтт наконец взял заслуженный перерыв, но даже дома он гораздо менее публичен в Интернете, гораздо менее активен в вопросах, связанных со спамом в своем блоге, посещает меньше конференций и теперь тоже инвестирует в стартапы (что, безусловно, требует времени). Я не хочу никоим образом критиковать Мэтта — на его месте я бы давно ушел из Google (и он явно вложил больше, чем его долги), но остается вероятность того, что созданная им команда уже не в целости. , или уже не того качества, которое было в первые годы.

• Живи и давай жить другим — Возможно, хотя публичные сообщения Google о веб-спаме и манипуляциях со ссылками не изменились, внутренне их отношение изменилось. Возможно, они обнаружили, что сайты / страницы, которые покупают ссылки или используют некачественные фермы ссылок, не намного хуже, чем те, которые этого не делают, и имеющие релевантные результаты, даже если они использовали тактику черной / серой шляпы, не так уж и хороши. пагубно сказывается на качестве поиска. Конечно, в некоторых из приведенных выше примеров это так, в то время как в других это не так. Я вспоминаю, что несколько лет назад команда MSN Search отметила, что они скорее будут бороться с некачественными результатами в индексе, чем с высококачественными результатами тех, кто покупает ссылки. Может быть, Google пришел к той же философии.
• Они рассчитывают на новые источники помощи — Часть инициативы Google по приобретению компаний, занимающихся социальными играми, созданию социальных платформ и заключению сделок с такими людьми, как Twitter, может быть направлена ​​на борьбу со спамом. У них могут быть надежды на то, что использование этих новых, менее загрязненных (или, по крайней мере, более легко отслеживаемых) форм рекомендаций / цитирования может стать большой победой для веб-спама и качества поиска.

Зачем говорить о спаме?

«Бла. Бла-Бла. Так что, если Google не делает столько, чтобы остановить спам, как в прошлые годы?» Я слышал, вы спросите.

Меня беспокоит в первую очередь опыт поисковиков и то, что это может означать, если результаты будут загрязнены не только хорошими или относительно хорошими сайтами, которые покупают ссылки или манипулируют ими, но и действительно плохим дерьмом — таким, который заставляет поисковиков искать новые способ получения информации в сети (Facebook Q + A? Twitter? Yelp?). Сегодня поисковая система — это потрясающая площадка для веб-разработчиков, маркетологов, поставщиков и клиентов. Если последний из них — клиент — постепенно разочаровывается в Google, миру поискового маркетинга и удивительной полезности поиска в целом может прийти конец.

Если вы пользуетесь поисковыми системами или работаете в поисковом маркетинге, это последнее, что вам нужно.

Тем не менее, если вы считаете, что большая часть «спама» в конечном итоге будет выбита либо законными результатами, либо лучшими сайтами, которые также спамят / манипулируют ссылками, тогда беспокоиться гораздо меньше (я не полностью в обоих лагерях и может видеть обе стороны).

Итак, что же делать легитимным маркетологам?

Пожалуйста, НЕ выходите и не рассылайте спам о результатах, не покупайте ссылки, не отправляйте в каталоги дерьма и не открывайте фермы ссылок. Я считаю, что даже с учетом нынешней тенденции это был бы ужасный совет. Множество сайтов попадает в ловушку и фильтруется, и я бы предпочел знать, что мой сайт безопасен, и каждый элемент контента, который я добавил, и ссылку, которую я создал, поможет привлечь больше трафика, чем постоянно беспокоиться о небольшом, но реальном риске быть оштрафованным или заблокированным. .

Одна вещь, которую сделал Google, — это по-прежнему ужасающий опыт наказания. Трудно понять, действительно ли у вас есть штраф, почти невозможно понять, что его спровоцировало, и обременительно, почти в духе Кафки, пытаться вернуть себе благосклонность. Если вы можете смириться с этим риском, как профессиональные черные шляпы со своими стратегиями оттока и сжигания, тогда это не будет проблемой. Но если вы строите настоящий бизнес, Google по-прежнему обеспечивает более 70% поисковых запросов в Интернете в США (и более 90% во многих других регионах), и было бы глупо пойти на такой ужасный риск.

Что касается сообщения о спаме ваших конкурентов — решать вам. Однако Google определенно сделал это менее вероятным и менее полезным занятием. Почти каждый день мы отвечаем PRO Q + A на вопрос о том, что манипуляторы ссылок превосходят законных маркетологов и сайты, и я могу вспомнить только один раз из сотен вопросов, на которые я отвечал за последние несколько лет, когда сообщение о спаме фактически привело к действие (честно говоря, я не слежу за каждым постоянно, но многие из наших PRO-участников будут регулярно отправлять пинг с обновлениями).

Что мы можем сделать, так это удвоить наши усилия для создания отличных сайтов с удивительной ценностью для людей. Независимо от того, как будет выглядеть «поисковый» опыт в будущем, те сайты и страницы, которые обеспечивают незабываемые впечатления, обязательно появятся в верхней части и получат дополнительное преимущество в виде похвалы из уст в уста, вирусного распространения и цитирования в любых формах. он может развиваться как в сети, так и вне ее.

Некоторые предостережения в отношении моего опыта

Миллионы запросов не содержат спама, и Google на протяжении многих лет постоянно боролся со спамом. Однако недавнее прошлое меня беспокоило, что они больше не заинтересованы, прилежны и не способны бороться даже с самыми простыми методами спама.

Это также, безусловно, тот случай, что я регулярно сталкиваюсь со многими запросами и темами, на которых фокусируются SEO-специалисты, как черные, так и белые, и, таким образом, могут видеть больше спама, чем средний поисковик (хотя по анекдотам я предполагаю, что они видят больше , слишком).

Как вы думаете?

Видели ли вы больше результатов в рейтингах, которые показывают хорошие результаты, несмотря на практически полное отсутствие «естественных» ссылок? Вы видели, как Google принимает меры в отношении сообщений о спаме? Как вы думаете, почему в недавнем прошлом было гораздо меньше примеров крупных обновлений для очистки от спама?

Я с нетерпением жду отличной дискуссии — и на этой неделе я буду на SES в Сан-Франциско (на 5 разных панелях!) — не стесняйтесь схватить меня и поговорить там в частном порядке!

ps Что касается Bing, единственной другой крупной поисковой системы в США, на которой сейчас работает Yahoo! (или на грани), я считаю, что они добились существенных успехов. Они все еще отстают от Google во многих областях (и опережают в некоторых), но при текущих темпах мы можем действительно увидеть, что Bing превзойдет Google по обнаружению и фильтрации спама в следующие 18-24 месяцев, хотя они, вероятно, все еще будут играть в ловушку. вверх по релевантности / качеству длинного хвоста.