Поиск уникального контента
Если вы впервые попали на мой блог и вас интересует тема заработка в Интернете, советую вам ознакомиться со статьей 11 способов заработка в Интернете, а также подписаться на RSS-ленту моего блога. Что такое RSS, и в чем его преимущества, вы можете прочитать здесь.
Вернемся к проблеме дублированного контента.
Рано или поздно перед каждым вебмастером становится вопрос, где брать уникальный контент. Тырить — невыгодно, переписывать — долго, заказывать на стороне — дорого… Замкнутый круг получается.
Эли, автор блога Blue Hat Seo, предлагает два варианта решения проблемы. Этой записи уже больше чем полгода, поэтому тема наверняка проскакивала в Рунете. Однако если такое было, я это определенно пропустил 
Archive.org
Сайт Archive.org — идеальное место для поиска заброшенного контента. С его помощью вы можете просмотреть архивы многих авторитетных каталогов статей и новостных сайтов и найти записи, которые когда-то покоряли топы поисковиков, но уже навсегда выпали из выдачи. Для примера возьмем сайт CNN.com.
1. Откройте сайт Archive.org и введите в поиск название интересующего вас сайта.
2. Выберите дату постарше. Вероятность выпадения старых страниц из поиска очень высока.
3. Выберите нужную категорию.
4. Выберите статью, соответствующую тематике вашего сайта.
5. Введите в Google запрос site:_адрес_статьи_ и посмотрите результат. В идеале он должен выглядеть так:
Правда, если убрать из запроса www, то Google все-таки находит 1 страницу , поэтому данный пример несколько неудачен.
6. Скопируйте текст статьи на свой сайт.
Вот и все. Проблема уникального контента решена
Для данного метода выбирайте крупные авторитетные сайты. Так вы быстрее найдете, что вам нужно. Учитывайте то, что Archive.org не всегда выдает необходимые страницы, хотя они и присутствуют в его архиве. Кроме того, некоторые сайты, например, ezinearticles.com, закрывают свои архивы через robots.txt.
Если вы собираетесь генерировать контент в промышленных масштабах, вам подойдет следующий метод.
Карта сайта
Если на сайте присутствует карта, вы можете легко найти все адреса страниц с данного домена. Когда у вас будет список адресов, вы сможете прогнать его по запросу site:… и найти страницы, которые выпали из индекса.
- Найдите карту сайта и распарсите с нее адреса отдельных страниц.
- Напишите скрипт, который смог бы прогнать все эти адреса по запросу site:…
- Если поисковик показывает результат выше нуля, удаляйте адрес.
- Проверьте список оставшихся адресов вручную и найдите среди них интересующие вас статьи.
Недостаток данного метода в том, что парсинг карты выдает очень много бесполезных результатов, вроде поисковых запросов по сайту. Чтобы избежать этого, выберите папку или поддомен по вашей тематике и работайте только с ней. Если вам, например, нужны статьи по автомобилестроению, выберите раздел карты, содержащий папку domain.com/autos или поддомен autos.domain.com.
Как вариант, вы можете искать “уникальный” контент в кэше удаленных страниц. На многих сайтах используется стандартная страница ошибки 404. Введите запрос site:domain.com “Sorry this page cannot be found” и проверьте кэш этих же страниц в других поисковиках.
Этический момент: Не забывайте ставить ссылку на оригинал (хотя бы на главную страницу сайта). Несмотря на то, что для поисковика ваш контент будет 100% уникальным, у него все же есть автор, которого нужно хоть как-то отблагодарить.
С этическим моментом полностью согласен. Автору без разницы, что выпала страница из индекса. Он от этого автором статьи быть не перестает.
У каждого метода есть свои плюсы и минусы. Лично я использую статьи из Archive.org т.к. на нем можно найти статьи уже удаленные с сайта, а не просто не проиндексированые.
“некоторые сайты, например, ezinearticles.com, закрывают свои
архивы через robots.txt”
так в чем проблема? берем статьи вручную(или кто как хочет), все равно их в индексе нет)
хэх, это не подходит к новостным сайтам, а так в принципе отлично
aekros, ну это смотря, что вы ищете.
а что плюсы и минусы есть, так это везде и во всем, тут я с вами полностью согласен.
На новостных сайтах тоже есть тематические рубрики, которые неподвластны времени
Delpher, я так понимаю, вы о старых статьях? Новые-то в индексе очень даже хорошо висят — на первых позициях по низкочастотникам
Хм, как вы считаете translate.google хорошо с рус на англ. переводит? я пока не могу проверить траффика нет, но за новость про перевозчика 3 на дигге было 12 голосов, вот я и в сомнениях(у меня кино блог))) вот и про новости только рус сайты подходят и замена синонимами америкосов
ИМХО, отвратительно. Я бы не стал пользоваться этим сервисом. С натяжкой его можно использовать только в пределах одной языковой семьи, например, английский — французский.
А пока будете учить, используйте программы по рерайту контента. К сожалению, они платные.
Если с английским туго, его нужно выучить
Совершенно согласен с Profit Hunter. Гугловский переводчик можно использовать только, если не знаешь языка и нужно в общих чертах понять, о чем в ней (статье) написано. И программы по рерайту нужно использовать платные, бесплатные таких синонимов наподбирают, ужас. Не ведитесь на халявное.
не так сильно с англ. туго, достаточно ворд открыть он синонимы найдет, если на трудно помотрите блог, действительно отвратно? с текстом …the1movies.com
Тогда остается писать маленькие посты с ссылками на нормальные англоязычные статьи, я прочитал осенний марафон, использование кеев в заголовке и в тексте страницы помогли найти траффик)
Да, с английским плоховато. Местами я вообще не понимал, о чем идет речь.
Твое решение довольно неплохое. Попробуй помиксовать контент: поменяй предложения местами, напиши пару строк вступления, возьми несколько предложений из других статей…
И не забывай ставить ссылку на оригинал
спасибо, перечитываю статью “контент прежде всего” )
Маленькая не точность с закрытием контента от поисковиков сервисами, смотрите http://www.google.com/search?hl=en&q=http%3A%2F%2Fezinearticles.com%2F%3FTry-Davidoff-Cigars-Today%26id%3D568544&btnG=Google+Search
А по русским сатам он вообщем может шерстить. А то у меня кроме квадратиков ничего не показывает
А статья хорошая
aekros, robots.txt закрывает не от поисковиков, а от archive.org.
graf, я вчера архив Яндекса смотрел, все нормально показывает.
У меня выводит в таком виде
???font>????font>?????/font>
??????/font>
О, получилось. В опере чего то не получалось, а в ие пошло
2 Graf, это проблема с кодировками. У вебархива такое бывает.
Вообще тема полезная, спасибо за совет.
О, интересная темка, попробую по русскому сегменту.
Действительно, сайты то отмирают. Что контенту пропадать то?)
водь ведь как получается, решил поискать…
вроде нашёл:
Your search -
site:cnn.com/2000/HEALTH/men/02/02/find.sex.therapist
.wmd/index.html
- did not match any documents.
Your search -
site:www.cnn.com/2000/HEALTH/men/02/02/find.sex.
therapist.wmd/index.html
- did not match any documents.
и с www и без оного, нету. вот радости моей не было предела. но потом решил вставить в запрос первый абзац статьи и мне в выдаче сразу 2 сайта. дело в том что если проверить страницу
site:www.cnn.com/2000/HEALTH/men/02/02/find.
sex.therapist.wmd/index.html
без index.html, всё сразы всплывает. так что будьте осторожны.
сорри за то, что диз комментом попортил. (
Подправил
Уж лучше тогда книги сканировать
Ну изчезла страница из индекса поисковика, но статью с этой страницы уже скопировали в свое время на другие сайты.
Выходит она неуникальна нискока ?!
Надо еще проверять на плагиат значит все найденные страницы?
Тогда это совсем не легкий способ.
Или я не понял совсем что здесь написано :-)?
sanek, если страницу скопировали и она в индексе, тогда да, неуникальна. Хотя такое маловероятно, но все же, возможно.
На плагиат при нужде можно быстро проверить с помощью Google: скопировать пару строк из текста и забить их в поиск. Выдача сразу покажет степень уникальности контента.
Полезная статья, webarchive уже юзал:)
Балин еще бы узнать как находить сайты в русском сегменте, которые выпали из поиска.
Спасибо за совет, ьудем юзать, потом отпишусь как и что.
Я сама ищу уникальный контент для сайта на английском. Постоянно сотрудничаю с Aero Translate. Они мне и статьи переводят на ура, и пишут уникальные материалы по любым темам, которые я присылаю. Самый лучший контент – это переведенные статьи, они нигде не «светятся».
Это всё для буржунета хорошо, а для рунета гемор
Перевод и нормальный подгон текста для читабельности
Огромный респект автору данного ресурса за вклад в развитие рунета, и сео оптимизации в частности. Хотелось бы узнать о способах получения уникального контента на русском языке…и не отходя от темы данной статьи…
но рассматривая рунет как источник информации
Все-таки большая часть посетителей данного блога в своем распоряжении имеет русскоязычное “детище” и все эти разговоры об уникальном контенте сродни беслатному сыру когда речь заходит о нерусских ресурсах типа archive.org…согласитесь, перевод материала у среднестатистического юзверя, вебмастера занимает времени никак не меньше, чем скажем рерайтинг…причем первое все-таки требует знаний языка, а обращаться к переводчикам не есть выход из ситуации.
Самый оптимальный вариант для получения уникального контента на русском языке в большом количестве это обработка его синомайзером. Если хорошая база, то на выходе получается полностью уникальный и читаемый текст. Конечно в нем есть ошибки стилистические, и немного надо расставить пунктуацию. Под каждую тему необходима своя база синонимов, под пластиковые окна своя, под бытовую технику своя и т.д. Готовых баз не существует, необходимо все выбирать вручную. Те, что существуют в свободном доступе необходимо полностью перерабатывать. По пластиковым окнам базу готовил где - то два месяца. Труд конечно нелегкий с этими базами, но оно того стоило. Сейчас любой текст по пластиковым окнам прогнав через базу на выходе получается уникальный и читаемый текст, для сателлитов первый сорт. А если немного поработать, то 300 000 знаков без пробелов за пару дней можно подготовить для СДЛ. За такой объем рерайта как минимум необходимо заплатить 300 американских рублей, у меня же в 10 раз дешевле получается.
Уникальный контент очень дешево и на любые тематики (проверено!)Advego - уникальный контент для вебмастера!
В архивах ИМХО находятся устаревшие новости, которые потеряли свою актуальность и не будут представлять особого интереса для читателя. Хотя, как вариант, тоже можно попробовать
Да в последнее время проблем с контентом нет вообще, и в этом заслуга синонимайзеров, вот один из них http://phpsin.ru/
синонимайзер пойдет только для дорвеев