Дублированные новости

StronG · 2009-11-25 22:03:09

Возникла проблема! Есть сайт на NG около 1000 страниц контента. Как показал анализ встречаются полностью дублированные новости. Может кто подскажет, как автоматически удалить полностью одинаковые новости?

Nushaba · 2009-11-25 23:18:15

Я бы с помощью гугла сделал это, в гугле на своём сайте ищешь новости по контенту и удаляешь, но надо знать какой контент повторяется, а так хз, новости в НГ могут дублироваться в силу твоей организации сайта, Если создавал новость и прикреплял её к нескольким разделам, она так или иначе будет дублирована в нескольких местах. Попробуй погуглить что то вроде: поиск повторяющихся страниц. Хотя список будешь иметь, не зная какой именно контент повторяется. В самой НГ я такой функции не встречал, хоть и знаком с нею не долго.

StronG · 2009-11-26 00:05:42

Nushaba, дублироваться не будут просто будет добавляться название категории в которой размещена еще эта новость! Если на сайте 4000 новостей прикинь сколько надо времени убить на проверку дублирования!

vitaly · 2009-11-26 00:38:19

StronG, насколько задублированные новости похожи друг на друга? Одинаковы с точностью до байта или всё-таки нет?

StronG · 2009-11-26 07:17:16

vitaly, да идентичны на 100% (ну заголовки точно)

Amarelius · 2009-11-26 11:29:48

StronG, Ссылки можешь дать?

vitaly · 2009-11-26 16:42:32

StronG пишет:

vitaly, да идентичны на 100% (ну заголовки точно)

Если совсем идентичны (не буду спрашивать откуда такое взялось), то это можно сделать через SQL - обычный оператор group by с правильным order'ом позволит найти заголовки по которым есть более 1 вхождения.

Ну а дальше - через тот же SQL (и чуть-чуть руками) вывести список ID ненужных новостей и грохнуть.
Есс-но всё без помощи двига (только потом не забудь в управлении БД восстановить индексы, а если используешь плагины tags, similar - то и в них всё восстановить).

asus · 2009-11-26 23:33:15

robots.txt юзай, т.е. закрывай от индексации категории, теги, и страницы (pages)

Как минимум, 2 раза есть дубли каждой новости.

StronG · 2009-11-27 07:20:28

vitaly, спс почти все удалил! всего-то 40 дублей!

PIT3R · 2014-02-23 14:07:18

Пример:
Несколько журналистов наполняют ресурс новостями... и постят одинаковые новости, на одну тему, почти с одинаковым название и содержанием.
В DLE этот вопрос решается в момент написания новости, т.е. выводится сообщение о том, что уже существует некая новость содержащая похожий заголовок.
Можно нечто похожее реализовать для NGCMS?

ahatomik · 2014-04-14 10:51:55

Не стал новую тему создавать . Так тут то и спрошу ..
Случаем кто то знает как сделать !? :
Вот добавил ты новость . Прошла неделя эта новость уже на 5-10 странице , но есть "update" этой новости и тебе нужно об этом сообщить .
Да конечно можно в редакторе нажать "прикрепить новость" и она снова будет на главной странице и все что тебе нужно это изменить заголовок , типа "новость обновлена" . Окда ?
А если сделать всплывающее окно типа "Уважаемый , прошу просмотреть новость обновление !" Ты такой "клац" и перешёл в полную новость . Это вообще реально !?

infinity237 · 2014-04-15 02:46:22

Ответ: реально. И?

irbees2008 · 2014-04-15 07:07:23

Ему надо как это сделать

ahatomik · 2014-04-15 17:07:43

Совершенно верно !
Очень нужно , так как даже прикрепив новость на "неделю" многие по возвращению на сайт не знаю о обновлении !

infinity237 · 2014-04-15 23:28:10

Ну берешь и делаешь.

ahatomik · 2014-04-16 10:51:01

infinity237, настроения нет ? я же спросил как сделать !? ..

Изменено ahatomik (2014-04-16 10:51:59)

irbees2008 · 2014-04-19 06:49:38

ahatomik пишет:

infinity237, настроения нет ? я же спросил как сделать !? ..

Толян грамотно T3 составь

irbees2008 · 2014-05-02 06:41:14

Вот доработанный плагин xnews https://cloud.mail.ru/public/80cfc9928d06/xnews.zip.
Добавлена выборка новостей по update.
подключение

{{ callPlugin('xnews.show', {'order' : 'editdate', 'count': '6', 'template' : 'xnews1'}) }}

за выборку отвечает - 'order' : 'editdate'

Изменено irbees2008 (2014-05-02 08:28:46)

ahatomik · 2014-05-05 10:57:35

irbees2008, + пивасик с меня

irbees2008 · 2014-05-05 13:01:31

не пью эту гадость

ahatomik · 2014-05-05 13:22:05

irbees2008, ну ты всё равно понял о чем я

Next Generation CMS :: Форум поддержки

Объявление

#1 2009-11-25 22:03:09

Дублированные новости

#2 2009-11-25 23:18:15

Re: Дублированные новости

#3 2009-11-26 00:05:42

Re: Дублированные новости

#4 2009-11-26 00:38:19

Re: Дублированные новости

#5 2009-11-26 07:17:16

Re: Дублированные новости

#6 2009-11-26 11:29:48

Re: Дублированные новости

#7 2009-11-26 16:42:32

Re: Дублированные новости

#8 2009-11-26 23:33:15

Re: Дублированные новости

#9 2009-11-27 07:20:28

Re: Дублированные новости

#10 2014-02-23 14:07:18

Re: Дублированные новости

#11 2014-04-14 10:51:55

Re: Дублированные новости

#12 2014-04-15 02:46:22

Re: Дублированные новости

#13 2014-04-15 07:07:23

Re: Дублированные новости

#14 2014-04-15 17:07:43

Re: Дублированные новости

#15 2014-04-15 23:28:10

Re: Дублированные новости

#16 2014-04-16 10:51:01

Re: Дублированные новости

#17 2014-04-19 06:49:38

Re: Дублированные новости

#18 2014-05-02 06:41:14

Re: Дублированные новости

#19 2014-05-05 10:57:35

Re: Дублированные новости

#20 2014-05-05 13:01:31

Re: Дублированные новости

#21 2014-05-05 13:22:05

Re: Дублированные новости

Подвал раздела