Привет всем!
Как в заголовке уже видно, я ищу программку, которая могла бы из текста выловить все повторяющиеся слова
и хотя бы их просто маркировать или удалить.
Перерыл уже весь интернет, но вроде ничего путного не нашёл.
Мне нужно часто составлять списки, перечни или просто ключевые слова,
а в ворде или ОО этой возможности похоже нет.

А поиск в ворде не подходит? Он все слова одинаковые показывает последовательно.

Каковы исходные данные для нарезки?

StingArray нет? Например

и MsWord и WordPad и даже простой Editor от рождения это прекрасно умеют.

В ворде не совсем, а в EXCEL вроде лучше, но тоже нужно сначала в Дримвивере список в колонку сделать
и сохранить как тхт-файл, а потом в таблицу импортировать.
А потом уже назад через Дримвивер снова в строчку вывести.
Пока проще метода не нашёл.

Мне часто нужны ключевые слова допустим для Фотолии.
По этому как исходный материал беру просто набор слов подходящих по теме.
Иногда бывает с десяток слов, а иногда пару листов DIN A4

все-все повторяющиеся слова? в том числе и предлоги? так можно запариться их вычищать. то что ты ищешь видимо "тошнота текста" погугли, в сео это популярная тема

дубли можно попробовать искать с помощью Exel или в OpenOffice Calc

Иногда бывает с десяток слов, а иногда пару листов ДИН А4
------
Вроде как Я по-русски спрашивал - с какими исходными данными ты работаеш?
Потому как самый простой ответ (программиста) будет - напиши - select distinkt * from tWords

Это не полноценные тексты, а или отдельные слова или фразы.
Разделённые между собой запятой.
К примеру "natur, morgen, früh, grün, sommer, ähre, getreide, herbst,"
Это только часть списка.
А полностью список намного больше будет

Гы
Об этом я тоже уже думал, но есть уже и готовые решения.
А я если начну программировать, то не успокоюсь пока не разработаю что-нибудь уникальное и созревшее для патентирования
А если серьёзно, то сейчас времени нет мелочи программировать, других забот хватает.

Я вроде тоже не по китайски написал, что нужно из простого списка (формат не важен)
убрать повторяющиеся слова или фразы и внести его (список) потом в форму для загрузки на сервер.
Посмотрю потом когда освобожусь немного, может в PHP что-нибудь состряпаю.

Я пока так и делаю, но немного комплицировано получается.
Думал попроще что-нибудь найти.

а, ну если это только список с разделителем, то тут я согласен с муром - легче самому написать парсер, чем искать готовое решение. пока тема обсуждается можно было уже с десяток таких парсеров наваять

Для экселевых акробатов это раз плюнуть. Всегда завидовал :)

(формат не важен)
------
Т.е. имеем список каких-то ПДФов, в которые упакованы сканированные с малым разрешением картинки и поверх еще замучено что-то типа шифрации...
Ну русским же языком спрашиваю - каковы форматы исходных данных? для простого текста - 10 минут работы. Для Ворда - полчаса... Для Екселя - не знаю, давно не работал с ним..

пока тема обсуждается можно было уже с десяток таких парсеров наваять
------
Ну либо глянуть темку про РегЕхп в Программировании - там уже готовый только упростить...

http://dienst.project33.eu/tools/vovanparser.php лови парсер

Классная игрушка
Именно то, что и нужно.
Просто в управлении и без заморочек.
Я сегодня уже собрался было своё состряпать, да чёт потом руки не дошли .
А ты молодец

дарю