[X] Помощник

[Гость_0_* Topic Starter]

Будьте добры, люди добрые, подскажите
Есть текстовый файл, в котором много-много тысяч строк. Одни строка = один поисковой запросы. Запросы повторяются, поэтому нужно удалить эти дубликаты. Подскажите, чем бы на аватомате с этим справиться?
Зараннее благодарен.

Мне ужно сперва дочистить базу от правой колонки, тут бы тоже хотелось автоматизировать, потому что 15 тысяч запросов ручками образатывать долго очень. Вообщем структура примерно такова:

заработок в интернете,    N/A    414    
реальный заработок в интернете,    N/A    429    
как заработать в сети,    N/A    117    
как бесплатно поднять тиц?    N/A    249    
сайт о заработке в сети интернет    N/A    130    249
заработать в сети,    N/A    22    
заработать на интернете,    N/A    911    
реальный заработок в сети,    N/A    221

Вот нужно оставить только одни запросы. Есть у кого какие идеи? Пожно хотя бы на полуавтомате

P.S. Предыдущий топик удалил, опять глюк был с отображением кода. По-идее он возникает при подсветке кода django. Разберёмся
Kismedia, спасибо за предоставленную ссылку в прошлом топике!

[sc2r2bey]

ну так сделай скрипт и удали, тему надо в php постить, это вполне решаемая задача.
читаются данные из файла в массив
удаляются дублирующиеся записи
задача из 2-х шагов, хорошая для тебя практика в php
подсказка все решается встроенными функциями.

[ZiTosS]

admin, так, вопрос. Строки то у тебя полностью совпадают? Или же только запросы?

[Гость_0_* Topic Starter]

ZiTosS, совпадают только запросы. Строки разные, потому что запросы брались из статистики более чем 100 сайтов. Понятное дело, что для одной тематики запросы попадались одинаковые, некоторые даже очень часто. Но а позиции разных сайтов в поисковиках явно разные.

surfer, спасибо, я что-то даже не подумал вобще, что всё можно на PHP реализовать. Как-то по привычке в экселе начал или ручками Как только прочитал твоё сообщение, примерно представил как решить задачу. Спасибо за намёк!

[ZiTosS]

admin, тогда решай на PHP. Разбирай строки и помещай в массив. Затем простым фильтром прогоняй массив и убирай дубли.

[Игорян_mw]

вот это дело -> N/A 221 можно косануть через простой блотнот, Ctrl + H заменяем N/A 221 на пробел

Замечание модератора: Эта тема была закрыта автоматически ввиду отсутствия активности в ней на протяжении 100+ дней. Если Вы считаете ее актуальной и хотите оставить сообщение, то воспользуйтесь кнопкой или обратитесь к любому из модераторов.