1. Требуются разработчики и тестеры для проекта codebyOS. Требования для участия в проекте: Знание принципов работы ОС на базе Linux; Знание Bash; Крайне желательное знание CPP, Python, Lua; Навыки системного администрирования. Подробнее ...

    Скрыть объявление
Скрыть объявление

Уважаемый Гость, в 23:30 по мск форум будет закрыт на профилактику на 1,5 часа до 01:00 24.10.2017

Обработка большого текстового файла и составление по нему отчета

Тема в разделе "Другие", создана пользователем erosss, 5 май 2010.

  1. erosss

    erosss Гость

    Репутация:
    0
    Как можно реализовать отчет и на чем лучше писать . Есть текстовый файл около 700 мегабайт и количеством строк около 5 миллиона .
    Данные в файле имеют вид :

    login data ip traffic
    ---- ---- --- -----

    Дело в том что один и тот же логин может встречаться несколько раз,если значения data разные .

    Нужно вывести :
    суммарное количество трафика по каждому пользователю и общее.
     
  2. artishok

    artishok Гость

    Репутация:
    0
    хм...тут простой перебор конечно долго будет выполняться) а если данные запихнуть в БД? и там уже СУБД какой-нибудь, если использовать индексы и еще что-нибудь в этом роде, то время обработки должно сократиться. Попробуйте!=)
     
Загрузка...

Поделиться этой страницей