12 лет я занимаюсь интернет-маркетингом, контекстной рекламой и созданием сайтов. Часто приходится обрабатывать и «причесывать» большие текстовые и табличные файлы, редактировать, сравнивать, чистить данные и т.п. Со временем я выделил несколько программ и сервисов, наиболее комфортных для этих целей, и стал использовать их постоянно.
Подборка программ и сервисов для работы с большими файлами
Всем известная MS Excel — программа для работы с электронными таблицами имеет неудобное ограничение по количеству строк — 1048576 на одном листе. Но как быть, если требуется открыть таблицу большего размера, например, содержащую 10 млн. строк?
Онлайн-сервисы
Во-первых, можно воспользоваться любым онлайн-сервисом для разделения больших текстовых файлов на части. Я использую calculators.vip/ru/razdelit-fayl-na-chasti. Этот вариант отлично работает для разбиения XML- и CSV-файлов.
Notepad++
На ПК для редактирования и обработки больших файлов данных подходит программа Notepad++. Программа бесплатная, её можно скачать с официального сайта. Не знаю, насколько принципиальна разница между версиями, у меня установлена v8.5.6 и она с трудом открывает файлы размером чуть более 500 МБ, а то и вообще отказывается.
KeyWordKeeper
Скажу честно, я не проверял, насколько большие файлы умеет открывать утилита KeyWordKeeper, но лично у меня проблем не возникало. Программа имеет простые настройки и хорошо подходит для решения таких задач, как разбивка и объединение текстовых файлов, удаление дубликатов, создание выборок по заданным параметрам, чистка текста, перемешивание, сортировка списков и т.п.
Платный Penguin
Для работы с базами ключевых слов я также использую платное решение — многофункциональный текстовый редактор Penguin, а именно его расширенную версию Penguin [BigData Editor]. Программа обладает большими встроенными возможностями для работы как с табличными данными, так и с текстовыми списками. Разработчик всегда на связи и активно реагирует на обратную связь от пользователей, постоянно работает над усовершенствованием своего софта.
EmEditor
EmEditor — простой и быстрый текстовый редактор с подсветкой синтаксиса (как и в Notepad++, удобно при работе с форматом XML, например). В описании программы на официальном сайте указано, что редактор способен открывать файлы размером до 16 ТБ! Я пользуюсь этой программой ежедневно, но нужно иметь в виду, что при сложных заданиях обработки данных EmEditor может использовать объем памяти, сопоставимый с размером самого редактируемого файла, поэтому желательно почаще сохраняться, особенно если жесткий диск забит «под завязку»).
Надеюсь, моя подборка оказалась для вас полезной, буду благодарен за вопросы в комментариях!