Предлагаю вашему вниманию новую версию estimate. Добавлены функции отделения от текста хороших, развивающих и исключительных строк (абзацев). Концом абзаца считается символ перевода строки (0x0D). Качество абзаца определяется из статистики самого текста (а не общей статистики плотности информации по файлам).
Отделение хороших строк отбрасывает примерно половину имеющихся строк. Отделение развивающих строк - около 92.135 % (остаётся около 7.865 %). Отделение исключительных строк отбрасывает 99.766% строк из текста (остаётся 0.234 %).
Для отделения абзацев выбирайте анализируемый текст, затем файл, куда будут выводиться итоговые строки. ВНИМАНИЕ! Прежнее содержимое ИТОГОВОГО файла уничтожается!
Для оценки содержания большого текста (например, книги), можно последовательно отделять хорошие строки. С каждым шагом плотность информации будет увеличиваться. Когда оставшийся текст станет трудным для понимания (или сократиться до небольшого размера), прочитав его, можно будет быстро оценить, о чём рассказывает исходный текст, и затем решить следует ли его читать полностью.
_____________________
Читинцы! Объединяемся!