Следя за форумом замечаю что по большей части все пишут програамы для скачивания и разбора web страныц. поэтому инструменты такого анализа
как разбор словоформ, нохождения корня слова (для поиска например), формирования MT потоков на основе реузльтата работы регулярного выражения и т.д. будут востребованы. Не знаю как для Delphi но для PHP в инете есть готовый пакет нахождения все слоформ и .т.д
------------ Дoбавленo:

Тот же WikiCenter который здесь разрабатывался содержить более 5 компеннтов для разбора массива текста в многомерный поток. А используя одно регулярное выражение можно получить массыв (матрицу) данных, совместив в это в один компоненте это все, схемы анализа веб страныц намного сократились бы.