SM>Может кто подскажет где почитать как работать с таблицами с большим количеством записей.
SM>Как читать данные и как хранить промежуточные результаты.
SM>Задача бешать по содержанию таблицы и сравнивать записи

С помощью SQL.

Если серьезно, то маловато данных для нормального ответа.