Хочется программный модуль

Как правило такие сайты сделаны на каком то движке.
как правило у движка есть rss, yml и прочие документы, которые можно спарсить. даже если на них ссылок нет.