Небольшой движок на C# который в асинхронном режиме с указанным количеством потоков осуществляет автоматическую навигацию по сайтам (поддерживаются как обычные станицы так и аякс, но аякс сложнее...) и производит сбор данных, заполнение полей, клики, и прочий сёрф по страницам. Это позволяет мне быстро клепать задачки в духе "залогиниться -> перейти -> заполнить -> сграбить данные " ну и в этом духе. Капчи, естественно, распознавать не умеет, но при большой надобности, можно интегрировать - имеется некоторый опыт борьбы с капчами.