Puede estar con:
SELECT count(*) FROM `table`
where
created_at>='2011-03-17 06:42:10' and created_at<='2011-03-17 07:42:50';
o usa between :
SELECT count(*) FROM `table`
where
created_at between '2011-03-17 06:42:10' and '2011-03-17 07:42:50';
Puede cambiar la fecha y hora según sus necesidades. Se puede usar curdate() o now() para obtener las fechas deseadas.