Wektoryzacja obrazu

Potrzebuję zwektoryzować mapki zapisane w plikach .jpg (bądź jakichś innym).
Stworzyłem klasę punktu, klasę wektora, funkcję porównującą kolory pikseli i utknąłem przy samym algorytmie znajdywania wektorów - o ile dla np linii poziomych i pionowych o grubości jednego piksela byłbym chyba w stanie coś wymyśleć, to dla linii ukośnych nie mam żadnego pomysłu (zbyt dużo tam "niepotrzebnych" pikseli, które zaburzają cały mój prosty algorytm).
Ma ktoś może jakieś sugestie?

Tzn. chcesz znaleźć odcinki, okręgi itp.? Poczytaj o transformacji Hougha - będzie w sam raz.