Mam takie pytanie.
Jak zrobić program, który wyszukuje czy na ekranie nie pojawił się gdzieś obrazek (wcześniej załączony)?
Przykładowo, robię screena ikonki firefoxa, dodaje go jako nowy picturebox, tylko żeby go mieć- nie do wyświetlenia. W tym momencie chciałbym sprawdzić czy na ekranie gdzieś jest takie samo zdjęcie i jak np jest to w niego klika dwa razy.
Możesz porównać pliki (zakładając, że rozmiar się nie zmienił) w następujący sposób:
a) porównujesz właściwości Width i Height. Jeżeli nie są równe porównywanej Bitmapie zwracasz false
b) porównujesz losowe 20 pikseli. Jeżeli kolor nie jest taki sam zwracasz false
c) porównujesz cały plik spełniający punkt a i b.
Pewnie są lepsze sposoby ale ja daję tylko przykład który mi wpadł do głowy :)
Z tego co udało mi się wyczytać w google pomoże na pewno:
https://morzel.net/post/Szybkie-operacje-pikselowe-w-NET-(z-i-bez-unsafe)
Na podstawie tego linku pomyślałem nad wczytywaniem jednego koloru a resztę pokrycie maską np. RGB(0,0,0). Wtedy można przeprowadzić łatwą detekcję jednego koloru w obu bitmapach.
https://en.morzel.net/post/detecting-a-drone-opencv-in-dotnet-for-beginners-emgu-cv-3-visual-studio-2017-part-1
Tutaj jest biblioteka dot. przetwarzania obrazu. Możesz o niej poczytać i daj znać jak coś ciekawego znajdziesz :)
Tutaj znalazłem kod wczytujący dwie bitmapy jako tablice bajtów oraz porównujący je. Nie testowałem
https://stackoverrun.com/pl/q/4406732
C# public static class Ext
{
public static byte[] GetBytes(this Bitmap bitmap)
{
var bytes = new byte[bitmap.Height * bitmap.Width * 3];
BitmapData bitmapData = bitmap.LockBits(new Rectangle(0, 0, bitmap.Width, bitmap.Height),
ImageLockMode.ReadWrite, PixelFormat.Format24bppRgb);
Marshal.Copy(bitmapData.Scan0, bytes, 0, bytes.Length);
bitmap.UnlockBits(bitmapData);
return bytes;
}
}
var bitmap = new Bitmap(@"C:\myimg.jpg");
var bitmap1 = new Bitmap(@"C:\myimg.jpg");
var bytes = bitmap.GetBytes();
var bytes1 = bitmap1.GetBytes();
//true
var sequenceEqual = bytes.SequenceEqual(bytes1);
Co konkretnie próbujesz zrobić? Wygląda na to że chcesz napisać bota do RPA.
Możesz wykorzystać gotowy program do automatyzacji, gdzie takie coś wyklikasz w kilka minut, przykładowo taką funkcję posiada na pewno Automation Anywhere https://rpaknowledge.com/automation-anywhere-image-recognition-best-practice/ , pozwala określić poziom tolerancji i przypasowania (przykładowo gdyby tło tej ikonki w podanym przykładzie mogło się zmienić). Na pewno znajdziesz bezpłatny program który to zrobi - zastanów się czy chcesz pisać to samemu, wyżej podany post jest nie o wyszukiwaniu obrazka jako fragmentu większego tylko o porównywaniu dwóch obrazków, co jest dużo łatwiejsze. Jeśli będziesz chciał dodać do tego przypasowanie w dowolnym miejscu ekranu, z podobnymi parametrami jak wyżej i w odpowiednim tempie żeby nie zajmować zbyt dużo CPU i GPU i nie spowalniać pracy to robi się z tego już niebanalne zadanie
Tutaj masz listę 15 darmowych tooli:
https://www.softwaresuggest.com/blog/free-open-source-rpa-robotic-process-automation-tools/
niektóre są open source więc możesz zobaczyć jak to tam jest zrobione
Grzegorz Świdwa