std::istream - zagwozdka odnośnie szybkości.

std::istream - zagwozdka odnośnie szybkości.
Ola Nordmann
Ola Nordmann
Ola Nordmann
Ola Nordmann
  • Rejestracja:ponad 11 lat
  • Ostatnio:ponad 8 lat
  • Postów:414
0

Hajo.
Pisząc program muszę przeszukiwać strumień w poszukiwaniu słów kluczowych (konkretniej odbieram stronę HTML przez POCO i szukam formularzy. Niestety XML::DOMParser wykłada się na skryptach JS).
Do rzeczy (sam nie lubię długich wątków czytać). Jak będzie wydajniej przeszukać strumień z pamięci(z pamięci ?)? Czytając go bajt po bajcie, czy może wczytać porcję danych i później ją przeszukać. Teoretycznie i tak wczytuję z pamięci i o wiele lepiej będzie wczytywać byte by byte, i od razu wyszukiwać niż 2 razy przeskakiwać przez to samo, ale nie pamiętam jak wyglądała operacja wypluwania ze strumienia i nie chcę się zdziwić. Wiem, że to znikoma różnica wydajności (ile może ważyć kod strony? 50kB?), ale lubię pisać wydajniej kiedy tylko mogę. ;)
Dzięki za odpowiedzi i to nie jest tak, że szukać się nie chce - zostałem po prostu natchniony avatarem @Rev'a. Poza tym zdania na ten temat mogą być podzielone, dopóki ktoś nie rzuci kodem z STL'a :)

@Edit:
Niestety w dokumentacji POCO nie napisano jak ten strumień wygląda w środku - równie dobrze może on pobierać dane bezpośrednio z socket'a co byłoby bardziej naturalne. Nie mam pojęcia gdzie (przykładowo) winsock przechowuje dane dla recv() i jak wygląda czas dostępu do nich.

<img src="http://scontent-a-vie.xx.fbcdn.net/hphotos-ash3/1379478_311850692288742_1730250652_n.jpg" />
Geniusz zua :>
edytowany 5x, ostatnio: Ola Nordmann
madmike
Popraw błędy bo poślę do kosza jako niewychowawczy - ludzie niestety czytając zapamiętuja pisownię. Tym bardziej, że te błędy są robione celowo :/
Ola Nordmann
Ale tam było serduszko :( Poza tym jestem skrajnie zmęczony.
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
lukasz1235
lukasz1235
lukasz1235
lukasz1235
  • Rejestracja:ponad 17 lat
  • Ostatnio:ponad 8 lat
  • Postów:1105
0

Może pokaż kod który chcesz zoptymalizować.

Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
Ola Nordmann
Ola Nordmann
Ola Nordmann
Ola Nordmann
  • Rejestracja:ponad 11 lat
  • Ostatnio:ponad 8 lat
  • Postów:414
0

To nie tak, że chcę go zoptymalizować. Napisałem funkcję na szybko i przepiszę jak będę wiedział, co jest lepsze.

Kopiuj
std::istream& operator>>( std::istream& is, ISKeyword& Keyword )
{
	std::string Line;
	size_t		Pos;
	while ( std::getline( is, Line ) )
	{
		Pos = Line.find( (std::string&)Keyword );
		if ( Pos != -1 )
		{
			Keyword = Line.substr( Pos, (Line.length() - Pos) );
			return is;
		}
	}
}
Kopiuj
std::istream& operator>>( std::istream& is, ISKeyword& Keyword )
{
	std::string Line;
	size_t		Pos;
	char		c = 0;
	int			Found = 0;
	while ( !is.eof() )
	{
		is>>c;

		if( c == Keyword[Found] )
		{
			++Found;
		}
		else
		{
			Found = 0;
		}

		if ( Found == Keyword.length() )
		{
			return is;
		}
	}
}

Pisane na szybko z palca. Które szybsze? :>

<img src="http://scontent-a-vie.xx.fbcdn.net/hphotos-ash3/1379478_311850692288742_1730250652_n.jpg" />
Geniusz zua :>
Ola Nordmann
ISKeyword to klasa - nakładka na stringa, żeby zrobić kilka testów - w kodzie mam manupulator.
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
lukasz1235
lukasz1235
lukasz1235
lukasz1235
  • Rejestracja:ponad 17 lat
  • Ostatnio:ponad 8 lat
  • Postów:1105
0
  1. Kody nie są równoważne (pierwszy modyfikuje Keyword, a drugi nie)
  2. Na oko pierwszy jest szybszy
  3. Nie możesz po prostu sprawdzić?
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
Ola Nordmann
Ola Nordmann
Ola Nordmann
Ola Nordmann
  • Rejestracja:ponad 11 lat
  • Ostatnio:ponad 8 lat
  • Postów:414
0
  1. Przy rozwiązaniu z getline muszę jakoś oddać to co zabrałem ze strumienia, a znajduje się za szukanym elementem.
  2. Na oko? Znaczy, że jest krótszy? Z pamięci na raz nie pobiorę więcej niż największy rejestr procesora. Czyli w pierwszym wypadku (z tego co mi się wydaje) 2 razy iteruję tablice.
  3. Mogę, ale wtedy nie będę wiedział dlaczego tak jest :)
<img src="http://scontent-a-vie.xx.fbcdn.net/hphotos-ash3/1379478_311850692288742_1730250652_n.jpg" />
Geniusz zua :>
edytowany 1x, ostatnio: Ola Nordmann
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
lukasz1235
lukasz1235
lukasz1235
lukasz1235
  • Rejestracja:ponad 17 lat
  • Ostatnio:ponad 8 lat
  • Postów:1105
0

No to profiler w łapki i wszystko stanie się jasne ;)

Ola Nordmann
Chciałbym, ale nie wiem, czy mam czas na takie rzeczy ;)
RE
Nasz czas jest równie cenny, więc jeżeli możesz coś sprawdzić sam to zrób to i podziel się z nami.
Ola Nordmann
Zaraz sprawdzę czemu poniższe rozwiązanie okazało się najszybsze ;)
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
Ola Nordmann
Ola Nordmann
Ola Nordmann
Ola Nordmann
  • Rejestracja:ponad 11 lat
  • Ostatnio:ponad 8 lat
  • Postów:414
0

Co ciekawe oba rozwiązania okazały się równie niewydajne. Po kilku eksperymentach doszedłem do formy, która zdaje się być wielokrotnie szybsza od starych, wolnych poprzedniczek:

Keyword to std::string - parametr manipulatora.

Kopiuj
std::istream& ISSearch::operator()(std::istream& is) const
{
	assert( Keyword.length() > 0 && Keyword[0] );

	char	Buffer[4096];
	int		Found = 0;
	char	Curr = 0;

	while ( is.get(Buffer, 4096, Keyword[0]) )
	{
		while( true )
		{
			is.get( Curr );

			if ( Curr == Keyword[Found] )
			{
				++Found;
			}
			else if ( !std::isspace( Curr ) )
			{
				Found = 0;
				break;
			}

			if ( Found == Keyword.length() )
			{
				return is;
			}
		}
	}

	return is;
}

@Edit:
Kod nie zadziałał jeśli szukany znak jest na początku strumienia. Jutro naprawię :)

<img src="http://scontent-a-vie.xx.fbcdn.net/hphotos-ash3/1379478_311850692288742_1730250652_n.jpg" />
Geniusz zua :>
edytowany 2x, ostatnio: Ola Nordmann
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
_13th_Dragon
_13th_Dragon
_13th_Dragon
_13th_Dragon
  • Rejestracja:ponad 19 lat
  • Ostatnio:2 miesiące
0
Kopiuj
std::istream &operator>>(std::istream &is,const ISKeyword &Keyword)
  {
   char c=0;
   int Found=0;
   while(is>>c)
     {
      if(c!=Keyword[Found]) Found=0;
      else if(++Found>=Keyword.length()) break;
     }
   return is;
  }

I nawet oko @lukasz1235 zauważy że to jest szybsze.
Można też tak:

Kopiuj
std::istream &operator>>(std::istream &is,const ISKeyword &Keyword)
  {
   char c;
   //for(int Found=0;(Found<Keyword.length())&&(is>>c);Found+=(c==Keyword[Found])) {}
   for(int Found=0;(Found<Keyword.length())&&(is>>c);Found=(c==Keyword[Found])?Found+1:0) {}
   return is;
  }
Wykonuję programy na zamówienie, pisać na Priv.
Asm/C/C++/Pascal/Delphi/Java/C#/PHP/JS oraz inne języki.
edytowany 2x, ostatnio: _13th_Dragon
Ola Nordmann
właśnie badam profilerem. Dodam te do kolekcji i zaprezentuje wyniki. Zapomniałem dlaczego ostatnio wywaliłem profiler... Napis ukończono 99% cieszy tylko przez pierwsze pół godziny :/
_13th_Dragon
Powiedz jakiego rodzaju słów szukasz, bo jeżeli to coś w rodzaju: - "kakakakakakakao" to na to jest lepszy algorytm.
Ola Nordmann
Różnie. Napisałem na początku - chcę parsować DOM z POCO. Muszę znaleźć początek formularza, koniec, (czyli "<form" albo "< form") i "</form>" z pomijaniem białych znaków. Do tego jeszcze pola formularzy, atrybuty etc, etc. Będę też go musiał rozszerzyć o wiecej niż jedno słowo kluczowe, bo atrybuty mogą być w losowej kolejności. Nie mam czasu i ochoty parsować całego html, ale niektóre dane muszę wydobyć. Parser od POCO wykłada się na XML. Poza tym niepotrzebnie by parsował cały dokument. Parsować, a później szukać - bez sensu.
Ola Nordmann
Z innej beczki. Nie wiem czemu na tych algorytmach Profiler nie chce mi pokazywać wywołania funkcji. Dobrze, że ma opcje 'Time lines', to przynajmniej 'coś' widać :) (skompilowałem na debug, żeby właśnie wywołania zachować na tym poziomie to i tak nie ma raczej znaczenia.)
Ola Nordmann
W drugim kodzie nie zerujesz found w przypadku złego znaku :)
_13th_Dragon
Racja, jakoś mi to "wymkło".
Udostępnij
Kopiuj link do postu Kopiuj link do postu jako Markdown
Komentuj
Treść
Podgląd
Kliknij, aby dodać treść...
Kliknij, aby dodać załącznik lub wklej ze schowka.
Instrukcja obsługi Markdown
Pomoc 1.18.8

Typografia

Edytor obsługuje składnie Markdown, w której pojedynczy akcent *kursywa* oraz _kursywa_ to pochylenie. Z kolei podwójny akcent **pogrubienie** oraz __pogrubienie__ to pogrubienie. Dodanie znaczników ~~strike~~ to przekreślenie.

Możesz dodać formatowanie komendami , , oraz .

Ponieważ dekoracja podkreślenia jest przeznaczona na linki, markdown nie zawiera specjalnej składni dla podkreślenia. Dlatego by dodać podkreślenie, użyj <u>underline</u>.

Komendy formatujące reagują na skróty klawiszowe: Ctrl+B, Ctrl+I, Ctrl+U oraz Ctrl+S.

Linki

By dodać link w edytorze użyj komendy lub użyj składni [title](link). URL umieszczony w linku lub nawet URL umieszczony bezpośrednio w tekście będzie aktywny i klikalny.

Jeżeli chcesz, możesz samodzielnie dodać link: <a href="link">title</a>.

Wewnętrzne odnośniki

Możesz umieścić odnośnik do wewnętrznej podstrony, używając następującej składni: [[Delphi/Kompendium]] lub [[Delphi/Kompendium|kliknij, aby przejść do kompendium]]. Odnośniki mogą prowadzić do Forum 4programmers.net lub np. do Kompendium.

Wspomnienia użytkowników

By wspomnieć użytkownika forum, wpisz w formularzu znak @. Zobaczysz okienko samouzupełniające nazwy użytkowników. Samouzupełnienie dobierze odpowiedni format wspomnienia, zależnie od tego czy w nazwie użytkownika znajduje się spacja.

Znaczniki HTML

Dozwolone jest używanie niektórych znaczników HTML: <a>, <b>, <i>, <kbd>, <del>, <strong>, <dfn>, <pre>, <blockquote>, <hr/>, <sub>, <sup> oraz <img/>.

Skróty klawiszowe

Dodaj kombinację klawiszy komendą notacji klawiszy lub skrótem klawiszowym Alt+K.

Reprezentuj kombinacje klawiszowe używając taga <kbd>. Oddziel od siebie klawisze znakiem plus, np <kbd>Alt+Tab</kbd>.

Indeks górny oraz dolny

Przykład: wpisując H<sub>2</sub>O i m<sup>2</sup> otrzymasz: H2O i m2.

Składnia Tex

By precyzyjnie wyrazić działanie matematyczne, użyj składni Tex.

<tex>arcctg(x) = argtan(\frac{1}{x}) = arcsin(\frac{1}{\sqrt{1+x^2}})</tex>

Kod źródłowy

Krótkie fragmenty kodu

Wszelkie jednolinijkowe instrukcje języka programowania powinny być zawarte pomiędzy obróconymi apostrofami: `kod instrukcji` lub ``console.log(`string`);``.

Kod wielolinijkowy

Dodaj fragment kodu komendą . Fragmenty kodu zajmujące całą lub więcej linijek powinny być umieszczone w wielolinijkowym fragmencie kodu. Znaczniki ``` lub ~~~ umożliwiają kolorowanie różnych języków programowania. Możemy nadać nazwę języka programowania używając auto-uzupełnienia, kod został pokolorowany używając konkretnych ustawień kolorowania składni:

```javascript
document.write('Hello World');
```

Możesz zaznaczyć również już wklejony kod w edytorze, i użyć komendy  by zamienić go w kod. Użyj kombinacji Ctrl+`, by dodać fragment kodu bez oznaczników języka.

Tabelki

Dodaj przykładową tabelkę używając komendy . Przykładowa tabelka składa się z dwóch kolumn, nagłówka i jednego wiersza.

Wygeneruj tabelkę na podstawie szablonu. Oddziel komórki separatorem ; lub |, a następnie zaznacz szablonu.

nazwisko;dziedzina;odkrycie
Pitagoras;mathematics;Pythagorean Theorem
Albert Einstein;physics;General Relativity
Marie Curie, Pierre Curie;chemistry;Radium, Polonium

Użyj komendy by zamienić zaznaczony szablon na tabelkę Markdown.

Lista uporządkowana i nieuporządkowana

Możliwe jest tworzenie listy numerowanych oraz wypunktowanych. Wystarczy, że pierwszym znakiem linii będzie * lub - dla listy nieuporządkowanej oraz 1. dla listy uporządkowanej.

Użyj komendy by dodać listę uporządkowaną.

1. Lista numerowana
2. Lista numerowana

Użyj komendy by dodać listę nieuporządkowaną.

* Lista wypunktowana
* Lista wypunktowana
** Lista wypunktowana (drugi poziom)

Składnia Markdown

Edytor obsługuje składnię Markdown, która składa się ze znaków specjalnych. Dostępne komendy, jak formatowanie , dodanie tabelki lub fragmentu kodu są w pewnym sensie świadome otaczającej jej składni, i postarają się unikać uszkodzenia jej.

Dla przykładu, używając tylko dostępnych komend, nie możemy dodać formatowania pogrubienia do kodu wielolinijkowego, albo dodać listy do tabelki - mogłoby to doprowadzić do uszkodzenia składni.

W pewnych odosobnionych przypadkach brak nowej linii przed elementami markdown również mógłby uszkodzić składnie, dlatego edytor dodaje brakujące nowe linie. Dla przykładu, dodanie formatowania pochylenia zaraz po tabelce, mogłoby zostać błędne zinterpretowane, więc edytor doda oddzielającą nową linię pomiędzy tabelką, a pochyleniem.

Skróty klawiszowe

Skróty formatujące, kiedy w edytorze znajduje się pojedynczy kursor, wstawiają sformatowany tekst przykładowy. Jeśli w edytorze znajduje się zaznaczenie (słowo, linijka, paragraf), wtedy zaznaczenie zostaje sformatowane.

  • Ctrl+B - dodaj pogrubienie lub pogrub zaznaczenie
  • Ctrl+I - dodaj pochylenie lub pochyl zaznaczenie
  • Ctrl+U - dodaj podkreślenie lub podkreśl zaznaczenie
  • Ctrl+S - dodaj przekreślenie lub przekreśl zaznaczenie

Notacja Klawiszy

  • Alt+K - dodaj notację klawiszy

Fragment kodu bez oznacznika

  • Alt+C - dodaj pusty fragment kodu

Skróty operujące na kodzie i linijkach:

  • Alt+L - zaznaczenie całej linii
  • Alt+, Alt+ - przeniesienie linijki w której znajduje się kursor w górę/dół.
  • Tab/⌘+] - dodaj wcięcie (wcięcie w prawo)
  • Shit+Tab/⌘+[ - usunięcie wcięcia (wycięcie w lewo)

Dodawanie postów:

  • Ctrl+Enter - dodaj post
  • ⌘+Enter - dodaj post (MacOS)