Sql server FullTextSearch do pracy z plikami .pdf

Sql server FullTextSearch do pracy z plikami .pdf
balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Witam,

otóż probuję skonfigurować fulltextsearch, wydawało mi się, że wszystko idzię w dobrym kierunku. Niestety po wrzuceniu plików do katalogu FileTable, nie jestem w stanie wyszukiwac treści w plikach z roszerzeniem .pdf, natomiast z .txt już mi szuka. Wydaję mi się, że mogłem coś popsuć z tworzeniem indeksów.

Full-Text Search feature zainstalowany

tworzenie tabeli:

Kopiuj
CREATE TABLE dbo.articles(
   id INT IDENTITY(1, 1) NOT NULL,
   content VARBINARY(MAX),
   extension VARCHAR(5),
   title NVARCHAR(255)
);
ALTER TABLE dbo.articles ADD CONSTRAINT PK_articles PRIMARY KEY CLUSTERED (
   id
);

Tworzenie fulltext catalog + Index

Kopiuj
CREATE FULLTEXT CATALOG DbaPresentsArticles; 
CREATE FULLTEXT INDEX ON dbo.articles(
   content TYPE COLUMN extension LANGUAGE 1033
)
KEY INDEX PK_articles ON DbaPresentsArticles;

Próba wyszukania w którym pdfie znajduję sie dany text:

Kopiuj
SELECT *
FROM dbo.articles
WHERE contains(content,'Ala');

Adobe IFilter 64 bit, sciezka dodana do zmiennej srodowiskowej PATH

edytowany 5x, ostatnio: balti
PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

A co zwraca to zapytanie:

Kopiuj
SELECT document_type, path
FROM sys.fulltext_document_types
WHERE document_type = '.pdf'
balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

.pdf | C:\AdobeIFilter\bin\PDFFilter.dll

edytowany 1x, ostatnio: balti
PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

A to ustawiałeś:

Kopiuj
EXEC sp_fulltext_service @action='load_os_resources', @value=1;
EXEC sp_fulltext_service @action='verify_signature', @value=0;
balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Tak to też miałem ustawione

PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

Dla pewności zapytam, co zwraca:

Kopiuj
select serverproperty('IsFullTextInstalled')

Dodatkowo czy nadałes uprawnienia do katalogu C:\AdobeIFilter dla użytkownika, na którym jest uruchomiona SQL Servera

balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Zapytanie zwraca 1, co do uprawnien to mam ustawioną pełną kontrolę dla każdego użytkownika w systemie, natomiast do bazy loguję się na konto "sa". Czyli z pełnymi prawami do modyfikacji.

edytowany 1x, ostatnio: balti
PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

Konto na jakie sie logujesz nie ma znaczenia, na jakim koncie działa usługa SQL Server?
/o jakim sysytemie mówimy windows?
Co zwraca:

Kopiuj
select @@version

i

Kopiuj
SELECT  DSS.servicename,
        DSS.service_account
FROM    sys.dm_server_services AS DSS;
edytowany 1x, ostatnio: Panczo
balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0
  1. komenda
    Microsoft SQL Server 2016 (SP1-GDR) (KB3210089) - 13.0.4202.2 (X64) Dec 13 2016 05:22:44 Copyright (c) Microsoft Corporation Developer Edition (64-bit) on Windows 10 Education 6.3 <X64> (Build 14393: ) (Hypervisor)
  2. komenda
    SQL Server (SERWERBAZYDANYCH) NT Service\MSSQL$SERWERBAZYDANYCH
    SQL Server Agent (SERWERBAZYDANYCH) NT Service\SQLAgent$SERWERBAZYDANYCH
    SQL Full-text Filter Daemon Launcher (SERWERBAZYDANYCH) NT Service\MSSQLFDLauncher$SERWERBAZYDANYCH

Dodam, że otworzyłem pdf za pomocą notepad++ i znalazłem w miare poprawne wyrazy (nie szlacki) i starałem się wyszukać danego wyrazu za pomocą podzapytania.Niestety nie zwróciło mi informacji w którym pliku jest dany wyraz.

edytowany 4x, ostatnio: balti
PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

Nadaj uprawnienia do katalogu adobeifilter dla kont z kolumny service_account, pomin sql agent. Zrestartuj usługę sqla i zobacz czy cos da

balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Nie jestem pewny czy dobrze nadałem prawa poniżej wrzucam screeny w zalaczniku, a także wyszukiwanie tresci w plikach .txt i .pdf

PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

nie widzę uprawnien dla:
NT Service\MSSQL$SERWERBAZYDANYCH i NT Service\MSSQLFDLauncher$SERWERBAZYDANYCH

balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Dodałem uprawnienia i zrestartowałem usługi, niestety w dalszym ciągu mi nie wyszukuję w pdfie.
komendy uzywam takiej:

Kopiuj
select * from dbo.filetabela d where contains (d.file_stream,'Autorzy')
edytowany 1x, ostatnio: balti
PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

Gdzieś czytałem że ktoś miał problemy IFilter 11 na SQL 2014 i zadziałało mu z 9, może to rozwiaże twój problem:
ftp://ftp.adobe.com/pub/adobe/acrobat/win/9.x/

edytowany 1x, ostatnio: Panczo
balti
  • Rejestracja:prawie 10 lat
  • Ostatnio:ponad 2 lata
  • Postów:156
0

Probowałem niestety w dalszej części nie działa. (używam sql server 2016)

PA
  • Rejestracja:ponad 22 lata
  • Ostatnio:około godziny
  • Postów:3866
0

Tu juz chyba więcej nie pomogę, problemem może być wersja systemu:

https://forums.adobe.com/thread/2075959

Masz coś w logach SQL-a?

Kliknij, aby dodać treść...

Pomoc 1.18.8

Typografia

Edytor obsługuje składnie Markdown, w której pojedynczy akcent *kursywa* oraz _kursywa_ to pochylenie. Z kolei podwójny akcent **pogrubienie** oraz __pogrubienie__ to pogrubienie. Dodanie znaczników ~~strike~~ to przekreślenie.

Możesz dodać formatowanie komendami , , oraz .

Ponieważ dekoracja podkreślenia jest przeznaczona na linki, markdown nie zawiera specjalnej składni dla podkreślenia. Dlatego by dodać podkreślenie, użyj <u>underline</u>.

Komendy formatujące reagują na skróty klawiszowe: Ctrl+B, Ctrl+I, Ctrl+U oraz Ctrl+S.

Linki

By dodać link w edytorze użyj komendy lub użyj składni [title](link). URL umieszczony w linku lub nawet URL umieszczony bezpośrednio w tekście będzie aktywny i klikalny.

Jeżeli chcesz, możesz samodzielnie dodać link: <a href="link">title</a>.

Wewnętrzne odnośniki

Możesz umieścić odnośnik do wewnętrznej podstrony, używając następującej składni: [[Delphi/Kompendium]] lub [[Delphi/Kompendium|kliknij, aby przejść do kompendium]]. Odnośniki mogą prowadzić do Forum 4programmers.net lub np. do Kompendium.

Wspomnienia użytkowników

By wspomnieć użytkownika forum, wpisz w formularzu znak @. Zobaczysz okienko samouzupełniające nazwy użytkowników. Samouzupełnienie dobierze odpowiedni format wspomnienia, zależnie od tego czy w nazwie użytkownika znajduje się spacja.

Znaczniki HTML

Dozwolone jest używanie niektórych znaczników HTML: <a>, <b>, <i>, <kbd>, <del>, <strong>, <dfn>, <pre>, <blockquote>, <hr/>, <sub>, <sup> oraz <img/>.

Skróty klawiszowe

Dodaj kombinację klawiszy komendą notacji klawiszy lub skrótem klawiszowym Alt+K.

Reprezentuj kombinacje klawiszowe używając taga <kbd>. Oddziel od siebie klawisze znakiem plus, np <kbd>Alt+Tab</kbd>.

Indeks górny oraz dolny

Przykład: wpisując H<sub>2</sub>O i m<sup>2</sup> otrzymasz: H2O i m2.

Składnia Tex

By precyzyjnie wyrazić działanie matematyczne, użyj składni Tex.

<tex>arcctg(x) = argtan(\frac{1}{x}) = arcsin(\frac{1}{\sqrt{1+x^2}})</tex>

Kod źródłowy

Krótkie fragmenty kodu

Wszelkie jednolinijkowe instrukcje języka programowania powinny być zawarte pomiędzy obróconymi apostrofami: `kod instrukcji` lub ``console.log(`string`);``.

Kod wielolinijkowy

Dodaj fragment kodu komendą . Fragmenty kodu zajmujące całą lub więcej linijek powinny być umieszczone w wielolinijkowym fragmencie kodu. Znaczniki ``` lub ~~~ umożliwiają kolorowanie różnych języków programowania. Możemy nadać nazwę języka programowania używając auto-uzupełnienia, kod został pokolorowany używając konkretnych ustawień kolorowania składni:

```javascript
document.write('Hello World');
```

Możesz zaznaczyć również już wklejony kod w edytorze, i użyć komendy  by zamienić go w kod. Użyj kombinacji Ctrl+`, by dodać fragment kodu bez oznaczników języka.

Tabelki

Dodaj przykładową tabelkę używając komendy . Przykładowa tabelka składa się z dwóch kolumn, nagłówka i jednego wiersza.

Wygeneruj tabelkę na podstawie szablonu. Oddziel komórki separatorem ; lub |, a następnie zaznacz szablonu.

nazwisko;dziedzina;odkrycie
Pitagoras;mathematics;Pythagorean Theorem
Albert Einstein;physics;General Relativity
Marie Curie, Pierre Curie;chemistry;Radium, Polonium

Użyj komendy by zamienić zaznaczony szablon na tabelkę Markdown.

Lista uporządkowana i nieuporządkowana

Możliwe jest tworzenie listy numerowanych oraz wypunktowanych. Wystarczy, że pierwszym znakiem linii będzie * lub - dla listy nieuporządkowanej oraz 1. dla listy uporządkowanej.

Użyj komendy by dodać listę uporządkowaną.

1. Lista numerowana
2. Lista numerowana

Użyj komendy by dodać listę nieuporządkowaną.

* Lista wypunktowana
* Lista wypunktowana
** Lista wypunktowana (drugi poziom)

Składnia Markdown

Edytor obsługuje składnię Markdown, która składa się ze znaków specjalnych. Dostępne komendy, jak formatowanie , dodanie tabelki lub fragmentu kodu są w pewnym sensie świadome otaczającej jej składni, i postarają się unikać uszkodzenia jej.

Dla przykładu, używając tylko dostępnych komend, nie możemy dodać formatowania pogrubienia do kodu wielolinijkowego, albo dodać listy do tabelki - mogłoby to doprowadzić do uszkodzenia składni.

W pewnych odosobnionych przypadkach brak nowej linii przed elementami markdown również mógłby uszkodzić składnie, dlatego edytor dodaje brakujące nowe linie. Dla przykładu, dodanie formatowania pochylenia zaraz po tabelce, mogłoby zostać błędne zinterpretowane, więc edytor doda oddzielającą nową linię pomiędzy tabelką, a pochyleniem.

Skróty klawiszowe

Skróty formatujące, kiedy w edytorze znajduje się pojedynczy kursor, wstawiają sformatowany tekst przykładowy. Jeśli w edytorze znajduje się zaznaczenie (słowo, linijka, paragraf), wtedy zaznaczenie zostaje sformatowane.

  • Ctrl+B - dodaj pogrubienie lub pogrub zaznaczenie
  • Ctrl+I - dodaj pochylenie lub pochyl zaznaczenie
  • Ctrl+U - dodaj podkreślenie lub podkreśl zaznaczenie
  • Ctrl+S - dodaj przekreślenie lub przekreśl zaznaczenie

Notacja Klawiszy

  • Alt+K - dodaj notację klawiszy

Fragment kodu bez oznacznika

  • Alt+C - dodaj pusty fragment kodu

Skróty operujące na kodzie i linijkach:

  • Alt+L - zaznaczenie całej linii
  • Alt+, Alt+ - przeniesienie linijki w której znajduje się kursor w górę/dół.
  • Tab/⌘+] - dodaj wcięcie (wcięcie w prawo)
  • Shit+Tab/⌘+[ - usunięcie wcięcia (wycięcie w lewo)

Dodawanie postów:

  • Ctrl+Enter - dodaj post
  • ⌘+Enter - dodaj post (MacOS)