Witam, jak szybko bez zaglądania do każdej tabeli mogę przeglądać dane ze wszystkich tabel w całej bazie? Chciałbym znaleźć wszystkie pola i tabele, które zawierają dowolne wyrażenie regularne.
- Rejestracja:ponad 7 lat
- Ostatnio:ponad rok
- Postów:61
Oracle 
- Rejestracja:ponad 6 lat
- Ostatnio:4 dni
- Lokalizacja:Silesia/Marki
- Postów:5505
3
Na początek możesz wypisać wszystkie kolumny:
SELECT table_name, column_name, data_type, data_length FROM all_tab_columns
Pytanie jak chcesz wykryć że dany string (varchar2, varchar, char) zawiera wyrażenie regularne. Wyrażenia regularnego nie rozpoznasz nawet innym wyrażeniem regularnym bo są zbyt skomplikowane. Tu trzeba by napisać prawdziwy parser ze stosem
edytowany 1x, ostatnio: KamilAdam
sigmaalgebra
Załóżmy, że w jednej z tysiąca tabel jest pole, które zawiera dane np. "24.2", "91.2" i chcę ją znaleźć
AnyKtokolwiek
pachną jak wartości liczbowe, nie za bardzo do gryzienia regexem
sigmaalgebra
Nie musi być regex, może być do wyszukania jakieś słowo
- Rejestracja:ponad 13 lat
- Ostatnio:prawie 3 lata
- Rejestracja:prawie 5 lat
- Ostatnio:5 miesięcy
- Postów:2420
1
Mozesz zrobic export bazy do pliku sql i np. pythonem obrobic matchujac insert ... values (...). Pytanie tylko jak ty wykryjesz te regexy, taki foo.bar@gmail.com to email czy moze regex bo ma .? To czy pole varchar jest string'iem czy regexem czesto zalezy od aplikacji, moze powinienes szukac po drugiej stronie?
edytowany 1x, ostatnio: 99xmarcin
Nie chodzi mi o regExp, jakoś sobie poradzę. Chciałbym poznać metodę, aby przejrzeć wszystkie pola w tabelach w danym schemacie nie zaglądając do nich.
@sigmaalgebra: taki nick zobowiazuje do bycia precyzyjnym. Czy ty chcesz po prostu pobrac liste tabel i kolumn (takie pojecie jak pole w bazach danych nie funkcjonuje, sa tabele, wiersze, kolumny, klucze i indeksy)? Jezeli tak to bardzo proste wystarczy odpytac schemat - kazda baza robi to po swojemu wiec trzeba po prostu pogooglac. Jezeli chesz sie dobrac do faktycznych danych to nie bedzie takie proste bo jest to wbrew modelowi relacyjnemu.
Przyklad masz np. tutaj: https://www.postgresql.org/message-id/46688857.30003%40mediamatters.org
@0xmarcin: mi moja złośliwa jak zawsze intuicja podpowiada, że całe babranie jest na źle zaprojektowanej bazie, np "tabela na każde miasto"
- Rejestracja:prawie 10 lat
- Ostatnio:około 8 godzin
- Postów:2368
0
Witam, jak szybko bez zaglądania do każdej tabeli mogę przeglądać dane ze wszystkich tabel w całej bazie?
Bez zaglądania to się nie da w bazie.
Chciałbym znaleźć wszystkie pola i tabele, które zawierają dowolne wyrażenie regularne.
Jak wyżej.
To co możesz zrobić to napisanie procedury, która:
- na podstawie schemy informacyjnej ( bazy posiadają takie struktury, w których jest informacja o tabelach, atrybutach, typach danych itd.) będzie iterować po tabelach, polach
- budować dynamiczne zapytanie, która zwróci Ci informację, typu
select count(0) from tabela whera regexp_like(atrybut , twoj_regexp) - Uruchomić procedurę i poczekać na rezultat.
Ewentualnie przetwarzać poza bazą -> wspomniany wcześniej db dump + awk/grep.
- Rejestracja:ponad 4 lata
- Ostatnio:prawie 4 lata
- Postów:21
1
@sigmaalgebra: Listę kolumn każdej tabeli możesz dostać z view all_tab_columns. Ewentualnie user_tab_columns jeśli nie masz uprawnień do all%. Co do wyszukania konkretnych wartości w kolumnach to bez ich odczytania - tak rozumiem Twoje 'zaglądanie' - nie widzę możliwości. Niemniej można by sie pokusić - nie testowane - o policzenie statystyk z histogramami dla całego schematu i wtedy przeszukiwać tylko widoki ze statystykami. Zwróci to dane przybliżone, ale może Ci wystarczy ?
Jakiej metody by nie zastosować - eksport danych do plików tekstowych czy statystyki - to i tak trzeba przeczytać wszystkie dane. Skoro, więc szukasz konkretnych to wg mnie (i biorąc pod uwagę Twój lakoniczny opis) zastosowałbym pętlę w pl/sql przelatującą wszystkie kolumny, którymi się interesujesz. Jeśli sa poindeksowane to będzie szybciutko, a jeśli nie są, a masz wiele korów, to użyłbym paralelizmu. Kwiatkiem do tego kożucha może być ustawienie w sesji DB_FILE_MULTIBLOCK_READ_COUNT=999 - Oracle i tak dobierze sobie maksymalnie sensowną wartość. Jeśli baza jest sama na hoście to paralelizm ustawiłbym na ilość korów x2.