Шукати в усіх таблицях у всіх таблицях для отримання певної цінності (Oracle)


115

Чи можливо шукати в кожному полі кожної таблиці певне значення в Oracle?

У деяких таблицях сотні таблиць з тисячами рядків, тому я знаю, що це може зайняти дуже багато часу для запиту. Але єдине, що я знаю, - це те значення для поля, до якого я б хотів запитати 1/22/2008P09RR8. <

Я намагався використати це твердження нижче, щоб знайти відповідний стовпець на основі того, що я думаю, що його слід назвати, але це не дало результатів.

SELECT * from dba_objects 
WHERE object_name like '%DTN%'

На цю базу даних абсолютно немає документації, і я поняття не маю, звідки це поле витягується.

Будь-які думки?


Чи можемо ми зробити це за допомогою одного запиту замість збереженої процедури?
Freakyuser


@LalitKumarB Сторінка, яку ви перерахували, більше не доступна. Чи можна було б розмістити якусь інформацію як відповідь?
Dodzi Dzakuma

@DodziDzakuma Сторінка доступна lalitkumarb.wordpress.com/2015/01/06/… Також я опублікував відповідь, будь ласка, прокрутіть униз або подивіться stackoverflow.com/a/27794127/3989608
Lalit Kumar B

Якщо у вас виникли проблеми з пошуком запиту Lalit Kumar, спробуйте цю демонстрацію: sqlfiddle.com/#!4/76924c/2/0
DxTx

Відповіді:


93

Цитата:

Я намагався використати це твердження нижче, щоб знайти відповідний стовпчик на основі того, що, на мою, його слід назвати, але він не повернув результатів. *

SELECT * from dba_objects WHERE
object_name like '%DTN%'

Стовпець не є об’єктом. Якщо ви маєте на увазі, що очікуєте, що назва стовпця буде таким, як "% DTN%", потрібний запит:

SELECT owner, table_name, column_name FROM all_tab_columns WHERE column_name LIKE '%DTN%';

Але якщо рядок "DTN" - це лише здогадка з вашого боку, це, ймовірно, не допоможе.

До речі, наскільки ви впевнені, що "1/22 / 2008P09RR8" - це значення, вибране безпосередньо з одного стовпця? Якщо ви взагалі не знаєте, звідки він походить, це може бути об'єднання декількох стовпців, або результат якоїсь функції, або значення, що сидить у вкладеному об’єкті таблиці. Тож ви, можливо, переслідуєте диких гусей, намагаючись перевірити кожну колонку на ці значення. Ви не можете почати з того, що клієнтська програма відображає це значення, і спробувати розібратися, який запит він використовує для його отримання?

У будь-якому випадку, відповідь diciu дає один метод генерування SQL запитів для перевірки значення у кожному стовпчику кожної таблиці. Ви також можете робити подібні речі цілком за один сеанс SQL, використовуючи блок PL / SQL та динамічний SQL. Ось якийсь поспішно написаний код для цього:

    SET SERVEROUTPUT ON SIZE 100000

    DECLARE
      match_count INTEGER;
    BEGIN
      FOR t IN (SELECT owner, table_name, column_name
                  FROM all_tab_columns
                  WHERE owner <> 'SYS' and data_type LIKE '%CHAR%') LOOP

        EXECUTE IMMEDIATE
          'SELECT COUNT(*) FROM ' || t.owner || '.' || t.table_name ||
          ' WHERE '||t.column_name||' = :1'
          INTO match_count
          USING '1/22/2008P09RR8';

        IF match_count > 0 THEN
          dbms_output.put_line( t.table_name ||' '||t.column_name||' '||match_count );
        END IF;

      END LOOP;

    END;
    /

Є кілька способів, як ви могли б зробити це і більш ефективним.

У цьому випадку, враховуючи шукане значення, ви можете чітко усунути будь-який стовпець типу NUMBER або DATE, що зменшило б кількість запитів. Можливо, навіть обмежте його стовпцями, де тип схожий на "% CHAR%".

Замість одного запиту на стовпець ви можете створити один запит на таку таблицю:

SELECT * FROM table1
  WHERE column1 = 'value'
     OR column2 = 'value'
     OR column3 = 'value'
     ...
     ;

Ви повинні обмежити його стовпцями char, varchar та varchar2, оскільки стовпці числа та дати не можуть містити цей рядок.
Еріх Кітцмюллер

8
@ammoQ - як я вже говорив у другому-останньому абзаці?
Дейв Коста

Я запустив це на 9i, і я отримав невідому помилку колонки. Хтось може сказати мені, яку модифікацію потрібно буде виконати на 9i?
Regmi

@Regmi - вибачте, що насправді була помилка в моєму коді, а не проблема версії. Цикл повинен був керуватися all_tab_columnsне all_tables. Я це виправив.
Дейв Коста

@DaveCosta - Дякую за виправлення, але я все-таки отримую помилку "таблиця чи перегляд не існує" на рядку 6. Рядок 6 - "Виконати негайно".
Регмі

34

Я вніс деякі зміни до вищевказаного коду, щоб він працював швидше, якщо ви шукаєте лише одного власника. Вам просто потрібно змінити 3 змінні v_owner, v_data_type та v_search_string, щоб відповідати тому, що ви шукаєте.

SET SERVEROUTPUT ON SIZE 100000

DECLARE
  match_count INTEGER;
-- Type the owner of the tables you are looking at
  v_owner VARCHAR2(255) :='ENTER_USERNAME_HERE';

-- Type the data type you are look at (in CAPITAL)
-- VARCHAR2, NUMBER, etc.
  v_data_type VARCHAR2(255) :='VARCHAR2';

-- Type the string you are looking at
  v_search_string VARCHAR2(4000) :='string to search here...';

BEGIN
  FOR t IN (SELECT table_name, column_name FROM all_tab_cols where owner=v_owner and data_type = v_data_type) LOOP

    EXECUTE IMMEDIATE 
    'SELECT COUNT(*) FROM '||t.table_name||' WHERE '||t.column_name||' = :1'
    INTO match_count
    USING v_search_string;

    IF match_count > 0 THEN
      dbms_output.put_line( t.table_name ||' '||t.column_name||' '||match_count );
    END IF;

  END LOOP;
END;
/

Мені довелося прокоментувати перший рядок, щоб можна було запустити цей запит. Також мені не вдалося видалити фільтр власника та запустити запит.
Попа Андрій

1
Мені потрібно було поставити подвійні лапки навколо назви таблиці / назви стовпців, щоб уникнути проблем, коли їх потрібно цитувати:'SELECT COUNT(*) FROM "'||t.table_name||'" WHERE "'||t.column_name||'" = :1'
Стів Чемберс

Слідкуйте, що all_tab_cols також містить перегляди, незважаючи на назву
phil_w

що саме таке dbms_output? Оскільки запити успішно виконуються в DataGrip, але я не бачу жодного результату після цього.
misteeque

Я знаю, що це трохи старе, але коли я запускаю це, я просто отримую вихідний сценарій "анонімного блоку завершено"
JasonWH

7

Ось ще одна модифікована версія, яка порівняє нижню відповідність підрядків Це працює в Oracle 11g.

DECLARE
  match_count INTEGER;
-- Type the owner of the tables you are looking at
  v_owner VARCHAR2(255) :='OWNER_NAME';

-- Type the data type you are look at (in CAPITAL)
-- VARCHAR2, NUMBER, etc.
  v_data_type VARCHAR2(255) :='VARCHAR2';

-- Type the string you are looking at
  v_search_string VARCHAR2(4000) :='%lower-search-sub-string%';

BEGIN
  FOR t IN (SELECT table_name, column_name FROM all_tab_cols where owner=v_owner and data_type = v_data_type) LOOP

    EXECUTE IMMEDIATE 
    'SELECT COUNT(*) FROM '||t.table_name||' WHERE lower('||t.column_name||') like :1'
    INTO match_count
    USING v_search_string;

    IF match_count > 0 THEN
      dbms_output.put_line( t.table_name ||' '||t.column_name||' '||match_count );
    END IF;

  END LOOP;
END;
/

7

Так, ви можете, і ваша DBA буде ненавидіти вас, і ви побачите, що ви прибиватимете взуття до підлоги, тому що це призведе до безлічі вводу-виводу та приведе до зниження продуктивності бази даних, коли кеш чиститься.

select column_name from all_tab_columns c, user_all_tables u where c.table_name = u.table_name;

для початку.

Я б почав із запущених запитів, використовуючи v$sessionі v$sqlarea. Це змінюється на основі версії oracle. Це звузить простір і не вдарить по всьому.


7

Я знаю, що це стара тема. Але я бачу коментар до питання, запитуючи, чи можна це зробити, SQLа не використовувати PL/SQL. Тому думав розмістити рішення.

Наведена нижче демонстрація полягає у пошуку значень у всіх КОЛОНАХ усіх таблиць у всій СХЕМІ :

  • Пошук типу CHARACTER

Давайте шукатимемо значення KINGна SCOTTсхемі.

SQL> variable val varchar2(10)
SQL> exec :val := 'KING'

PL/SQL procedure successfully completed.

SQL> SELECT DISTINCT SUBSTR (:val, 1, 11) "Searchword",
  2    SUBSTR (table_name, 1, 14) "Table",
  3    SUBSTR (column_name, 1, 14) "Column"
  4  FROM cols,
  5    TABLE (xmlsequence (dbms_xmlgen.getxmltype ('select '
  6    || column_name
  7    || ' from '
  8    || table_name
  9    || ' where upper('
 10    || column_name
 11    || ') like upper(''%'
 12    || :val
 13    || '%'')' ).extract ('ROWSET/ROW/*') ) ) t
 14  ORDER BY "Table"
 15  /

Searchword  Table          Column
----------- -------------- --------------
KING        EMP            ENAME

SQL>
  • Пошук за числом типу NUMERIC

Давайте шукатимемо значення 20на SCOTTсхемі.

SQL> variable val NUMBER
SQL> exec :val := 20

PL/SQL procedure successfully completed.

SQL> SELECT DISTINCT SUBSTR (:val, 1, 11) "Searchword",
  2    SUBSTR (table_name, 1, 14) "Table",
  3    SUBSTR (column_name, 1, 14) "Column"
  4  FROM cols,
  5    TABLE (xmlsequence (dbms_xmlgen.getxmltype ('select '
  6    || column_name
  7    || ' from '
  8    || table_name
  9    || ' where upper('
 10    || column_name
 11    || ') like upper(''%'
 12    || :val
 13    || '%'')' ).extract ('ROWSET/ROW/*') ) ) t
 14  ORDER BY "Table"
 15  /

Searchword  Table          Column
----------- -------------- --------------
20          DEPT           DEPTNO
20          EMP            DEPTNO
20          EMP            HIREDATE
20          SALGRADE       HISAL
20          SALGRADE       LOSAL

SQL>

6
hrmm .... використання xml виглядає як надмірність. Крім того:Error occurred in XML processing ORA-00932: inconsistent datatypes: expected NUMBER got BLOB
towi

2
ORA-19202: сталася помилка при обробці XML ORA-00932: непослідовні типи даних: очікуваний CHAR отримав BLOB ORA-06512: у "SYS.DBMS_XMLGEN", рядок 288 ORA-06512: у рядку 1 19202. 00000 - "У процесі обробки XML сталася помилка % s "* Причина: Під час обробки функції XML сталася помилка * Дія: Перевірте подане повідомлення про помилку та виправте відповідну проблему
Mohammad Faisal

Будь-які ідеї? ORA-19202: сталася помилка при обробці XML ORA-22813: значення операнду перевищує системні межі ORA-06512: на "SYS.DBMS_XMLGEN", рядок 288 ORA-06512: у рядку 1
Menios

5

Я б зробив щось подібне (генерує все необхідне для вас вибір). Пізніше ви можете подати їх на sqlplus:

echo "select table_name from user_tables;" | sqlplus -S user/pwd | grep -v "^--" | grep -v "TABLE_NAME" | grep "^[A-Z]" | while read sw;
do echo "desc $sw" | sqlplus -S user/pwd | grep -v "\-\-\-\-\-\-" | awk -F' ' '{print $1}' | while read nw;
do echo "select * from $sw where $nw='val'";
done;
done;

Це дає:

select * from TBL1 where DESCRIPTION='val'
select * from TBL1 where ='val'
select * from TBL2 where Name='val'
select * from TBL2 where LNG_ID='val'

І що це робить - для кожного table_nameз user_tablesотримати кожне поле (з desc) і створити виділити * з таблиці, де поле дорівнює 'val'.


5

Я змінив сценарій Flood для виконання одного разу для кожної таблиці, а не для кожного стовпчика кожної таблиці для швидшого виконання. Для нього потрібен Oracle 11g або більше.

    set serveroutput on size 100000

declare
    v_match_count integer;
    v_counter integer;

    -- The owner of the tables to search through (case-sensitive)
    v_owner varchar2(255) := 'OWNER_NAME';
    -- A string that is part of the data type(s) of the columns to search through (case-insensitive)
    v_data_type varchar2(255) := 'CHAR';
    -- The string to be searched for (case-insensitive)
    v_search_string varchar2(4000) := 'FIND_ME';

    -- Store the SQL to execute for each table in a CLOB to get around the 32767 byte max size for a VARCHAR2 in PL/SQL
    v_sql clob := '';
begin
    for cur_tables in (select owner, table_name from all_tables where owner = v_owner and table_name in 
                       (select table_name from all_tab_columns where owner = all_tables.owner and data_type like '%' ||  upper(v_data_type) || '%')
                       order by table_name) loop
        v_counter := 0;
        v_sql := '';

        for cur_columns in (select column_name from all_tab_columns where 
                            owner = v_owner and table_name = cur_tables.table_name and data_type like '%' || upper(v_data_type) || '%') loop
            if v_counter > 0 then
                v_sql := v_sql || ' or ';
            end if;
            v_sql := v_sql || 'upper(' || cur_columns.column_name || ') like ''%' || upper(v_search_string) || '%''';
            v_counter := v_counter + 1;
        end loop;

        v_sql := 'select count(*) from ' || cur_tables.table_name || ' where ' || v_sql;

        execute immediate v_sql
        into v_match_count;

        if v_match_count > 0 then
            dbms_output.put_line('Match in ' || cur_tables.owner || ': ' || cur_tables.table_name || ' - ' || v_match_count || ' records');
        end if;
    end loop;

    exception
        when others then
            dbms_output.put_line('Error when executing the following: ' || dbms_lob.substr(v_sql, 32600));
end;
/

5

У мене виникли наступні проблеми для відповіді на @Lalit Kumars,

ORA-19202: Error occurred in XML processing
ORA-00904: "SUCCESS": invalid identifier
ORA-06512: at "SYS.DBMS_XMLGEN", line 288
ORA-06512: at line 1
19202. 00000 -  "Error occurred in XML processing%s"
*Cause:    An error occurred when processing the XML function
*Action:   Check the given error message and fix the appropriate problem

Рішення таке:

WITH  char_cols AS
  (SELECT /*+materialize */ table_name, column_name
   FROM   cols
   WHERE  data_type IN ('CHAR', 'VARCHAR2'))
SELECT DISTINCT SUBSTR (:val, 1, 11) "Searchword",
       SUBSTR (table_name, 1, 14) "Table",
       SUBSTR (column_name, 1, 14) "Column"
FROM   char_cols,
       TABLE (xmlsequence (dbms_xmlgen.getxmltype ('select "'
       || column_name
       || '" from "'
       || table_name
       || '" where upper("'
       || column_name
       || '") like upper(''%'
       || :val
       || '%'')' ).extract ('ROWSET/ROW/*') ) ) t
ORDER  BY "Table"
/ 

4

якщо ми знаємо назви таблиць і стовпців, але хочемо дізнатися кількість появи рядків для кожної схеми:

Declare

owner VARCHAR2(1000);
tbl VARCHAR2(1000);
cnt number;
ct number;
str_sql varchar2(1000);
reason varchar2(1000);
x varchar2(1000):='%string_to_be_searched%';

cursor csr is select owner,table_name 
from all_tables where table_name ='table_name';

type rec1 is record (
ct VARCHAR2(1000));

type rec is record (
owner VARCHAR2(1000):='',
table_name VARCHAR2(1000):='');

rec2 rec;
rec3 rec1;
begin

for rec2 in csr loop

--str_sql:= 'select count(*) from '||rec.owner||'.'||rec.table_name||' where CTV_REMARKS like '||chr(39)||x||chr(39);
--dbms_output.put_line(str_sql);
--execute immediate str_sql

execute immediate 'select count(*) from '||rec2.owner||'.'||rec2.table_name||' where column_name like '||chr(39)||x||chr(39)
into rec3;
if rec3.ct <> 0 then
dbms_output.put_line(rec2.owner||','||rec3.ct);
else null;
end if;
end loop;
end;

2

Порядок пошуку всієї бази даних:

    CREATE or REPLACE PROCEDURE SEARCH_DB(SEARCH_STR IN VARCHAR2, TAB_COL_RECS OUT VARCHAR2) IS
      match_count integer;
      qry_str varchar2(1000);
      CURSOR TAB_COL_CURSOR IS 
          SELECT TABLE_NAME,COLUMN_NAME,OWNER,DATA_TYPE FROM ALL_TAB_COLUMNS WHERE DATA_TYPE in ('NUMBER','VARCHAR2') AND OWNER='SCOTT';
          BEGIN  
            FOR TAB_COL_REC  IN TAB_COL_CURSOR
            LOOP
              qry_str := 'SELECT COUNT(*) FROM '||TAB_COL_REC.OWNER||'.'||TAB_COL_REC.TABLE_NAME|| 
              ' WHERE '||TAB_COL_REC.COLUMN_NAME;
               IF TAB_COL_REC.DATA_TYPE = 'NUMBER' THEN
                      qry_str := qry_str||'='||SEARCH_STR; 
               ELSE
                       qry_str := qry_str||' like '||SEARCH_STR; 
               END IF;
                       --dbms_output.put_line( qry_str );
                EXECUTE IMMEDIATE  qry_str  INTO match_count;
                IF match_count > 0 THEN          
                   dbms_output.put_line( qry_str );
                  --dbms_output.put_line( TAB_COL_REC.TABLE_NAME ||' '||TAB_COL_REC.COLUMN_NAME ||' '||match_count);     
                    TAB_COL_RECS := TAB_COL_RECS||'@@'||TAB_COL_REC.TABLE_NAME||'##'||TAB_COL_REC.COLUMN_NAME;
                END IF; 
          END LOOP;
     END SEARCH_DB;    

Виконати заяву

  DECLARE
    SEARCH_STR VARCHAR2(200);
    TAB_COL_RECS VARCHAR2(200);
    BEGIN
      SEARCH_STR := 10;
      SEARCH_DB(
        SEARCH_STR => SEARCH_STR,
        TAB_COL_RECS => TAB_COL_RECS
      );
     DBMS_OUTPUT.PUT_LINE('TAB_COL_RECS = ' || TAB_COL_RECS);
     END;

Зразкові результати

Connecting to the database test.
SELECT COUNT(*) FROM SCOTT.EMP WHERE DEPTNO=10
SELECT COUNT(*) FROM SCOTT.DEPT WHERE DEPTNO=10
TAB_COL_RECS = @@EMP##DEPTNO@@DEPT##DEPTNO
Process exited.
Disconnecting from the database test.

1

Я не з простого рішення в підказці SQL. Однак є досить багато таких інструментів, як жаба та PL / SQL Developer, які мають графічний інтерфейс, де користувач може ввести рядок, який потрібно шукати, і він поверне таблицю / процедуру / об'єкт, де це знайдено.


1

Існує кілька безкоштовних інструментів, які роблять такий вид пошуку, наприклад, цей працює добре, і вихідний код доступний: https://sites.google.com/site/freejansoft/dbsearch

Для використання цього інструменту вам знадобиться драйвер Oracle ODBC та DSN.


1

Змінення коду для пошуку беззастережного випадку за допомогою запиту LIKE замість пошуку точних збігів ...

DECLARE
  match_count INTEGER;
  -- Type the owner of the tables you want to search.
  v_owner VARCHAR2(255) :='USER';
  -- Type the data type you're looking for (in CAPS). Examples include: VARCHAR2, NUMBER, etc.
  v_data_type VARCHAR2(255) :='VARCHAR2';
  -- Type the string you are looking for.
  v_search_string VARCHAR2(4000) :='Test';
BEGIN
  dbms_output.put_line( 'Starting the search...' );
  FOR t IN (SELECT table_name, column_name FROM all_tab_cols where owner=v_owner and data_type = v_data_type) LOOP
    EXECUTE IMMEDIATE 
    'SELECT COUNT(*) FROM '||t.table_name||' WHERE LOWER('||t.column_name||') LIKE :1'
    INTO match_count
    USING LOWER('%'||v_search_string||'%');
    IF match_count > 0 THEN
      dbms_output.put_line( t.table_name ||' '||t.column_name||' '||match_count );
    END IF;
  END LOOP;
END;

0

- його виконання запущено - помилки немає

    SET SERVEROUTPUT ON SIZE 100000

DECLARE
   v_match_count     INTEGER;
   v_counter         INTEGER;




v_owner           VARCHAR2 (255) := 'VASOA';
v_search_string   VARCHAR2 (4000) := '99999';
v_data_type       VARCHAR2 (255) := 'CHAR';
v_sql             CLOB := '';

BEGIN
   FOR cur_tables
      IN (  SELECT owner, table_name
              FROM all_tables
             WHERE     owner = v_owner
                   AND table_name IN (SELECT table_name
                                        FROM all_tab_columns
                                       WHERE     owner = all_tables.owner
                                             AND data_type LIKE
                                                       '%'
                                                    || UPPER (v_data_type)
                                                    || '%')
          ORDER BY table_name)
   LOOP
      v_counter := 0;
      v_sql := '';

      FOR cur_columns
         IN (SELECT column_name, table_name
               FROM all_tab_columns
              WHERE     owner = v_owner
                    AND table_name = cur_tables.table_name
                    AND data_type LIKE '%' || UPPER (v_data_type) || '%')
      LOOP
         IF v_counter > 0
         THEN
            v_sql := v_sql || ' or ';
         END IF;

         IF cur_columns.column_name is not null
         THEN
            v_sql :=
                  v_sql
               || 'upper('
               || cur_columns.column_name
               || ') ='''
               || UPPER (v_search_string)||'''';

            v_counter := v_counter + 1;
         END IF;

      END LOOP;

      IF v_sql is  null
      THEN
         v_sql :=
               'select count(*) from '
            || v_owner
            || '.'
            || cur_tables.table_name;

      END IF;

      IF v_sql is not null
      THEN
         v_sql :=
               'select count(*) from '
            || v_owner
            || '.'
            || cur_tables.table_name
            || ' where '
            || v_sql;
      END IF;

      --v_sql := 'select count(*) from ' ||v_owner||'.'|| cur_tables.table_name ||' where '||  v_sql;


      --dbms_output.put_line(v_sql);
      --DBMS_OUTPUT.put_line (v_sql);

      EXECUTE IMMEDIATE v_sql INTO v_match_count;

      IF v_match_count > 0
      THEN
        DBMS_OUTPUT.put_line (v_sql);
        dbms_output.put_line('Match in ' || cur_tables.owner || ': ' || cur_tables.table_name || ' - ' || v_match_count || ' records');
      END IF;

   END LOOP;
EXCEPTION
   WHEN OTHERS
   THEN
      DBMS_OUTPUT.put_line (
            'Error when executing the following: '
         || DBMS_LOB.SUBSTR (v_sql, 32600));
END;
/

0

Запозичення, злегка покращення та спрощення в цьому дописі в блозі, здається, що наступний простий SQL-оператор робить цю роботу досить добре:

SELECT DISTINCT (:val) "Search Value", TABLE_NAME "Table", COLUMN_NAME "Column"
FROM cols,
     TABLE (XMLSEQUENCE (DBMS_XMLGEN.GETXMLTYPE(
       'SELECT "' || COLUMN_NAME || '" FROM "' || TABLE_NAME || '" WHERE UPPER("'
       || COLUMN_NAME || '") LIKE UPPER(''%' || :val || '%'')' ).EXTRACT ('ROWSET/ROW/*')))
ORDER BY "Table";

Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.