SQL*Loader
最終更新：
daidaibousi 2009年03月21日(土) 23:21:24履歴
sqlldrコマンドパラメータ 
ヘルプ
$ sqlldr
- ラメータなしで打つと、指定できるパラメータとそのデフォルト値が確認できる
PARFILE
コマンドラインでよく使うパラメータをファイルに指定する。
daily_report.par USERID=scott CONTROL=daily_report.ctl ERRORS=9999 LOG=daily_report.log $ sqlldr PARFILE=daily_report.par Password: password
- セキュリティ上、USERIDのパスワードは含めないこと。
DATE_CHACHE
- ータ・ファイルに同じ日付が繰り返して存在する場合、ダイレクト・パス・ロードの速度を向上できる。
- ダイレクト・パス・ロードの時のみ
- デフォルト(DATE_CACHE=1000)で使用可能
- ただし、デフォルト値(1000)を越えると、自動的に使用禁止になる
- たとえば、DATE_CACHE=5000を指定すると、作成された日付キャッシュごとに最大5000の一意の日付エントリが含まれる。
- 0以外の値を指定した場合、その値を越えてもキャッシュは使用禁止にならない
ERRORS
これを大きめに指定しておかないと、途中でロードが終了する
- 挿入エラーの許容最大数を指定
- 発生したエラーの数がERRORSに指定された値を超えると、ロード処理が中止される。
FILE
- エクステントを割り当てるデータベースファイルを指定
- ダイレクト・パスのパラレル・モードでのみ使用
- SLQ*Loaderの異なるプロセスに対する、ディスクの競合を最小限に抑える
MULTITHREADING
- デフォルト: 複数CPUシステムではtrueで、単一CPUシステムではfalse
- サーバーでのストリームのロードと並行して、クライアントでストリームを作成できる
PARALLEL(パラレル・モード)
- ダイレクト・ロード時に複数の同時セッションによって同じ表にデータをロードできるかどうかを指定
READSIZE（読取りバッファ・サイズ）
- 従来型パス・ロードの方法では、バインド配列は、読取りバッファのサイズによって制限される
- そのため読取りバッファを大きくすると、コミット操作を実行する前に、より多くのデータを読み取ることができる。
- READSIZEに1000000を設定すると、コミットを実行する前に、SQL*Loaderによって、外部のデータ・ファイルから1,000,000バイト単位で読取りを実行できる
ROWS（1回にコミットする行数）
- 従来型パス・ロードの場合のみ: ROWSでバインド配列の行数を指定
- ダイレクト・パス・ロードの場合のみ: ROWSでデータ・ファイルからデータのセーブ前に読み込む行数を指定
SILENT（フィードバック・モード）
- HEADER: 画面に通常表示されるSQL*Loaderのヘッダー・メッセージを非表示に
- FEEDBACK: 画面に通常表示される「commit point reached」フィードバック・メッセージを非表示に
- ERRORS: エラーが発生したためそのレコードが不良ファイルに書き込まれた場合、エラー・メッセージがログ・ファイルに出力されないように
- DISCARDS: レコードが廃棄ファイルに書き込まれた場合に、そのことを示すメッセージがログ・ファイルに出力されないように
- PARTITIONS: パーティション表のダイレクト・ロード中、ログ・ファイルに対するパーティションごとの統計情報の書込みを使用禁止に
- ALL: すべての抑止値（HEADER、FEEDBACK、ERRORS、DISCARDSおよびPARTITIONSパラメータ）を実装
SILENT=(HEADER, FEEDBACK)
SKIP_INDEX_MAINTENANCE
- ダイレクト・パス・ロードの索引メンテナンスを停止する
- 索引キーが付けられた索引パーティションには、索引キーのかわりに索引使用禁止が設定される
SKIP_UNUSABLE_INDEXES
- 索引使用禁止状態の索引が検出された場合、使用禁止状態の索引はスキップされ、ロード処理は続行される。
- ってロード開始前の状態が使用禁止の索引を含む表をロードできる。
- どうもロードが速くなるというオプションではない？
- ロード時に使用禁止状態でない索引は、SQL*Loaderによってメンテナンスされる
STREAMSIZE
- ダイレクト・パス・ストリーム・バッファのサイズを指定する
- 複数CPUシステムでダイレクト・パス・ロードを実行する場合、列配列の行数およびストリーム・バッファのサイズを指定すると、特に有効。
制御ファイル
OPTION
- コマンドライン・パラメータを指定できる
OPTIONS (BINDSIZE=100000, SILENT=(ERRORS, FEEDBACK) )
SQL*Loaderの文字コード
- データファイルのキャラクタ・セットはCHARACTERSETで指定できる
- CHARACTERSETで指定されていない場合、NSL_LANGが使用される
LOAD DATA
- 制御ファイルの一番上に書く
入力ファイル指定
| INFILE | データファイルを指定する。入力データであるCSVファイルや固定長ファイル。複数ファイルを指定することも可能。制御ファイル内にデータがある場合は「*」を指定。 | SQL*Loaderを実行したディレクトリからの相対パスでディレクトリを指定可能。 |
- 固定長レコード
- 全レコードnバイト長の固定レコード形式
INFILE datafile_name "fix n"
- 可変レコード
- レコード長フィールドのバイト数を指定
INFILE "datafile_name" "var n" ... 009hello,cd,010world,im,これだと1レコード目は「9文字」、2レコード目は「10文字」
- ストリームレコード
- レコード終了記号を読み込むことで1レコードとする
- UNIXベースのプラットフォームでは、terminator_stringを指定しない場合、デフォルトでLF文字\nが使用される
INFILE datafile_name ["str terminator_string"]
- 性能
- 固定長 > 可変 > ストリーム
- 各データ・ファイルに対してINFILE句を指定する
- レコードのレイアウトは同じである必要がある
INFILE mydat1.dat BADFILE mydat1.bad DISCARDFILE mydat1.dis INFILE mydat2.dat
エラーファイル指定
| BADFILE | 何らかのエラーがあってDBに入れられないデータがあった場合、そのデータがこのファイルに出力される。 | 入力データファイルとしてそのままINFILEで指定できる |
| DISCARDFILE | WHENによってロード対象外となった廃棄データが、このファイルに出力される。 |
データ挿入モード指定
| INSERT | 新規にデータをロードする。 | ロードする前に表を空にする必要がある |
| APPEND | データを追加する。 | |
| REPLACE | テーブルの内容を全て削除し、新規にデータをロードする。 | 削除は、DELETEに相当。 |
| TRUNCATE | テーブルの内容を全て削除し、新規にデータをロードする。 | 削除は、TRUNCATEに相当。 |
INTO TABLE
- データを入れるテーブルを指定する。
データの区切り
| FIELDS TERMINATED BY | データを区切る文字を指定。 | |
| FIELDS OPTIONALLY ENCLOSED BY | データを囲む文字を指定。囲まない場合は不要。 |
- カンマ区切り
- FIELDS TERMINATED BY ","
- タブ区切り
- FIELDS TERMINATED BY X'09'
- いくつかの空白やタブ区切り
- FIELDS TERMINATED BY WHITESPACE
TRAILING NULLCOLS
- 制御ファイルの定義で指定したフィールドの数が、実際にレコード中に存在するフィールドより多い場合、残りの（指定された余分の）列にNULL値を設定する。
索引新規作成のための一時領域算出方法
1.3 * key_storage
この式では、キー記憶域が次のように定義されます。
key_storage = (number_of_rows) *
( 10 + sum_of_column_sizes + number_of_columns )
エラー
データファイルのフィールドが最大長を超えています
- SQL*Loaderは、１カラム256バイト以上のデータを登録しようとすると上記エラーが起きる。
- ということで、各カラム定義にCHAR(1000)とか指定する
- 何もカラム定義をしない時はCHAR(255)
外部表とSQL*Loaderの使い分け
- 外部表を使うほうがいい
- データベースへのロード時にデータを変換する場合
- 透過的にパラレル処理を行う前に、外部データを分割する必要がない場合
- SQL*Loaderを使った方がいい
- リモートでデータをロードする場合
- データに対して変換を行う必要がなく、そのデータをパラレルでロードする必要がない場合
このページへのコメント
gl13Ac Thanks a lot for the blog article.Thanks Again. Much obliged.
SQL*Loader - 鐃緒申鐃�.memo - Seesaa Wiki鐃淑ワ申鐃緒申鐃緒申鐃緒申 for 鐃緒申鐃殉￥申鐃夙フワ申鐃緒申 ��≪�潟�������若�� ��≪�������������� http://www.pslcbi.com/moncler2014.html
SQL*Loader - 鐃緒申鐃�.memo - Seesaa Wiki鐃淑ワ申鐃緒申鐃緒申鐃緒申 for 鐃緒申鐃殉￥申鐃夙フワ申鐃緒申 ��≪�潟�������若�� ��������潟�吾�ｃ�宴����� 羶�絎� http://www.pslcbi.com/moncler2014.html
Hi friends, how is the whole thing, and what you would like to say on the topic of this article, in my view its genuinely remarkable in favor of me.|
サマンサキングズ http://www.quizverse.com/サマンサキングズ-バッグ-c-15_17.html
J0DgRx <a href="http://apuwspyirnhi.com/">apuwspyirnhi</a>, [url=http://bybfrnqonyxf.com/]bybfrnqonyxf[/url], [link=http://nqptxdluspav.com/]nqptxdluspav[/link], http://cihpyucygcxf.com/