Oracle 質問総合スレ13 [無断転載禁止]©2ch.net
■ このスレッドは過去ログ倉庫に格納されています
パーティションの話を出したのはチューニングするなら
高い効果が見込めるところから検討すべきって話
もちろんいろんな事情で出来ないとかやっても効果が限定的になりそうって場合もあるけどね
チューニングに必要な情報をまず集めて
最初にいろんな選択肢を出した上でどれから試すか決めないと
パーティションがどうなってるかはわからないけどとりあえずクエリだけ並列化してみるってのは
すぐ試せるだけの力があればいいけど、そうじゃないならアプローチとして微妙
まあ、がんばって みんな丁寧に相手し過ぎ。
素人過ぎて話にならんレベルだろ。 皆さまお付き合いありがとうございます。昨日は投げやりなコメントをしてしまいました。言われていることがわかってきたかもしれません。わたしの理解を書かせて頂きます_(._.)_
パラレル処理「alter session後のSQL文が並列にデータにアクセスして処理される」、ダイレクトパスインサート「データベースバッファを経由せずデータファイルへ直接データを登録すること」
わたしがやりたいことは「大量のinsert〜values文を２倍程度早く処理させたい」ので、76さんのサイトに書いてあるように「パラレル処理はむり」で、「insert /append_values/の書き方でダイレクトパスインサートはできる」と理解しました。
>>77
パーティション構成次第でパラレルできるできないという話かと思ってましたが、別の話でパーティション構成を変えることで改善されることもあるという話だったんですね。
わたしはJavaAP開発者なのでインフラ側までは口出すことができず、SQL改修などでできる性能改善をやろうとしてます。1table1000万recordをselectしたりするのでパラレルクエリもいつかは実装できたらなとは思ってます。 >>80
だからsqlldrでやれや。
ダイレクトもパラレルも比較的簡単にできるから。 >>81
はい！sqlloaderを検討します。月曜日からsqlloaderを試せるように下調べしてみます。 >>81
わざわざWebアプリでやってるんだからsqlldrは要件に合わんのだろ
やるにしてもExternal Tableだけど、そういうLOAD系が使える話じゃないんじゃね？ マジカ。。
それでいいならINSERTとか最初から選択しなくてもよかったんじゃ。。。 シフトザオラクルなんかソースとして持ち出すとか、よくわからないけど日々ググってコピーして仕事してます臭がくっさいくっさい。 sqlloaderは難しいですかね・・・。もし実現できるとしても結構な改修量になる上に懸念点も出てくる気がしてるので、避けたい選択肢ではあります。
sqlloaderが難しいとなると、insert文に/append_value/を付加したダイレクトパスインサートにできるくらいでしょうか
>>84
すみません、どこの話に対してのコメントですか？
>>85
否定はしません。。皆さんは公式マニュアルなどを見ながらって感じですか？ >>86
つっこむデータをcsv等のファイルに落とせるんだったら、後は簡単だろ。
改修する前に、早くなるかどうかの検証するくらいならすぐできるだろ >>87
だよな。
こんな簡単なこともできないのか、とただ呆れるばかりだよ。
改修も簡単。 >>88
それな！
読まないでネットで質問したり、誰が書いたのかわからんホームページの落書きをよく仕事で使おうとするわ。
客や上司になんて説明すんだろね。 皆さまありがとうございます。ではsqlloaderを検討してみようと思います。
エラーハンドリングがどうなるのかは気になるところではありますが、まずJavaからsqlloaderを呼び出して正常処理させることを目標に進めてみようと思います。 みんな最初は素人なんだからもう少し優しくしてやれよ
Orableはマニュアルが間違ってること多々あるんだし
試してみないことには分からないこともよくある 間違ってることが多々あるのと、見ないのとではかなり違う >>92
勘違いにも気づかせてもらい、十分優しく対応して頂けていると思っていて感謝してます_(._.)_
ＡＰ開発側にこのような経験ある人はなかなかいなかったり、インフラ側に聞いてもＡＰ実装レベルの話は知らん、という感じだったりで身近に聞ける人がいないのでとても助かってます。
>>93
パット見読みやすい方に逃げている?状態なので、少しずつマニュアルとお友達になっていけるようにします！ Oracle用語で Google 検索したときに、公式マニュアルの結果が上位に来ないことも問題。
この辺はOracleの努力が足りないと言わざるを得ない。 バックアップ・リカバリとかの運用設計はインフラ担当がやるのが普通かもしれんが
テーブルをどういう風にパーティショニングすべきかみたいなDB設計は
アプリケーション開発者がやるのが普通だと思ってるんだがそうでもないのかな？ >>95
そもそもOTNの所から探せってスタンスだしね 今回はうちの関係者がインフラにいてやりとりできますが、ＡＰ開発側とインフラは完全に分かれていてどんな人がインフラやっているかわからなかった時もざらにあります。
現状は・・・インフラ側：こっちが考えた環境設計に文句あんの？ＡＰ側：ＡＰ作るだけで精一杯だし、ＡＰはデプロイとＤＢにデータ突っ込むだけで良いでしょ？が多いかなと思っていますが、皆さまのところはいかがでしょう？笑
でもOracleは自由度が高いからＡＰももっと理解して使ってよっていう考えが出てくるのかなとも思ってます。Oracle現場は今回はじめてなもので(^^; SQLLoaderで主キー違いで並列実行すればいいのに。外部表でファイルのめめまテーブルのように見える機能もある。 アプリのことをAPと略す会社からは
プログラマーのことをPGと略す会社と同じブラック臭がする
(あくまで個人の感想です) >>92
素人じゃないだろ。それでメシ食ってるぽいじゃねーか。技術者募集！未経験者歓迎！じゃねーんだぞ。
オラクルのマニュアルが間違っていた場合に発生したトラブルと
シフトザオラクルを参考にして発生したトラブルは意味合いが全然違う。
趣味でプログラムやってるだけなら文句は言わんが仕事でやるなら迷惑です。 マニュアルが間違ってることがあるんなら
まず初心者に優しくすべきなのはOracle社だろ それじゃトレーニングやサポートで金取れなくなるだろ? OTN見ると無料講習あるみたいですけど、行ったことある方いますか？
初心者なら行っといて損はない！って感じの内容なのでしょうか。行っても半分は宣伝みたいになるなら行かなくて良いかなと思ってしまいます。
こういうとこの講習って平気で平日の昼間やるから中々行けないですけど。。 >>101
君が開発者やDBAとしてメシ食ってたとしても
初めてNeo4jやHBase扱うことになったらそれについては素人だろ？
他人をバカにする前にアプローチの仕方を教えてやれよ 他のDBに比べるとオラクルのマニュアル類は不親切だよな
普通ならData Loadingしたい場合そういう選択肢があるかと
それらのメリット・デメリットや制限について比較説明してるのがすぐ見つかる
オラクルでもそういうのがあるにはあるんだけど見つけにくい 多機能過ぎるししゃーない
MOSドキュメントの方が正確性あるしな >>106
はあ？
それは公式マニュアルじゃないものを公式マニュアルだと勘違いしてないか？ OTNに昔みたいなまともなシスオペと活気があればいいのにな
そしたらOracleAceみたいな連中がよろこんでレスしてくれたろうに >>105
俺が今までやったことがない案件をやる時はキチンと勉強してるよ。
そういう時間も納期の見積もりに入れるしな。
簡単な学習用環境くらいは自宅に用意する。
2ちゃんに質問とかはしないし答える側だからな。
俺はちゃんとやってるヤツには教えるつもりはあるけど、あまりに程度が低いヤツに教えることは向いてないから迷惑かける前に誰でもできるコンビニの仕事とかでもした方がいいよって思うね。
それでも何も言われないよりは言われた方が何かしら得るものがあるとは思うがね。
これはバカにしてるとかそういう程度の低い話ではないぞ。 UbuntuLinux16.04にOracle11gExpressを入れているんですが、パソコンを起動する度にOracleも自動起動してしまうのですが、Windowsのサービスみたいに自動起動をオフにできませんか・・？
ググッているんですが、どうしてもやり方が複雑で・・・
よろしくお願いします。 >>111
ウブンツ知らんが、/etc/oratabのYって書いてるところをNに変えろ。
ダメならまたこい。 >>111
sudo sysv-rc-conf oracle-xe off
↑またはこれをコマンドラインから打て。 >>111
それはOracle Databaseの問題ではなく、Linuxの話だろうに。 オラクルって古いんですね
ＩＢＭのＤＢ２、ふじつのＡＩＭ、ＮＥＣ
のRIQSとかと同じRDBなんですか？ >>115
だがLinuxのマニュアルには載ってはいないな 一言で終わるし。こいつは学生かなんかだろ。
教えてやってよし。
仕事でやることはてめぇの仕事なんだからちゃんと自分でマニュアル読めってことだぞ。
113か、114でまあできただろ。 >>116
同じものかどうかと言えば違うだろうが、リレーショナルデータベースかどうかで言ったらそうなんじゃないか？ お世話になっております。SQLLOADERについて質問させてください。
SQLLOADERでデータ登録しようとしているテーブルのカラム数が動的に変わります。Java側で登録したいテーブルカラム一覧と全データ内容はもっていますので、それを元にctlファイルとcsvファイルを動的に生成して読み込ませようと思ってます。
それだとこんな懸念があるんじゃ？こんなやり方もあるよ！などありましたらアドバイス頂きたいですm(_ _)m 皆様、お礼が遅れて大変申し訳ございませんでした。データベース板はいつも過疎っていて、
回答なんかそう早くこないだろうとたかをくくっていて、質問したのも忘れて外出してしまい、
先ほど、質問したのを思い出しました。。
>>112
いえ、3日ほど短時間ですが、ググッて調べてみました。
>>113
ありがとうございます。それは、Nになってます。ありがとうございました。
>>114
超ありがとうございます。それでいけました。そういうのを待っていました。
Windowsのサービスみたいな感じですごくいい感じです。
>>115
私もそう思い、Linux板で聞こうかと思ったんですが、ググったところシェルスクリプトで
制御する方法ばかり出てきたので、Linux板で聞くとそういう回答ばかりになるかな〜と思って
こちらで聞いてみました。 >>117
ありがとうございました。Ubuntuでは、sysv-rc-confっていうのを使うんですね。
ググってみて、chkconfigまではやってみたんですが、何も反応ないから、
どうなってるんだろう？と思っていました。sysv-rc-confでググったところ、
色々.rcスクリプトの書き方とか出てきて、すごい勉強になりました。
ちょうどLinuxのそういう情報も手に入れたかったので、すごい良かったです。
>>119
すみません・・。無職です・・。しかも、40歳です。以前、一度プログラマになったんですが、
とても無理でやめました。しかし、趣味半分で今も触っています。もう17年くらい触っています。
本物のプログラマて、>>117みたいな英語のマニュアル読むんですね・・・。俺じゃできないわけだ・・・。
こんなもん、務まるわけがない・・。ちなみに、私が勤めていたところは高卒PGでも採用されるようなところです。という、大卒がいない。。
皆々さま、大変たくさんの回答をいただき、まことにありがとうございました。 >>122
そうかググってたか、それはすまなんだ
最近のLinuxならsysvじゃなくsystemctlを使うといいよ >>124
レッドハット系でしょ？それ。
でびあん系はsysv----でchkconfigもsystemctlもなかったのでは？ >>126
なるほど、v15くらいから採用されてんのね。 RMANにUNTIL CANCELが無いのは何故なの？ >>128
基本は自動化させる事が目的だからな。
until cancel無くても、時間指定のポイントインタイムリカバリーで対応出来るし。 >>125
OracleはDebian系ではほとんどまともに動かないし。 DBA_USERSを見たらSYSにもDEFAULTプロファイルが設定されてるんだけど、
SYSもパスワードロックが掛かったりするの？
そうだとしたら、OS認証も許可してない環境の場合、どうやって解除すればいいの？ >>131
どうしようもなさそう。
大体はosユーザーで入るとか他の権限あるユーザに頼むしかないよね。
そうじゃなかったら、パスワードとかセキュリティ機能の意味ないからね。 1985年から勉強していないDBを勉強しようっとｗ エリソンもいよいよ焼きが回ってきたようだ
「全自動DBだ」とEllison CTO、米Oracleが「Oracle DB 18c」を発表
h ttp://itpro.nikkeibp.co.jp/atcl/news/17/100202373/ オラクルは総合4位で、性能・機能および信頼性で他より勝っているが、コストおよびサポートが最低。
データベースの満足度1位はIBM、オラクルは「コスト」で苦戦
h ttp://itpro.nikkeibp.co.jp/atcl/column/17/091500382/092000020/
首位は前回と同じく日本IBM。「信頼性」「コスト」「サポート」が全社平均を5ポイント以上上回った。
2位の日本マイクロソフトは「運用性」と「コスト」が、3位の富士通は「サポート」がそれぞれ部門最高だった。 IBMと富士通の有効回答数の桁違いの低さがシェアと一致してるんだろうな DB2なんかはIBM iの信頼性あっての評価だろうな オラクル使用ユーザー、ものすごく増えてきているね
小さいところも入れだした SQL ServerのLinux版が安定してるようだと
またOracleの新規ユーザーは減るだろうね〜 全自動DBAをまともに動かすための職業が生まれます。 これからはOracleやるならDBじゃなくてクラウドってことですかね・・・
それにしても"no human"を強調し過ぎだ >>147
DBじゃなくてクラウド？お前理解してないだろ これからはwwOracleやるならwwwwDBじゃなくてwwwクラウドwwってことですかねww data pump の expdp で試験環境のフルバックアップ取ってて、先月までは月二回だったんだけど
テストが佳境に入って来て、毎日1Tのフルダンプを取るようになった途端に日々、抽出速度が徐々に落ちてる状況です
（或いは月二回も落ちてたのかも知れないが、回数が少ない&夜間放置で気づかなかった）
DBデータはテスト実施の為、微増はしてますがほぼデータ量変わらず、過去二回分残してコマンド実行前にダンプを整理、パラメータはDATA_ONRYのみ指定
テーブル指定で抜いた時、特に遅いのがLOBデータを持つテーブルの抽出で、全てのテーブルが遅くなってるわけでは無く、件数少ないテーブルでも遅かったり、逆に件数多いのに早く抜けたり…
そして抜いたデータを別のテスト環境に入れてバックアップ取ると、早く抜けたり…
とにかく、素人では当たりも付けられず困ってます
今のままでも、ギリギリバックアップ間に合ってるのですが、このまま抽出速度が落ち続けると、テストスケジュールを見直すハメになるので、何かご存知の方居たらご教示いただけないでしょうか
速度を戻す為にexpdp前に何かした方が良いのでしょうか？ 遅い時って裏で何か作業してないかな。
Topとか見てOSの負荷状況とか見たほうがよさそうだけど。
あとAWRとかstatspack取ってみよう >>156
レスありがとうございます
夜間に実施してるので、他に作業してないとは思いますが、念のため確認してみます
他の取れる情報は別部隊になりますが、依頼してみます
Topぐらいならこちらでうてるので、次回実施時にみてみます >>155
11g以降のデータポンプの仕様変更のせいかもな。 先にOSレベルでリソース逼迫してないかチェックするのがセオリー。
linuxマシンなら、sar -dでsvctm,awaitがやたら遅くなってないか見た方がいいよ。
NASに落としてるんなら、sar -n DEVでネットワーク帯域も枯渇してないかとかチェックした方がいい。
sar -Wでswap in outが頻発してないかも念のため。
過去分は通常/var/log/sa下にあるから、-fでファイル指定して見れる。 Oracleをwindowsサーバーで使いたいんだが個人でも買える？
一番安い構成で価格幾ら？
どこに売ってる？ >>162
XEは無料
開発目的ならEEでも無料で利用可能 >>163
xeなら個人ウェブサイトで使っても無料？ 便乗して質問します。
開発目的ならAWSのEC2に入れちゃっていいんだっけ？
クラウドの場合、OTNライセンスは適用できない？ >>164
うん、無料
ライセンス読んでね
>>165
知らんけどOTNライセンスにインストール先を限定する記述なんてなかったと思うからいいんじゃないの？ >>160
参考までに、スワップ頻発してたら対処どうしてます？
linuxの仕様上、でかいダンプモリモリ取ってるとファイルキャッシュでメモリすぐ一杯になって、スワップ発生しちゃうんだがうちの環境
差分バックアップに切り替えてデータ量落として、毎日リブートでスワップ発生しなくなったんだけど根本解決してない… >>167
swap outだけで、swap inが頻発しないなら、そういうもんだと気にしてない。
swap inも頻発するなら、根本的にメモリが足りてないものと判断して、ファイルキャッシュ以外の原因をさがす。 >>155
ストレージ側で重複排除機能とか使っていて、そいつが悪さしている事が良くあるな。 Ellison CTOは基調講演で「人間の手による作業が無くなるため、
人間によるミス（ヒューマンエラー）も無くなる」と強調。
「データベース管理者は自身のスキルを、従来のDBのチューニングなどから、
データ分析やセキュリティー管理などに変更する必要があるだろう」（Ellison CTO）
と断言した。
米オラクル RDB最新版「Oracle DB 18c」発表 2017/10/2 23:00
https://www.nikkei.com/article/DGXMZO21776420S7A001C1000000/ >>165
なんか、クラウドというかvmの場合ライセンス違ったような気がするぞ。 OLACLEってベンダーロックインしてきそうなイメージ。
何で有料で金払ってまでベンダーロックインされる技術使うの? そもそも製品選定する時に、ベンダーロックインされないことに高い優先順位つくか？
つくならオープンソースでもつかってりゃいい。 高い金払うのはあえてロックインされることで
手厚くサポートしてもらうためという考え方もあるわな
ただしOracle、おめーはダメだ ■ このスレッドは過去ログ倉庫に格納されています
