https://www.youtube.com/watch?v=5-Y9yJTsRFg
探検
PostgreSQL Part.11©2ch.net
レス数が1000を超えています。これ以上書き込みはできません。
https://www.youtube.com/watch?v=5-Y9yJTsRFg
ずいぶん古いのを持ってきたな。
4はあまり使われていないと思う。
PostgreSQLをGUIで操作しているひとが少ないせいでよくならない。
最近4を使ってみたが、なんかバグっぽい感じ？
どちらにしても今となっては必要性を感じないな
金儲けに走って評判悪化
評判がよかったときがあるのか？
お金を取る方が健全。マイクロソフトなんてビジネスとしては崩壊しかかっている。
詳しく
"マイクロソフトのビジネスは崩壊しかかっている"
無知すぎワロタ
SQL-Serverもそれなりの対価頂いておりますが…
Microsoft AzureのAzureはカタカナでアズールと表記するのが現在では一般的となっている
Microsoftの1〜3月期決算は、Azureを含むクラウド事業が好調で売上高は16％増、純利益は35％増だった。
[佐藤由紀子，ITmedia] 2018年4月27日
http://www.itmedia.co.jp/news/spv/1804/27/news072.html
米Microsoftは4月26日（現地時間）、2018年第3四半期（2018年1〜3月期）の決算を発表した。「Azure」や「Office 365」などの商用クラウド事業が好調で、2桁台の増収増益だった。
売上高は前年同期比16％増の268億2000万ドル、純利益は35％増の74億2000万ドル（1株当たり0.95ドル）だった。売上高、1株当たりの純利益ともにアナリスト予測（売上高は258億ドル、純利益は0.85ドル）を上回った。
Intelligent Cloud部門が今期も好調で、Azure Computeの売上高が93％増だった。部門全体の売上高は17％増の79億ドルだった。
Intelligent Cloud部門
https://i.imgur.com/Wnlwc1L.jpg
LinkedInの売上高も37％増と好調だった。企業向けOffice 365のMAUは1億3500万人、コンシューマー向けのMAUは3060万人。
Productivity and Business Processes部門
https://i.imgur.com/FxHA02l.jpg
Windows、ハードウェア、Xbox、検索のMore Personal Computing部門の売上高は、Windows、ゲーム、Surface、検索が好調で13％増の99億2000万ドルだった。検索は16％増、ゲームは18％増。ハードウェアではSurfaceの売上高が32％増だった。
More Personal Computing部門
https://i.imgur.com/EHknOcd.jpg
ねえまだ？
蓄えた資産がなかったら倒産してたぞ。
ソース
嘘つきだな
こういうヤツに限ってMySQL使ってるとか?
MySQLとかオラクルが豹変したら死ぬぞ?w
オラクルがJavaの次に狙ってるのはMySQLに何らかライセンス徴収ルール作る事
OSSだから、そんな事有り得ないとMySQLユーザーは言うがJavaも有り得ないと言われてた
でMariaDBに逃げたヤツが一番賢い、と言われる様になると思う
0495NAME IS NULL垢版
2018/07/22(日) 05:13:57.78Javaの話もなにか勘違いしてないかい？
MySQLの先行きが読めないことは間違いないし、そろそろそれぞれで違いが出てきてるみたいだし。
PostgreSQLって何がいいん？ｗ
MariaDBだろJK
それを否定されると自分が否定されていると思っちゃう人もいるわけだし
そのあたりの空気を読めることが望まれているのでしょう
0506NAME IS NULL垢版
2018/07/22(日) 19:09:06.70もしくはスレ住人に相手にされてないor嫌われてる
↓
関係ないスレに書き込む
↓
スレ違いなのでそのスレの住人に怒られる
これを相手にされていると勘違いする ←今ここ
↓
関係ない話題でスレ常駐し始める
↓
徹底的にスルーされるので飽きて居なくなる
もしくはスレ住人に擬態する
書き込みがあるだけマシなんでは。ｗ
Javaと同じ運命にして欲しいわw
この場合のライセンス徴収はGPL版にも商用版と同じライセンス適用の話ね
そうですよw
ご退場下さいw
意味不明すぎるｗ
"常に"なんてどこに買い込みしてる?
アホか
書き込みね
そういう不完全な人の話は聞く耳持たんなw
>>514は傷口広げて自爆するバカ w
オラクル自身MySQLのバグ対応なんてどーでも良いと思ってる
0520NAME IS NULL垢版
2018/07/27(金) 18:01:07.56それはわざとだよ。MySQLを徐々に衰退させたいため。
そのポスグレさんは知っているひとが少なくて苦戦する。
しかもシェアが低いのでとにかく情報がなく、ソースコードまで読まなければならない。
よってMySQLのサポートなんておざなりになるのは当然
MariaDB、PostgreSQLが元MySQLユーザーの受け皿になる
やっぱりPostgreSQLだな
どないやねん。
https://www.postgresql.jp/document/9.3/html/routine-vacuuming.html#AUTOVACUUM
Autoをやってる。というかな？
勝手にやってくれているんだから、それでいいやって思うわ。
って言うからvacuum自体は必要だよって言っただけ
設定が必要かどうかは状況による
うんこ収集車とポスグレぐらいだな
他のDBMSは領域再利用するから基本不要
ただファイルシステムとかと同様に断片化してくるから再構成をすることもある
http://cosol.jp/tech/detail/d3_maintenance_table.shtml
ども
その時にやるか後でやるかのトレードオフだね。
こっちはOK
それで分かったこと。
PostgreSQLはSQLも設計仕様も、とても綺麗。
Oracleはダメ。信じられないくらいのポンコツ。
根拠は？
仕様も変なクセがないし他のスタッフからも不満はまったくない。
それにまず社長が喜んだ(笑)
MySQL(MariaDB)>Oracle>PostgreSQL
キッチリ手順明確なのがPostgreSQL
どうにかやれば動いてしまうのがMySQL
ところどころがちょっといいかげんなだけ。
・単なるサブセット(だから多少早くても当たり前)、
・マルチバイトが使い物にならない
っていう認識がこびりついてて使う気にならない
そのころは、ふつうにお安く使えるのはMySQLくらいしかなかったがな。
もうPostgreSQLしかねーだろ！
他はカス！
そして、PostgreSQLでなければというシーンもない。
ま、ふつうの人にはどっちも同じ。
MariaDB、MySQL、FireBirdは触ったことはないが・・・。
OracleはSQLPlusで、操作したことはあるけど面倒。
SQLServerも面倒で触れたこともない。
なので３階層くらいのサブクエリーは普通になってしまう。
で、可読性が落ちてしまい、自分でも理解不能になる。
人によってはビューやストアドプロシージャで解決しようとして、これらを書きまくりメンテ不能に陥る。
PostgreSQLなら素直で簡潔なSQL書けるのに、と思うよ。
Oracle PL/SQLのメンテナンスはしんどい
人それぞれでロジックの組み方違う
ライセンス含めOracleはもう厳しい
具体例プリーズ
ライセンス価格わからなくて困ってる
具体例はいちいち覚えていない・・・
そんなの覚えても役立つことなどないから覚えようという気がしないので。
ごめんね。
でもPostgreSQLでSQL書ける奴が業務でOracleに乗り換えれば、その不満はすぐに感じると思うぞ。
なるほど知ったか指摘されたら答えられないってことね
了解
それは手続きの隠蔽にすぎず、SQLの可読性が下がる。
一度、ソートしないと結果が得られないのに、一度のSELECTでできるかのように思わせる方が問題だ。
このあたりの独自格調のせいで、IT技術者であっても誤解が広まって、SQLはこう書くとこう処理されると言い始める。
BSDライセンスじゃ無いの?
バカ同士の会話おそるべしw
商用利用前提でコミュニティ版でパフォーマンス検証したいけど、そもそも高すぎたら却下されるから、知ってる人がいたら大まかでいいから価格感が知りたかったのですね
ちなみに商用だとコアライセンスです
ここで聞く話か?
確かにそうですね、すみませんでした
鈴木 啓修 著
は良本だな。俺のバイブルになってる。
１０のはさすがにもう出ないか。
なら 8.1 対応ですよ。
10 だってこの本（8.1用）で大丈夫だよ。
パーティショニングした列指向テーブル読んでもパラレルクエリにならんのを解決できるか調べたい
なかったら誰か書いて、買うから…
インフラ担当が居ない案件に派遣されてしまいました
開発から運用まで行うとしたらどんなことを勉強したらいいでしょうか
一口にインフラといっても、OSのインストールやらネットワークの設定やら、そもそも物理設置やら、いろいろ。
聞けない人がいないなら、会社持ちで外にリサーチに行けばいいし。
しかも「そこそこ書ける」程度の
DB専任なんてどこに書いてあるんだよ。
でした
そんなサイトがいっぱいある。
１．システム化したい業務の聞き取り
２．システム化したい業務の仕様書作成
３．実作業
しーっ。触っちゃいけません！
https://hayabusa9.5ch.net/test/read.cgi/news/1540429567/
俺の第一印象も「Oracleすげー」より、「これでポスグレが一皮むけるな」だった
Amazonプライムデーのサーバ障害、AmazonがOracleからAurora DBに乗り換えたのが原因ではない。Amazon CTOがCNBCの報道を否定
https://www.publickey1.jp/blog/18/amazonamazonoracleaurora_dbamazon_ctocnbc.html
なんかそのニュースがフェイクニュースだった可能性も出てきているな
たしかに、セーブポイントの仕様が違うなら違って当然で、その仕様の通りにしてないアプリが完全に悪いわな。
アマゾンのシステム開発してる人の中にも、こういうレベルの人がいるんだな。
有り得る話だな
徹底的に比較した上でPostgresを選んだんだろうから。
お帰りはこちらです。
https://mevius.5ch.net/test/read.cgi/db/1360677476/l50
は？
は？
Oracleの狙いはそこ
今現在、そこそこシェア取ってるから
はぁ？
はぁ？
無償版をJava同様、6ケ月毎の更新にするって話
で、OpenJDKの様に無償版をOpenMySQLにして6ケ月毎にバージョンアップする
6ケ月毎にバージョンアップって現場ではやってられないので、MySQL→MariaDB移行にする中小企業が増える
MySQLが廃れる方向って話
はぁああ？
はぁああ？
勘違い
MySQLと比べてるのが滑稽なだけ
せめて比べるとしたらMariaDBだろっていうツッコミが>>612なのに
なぜかそれに過剰反応してる信者(>>613)が一人いるだけ
滑稽とか言う方が滑稽だよ
>>631
ちょっと何が言いたいのかわかんないっすね
>>633
可哀想だね(´；ω；｀)
RDSなら対応してる
https://aws.amazon.com/jp/rds/mariadb/
自己解決しました。いけるんですね。
9.3.5から9.3.22にアップデートしたいのですが
ググってもメジャーアップデートの方法しかヒットせず困っております。
マイナーアップデートの方法が丁寧に説明されている書籍やHPや
教えていただけるイケメンはいらっしゃらないでしょうか？
OSはlinux レッドハットの6になります。
メジャーアップデートしろよ
DB停止して上書きインストールするだけやで。
9.3.22のrhel6用のrpm用意して
yum localinstall rpm列挙
でよいかと。
ありがとうございます！
そのあたり調べてみます。
>>645
完全に外部から閉鎖している社内システムなんでマイナーアップデートすら必要ないんですが
外部監査で指摘されてスーパースーパーハッカーがキャッツアイみたいに侵入したら
だめだよね？って真顔でいわれてSEチームが全員じゃぁおれら辞めるわって言いだして
折衷案ですることになった非常にくだらない件でしてEOLは関係ないんです
あほすぎ。ｗ
たいへんやな。
そこまでいかれたら、DBなんかなんでもおんなじやのに。
言いたいことは分かるが草生える
そう言う話になってる時点で保守契約とかもしてなさそうなのでその時点でどうなの？って気はする
しかも言う側はエンジニアではない素人だ。
何も知らないカスどもと思うけど誰も何も言えない。
折衷案まで漕ぎつけるだけ、まだいい。ウラヤマシ。
保守なんか関係あるか？
オレはこんふうに想像。ｗ
1 上層部が適当に外部監査を依頼。
2 とくに問題なし。
3 監査側としてはなにか指摘しないといけない。
4 どうでもいいことをムリヤリ指摘。
5 上層部が真に受ける。
完全に内部専用のサーバを外部業者入れて監査する厳しさがあるなら、内部専用でも本番環境なら保守契約くらいやっていそうなものだ
書いてる内容的にそうでも無さそうだから、体制の矛盾を感じて不思議に思っただけ
自分的には、会社のポリシーでEOL製品の継続利用はNGってなってるだけじゃねーのと
データ型の横に別に長さを指定もできるようなので混乱しています。
あかんか？性能がほしいんやが。
それが正解です
アホに反応するな、
が最適解
だよね！
>>667
SQLServerと比較すると初回アクセスのみ結構遅い
大抵は回線とかクライアント側の端末がボトルネックになってる気が
> DB単体のスピードを追求する場面ってあるの？
はっ？
> 大抵は回線とかクライアント側の端末がボトルネックになってる気が
でかいシステムだと何台のクライアントからアクセスあると思ってるんだよw
更新を分散させつつ整合性を保つ魔法はまだわかりません
たいていDB上にデータとビジネスロジックを置くので、DB以外に速度を求められる場所がない
初回アクセス速度を速くしたけりゃ、共有バッファを調整して、DB起動時に一度そのSQLを実行してテーブルをメモリに乗せときゃいいんじゃね？
結構迷うよね。
mda5に直したらいけましたサンクス
新規のロールってグラントしてもらわないとログインすらできないの？
他に一般的な手法があれば教えてください。
でいいのでわ
0696NAME IS NULL垢版
2019/06/13(木) 16:25:04.23クラウドってIntel のCPU積んでるだろうから、毎月追加更新される脆弱性報告見てると不安が増すばかり
自社はしっかりシステム作ってても、同じサーバで稼働してる別会社のシステムが杜撰だったとして
セキュリティ突破されようものなら、煽りを食って連座して突破されてしまうわけだし
逆に言うと、銀行系のシステムを狙ってわざとセキュリティの甘いシステムを、
銀行が使用してるクラウドサーバと同じサーバで稼働させてクラックしてそこをつたって銀行の情報抜き取るとか
そういう新型の犯罪が成立しそうだし
銀行や政府は漫然とクラウドを利用するべきではない
> 逆に言うと、銀行系のシステムを狙ってわざとセキュリティの甘いシステムを、
> 銀行が使用してるクラウドサーバと同じサーバで稼働させてクラックしてそこをつたって銀行の情報抜き取るとか
自分が稼働させたサーバーを自分でクラックするのかw
アホすぎる…
今の仮想環境を知らんのか。
アホすぎる。
へー、今の仮想環境だと自分で設置したサーバーをわざわざクラックする必要あるんだw
ちょっと詳しく説明してくれるかな
タダというんはムシがよすぎるやろ。ｗ
あー
そうねw
Windows10にもdebian9にもpostgreSQLを入れている。
そうでーす
そんな難しい用語ださなくていいから、もっと単純にいこうぜ
内部ストレージ５００GB（HDD)Windows10
内部ストレージ２４０GB（SSD)debianGNULinux strech9
Windows10のpgAdmin4が初期起動スピードでLinuxに1分以上の差をつけられて
負けたわ糞
そらそやろ。
SSDなんやから。
『市民権を獲た○○』はいくらなんでも市民権を獲たイディオムだろう……
初回起動だけは我慢するしかない
2回目以降は同等に早い
参考書が古い･･･
---------------------------
クラス番号(主キー) | クラス名 |
1 | A組 |
---------------------------
---------------------------------------------
クラス番号(外部キー) | 出席番号(非ユニーク) | 氏名 |
1 | 10 | Cさん|
---------------------------------------------
※クラス番号と出席番号の組み合わせで複合主キー
上記テーブルがある状態で、以下のテーブルを作りたいのですが、
出席番号が非ユニークな為、外部キーに出来ません。
サロゲートキーを使わずに、クラス番号と出席番号の組み合わせで複合主キーにしたいのですが、どうすればよいでしょうか。
------------------------------------------------
クラス番号(外部キー) | 出席番号(非ユニーク) | 情報 |
------------------------------------------------
CREATE TABLE class (
id int NOT NULL PRIMARY KEY,
name text NOT NULL
);
INSERT INTO class(id,name) VALUES (1,'A組');
INSERT INTO class(id,name) VALUES (2,'B組');
CREATE TABLE person (
id int NOT NULL REFERENCES class(id),
number int NOT NULL,
name text NOT NULL,
PRIMARY KEY (id, number)
);
INSERT INTO person(id,number,name) VALUES (1,10,'Cさん');
INSERT INTO person(id,number,name) VALUES (2,10,'Dくん');
INSERT INTO person(id,number,name) VALUES (2,11,'Eくん');
CREATE TABLE info (
id int NOT NULL,
number int NOT NULL,
info text NOT NULL,
FOREIGN KEY (id, number) REFERENCES person (id, number)
);
INSERT INTO info(id,number,info) VALUES (1,10,'Cさんの情報1');
INSERT INTO info(id,number,info) VALUES (1,10,'Cさんの情報2');
INSERT INTO info(id,number,info) VALUES (2,10,'Dくんの情報1');
INSERT INTO info(id,number,info) VALUES (2,11,'Eくんの情報1');
/* INSERT INTO info(id,number,info) VALUES (1,11,'外部キー制約でエラー'); */
神様ありがとうございます！
以下の1行をプラスして、完全に想定通りに動きました！
>>PRIMARY KEY (id, number)
CREATE TABLE info (
id int NOT NULL,
number int NOT NULL,
info text NOT NULL,
FOREIGN KEY (id, number) REFERENCES person (id, number),
PRIMARY KEY (id, number)
);
以下の制約を付けて、正常に動きました！
ALTER TABLE info ADD CONSTRAINT info_fkey FOREIGN KEY(id, number) REFERENCES person (id, number)
でパスワードを設定しても
そのパスワードを要求される場面がない。
CREATE ROLE ロール名 WITH PASSWORD '****';
でもそう。
なんのためのパスワードなんだろう？
localhostだけで使うなら無用なのかな。
md5かpeerのいずれかです。
trustは一つもありません。
LinuxのアカウントとPgのロール名が同じで
そうかもしれません。異常な挙動でなくて安心しました。
助言くださってありがとうございました。
local all all peer
を
local all all md5
に変更することでパスワードを指定して作成したロールから
localhostのPostgreSQLサーバに接続するときにパスワードを
要求されるようになりました。
マニュアルのURLください
mysql.com
教えてください
ttps://dev.classmethod.jp/etc/postgresql-create-sample-database/
どうも
ctrl+cかそうかわかった
https://i.imgur.com/xDqFtox.jpg
管理者でインストールした？
https://lets.postgresql.jp/documents/tutorial/windows/1
管理者としてインストールしました
何回か再インストールしてもダメなんです
Windowsでの話？
環境何も書いてないのはエスパー求むってことか？
Windowsです
サーバーソフトはtomcatを使ってます
唐突に謎すぎるw
もしかしてデータベースサーバーというものを知らない？
特に関係ないからいいとして、
１.postgresqlをloalhostにインストールしているか？
２.postgresqlをport5432でインストールしているか？
３.windows上のサービスとして起動しているか？
この辺教えて
誰も何も分からないと思う。
それを答えられるヤツは、あんな質問をしないやろ。ｗ
いや、それぐらいわかるだろー
ええな
俺も行きたいわ
15年ぐらい前だけど職業訓練の一環でうちの会社に訓練生が現場実習として２週間ぐらい来たことあったのでそう言う奴かも
で、解決したんか？
テーブルに時間として格納された整数値を現時刻と加算したいんだけどどうするの？
定数としては+ n hourで出来たけど、項目だとできなくて
手元に環境ないから試してないけど
select CURRENT_TIME + make_interval(hours := xxx)
ではどうかな
時刻を数値で扱っている時点で初心者ではない。
それくらい誰でもするやろ。
オウム教が象被ってたから、日本ユーザ会が元々postgres95で使ってた亀を使ったという話。
byポスグレ初心者
ポスグレ触りだして10年以上たってるのに・・・
と釣り針にかかってみる。
使えば使うほど感じるようになり、このスレには何も書けない状態。
ライセンスのマージンが美味しいと思ってるアホなSI以外は使う理由がない
いつの時代の話だよw
大規模ほどOracleなんて使わない
>>Oracleは金も手間もかかるからな
MySQLやPostgreSQLへOracleから移行する例が少ないね
何でだろう
「自分が知らない/調べられない== 少ない」と思い込みたいのかな？
ググればいくらでも出てくるし
シェアの変遷を見ればどこに移行してるかなんて明らか
PostgreSQLへ移行してるって話かね
世界的にはMySQLだけど
psqlで
テーブル存在しない状態で
DROP TABLE IF EXISTS aaa;
をやると
NOTICE: table "aaa" does not exist, skipping
と表示されるけど、これを抑制するオプションとか無いかな？(´･ω･｀)
https://www.postgresql.org/docs/current/runtime-config-client.html#GUC-CLIENT-MIN-MESSAGES
ありがとう愛してる(´･ω･｀)
列1: name text型
列2: term interval型
select name, term, ??? from table1
得たい結果
期間1, 00:32:00, 32
期間2, 02:05:00, 125
明日試してみます！
データベース - スキーマ - テーブル
となっています。
別のデータベースのテーブルを直接参照する事は
できますか？
https://www.postgresql.org/docs/current/postgres-fdw.html
https://www.postgresql.org/docs/current/contrib-dblink-function.html
頑張ってしらべてみます！
バージョン11をLinuxディストロに入れました。
サーバーの起動方法がいくつかあることを知りました。
どれが正しいやり方なのか、あるいは異なる意味を持つ起動方法なのか
わかりません。
PostgreSQLをインストールしたときには
pg_ctlcluster 11 main start
という起動方法を指示されました。
PostgreSQL11のドキュメントにしたがってデータベースクラスタなるものを作成したときには、
pg_ctl -D /usr/local/pgsql/data -l <ログファイル> start
という起動方法を指示されました。
Linuxでサービスを管理をする方法として
systemctl start postgresql
service postgresql start
といったものもあります。
これらはそれぞれ違う用途による起動方法でしょうか？
それとも好きな起動方法を選択できるんでしょうか？
pg_ctlclusterがpostgresユーザー権限で操作できることは知っています。
むしろ、Linuxの初心者でもあるな？
OSも書かんと。CentOS8？
返事くださってありがとうございます。Debian10です。
どの起動方法も可能ですが、
異なる起動方法によって何か挙動が異なるのか迷って
経験のある方に助言をいただきたくて。
このドキュメントでいくつかの疑問が解けるかもしれない
https://wiki.debian.org/PostgreSql
やみくもにネットの情報を頼りにするより、ちゃんとまとまった古本でも買った方がいい。
何がなんだか自分でもわからなくなるぞ。PostgreSQLの世界はこれが普通というのがないんだから。
大変ありがたい助言。参考にさせていただきます。
Linuxがsystemd系ならsystemctlコマンドを使うべきだと思う。
挙動が違うかどうかは設定による。
そのへんが気になるなら、他人に聞くのではなく、自分で自分のマシンを確認するべき。
man systemd.serviceとかから？
https://qiita.com/JhonnyBravo/items/a28074c20fa9adf02be3
その後、さらにいろいろ調べつつ試した結果、
PostgreSQLには同じ操作をするのにいくつかの異なる方法（ラッパー）が用意されていて
複雑であることが分かりました。
Linuxディストリビューションのパッケージを利用した場合、
そのディストロの流儀に第一に従うべきかもしれません。
とすると、root権限でもってsystemctlかserviceコマンドでPostgreSQLサーバを起動することになりそうですが、
PostgreSQL11のドキュメントには次のように書かれてありました。
https://www.postgresql.jp/document/11/html/server-start.html
｛何を実行するにしても、サーバはPostgreSQLユーザアカウントで起動させなければなりません。
rootであってはいけませんし、他のユーザでもいけません。｝
このドキュメントに従う場合、systemctlやserviceは使えなさそうです。
しかしpostgresになってpg_ctlclusterで起動したとき、
Warning: the cluster will not be running as a systemd service. Consider using systemctl
という警告メッセージが表示されるのでsystemctlを使うべきことを示唆しているように思えます。
ちなみに、pg_ctlclusterを使って起動した場合、
systemctl status postgresqlでは停止中と表示されてしまいます。
今のところ分かったのはこんなところです。
何かお気づきの点があったら助言いただけるとありがたいです。
systemctlを使って起動した場合pg_ctlclusterに反映されます。
ためしにrootでsystemctl startしてから、起動されたプロセスのユーザーをpsでちゃんと確認してみろ。
rootで実行したからって、プロセスがrootとは限らん。
サービスの多くは専用ユーザーを割り当てるのがあたりまえ。ドキュメントにあるのはその念押しみたいなもん。
詳しくは、マシンにたぶんあるサービスのユニットファイル(サービス名.service？)を探して読め。
なかったら、init.dの起動スクリプトかな？
どうやって起動するかが書いてあるから。ユーザーとかオプションとか。
おっしゃるとおりでした。ps axuで調べたらUSERがpostgresでした。
SQL Serverは管理者権限のあるローカルユーザー
Oracle DatabaseはOracle Database専用ユーザーを作って使用する
ウソをいうな
必ずこうと言っているわけではないので、その人の主観ではおかしいことになるのは理解できる。
サービスが起動されるときに自動的に使用されるもんだし、ログインして使うもんではないし。
はあ？
最初にきっちり設定しとけよ。
逆やろ。
文盲かな？
https://www.postgresql.jp/document/12/html/continuous-archiving.html
https://youtu.be/MCgWUyKQ6YM?t=2744
リストア時に消してしまうWAL(動画でいうWAL1~3)は、なぜ消してしまって復元できるのですか？
ドキュメントの方には、
＞少なくともバックアップの開始時点まで遡る、連続した一連のアーカイブ済みWALファイルが必要です。
と買いてあるにもかかわらず、WAL1~3が抜けてしまって戻せる理由のが不思議でたまりません
それ資料と説明の仕方が悪いと思う。
WAL1〜3はアーカイブ(バックアップ)されているから大丈夫という意味だけど、メトロの女講師の説明がおかしくてわかりにくくなっている。
この講師の説明だとわかっている人間でないとわからないと思う。
アーカイブされたWALはどこかにあるのが前提なんですね
ありがとうございます
ポスグレと呼ぶのは日本の通称
ポストグレスは英語圏の通称
ポストグレエスキューエルは、最近では無難な言い方。
ポストグレスキューエルは英語圏のださいオナニー表現で、あまり言われない。
技術者同士ならポスグレ、外国人がいる場合はポストグレス、一般人がいる場合はポストグレエスキューエル。
もともとはPostgresが製品名だから、グローバルではポストグレス。
アーカイブファイルに同じ番号をつけて説明しているから、あの動画はわかりにくい。
あの動画のメトロの女の知識があやしい。本当に理解してないのに台本を読んでいるから、あんな体たらくになっている。
ポスグレって読んでたのが自分だけかと思ったのですが、日本の通称ならまあ間違いではなかったということですね
それなら今後もポスグレでいきます
日本語でポストグレスというと6音節と長く
さらに「ト → グ」が発音しにくいので
ポスグレという呼びやすい略称が定着
素人管理はやっぱ危ない気がしてきたぜ
AWSのRDS serverlessはどう？
要件わからんけど運用の手間はほとんどかからないイメージだけど。
pgadmin上からCREATE PUBLISHは出来たのにCREATE SUBSCRIPTIONがクエリ処理中のまま帰ってこない…これは何故？
wal_levelはパブリッシュ側、サブスク側共にlogicalにしてる
他になんか設定抜けてる？
アクセス設定は
all all 0.0.0.0/0
とかにはしてあるんだけど…
というかアクセス設定をmd5からtrustにしないとダメなの？
んー、なんか納得いかないんだけど…
パブリッシュ、サブスクそれぞれの現在の状態ってどうやれば取れるの？
とあるホストで動いてるパブリッシュの一覧とか
サブスク側のサブスク一覧とか
エラーで止まってるとか、動いてるとかそういうの
pg_stat_subscription
かな。
状態確認するのならまず統計情報ビューを確認。
一覧だけならpsqlのメタコマンドにもあるみたい。
サンクス
明日やってみる
どこ見ても関数の引数がＮＵＬＬだったときの動作が書いてない
なんかＮｕｌｌになるっぽいことが質問サイトとかかいてあるが
確実なことがなんもわからん
ただのTO_CHAR
公式ドキュメントから
ＳＱＬ標準
はてはＯｒａｃｌｅまで似た情報内科みたのに
めちゃくちゃよく起こることじゃん
なんで？どうなってんのこれ？！
有料って
元々Oracle使ってた？
Oracleのnullの扱いが特殊で、nullに甘いと言うか…
気をつけた方がいいよ
特に文字列項目はnull非許容にした方が良い
0845NAME IS NULL垢版
2021/02/09(火) 16:21:00.20でもそもそも信頼できないユーザからは実行出来なければいいんじゃないですかね？
とはいってもそんなことは百も承知だとは思うので、もしよかったらなんでユーザ制御のみではいけないのか教えてもらえませんか？
どういうシステムか興味があるので。
管理者権限の管理と監査しかないんじゃないの。
色んな状態をPgAdminのクエリから取得出来るのは分かったけどロジカルレプリケーション自体を管理するソフトみたいなのはないのね…
ロジカルレプリケーション管理ソフトのオススメあったら教えて
出来ればGUIでグラフィカルにこのマシンのこのDBをPUBLICATIONに設定
別のマシンのこのDBをドラッグ&ドロップでSUBSCRIPTIONに設定みたいなソフトあると嬉しい
無いなら管理ソフト作るつもりだけど…面倒なので既にあるならそっち使いたい…
それくらいアプリ側で捕捉して、アプリ側が思うようにログ吐こうぜ
https://hayabusa9.5ch.net/test/read.cgi/news/1618999863/
NetCOBOLでプログラムソース引き継ぎリコンパイルか
大変だな
例えばこれはUTF-8で書かれてしまう "自動VACUUM: 孤立した一時テーブル"postgres.pg_temp_3.fetchchunks"を削除します"
pgAdmin4はブラウザアプリになっちゃって使い悪すぎる・・・
4が9.2からだから、その前までじゃね？
あと、PostgreSQLね
CSVファイルの一行あたりの値の数とテーブルの列数が同じときは
テーブルの列名を指定しないでもインポートできるじゃないですが
これなんですが、CSVファイルは1行にデータが500個あって、テーブルが501列ある、なんて場合、
列名を指定しないと「missing data for column 〇〇」なんて出てしまいますが、エラーを出させず、
テーブルの先頭500列にだけ値を入れたいって場合って、
やっぱりCOPYするときに列名を指定しないとダメですかね
同じようなことをしたいテーブルが沢山あるのですが、列数が200とか300とかそんなのばかりで
どうにか手間をかけずにできないか方法探してます
csvkitみたいの使ってCOPY FROM PROGRAMするか
カラム指定付きのCOPYコマンドを生成する簡単なスクリプトを書くかかな
>>861
そうですか…
COPYコマンド作成スクリプト、かなぁ
>>862
たしかにそれもよさそうですね
やり方考えてみます
プラグインを追加したりってどうやったらできますでしょうか。
Win10にPostgresqlを何度かインストールしているのですが、psqlに”そのパスワードしらね”って言われてしまいます。
此方を参考にしてみたんですが、pgpass.confが見つかりませんでした。
他に何かインストール時に気を付ける事は有りますか？？
気にすんなよ
バージョン10.16（Ubuntu18.04 LTSの aptコマンドで入れられる最新？）でDBの操作は全部phppgadmin入れてブラウザからやってる.
で、phppgadminで「SQL」ってリンクがあってそれを使ってSQL実行するとエラーになる。
phppgadmin使うのが悪いのか、phppgadminで書いてるSQLが悪いのか、ほかに理由があるのか、素人なのでわからんのです。
tagIndexっていうテーブルを作って、booleanでoutputflag ってのを定義しておいて、
UPDATE public."tagIndex" SET outputflag='f
で「tagIndexっていうテーブルがない」(relation "public.tagIndex" dose not exist)って怒られる。
C#のNpgSQLつかってupdate文でそのテーブルの更新はできてる。
phppgadminで中身弄ろうとしてうまくいかない。
エラーになってるSQLが、SET句でエラーになるなら 'f' じゃなくて false と書けばいいんじゃね？とか想像つくけどテーブルが無いといわれるとお手上げっす・・・orz
update "public"."tagIndex" SET outputflag=true;
で行けた。
public."テーブル名” と "public"."テーブル名" っていう、スキーマも "" でくくってるかどうかの違いだけ・・・？
83.とか9.2の頃はこんなことやらなくてもよかったような覚えがあるから「面倒になったなー」ってのが正直な感想でした・・・
PostgreSQL 11.10でも別にエラーにならないみたいよ
ttps://extendsclass.com/postgresql/4f05be9
私のデータでは5,000列のテーブルが必要です。
先ほどCREATE TABLEをしようとしたらエラーが出ました。
列数が3列のときは正常にテーブルが作成できます。
多分、1,000列ずつに分割して、あとで結合するのだと思いますが、
その参考となるサイトをご存じないでしょうか？
検索してもまったく見つかりません。
この辺が参考なるかも。
https://dba.stackexchange.com/questions/40137/in-postgresql-is-it-possible-to-change-the-maximum-number-of-columns-a-table-ca
共通のPrimary Key + 他の列で分割すればいいだけ
まあ5,000列はRDBで扱うのに適さないから
リファクタリングするか目的に適した別の仕組みを使ったほうがいいぞ
ありがとうございます。
そのサイトは質問前に読んでいましたが、具体的にイメージできなかったです。
一人目の回答者の勧めるソースコードの変更は、
不具合が出るリスクがある上に、会社の他の人たちにも使ってもらうので難しいです。
二人目の回答者は、複数のテーブルに保存し、Viewを使ってデータを提供する方法を勧めているようです。
ただ、Viewもテーブルと同様の列数の制限がある、と書いてあるので
「結局、できるの？できないの？どっちなの？」という感じです・・・。
ちなみに、ユーザーはGUIで操作するだけで、クエリーはそれに基づいてプログラム内で生成するので、
ややこしいクエリーになっても対応できます。
三人目の回答者は、
1. 1,600列無くてもいいように再設計する
→できるならそうしたいですが、方法が分かりません
2. 超過した列にはJSON/JSONBフィールドを使う
→JSONは分かりますが、どんな技なのか分かりません
3. スプレッドシートのようなテーブルにする
→これは、spreadsheet_tableが親でspreadsheet_cellが子みたいになっていて、
spreadsheet_cell一つにつき一つのデータが入るようになっていますか？
(行、列)を(1, 1), (1, 2), (1, 3), …と変えていくことでセルの位置を指定できるみたいですね。
ただ、検索などは非常に遅そうですね…。
ありがとうございます。
> 共通のPrimary Key + 他の列で分割すればいいだけ
具体的にはどうなりますか？
私の場合を説明しますと、
データ列が始まるまでに5列ほど属性がありまして
そのうちの最初の2列がPrimary Keyです。
一枚岩だとこんな感じです：
Lot (PK), Number (PK), X, Y, Z, Data0001, Data0002, ... Data5000
これを
Lot (PK), Number (PK), X, Y, Z, Data0001, Data0002, ... Data5000
Lot (PK), Number (PK), X, Y, Z, Data1001, Data1002, ... Data2000
Lot (PK), Number (PK), X, Y, Z, Data2001, Data2002, ... Data3000
Lot (PK), Number (PK), X, Y, Z, Data3001, Data3002, ... Data4000
Lot (PK), Number (PK), X, Y, Z, Data4001, Data4002, ... Data5000
…に分ける感じですか？
ただ、これだとX, Y, Zが無駄に被るので正規化して
Lot (PK), Number (PK), X, Y, Z
だけのテーブルを作り、
Lot (PK), Number (PK), Data0001, Data0002, ... Data5000
Lot (PK), Number (PK), Data1001, Data1002, ... Data2000
Lot (PK), Number (PK), Data2001, Data2002, ... Data3000
Lot (PK), Number (PK), Data3001, Data3002, ... Data4000
Lot (PK), Number (PK), Data4001, Data4002, ... Data5000
…にする感じでしょうか？
それよほど特殊な事情がない限りRDB的には列持ちじゃなく行持ちにするケースだと思う
親テーブル: Lot (PK), Number (PK), X, Y, Z
子テーブル: Lot (PK), Number (PK), Data_No (PK), Data
この形だと親テーブルのレコード1件に対し子テーブルのレコードが5000件
特殊事情があるなら
そういう同じ種類のデータの繰り返しはArray Type使う
https://www.postgresql.org/docs/13/arrays.html
これは余計なお世話だけど、どの設計がよいかを単体で検証すると思うんだが、
将来的にデータ量や参照量や更新量が増えた場合の速度低下(レスポンス)や、
データ構造(列数とかデータ型)が変わったときの保守に要する時間(ダウンタイム)も考慮して
比較したほうがいいぞ。大量の実データがなくてもダミーデータを生成して。
>>874なんやで？
ムリムリ！ｗ
>将来的にデータ量や参照量や更新量が増えた場合
そういう用途だとは思えないけどな
ありがとうございます。
>親テーブル: Lot (PK), Number (PK), X, Y, Z
>子テーブル: Lot (PK), Number (PK), Data_No (PK), Data
>
>この形だと親テーブルのレコード1件に対し子テーブルのレコードが5000件
はい、エラーが回避できるならその形式でもいいです。
ただ、行も10万件/1製品ぐらいあります。
この場合、1製品分の全データだと
親テーブルのレコードが100,000件
子テーブルのレコードが5,000件*100,000件=500,000,000件 (5億件)
…になります。
しかも、こういうデータが数十製品あります。
これは特殊な事情に該当しますでしょうか？
ちなみに、データ部分は同じ種類のデータの繰り返し（すべてfloat）ではあります。
上記を踏まえますと、Array Typeの方が近道そうでしょうか？
すみません、DBはド素人ですので…。
ありがとうございます。
仰る通り、実行速度や保守性も考慮したいです。
5,000列というのは平均値で、増える傾向にありますが、今後も10,000列は超えないと予想されています。
データ自体は一度読み込んだら更新は必要ありませんが、計算結果はDBに残したいです。
新規製品のテーブル追加は大量に発生します。
大量の実データは既にあります。
きっと、私の実力的に無理という話ですよね。
DBはド素人で、このデータ量でどのぐらいの速度で動作するのか不明なので、
まずは動作するものを実装したいです。
そういう用途に該当するかどうか、軽く説明しておきます。
1製品のデータ量は
100,000行
10,000列
が上限とします。
しかし、そんなデータが数十製品×数十ロットあります。
参照量はユーザー数が増えると増えますが、
ユーザー数は多くて300人程度、
同時に使用するのは多くて10〜20人程度と考えます。
（計算結果をDBに残さずに、Excel形式で残す方式であれば）
更新量をゼロにできます。
失敗上等な状況ならええけど。
ほかに頼んだほうがええんちゃうかなー。。。
どういう構造にするのがいいかはデータ量やデータ型以外にそのデータをどう利用するのかに強く依存してる
特殊事情ってのは行持ちだとどうしても困る、求められる要件を実現できないという事情
その判断自体が難しいようなら
性能面の検証も含めてDB設計してくれるところに依頼するか
自分で色んなやり方を試して検証してみるかになるよ
特定のデータ列がある範囲にあるものが欲しいとかそういうクエリがなくて
データ列は常に全部一括で取得して計算処理する前提なら列持ち(横持ち)を軸に考えてもいいと思うよ
その場合は自分ならまずArrayを試す
(RDB前提でかつPostgres前提の場合に限るけど)
それ300人で使うってなんかすごいね
サマったデータだけ使えればいいような気がするんだけど
300人が違う角度で生データから統計処理とかしたい感じなのかな？
お二人ともありがとうございます。
そうですね、まったくの初心者にしては規模が大きいですよね。
お陰様で、いくつか選択肢が見えてきたので、まずは自分で試してみます。
Array Typeが条件（同じ種類のデータの繰り返し）に合ってそうなので、まずはそれを実装してみます。
行持ちも出来るならやってみて実行速度などを比較できるといいですね。
ありがとうございます。
はい、全部一括で計算処理する前提です。
すみません、列持ち(横持ち)というのは、私が>>875で書いた、
Lot (PK), Number (PK), X, Y, Z
だけのテーブルを作り、
Lot (PK), Number (PK), Data0001, Data0002, ... Data5000
Lot (PK), Number (PK), Data1001, Data1002, ... Data2000
Lot (PK), Number (PK), Data2001, Data2002, ... Data3000
Lot (PK), Number (PK), Data3001, Data3002, ... Data4000
Lot (PK), Number (PK), Data4001, Data4002, ... Data5000
…のような感じでしょうか？
Arrayが良さそうなんですね。
環境は RDB かつ Postgres ですのでOKです。
では、やはりまずはArrayから試してみます。
はい、その通りです。
基本の統計情報は全部一括ですが、
測定項目同士の相関などは各人が個別に見る感じです。
Lot (PK), Number (PK), X, Y, Z, data
ってテーブルにして、データをJSONとか扱いやすいテキストにしてdataカラムにぶちこんでおくってのも楽かもよ
死にそう。ｗ
300人もいるなら他に誰か適任者いないの？ 悲惨な未来しか見えない。。
そもそも新人だって言うなら、クリティカルな業務ではないのだろうけど。
Azureサービスに対してアクセス全開放しないとできないと言われとても困ってる
Awsも同じなんだろうか
同じデータベースに違うソースのまぜるってやりたくないな
何万円なのか、何十万円なのか、何百万円なのか、オーダーだけでも知りたい
pgadmin大丈夫なんかよーわからん。
教えてエラい人。
server modeで使っててweb serverでlog4j使ってるなら対策必要
PostgreSQL無関係
基本的にJavaのセキュリティホール
いや、Javaも関係ない。ｗ
https://youtube.com/playlist?list=PLEzfUgnS8ct4PJhGUM33Da-aWqnWAcpH_
hinemos の環境移行をしようと、DBのdump で過去Data移行できないか試しています。
DB のdump は下記コマンドで吸い出しました。
./pg_dump -h localhost -U hinemos -p 24001 > /tmp/hinemos.sql
リストアコマンドが判りません、そうすれば入りますか？
./psql -h localhost -p 24001 -U hinemos -f /tmp/hinemos.sql
これだと、「ERROR:」がいっぱい出ます。
多分既にテーブルがある状態でリストアしようとしてエラーがでていると予想
もしそうなら↓のどっちかで対応できると思う
・dbを空に（一度dropして再度作成）してリストアを実行
・ダンプ時に-cをつける（バージョンによっては--if-existsもつける）
pg_dump -h localhost -U hinemos -p 24001 --if-exists -c > /tmp/hinemos.sql
インデックスがある一時テーブルにselectかけるとき
ヒント区index scanを指定しても
いくらやっても適用されず
実行計画を見てもbitmap index scanになってしまいます。
どなたかこの問題に心当たりのある方いらっしゃいませんか？
posgre側がこっちの方が早いからと判断してやってるのかかと思ったのですが、bitmapの方が遅いんですよね…
まずはEXPLAIN ANALYZE <query> でestimated rowsとactual rowsの差を確認
次にANALYZE <table>を実行してからEXPLAIN ANALYZEして差が出るかどうかを確認
確認してからまた対応が違うってことかな？
もうちょい噛み砕いてけろぉ、おじさんsql詳しくナインだよ
SQL関係ない。
実行計画を判断する元になる情報が実態とあってるかを確認しろって909は言ってる。
一時テーブルはautovacuum 対象外だからそのセッション内でanalyzeする必要あるはず。
https://www.postgresql.jp/document/13/html/sql-grant.html
データベースオブジェクト間で包含関係にあるものの権限や、デフォルトの権限についてよくわかりません
あるロールにデータベースに権限を与えた場合、中のテーブル等にも権限を与えたことにはなるのですか？
逆に、テーブルのみに権限を与えた場合、データベースのアクセス権限は自動的に与えられるのですか？
データベース単位の権限なんてまず使わないと思うぞ。アクセスできるかできないかくらいの制御程度しかできない。
そんな粒度では意味がないし。
テーブル単位の権限付与が面倒だから、特定の権限をまとめたロールを作って、ロールで権限を付与する。
postgresqlのサービスを止めることなく、w10標準のバックアップツールで\dataをフォルダごとnasにバックアップして問題ないでしょうか？
バックアップツールがファイルAをコピー
バックアップツールがファイルBをコピー
DBがファイルAとCにデータを書き込む
バックアップツールがファイルCをコピー
コピー先のファイルAはDBがデータを書き込む前の内容で、ファイルCはDBがデータを書き込んだ後の内容になるので困ると思う
25.2. ファイルシステムレベルのバックアップ
https://www.postgresql.jp/document/11/html/backup-file.html
> pg_dumpはPostgreSQLデータベースをバックアップするユーティリティです。 データベースを使用中であっても一貫性のあるバックアップを作成することができます。 pg_dumpは他のユーザによるデータベースへのアクセス（読み書き）をブロックしません。
ただし対象サーバーがレプリケーションのマスターとして動作できるように設定しておく必要あり。
ECPGからPostgresqlのストアドを呼び出し、結果をchar型の配列で受け取りたいのですがうまくいかなくて…
そもそも出来るのでしょうか？
ECPGって何?
PRO*CのPostgresql版みたいな奴です。
ファンクションになるんじゃ無いの?
https://itsakura.com/postgresql-func
ファンクションで値返すしか無いんじゃ無いの?
textにすれば?
https://www.ne.jp/asahi/hishidama/home/tech/postgres/plpgsql/array.html
何でcharなん?
charじゃなく”char”ならOKとか
textで答え出たからな
同じ文字データ型でもキャストがうまくいかないのがはまるところ。
ありがとうございます！
今まで色々やってみてまだ出来ていないです…
明日やってみます！
ありがとうございます！
明日も色々やってみます。
[malformed array literal: "" on line 53][-400]
こないだまで解凍出来たのに。
インストーラー使ってインストールしたらアンインストール中にエラーになるわ。
255文字制限解除しないと使えないのが普通だっけ？
プラットフォーム名が書かれていないし、「255文字制限解除」が何か分からないので外すかもしれんが、
インストール先のファイルシステムはサポートされているもの?
仮にWindowsとした場合、FATやFAT32はサポートされていない。
それから、これは未確認だけど、もし新しいZIP64フォーマットが採用されてるなら、対応するアーカイバを使うとか。
パーミッション、あるいは空き容量が不足していて伸長が正しくできない可能性は?
C:¥ルートにでも展開すりゃええんちゃうの？
現在社内にある旧商品管理鯖(引退済み)のマシンを引っ張り出してきたのですが
PostgreSQLのVerが7.3.10でした。
この状態からpg_dumpallでデータを取り出すことは出来たのですが、
別のサーバにPostgreSQLのVer12をインストールして、
イカのコマンドを打ったところ、
psql -U postgres -f /backup.db > update.log
画像の様な状態になってどうしたものかと考えております。
エラーでキーが重複してることや、
multiple primary keys for table are not allowedのように
複数の主キーは許可されていませんと出てきているのですが、
これは、SQLのバージョンを一気に上げすぎているからなのでしょうか？
それとも、データベース自体が壊れている可能性があるのでしょうか？
(過去に鯖の半クラッシュが何度かあった模様)
よろしくお願いします。
https://i.imgur.com/daRuFqr.jpg
https://i.imgur.com/pCXROZr.jpg
サポートされているようならログを見て起こっている問題・原因を把握したうえで対策を考える。
DBに依存しまくってると苦労する
メインフレームのファイルのようなものじゃなくて、データファイルの内部は頻繁にデータの位置を変えている。
そんな古風な仕組みではない。
通常は、ON UPDATE RESTRICT で、一時的に ON UPDATE CASCADE にしてクエリ実行後に RESTRICT に戻すにはどうすればいいのでしょうか？
ADD CONSTRAINT と DROP CONSTRAINT の方法は分かるのですが・・・
ALTER TABLE <table_name>
DROP CONSTRAINT <fk_name>,
ADD CONSTRAINT <fk_name> FOREGIN KEY … ON UPDATE CASCADE;
ガチガチにしておいても、エラーハンドリングの実装がなければ意味がない。
気にしたら負けかな。
もちろん綺麗に1 2 3とならない事は認識してるけど、1 1235 5493 29849 みたいに膨大な数飛びまくると…。
99％がupdateの場合なんだけど、update returningして件だったらinsertにした方がいいのかな
その場合ロックとか考えなきゃいけないのが大変なんだけど、もう避けられないのかな
conflictの条件をprimary keyにできないならPKのシーケンスが飛びまくるのはしょうがないと思う
ただ99%がupdateならupdateしてからinsertのほうが性能は良くなるような気がする
ロックを考えなきゃいけないというのはよくわからない
今も同じじゃない？
ありがとうございます。
on conflict do updateであれば、トランザクション貼らずともコマンドを実行するだけで確実にinsertかupdateが確定で成功するけど
update → insertだと両方updateが0件になって両方insertしようとして片方がエラー という事が起きるかなと認識していました
ただREAD COMMITEDならlost updateが発生してるだろうから
本当にそれが望ましいのかよく考えたほうがいいと思う
insert into 〜 on conflict do update相当の処理をトランザクションで書いているのですが
これって最終的にテーブルに対してACCESS exclusiveロック(selectすら妨害する最強ロック)をかける事が必須だったりしますか？
上記のクエリと同じ処理を行いたい場合、以下の処理を行う必要があると思います
・select文で該当の行が既にあるかをチェック
・select文の結果を見て、該当の行があればupdate
・select文の結果を見て、該当の行が無ければinsert
トランザクション1と2が両方同じタイミングでselect文を発行して、どっちもresultが0だった場合、どっちもinsertをしようとしてしまう。
だからどちらか片方のselect文は、他のinsertが終わるまで待ってから行って、result 1を取得する必要がある。
最初は行ロックでいいかな？と思ったのですが、最初にselectをした段階で対象の行は「存在しない」ので行ロックがかけれません。
となると、対象のテーブルに一番強い権限のACCESS exclusiveロックをかける必要がある？と思います。
ですが、それだとdo updateとは無関係のただのselect文に対してもロックがかかってしまいます。
この一連のdo update〜の処理でだけ排他ロックをかけたいのですが、そんな事出来るのでしょうか？
SHARE UPDATE exclusiveモードを使えばよかったのか
失礼しました
仕事じゃ絶対提案出来ないな(ダルすぎて)
自分の場合は実際には1000件単位のデータをupsertしてるんだけど、この数だと1件づつselect→(update or insert)は遅すぎる。
select文で1000件のデータのユニークキーに対して長いwhere 文を作る。
( SELECT id,key FROM tbl WHERE key in ( $1 , $2 , $3 .... , $1000) )
select文の結果を入れたい1000件単位のデータと比較して、1件づつinsertするかupdateするかを判定する
insert、updateも1件づつやるとトランザクションしても遅いから1リクエストで済むように動的にクエリ文を作る。
( INSERT INTO tbl (key) VALUES ($1),($2)... )
( UPDATE tbl SET key=c.key FROM( VALUES ( ($1,$2),($3,$4),...) AS c(id,key) WHERE tbl.id=c.id )
そしてupsertから加えた機能で、含まれてないデータをDELETEもするようにしてるからさらにクエリ文が増える。
SQL文の文字列をプログラムから動的に作るんじゃなくて、
O/Rマッパーというのを使ってもっと構造的に出来るようにするべきなんだろうか…。
ちなみにnode.jsです。
何か累積値や合計値を計算してて必ずカウントアップしていかないといけないとか
入力データ内の順序で後のデータを正として先のデータは捨てられてもいいとか
>>962
>SHARE UPDATE exclusiveモードを使えばよかったのか
これだとテーブルロックになるので1つのトランザクションが終了するまで次のトランザクションは待つことになる
これで十分なユースケースならそもそも同じキーに対して同時にinsertが実行される心配しなくてもいいよね？分離レベルをSerializableにすれば該当キーがロックされるだけで済むはず
自分が今悩んでいるのは、SQL文が動的になって書くのが大変という事です。
1000件あるデータ以下のような1回のinsert文で全ての値を登録するなどの事をしています。
insert into tbl (key1,key2,key3) values(1,2,3),(4,5,6),(7,8,9);
nodejsの場合、プログラムの中からSQLを実行する時は以下のような書き方をするのですが
query(`insert into tbl(key)values($1)`,[1]);
これが可変になると、以下のような書き方になってものすごく読みにくく感じます。実際はパラメーター複数あってさらに複雑ですし。
query(`insert into tbl(key)values ${insertDatas.map((v,i)=>`($${i+1})`).join(",")}`,insertDatas);
もちろんプログラムとしては全く難しくないのですが、素直に言ってダルい。$が連続しているのも読みにくさが増す理由になってる。
なので、こういう場合はO/Rマッパーというものを使えば
文字列操作ではなく見やすい書き方になったり
1回頑張って作れば他のテーブルに横展開出来るから楽なのかな？という趣旨でした。
言語化するとposgresqlのスレで言う事じゃない気もして、申し訳ない。
>query(`insert into tbl(key)values ${insertDatas.map((v,i)=>`($${i+1})`).join(",")}`,insertDatas);
string interpolationに入れた場合に適切にエスケープしてくれるのかどうかちょっと怪しくない？
INSERTは下記のクエリで行っています。
RETURNS VOID になっている所を、RETURNS TABLEにしてレコードを取得したいのですが、具体的なソースコードが思いつきません。
https://ideone.com/5JPpQ4
解決した方法も書いておけよ。そうすることでQ&Aが成り立つし、次に困ったときに返信があることが期待できるようになるんだぞ。
それ以外で自決してたら知らん
RETURNS TABLE - RETURN QUERY です。
https://ideone.com/kgQo96
もっといい方法もあると思いますが、自分では思い付きませんでした。
変数というものがわからないのか？
どこが悪いのでしょうか。
RETURN QUERY SELECT については、
使用時はプログラムで INSERTINCIDENT() に引数(incident_name, full_text, registered_by) を与えて呼び出し、
プログラムで与えた引数の値と、INSERT された値が一致するかどうかを比較する必要があるので、意図して SELECT しています。
そもそもincident_nameとfull_textが引数になってないでしょうに。
'本文本文本文',
公表しているコードだとリテラル値を使っているだけなので、いきなり脳内情報を書き込まれてもわかりません。
すみません。引数をつけて書き直しました。
https://ideone.com/6Ufeev
>ネタじゃなければ、確認することをくっつけて実行するのは素人だと思ってください。
この件が、ソースコードのどの部分にあたるのか理解出来ていません。
おかしな理解のまま進みたくないので、教えて頂けないでしょうか。
INSERTしたレコードの列値がすべてわかっているのに、そのレコードをSELECTするのはPostgreSQLを信用していないということなのか？
手続きをファンクションとして隠蔽したいんだろう。
idの最大値の求め方も同時実行の考慮なしだし、INSERTが想定通りだったか、自分で確認するらしいし、もはや目的がわからない。
>idの最大値の求め方も同時実行の考慮なしだし
SERIALIZABLEかもしれないよ
さらにそのSELECTが想定通りだったか・・・・詰み
ファンクションではトランザクションが使えないので、 serializable にする事で妥協しました。
全てのクエリが、ファンクションを呼び出すプログラム側 ( Npgsql ) の NpgsqlTransaction を使用するので、
プログラム側で IsolationLevel に Serializable を設定しています。
・ファンクションでトランザクションを使う方法
・ストアドプロシージャで戻り値を戻す方法
のいずれかが分かれば serializable 以外に出来るのですが、どうするべきなのかがよく分かりませんでした。
ネタじゃなく、知識がない状態で突貫でやらざるを得ない状態になっているのです・・・。
海外の掲示板では15.2に戻せって言ってるっぽい
原因がPython側にあって修正する時間がないって回答きてるっぽいからしばらくバージョンアップ無理かな
やっぱネイティブじゃないとこんな事になっちゃうね
添付のpgAdmin7.4はインストールしない
別途古いpgAdmin7.3をインストール
これでいけた
ググると「DBにxxの拡張を入れて〜」とかあるけど、そうじゃなくてpgadmin4のプログラム自体のログが見たいです。
AWSのrdsにssm経由で繋ごうとして、
psqlコマンドではpgpass.conf ファイルに設定したパスワードも読み込んで何も問題なく接続出来るんだけど、
psql -h localhost -p 57851 -U postgres -d postgres
pgadmin4ではconnection timeout expiredしか表示されなくて何も手がかりがなくて困ってます。
素のpsqlで繋がらないなら、DB側の設定やAWSのセキュリティグループを見るとかやりようはあるのでしょうが、pgadminだけで繋がらない状態です
これは?
https://www.pgadmin.org/faq/#8
ありがとうございます。まさにここでした。
そしてログレベルを上げても接続エラーの詳細なログは出なくて
結局バックエンドのpythonにログを追加してデバッグして
最終的に接続できない理由はlocalhostと書いてあるからで127.0.0.1と書いたら繋がりました。
チンフェ
新しいスレッドを立ててください。
life time: 2658日 17時間 26分 57秒
運営にご協力お願いいたします。
───────────────────
《プレミアム会員の主な特典》
★ 5ちゃんねる専用ブラウザからの広告除去
★ 5ちゃんねるの過去ログを取得
★ 書き込み規制の緩和
───────────────────
会員登録には個人情報は一切必要ありません。
月300円から匿名でご購入いただけます。
▼ プレミアム会員登録はこちら ▼
https://premium.5ch.net/
▼ 浪人ログインはこちら ▼
https://login.5ch.net/login.php
レス数が1000を超えています。これ以上書き込みはできません。
ニュース
- タンス預金50兆円が狙われる！4月1日から銀行口座とマイナンバーが紐付けられる『口座管理法』とは…トラブル続出制度に新たな火種 [少考さん★]
- 【芸能】無名の21歳の地下アイドルが「あの頃の橋本環奈すぎる」と話題 「これは次くる」本人驚きの大バズリ [牛乳トースト★]
- 【NHK】「ママチャリとトラブル」動画を“さらし”拡散 法的責任問われる可能性 ★4 [Hitzeschleier★]
- 【ドジャース】大谷翔平、今季3度目3安打に1盗塁と躍動 打率.360まで上昇！チームは今季初の完封負けで2カード連続負け越し [フォーエバー★]
- コロナワクチン接種後死亡 遺族ら13人が国を集団提訴 約9150万円の賠償を求める「マイナス情報を広報せず、被害を広げた」 ★3 [Hitzeschleier★]
- 【那須2遺体】被害者は上野で焼肉店等10店舗以上経営…中国韓国製衣料雑貨の輸入も [おっさん友の会★]
- 【WOWOW】UEFAチャンピオンズリーグ・ヨーロッパリーグ 決勝トーナメント★20
- 【WOWOW】UEFAチャンピオンズリーグ・ヨーロッパリーグ 決勝トーナメント★21
- ドジャースvsナショナルズ 7
- 【D専】
- こいせん祝勝会 全レス転載禁止
- わしせん
- 大企業連合「さっさと同性婚認めろ。」SoftBank、Panasonic、KDDI、SONY、本田技研、大林組、YAMAHA、明治、JT、三菱、ANA、NEC [389296376]
- 【画像】クルド人解体業者、ついに一線を超える [234233522]
- コンビニのトイレ入ったら他人の財布を発見、中には現金2万とカード類。お前ならどうする？ [995039915]
- 日向坂46の清水理央(19)さん 「タイタニックの沈没日。ジャックとローズが出会った素敵な日❤」
- 【悲報】いなり寿司を万引きしたと誤認された74歳のお婆さん、82時間逮捕拘束されてしまう
- 【悲報】観鈴ちん、ピンチ