DB板自治・質問・雑談スレ

**名無しさん＠お腹いっぱい。** · 03/06/30 16:12

語れ！

**NAME IS NULL** · 2016/05/26(木) 13:20:17.15

>>956
たしかに重要だよね。。。

**NAME IS NULL** · 2016/06/25(土) 17:03:17.56

初心者ですが
項目数が可変のツリー構造をデータベース化するのに定石はありますか？
階層ごとにテーブル作って親のid持たせるくらいしか思い付きません…

**NAME IS NULL** · 2016/09/24(土) 02:55:53.35

今までレンタルサーバまかせでDB用意してもらってたので、
ルート権限ありで自分でセットアップして使うのは始めてなのですが、
接続にあたって、レンタルサーバのように、ユーザ作って認証をちゃんと通したほうがいいのでしょうか？
管理者でパスワード認証なしの場合便利だなあと思ったのですが、
好き勝手に新しいデータベース作れるのがなんか気持ち悪く思えて・・・
それ以外にもセキュリティ高めるためにも用意した方がいいのかなと思ってます。
どうしたらいいでしょう？

**NAME IS NULL** · 2016/09/24(土) 17:40:05.97

DBを含んだシステム(仮想環境、Dockerを想定するが場合によっては物理で組む)を検討しているのですが、
ちょっと用件が特殊なので、DBの選定あたりから考えないとならないため、お知恵を拝借したいです。

・特定期間の間、Twitterの特定キーワードを含むツイートを保存し続けるのが目的です。
　(期間終了後に分析を行います。基本的に収集と分析は同時には実行しません(今のところ))。
・想定最大流量は3000件/1時間で、24MiB/1時間(実測からの推定)。24時間稼働で期間は最大で半年。
　よって13,000,000件、100GiB～(想定外のマージンを含めて)150GiB、データが保存されます。
　(想定している保存先はHDD。)
・保存データは生のJSON。バイナリ等は含みません。ただし、常に同一のデータ構造ではないです。
　(ツイートにURL含んでいたり、画像含んでいたりするとその情報が入るため)

　ぶっちゃけ、テキストマイニングのためのデータ収集システムです。一つ一つは個人の自作鯖で
可能な範囲なのですが、最終的なデータ量だけが個人の範疇を超えているため、相談したいです。

　上述の規模の収集が出来、事後の分析が現実的な時間内に可能であること(１日程度なら我慢)
という条件でDBを選ぶとしたら、何を選ぶべきでしょうか？
　最初MongoDBを考えていたのですが、調べるとあまりよろしくない系の情報も耳にするようになり、
こちらの方面に耳を向けてなかったこともあって、最新の状況に明るくない状態です。
　このような目的に最適なDBは何になるでしょうか？

**NAME IS NULL** · 2016/09/25(日) 23:10:21.01

>>958
項目名を縦で持ったらいいんじゃないかな
想像してるのと違ったらごめん

>>959
普通は認証ファイル作っていわゆるパブリックキー方式だと思うよ

**NAME IS NULL** · 2016/10/04(火) 12:59:55.91

mongoとmysqlは用途が違いますか？
mongoはキャッシュのような使い方をしてる人が多いようですが、
ちょっと大げさながらmysqlでもそれは可能だし、
逆にmysqlでやるようなことも、面倒ですがmongoでも可能ですよね？
用途分けて両方導入する人は多いんでしょうか？

**NAME IS NULL** · 2016/10/06(木) 14:54:31.46

この板でSQLソース書こうとするとエラーで弾かれてしまう
以前はこんなことなかった
中継している？クラウドかなにかでチェックして弾いているように見える
そうなると運営に要望出しても対応は難しいのかな？

**NAME IS NULL** · 2016/10/07(金) 12:41:57.24

http://ideone.com
こういうとこに貼り付ければいいよ

**NAME IS NULL** · 2016/12/14(水) 16:15:32.59

TBS

TBS

**NAME IS NULL** · 2017/06/02(金) 18:58:25.25

neo4jについて聞きたいことあったけどnosqlのスレって全然ないんだねえ

**NAME IS NULL** · 2017/06/08(木) 20:12:39.41

初心者過ぎる質問で申し訳ないんですが、今会社で年間せいぜい150件程度発生する特殊な取引があって、
それをアクセスでDB化して使ってるんですが、処理の内容は支払う金額に決まった率を掛けて数字を出したり、
支払い日の翌月の特定の日を自動で表示させるだけです
この程度の動きならエクセルじゃダメなんですかね
ご教示ください、、

**NAME IS NULL** · 2017/06/08(木) 20:34:12.66

ExcelでもいいけどAccessでもいいやん

**NAME IS NULL** · 2017/06/08(木) 20:44:01.52

>>968
データを溜め込み過ぎてて一個一個の動作がフリーズしまくるんですよ、、

**NAME IS NULL** · 2017/06/08(木) 21:06:21.11

それならExcelでも無理だろ

**NAME IS NULL** · 2017/06/28(水) 09:22:35.84

正規形の質問なんですけど
リレーションスキーマ内に関数従属性が全くない場合は分解しなくてもボイスコッド正規形になるんですか?

**NAME IS NULL** · 2017/07/23(日) 22:40:43.19

形式の異なる複数のファイル、
もしくは、複数のレコードセットに対して、
SQLを実行する方法はないでしょうか?

方法がわからないので、
一度、Excelのシートに取り込んだり、
全部同じフォルダにCSV出力してから、SQLを使うという、
間抜けなことをやっているのですが。

**NAME IS NULL** · 2017/07/23(日) 22:42:54.09

↑書き忘れましたが、ExcelのADOです。

**NAME IS NULL** · 2017/07/24(月) 00:07:27.66

>>972
複数のレコードセットを参照するだけなら、UNIONで統合できないの？

**NAME IS NULL** · 2017/07/24(月) 00:17:30.44

>>974
それがわからないんです。

[出来る]
①　Select * From Excelシート1, Excelシート2

②　Select * From CSVファイル1, CSVファイル2

[出来ない](やり方がわからない)
①　Select * From Excelシート, CSVファイル

②　Excelシートからレコードセット1を作成
　　 CSVファイルからレコードセット2を作成
　　　　　　　　　　　　　↓
　　Select * From レコードセット1, レコードセット2

[現在の妥協案]
CSVファイルをExcelに取り込む
　　　　　　　↓
Select * From Excelシート1, Excelシート2(CSVから取り込んだ)

**NAME IS NULL** · 2017/07/24(月) 20:17:04.39

>>975
EXCELシート１とEXCELシート２は、DBに取り込んだ際にテーブル構造は同じなの？

**NAME IS NULL** · 2017/07/24(月) 21:03:16.61

>>976
違います。
Unionするわけじゃなくて、
WhereかOuter Joinするつもりなので。

**NAME IS NULL** · 2017/07/24(月) 21:04:45.56

すみません、最初からUnion前提じゃない事を書くべきでした。

**NAME IS NULL** · 2017/07/24(月) 21:33:50.72

>>978
シート１とシート２を取り込んだ際のテーブル構造を書いてみてくれん？

**NAME IS NULL** · 2017/07/24(月) 21:59:16.76

普通にこんな感じで、繋げるつもりなんですが。

シート1　注文コード, 商品コード, 数量, 単価, 注文日, 備考
　　　　　　　　┌────┘
シート2　商品コード, 商品名, 工場コード, 工場名

**NAME IS NULL** · 2017/07/25(火) 22:16:26.58

>>980
それなら普通にinner joinで繋がるんじゃね？

**NAME IS NULL** · 2017/07/25(火) 22:58:38.17

>>981
Select * From レコードセット1 Inner Join レコードセット2 がですか?
それとも、
Select * From Excelシート Inner Join CSVファイルがですか?

後者だと、接続文字列に、複数のソースを入れるのがわからないです。

**NAME IS NULL** · 2017/07/26(水) 21:05:50.67

>>982
レコードセットに直してからね
ADOでアクセスしようとしたら、.mdbにしないといけないけど、シート(またはCSV）からレコードセットへの変換はどうやってるの？手動でインポート？

**NAME IS NULL** · 2017/07/26(水) 21:15:33.69

>>983
レコードセットへの変換は、ExcelのVBAでADOを使います。

　　　↓この変換は大丈夫　　　　↓この変換がわかりません
CSV → レコードセット -──┬─→ レコードセット
Excel → レコードセット ──┘

**NAME IS NULL** · 2017/07/26(水) 23:24:41.48

>>984
レコードセットに変換するんじゃなくて、一時的にテーブルを作った方がいいんじゃね？
CSVからインポートしてテーブル1を作る→EXCELシートをインポートしてテーブル2を作る→テーブル1と2を結合するクエリを作る

**NAME IS NULL** · 2017/07/27(木) 06:36:38.22

ADOXを使ってMDBファイルを作って、その中にリンクテーブルを作る

**NAME IS NULL** · 2017/07/27(木) 22:41:13.17

>>985
>>986
テーブルってメモリ上に作れますか?
一旦何かに書き込むしかないなら、シートがありますが・・。

mdbの方が、シートより速いとか?

**NAME IS NULL** · 2017/08/05(土) 22:26:39.16

データウェアハウスって何？

**NAME IS NULL** · 2017/08/31(木) 21:38:26.37

MariaDBにしてもMongoにしても導入も設定もめんどくさい

検索にキー指定は問題ないがバリュー指定だと
プログラム側でどうにかしないといけないから効率は悪いけど
なんか最近jsonでいいやって横着してる

**NAME IS NULL** · 2017/09/01(金) 19:05:29.15

SQLite・・・

**NAME IS NULL** · 2017/09/04(月) 00:57:36.47

レコード件数1億件、同時アクセス500、秒間クエリ発行数1万、
これってまだ規模としては小規模と捉えていいですか？

**NAME IS NULL** · 2017/09/04(月) 12:21:13.55

webだとすれば小規模でしょうね

**991** · 2017/09/08(金) 03:50:06.10

>>992
レス遅くなりましたが、どうもありがとうございました。
スケーラビリティとかよくわからないのですが、
そろそろなんか対策しないとまずいかなと考え始めてましたが、
小規模ならまだこのまま放置しても大丈夫ですかね。

**NAME IS NULL 転載ダメ©2ch.net** · 2017/09/08(金) 18:45:41.12

板復帰(OK!:Gather .dat file OK:moving DAT 196 -> 176:Get subject.txt OK:Check subject.txt 196 -> 195:Overwrite OK)2.07, 1.56, 1.36
age subject:195 dat:176 rebuild OK!

**NAME IS NULL** · 2017/12/29(金) 11:16:03.86

誰でも簡単にパソコン1台で稼げる方法など
参考までに、
⇒　『宮本のゴウリエセレレ』というブログで見ることができるらしいです。

グーグル検索⇒『宮本のゴウリエセレレ』

5L3IHVLJET

**NAME IS NULL** · 2018/10/14(日) 19:49:56.86

平和だ

**NAME IS NULL** · 2018/10/20(土) 14:08:48.87

いいこと

**NAME IS NULL** · 2018/10/27(土) 12:09:33.27

へいよー

**NAME IS NULL** · 2018/10/27(土) 12:45:16.17

うめ

**NAME IS NULL** · 2018/10/27(土) 12:45:38.74

うめ

**1001** · Over 1000

このスレッドは１０００を超えました。
新しいスレッドを立ててください。
life time: 5597日 20時間 33分 1秒