Re: 大きなファイルの処理 (李在鎬) KH Coder 旧掲示板
[ツリー表示] [留意事項] [ワード検索] [過去ログ]

  [No.346] Re: 大きなファイルの処理 投稿者:李在鎬  投稿日:2008/01/05(Sat) 17:54:01
Re: 大きなファイルの処理 (画像サイズ: 668×481 94kB)

お世話になっております。

> 樋口です。明けましておめでとうございます。
> 新年早々のデータ分析、お疲れさまです。また、書き込みありがとうございます。
ご丁寧な対応に感謝いたします。いつもいつも・・・、ありがとうございます。

> さてMySQLのエラーですが、やはりデータが大きいのが理由かと思われます。MySQLは(デフォルトでは)4G分のデータ領域を確保するのですが、この領域にデータが納まらない場合、エラーとなります。500M程度のデータですと、茶筌の出力(coder_data/mai91to97_ch.txt)はおよそ10倍の5Gくらいになっていたでしょうから、データがあふれたものと考えられます。
>
はい、確かに5Gくらいになっていました。

> そこで、データを格納するのに十分な大きさの領域をMySQLが確保するようにコマンドを追加してみました。
> http://khcoder.info/psnl/.khc/kh_coder.exe
> 現在お使いの「kh_coder.exe」に上書きしてお試し下さい。
ありがとうございます。なんとお礼を申し上げて良いものか・・・(涙)

さっそく、昨夜から変更していただいたファイルで
前処理をしました。昨日の19時に開始し、
翌日の17時になっても終わらないので、強制終了しました。
強制終了時には添付の画像の状態でした。

何か考えられる原因はあるんでしょうか。
お時間があるときで良いので、コメントいただければ幸いです。

色々無理を申し上げますが、
よろしくお願いします。


- 関連一覧ツリー (■ をクリックするとツリー全体を一括表示します)