記録

CSVのデータ数万行とかをVBAでデータを加工するよりも


CSVのデータ数万行とかをVBAでデータを加工するよりもPowerShellから加工するべし、、
まず、いま勤めてる会社、WEB会社なんですが
WEBシステムに使うデータの加工をする機会が結構あったりします。
時には数万行とかのデータを取り込んで
加工することがあるですね。
今まで数万行のデータは分割して
処理をしていたのですが、PowerShellで取り込んで処理する
方法があるみたいなので、これからはソチラで
加工しようかなとか思っています。
ちなみにExcelやPHPだとMバイトのデータを
扱うと処理が落ちる場合が結構あります。
とくにPHPだとファイルをアップロードする場合や
扱えるメモリの設定により処理落ちする事は
多々あります。
なので、PHP側でどうしても
処理を行いたい場合は事前にファイルを分割するか、
処理する時点でshellなどを使いコマンドラインで
ファイルを分割するかなどの方法を
取らないといけないのです。
ファイルをアップロードする時点で
処理を行うか前もって処理を行なったデータを
SQLで読み込むかなど、いろいろな方法があります。
 

活動支援よろしくお願いします

ドコモのデベロッパーサービスの雑談対話APIを使ってみた。前のページ

映画、64(ロクヨン)前編を観てきましたので #映画レビュー次のページ

関連記事

  1. 記録

    高知県のダム貯水率グラフ化2

    以前、高知県のダム貯水率のグラフ化してみた事があるのですがいつ…

  2. 記録

    良いこと聞いた、今のマイクロソフトの製品は{知らなかっただけ}

    今のマイクロソフトの家庭向け製品は、パッケージとか言いつつも全てダウ…

  3. 記録

    基本情報技術者試験の参考書を買って読まない。

    基本情報技術者試験の参考書を買って読まないでいた過去の自分。今回の…

  4. 記録

    東日本大震災3.11から10年。

    そんな立派な人ではないから何も言えないけど、あの日から10年の月日が…

  5. 記録

    あるスポーツを始めるため高知市まで行ってきた。

    あるスポーツを始めるため高知市まで行ってきた。ジムへ通うわけではな…

  6. 記録

    見ると聞くとは大違いJAの今後。

    JAの今後とかを書いていたけど、長々書くよりこの言葉だけで良いなと…

PAGE TOP