記録

CSVのデータ数万行とかをVBAでデータを加工するよりも


CSVのデータ数万行とかをVBAでデータを加工するよりもPowerShellから加工するべし、、
まず、いま勤めてる会社、WEB会社なんですが
WEBシステムに使うデータの加工をする機会が結構あったりします。
時には数万行とかのデータを取り込んで
加工することがあるですね。
今まで数万行のデータは分割して
処理をしていたのですが、PowerShellで取り込んで処理する
方法があるみたいなので、これからはソチラで
加工しようかなとか思っています。
ちなみにExcelやPHPだとMバイトのデータを
扱うと処理が落ちる場合が結構あります。
とくにPHPだとファイルをアップロードする場合や
扱えるメモリの設定により処理落ちする事は
多々あります。
なので、PHP側でどうしても
処理を行いたい場合は事前にファイルを分割するか、
処理する時点でshellなどを使いコマンドラインで
ファイルを分割するかなどの方法を
取らないといけないのです。
ファイルをアップロードする時点で
処理を行うか前もって処理を行なったデータを
SQLで読み込むかなど、いろいろな方法があります。
 

ドコモのデベロッパーサービスの雑談対話APIを使ってみた。前のページ

映画、64(ロクヨン)前編を観てきましたので #映画レビュー次のページ

関連記事

  1. 記録

    情報処理技術者試験、一夜漬けでズタボロ。

    情報処理技術者、一夜漬けでズタボロ。合格ラインを少し下回っています…

  2. 記録

    誰もSEOについて語らなくなってきている。

    誰もSEOについて語らなくなってきている。SEOの攻略法って基本的…

  3. 記録

    ついにキタ━━━━(゚∀゚)━━━━!!

    ついにぐーぐるほーむみにがやって来ました。早速、Twitterと連…

  4. 記録

    北斎の娘を見る。

    眩(くらら)~北斎の娘~を見る。「己の腕に腹が立つのさ」ってセリフ…

  5. 記録

    #サンプルコード 極力おなじコードを書かないようにする方法2。

    極力おなじコードを書かないようにする方法のつづき、明日、VS2013…

PAGE TOP