データのクレンジングとは? そもそも「データクレンジング」とは何を指しているでしょうか?化粧を落とす化粧品をクレンジングといいますが、あれは顔についた汚れを落とす役割を持っていますね。クレンジングには洗浄するという意味合いがありますが、まさに「データクレンジング」とは、「データを綺麗にする」ことなのです。データ分析を行うためには、重複のデータや扶養なデータがあると、扱いにくい状態になります。分析の邪魔となる異常値や空白、重複等を取り除き、分析や集計しやすい状態にすることをデータクレンジングといいます。 今、企業の日々の業務では、例えば販売管理システムや在庫システム、会計システム等、あらゆるソフトを組み合わせて業務を進めているケースが多いと思います。それぞれのシステムから吐き出されるデータを集約し、最終的な売上分析や利益分析等のビジネスデータ … [もっと読む...] about パワークエリを使って、データを綺麗に!パワークエリを使ったデータクリーニング
パワークエリ
横持ちデータの縦持ちデータ変換も、パワークエリで解決
データ分析をするためには、縦持ちデータであることが重要 Excelやパワークエリを使ってデータを整形する作業でよく出てくるのが、横持ちデータを縦持ちデータに変換する処理。実は、データ分析をするに際しては、フィルタリングしたり集計したりする場合に、横持ちのデータでは対処できないケースが多いのです。ピボットグラフなど、CSVの生データをある程度整形したような集計表は、人がパッと見て見やすい形になっています。しかし、これはあくまで、人の目にとって優しい形となっているにすぎません。横持ちのデータのままですと、正しく集計に活用できないケースも多いのです。この記事では、パワークエリで横持ちのデータを縦持ちのデータに変換する方法についてお伝えしていきます。 「人が見やすい」データは、横持ちのデータで作られていることが多い 先ほど述べた通り、 … [もっと読む...] about 横持ちデータの縦持ちデータ変換も、パワークエリで解決
Excelのパワークエリのステップとは?データの処理手順を記録して脱属人化する方法をご紹介!
パワークエリでは、パワークエリで読み込んだデータの変換操作をした場合に、その操作の順番を、一つ一つ分けて保存しておく機能があります。これは、「ステップ」と呼ばれます。データの変換作業の中で実施した変換操作はパワークエリの画面上の「適用したステップ」の一覧に表示されます。 任意のステップをクリックすると、その特定のステップの結果として、その操作をした時点でのデータが表示されます。例えば、カラムを入れ替える操作をした場合に、そのカラムの入れ替えを行ったステップをクリックすると、カラムを入れ替える前後のデータを見ることができます。 カラムを並べ替える前 カラムを並べ替えた後 このように、途中のステップをクリックすることで、ステップ前後の操作手順を確認したり、操作を戻すことも可能になります。従来のExcelでは、加工後のデー … [もっと読む...] about Excelのパワークエリのステップとは?データの処理手順を記録して脱属人化する方法をご紹介!
パワークエリで、複数ファイルの結合・複数テーブルの結合を行う
表計算ソフトの代名詞ともいえるExcelには、パワークエリという強力な機能が備わっています。パワークエリは外部にあるデータとの連携だったり、データの加工に適している機能で、これ1つで様々なことができるのが特徴です。扱うことができるデータはデータベースを始めとして、各種のファイルやAzure、Webからのデータの読み込みにも対応しています。 今回は、数あるパラークエリの機能の中から、「複数ファイルの結合」と「複数テーブルの結合」について、ご紹介します。 パワークエリでできる、複数ファイルの結合とは? ファイルの結合は文字通りの機能で、複数のExcelデータを読み込んで1つにまとめることができます。 テーブルを選択することでエディタが表示されるので、行列の削除や分割といった整理をすればファイル結合の完了です。 例えば、毎月 … [もっと読む...] about パワークエリで、複数ファイルの結合・複数テーブルの結合を行う
Excelのパワークエリでできることとは?
みなさんは、パワークエリについて知っていますでしょうか?初めて聞く方もいるかもしれません。パワークエリとは、MicroSoft社が提供している、無料で使えるデータ整形ツールです。2016年以降のExcelにおいて、標準tで搭載されている機能です。 データ整形とは? では、データ整形とは何でしょうか。収集したデータを分析する際に、そのデータを綺麗にする作業です。データクリーニングや、データプレパレーションともいわれます。パワークエリでは、データを綺麗にするための加工の手順のマニュアルを設定でき、一つマニュアルを作ってしまえば、定型業務として自動化することができます。データを集めて加工し、データを分析するまでの一連の流れでは、パワークエリは以下の範囲において役立つ機能となります。別システムが出しているツールでは、TableauPrep等がありま … [もっと読む...] about Excelのパワークエリでできることとは?