データサイエンス全般

データサイエンス全般

半構造化データ(XML/JSON)

半構造化データとは 半構造化データ(Semi-structured Data)とは、名前の通り構造化データと非構造化データの中間的な性質を持つデータです。 そのままではRDBで扱うことができないため、一般的には半構造化デ...
データサイエンス全般

プログラミングにおける変数

変数とは 数学(代数学)において、変数(variable)とは数字を文字で代用したものです。 文字には様々な数字を入れることができるため、「変化する数」という意味でそう呼ばれています。 ちなみに、ある変数とある変数の関係を...
データサイエンス全般

Irisデータセット

Irisデータセットとは Irisデータセットは、データサイエンスの世界でもっとも有名なデータセットのひとつです。 統計学に多大な功績を残したロナルド・エイルマー・フィッシャー(Ronald Aylmer Fisher)が論文で...
データサイエンス全般

データの種類(良いデータの条件)

データの種類 様々な観点から、データを種類分けすることができます。 ここでは、構造化データと非構造化データ、時系列データと非時系列データ、実験データと観察データ、ビッグデータとスモールデータについて投稿した記事をまとめています。...
データサイエンス全般

ワイドデータとロングデータ

ワイドデータとロングデータ ワイドデータ(wide data)とロングデータ(long data)ワイド型(式)とロング型(式)という場合もあります。またロングを、「狭い」という意味でナロー(narrow)と表現する場合もあります。は...
データサイエンス全般

ビッグデータとスモールデータ

ビッグデータとは ビッグデータ(Big Data)とは何でしょうか? この回答は、構造化データと非構造化データ、時系列データと非時系列データ、あるいは実験データと観察データについて語るより、ずっと困難です。 ビッグデータと...
データサイエンス全般

実験データと観察データ

実験データとは 次のように実験計画に基づき取得されたデータのことをいいます。本例は、JMPのサンプルデータCustom RSM.jmpより。 X1 X2 X3 Y -1 -1 -1 57.42 ...
データサイエンス全般

時系列データと非時系列データ

時系列データとは 時系列データ(Time Series Data)とは、下表のtime列のように、時系列に関する情報が含まれたデータのことをいいます。本例は、Rのvarsパッケージに含まれるCanadaデータセットより。 時系列...
データサイエンス全般

構造化データと非構造化データ

構造化データとは 構造化データ(Structured Data)とは、次のような表形式で初めから与えられているデータのことをいいます。本例は、Rにプリセットされているirisデータセットより。 Sepal.Length、Sepa...
データサイエンス全般

「分析」と「解析」の違い?

「分析」と「解析」の違いを、このように説明する向きがあるようです。 「分析」とは、構成要素を明らかにし、問題点を絞り込むこと。 「解析」とは、その問題点をさらに細かく調べ、真の原因を追究すること。 つまり「分析」してから、「解...
タイトルとURLをコピーしました