データ分析に関する記事とニュース
-
2017/08/04SQLでRFM分析に挑戦する
本連載ではビジネスデータ解析でデータベースから情報を取得して活用する必要がある方を対象に、ビジネスデータ解析でよく使われる実践的なSQL例を示し、解説します。前回はバスケット分析と時系列分析について取り上げました。今回は顧客分析の代表的な手法の一つであるRFM分析を題材に、具体的な実行例でSQLでのデータ解析に挑戦します。
-
2017/07/19SQLでバスケット分析と時系列分析を用いたデータ解析に挑戦する
本連載ではビジネスデータ解析でデータベースから情報を取得して活用する必要がある方を対象に、デシル分析や時系列分析などビジネスデータ解析でよく使われる実践的なSQL例を示し、解説します。前回はクロス集計とデシル分析について取り上げました。今回扱うテーマは、バスケット分析と時系列分析です。
-
2017/07/14Ruby-Pythonブリッジライブラリ「PyCall」を使ってRubyでデータ分析をしよう！
現在、Rubyはデータサイエンス分野では使いにくいプログラミング言語です。その主な理由として、実用的に使える環境が存在しないことが挙げられます。この状況を変えるには、データサイエンスの全工程をRubyで実施できる環境を整備しなければなりません。本稿ではデータサイエンスでよく利用されるPythonのツール群をRubyから使用するための仕組みである「PyCall」を紹介します。
-
2017/05/24SQLで基本のデータ解析に挑戦する
本連載ではビジネスデータ解析でデータベースから情報を取得して活用する必要がある方を対象に、「クロス集計」「デシル分析」「バスケット分析」「時系列分析」といったビジネスデータ解析でよく使われる実践的なSQL例を示し、解説します。今回は、その中からクロス集計とデシル分析を取り上げます。
-
2017/02/09Apache Hadoop/Sparkの実技試験でビッグデータを扱うスキルを証明できるClouderaの認定資格
Apache Hadoop（以下、Hadoop）は誕生から10年を越え、日本でもいよいよ本格的な実用化の段階へと進みつつある。これはHadoopのスキルを持つ優位性も増しつつあることを意味する。本稿では、Hadoopの商用ベンダとしていち早く設立されたClouderaの日本法人から、Cloudera University Japan トレーニングマネージャー兼シニアインストラクター 川崎達夫氏にインタビューを行い、Hadoopの現状や、同社が提供しているHadoopのトレーニング、認定資格につ...
-
2017/02/08試して納得！ IBM Watson Data Platform 〜 データサイエンティストからアプリ開発者までのコラボを実現し、価値創出サイクルを加速するデータ分析基盤
「ビッグデータ」は黎明期を過ぎ、本格的な発展期を迎えました。取り組みも「収集したビッグデータを可視化して課題の抽出・解決を図る」という単純なものから「分析結果をもとに未来を予測し、ビジネスの最適化、新しい価値の創出につなげる」といった、より複雑なものへと変化しつつあります。こうした変化を見極めたIBMは、データから価値を引き出し、企業の変革をリードするデータ分析基盤として「IBM Watson Data Platform」を発表しました。本稿では、その概要やメリットとともに、データサイエンティ...
-
2017/01/13Elastic Stack 5.0以降のデータ解析はこう変わる――Elastic{ON} Tour 2016 in Tokyoレポート
2016年12月、都内で開催された「Elastic{ON} Tour 2016 in Tokyo」では、基調講演と午前中のセッションを使い、Elastic Stack 5.0として統合されたElasticのデータ解析ミドルウェアの新機能やリリース予定の機能について、一部はデモを交えて紹介された。
-
2015/10/16AzureCon基調講演登壇レポート：インドリージョン、GPUサポート、IoT Suite、コンテナサービス、セキュリティセンター
本稿は、Scott Guthrie氏のブログを、氏の許可を得て、翻訳、転載したものです。米Microsoft社の副社長で、ASP.NETやSilverlightの開発チームを統率する氏のブログでは、次期製品を含む最新の技術をいち早く紹介しています。
-
2015/10/09Hadoopクラスタを簡単に実行できるHDInsightと、新しいAzure Data Lakeサービスを一般公開
本稿は、Scott Guthrie氏のブログを、氏の許可を得て、翻訳、転載したものです。米Microsoft社の副社長で、ASP.NETやSilverlightの開発チームを統率する氏のブログでは、次期製品を含む最新の技術をいち早く紹介しています。
-
2015/09/29写真共有SNSのユーザーの性別を機械学習で推定するWebアプリケーションをPythonで作ってみよう
本連載ではTIS株式会社が提供している技術ブログ「Tech-Sketch」から「コレは！」というテーマをピックアップし、加筆修正して皆さまにお届けしています。今回はTISのインターンシップで行った「機械学習を活用したWebアプリケーション開発」を取り上げます。
-
2015/06/19フリーのビッグデータ分析学習環境を使って、全文検索アプリケーションを構築してみる
前回の記事では、Sparkを使ってバスケット分析を行いました。最終回では、Apache Solrベースの全文検索エンジン「Cloudera Search」を使って全文検索アプリケーションを構築します。
-
2015/06/12フリーのビッグデータ分析学習環境を使って、Apache Sparkによるバスケット分析を行ってみる
前回の記事では、Impalaを使って、構造化データ（RDBMSからインポートしたデータ）の分析と、Hiveを使用して非構造化データ（アクセスログ）の分析を行いました。今回は、Apache Sparkを使って簡単なバスケット分析を行ってみましょう。
-
2015/06/05フリーのビッグデータ分析学習環境を使って、構造化データと非構造化データの分析を試してみる
前回の記事では、MySQLからHadoopにマスターデータの投入を行い、Hiveテーブルを作成するところまで行いました。今回は分析にもよく利用されるSQLを使用して、データの分析などを行います。
-
2015/05/28OSSのツール「Solr」「Flume」「Banana」の組み合わせによるデータ可視化プラットフォーム構築
ヤフー株式会社には、技術や制作の分野において専門性に優れたエキスパート人財を「黒帯」に認定し、その活動を手厚く支援する黒帯制度があります。「ある分野に突出した知識とスキルを持っているその分野の第一人者」が黒帯として認定され、褒賞金と活動予算が付与され、それぞれの分野のエバンジェリストとして社内外で活躍します。この黒帯によるリレー連載として、第2回目は「Solr黒帯」が執筆します。
-
2015/04/24フリーのVM環境を使って、ビッグデータ分析の学習環境をすばやく構築する
この連載では、フリーのVM環境「Cloudera Quick Start VM」を使って、ビッグデータ分析に必要な各種技術（データの取込み、非構造化データの分析、機械学習、全文検索など) を学習します。この連載を読むことで、ビッグデータ分析基盤に必要な基礎技術を学ぶことができます。第1回では、VM環境のダウンロードと起動、RDBMSからHadoopへのデータのインポート、Hadoop上でのテーブルの作成を行います。
-
2014/06/25【西内啓氏 × ミック氏】 データエキスパート対談 これからは分析を意識したデータマネジメント力がエンジニア全員に必要になる
著書『統計学が最強の学問である』が35万部を突破するなど、統計学ブームの端緒をつくった統計家・西内啓氏と、『達人に学ぶ SQL徹底指南書』をはじめとする自著やSQLの大家ジョー・セルコの著作の翻訳でSQL・DB利用者に啓蒙活動を続ける自称セルキアン、ミック氏。異なるフィールドで活躍する2人のデータエキスパートの対談がCodeZineで実現しました。対談で浮き彫りなったのは、データ分析の現場やデータ活用を行う組織に潜むリアルな問題。西内氏、ミック氏がそれらにどう対応しているのか、我々へのアドバイ...
