データ分析

片対数グラフの回帰直線をPythonで求めようとして少しハマったのでそのメモ。仮想データを準備して、X軸を対数変換して回帰直線を求めた。

最近は機械学習の解釈性がよく聞かれますが、そんな中でMicrosoft Researchがとても面白いかつ今後有用になりそうなライブラリを発表していました。本記事ではkaggleにあるローン審査のデータセットとDiCEを使ってローン審査の反事実を生成してみます。なお、現時点ではDiCEは実装がまだしっかりと整備されていないため、今後実装が進んだ際は現時点とは使い方等が変わるかもしれませんのでご了承下さい。

こんにちわ！都内のベンチャー企業でデータ分析屋しているやじろべえです！今回はPyCaretという機械学習の自動化ライブラリを使ってみたのでその忘備録になります。PyCaretはイメージ的にはDataRobotのような感じですね。詳細は公式ホームページを見てみてください。

こんちにわ！都内のスタートアップでデータ分析しているやじろべえです。最近は機械学習の解釈性がよく話題になっていますが、今回はこの機械学習の解釈性について一つのソリューションを与えてくれるSHAPについて試してみました（もうN番煎じなんだよって感じですが・・・）。

こんにちわ！やじろべえです。今回は因果推論シリーズの第三弾として、回帰分析を使ってバイアスの影響を測定してみます。これまでと同様に教科書は下記の書籍を参考にしています。因果推論をビジネス利用する観点で書かれており、現場でデータ分析する人は読んでおいて損は無いと思います。

こんにちわ！やじろべえです。今回は因果推論シリーズの第二弾として、バイアスのあるデータを疑似的に作り、その効果検証をしてみました。今回も教科書は効果検証入門を参考にしています。内容の多くが因果推論をビジネス利用する観点で書かれており、現場でデータ分析する人は読んでおいて損は無いと思います。

こんにちわ！やじろべえです。今回は統計的因果推論ということで、おそらく一番有名であろうRCT（Randomized Controlled Trial）による効果検証についてPythonで分析してみました。因果推論を学習するにあたり、何か参考書籍は無いか探していたところ良さげな一冊を発見しました。データ分析界隈で有名な方々もこちらの書籍を一押ししていたので、早速私も購入してみました。

こんにちわ！やじろべえです！最近、職場の蓄積したデータを使って顧客が離反するかしないかについて予測したいとビジネスサイドの方がフラグを立てている（？）らしいので、予習がてらにオープンデータセットを用いて機械学習的なアプローチで分析してみました。

こんにちわ。見習いデータ分析屋のやじろべえです。データ分析コンペで上位を取ろうとしたらマストテクニックになるスタッキング(stacking)ですが、これまではお手軽に使えるクラスが無かったので、パイプラインを作るのが非常に面倒でした。そんな中、scikit-learnのバージョン0.22.0からスタッキングクラスが実装されたと聞いて、早速どれだけお手軽か試してみました。

皆さんは宮沢賢治の名作「銀河鉄道の夜」という小説を読んだことがありますか？私は子どもの頃一度読んだのですが、よく意味が分からなくて断念した記憶があります。さて、今回はこの名作で登場する主人公と友人どのくらいの頻度で登場するか、Python, Janome, 形態素解析を行って単語の出現回数をカウントしてみます。