共起ネットワークとは、文章に出現する単語の共起関係（同時に出現する頻度や強さ）をネットワーク図で表現したものです。共起ネットワークを用いると、文章全体の語句の関連性や傾向を視覚的に把握することができます。 共起ネットワー […]
ライブラリwordcloudを日本語で使うための色々実験メモ ワードクラウドの基本的な使い方を理解したいと思います。 べたのテキストから作成する方法 collectionsのcounterから作成する方法 Counter […]
ワードクラウドでは、初期設定では要らない品詞があったり、活用形のままであったり、言葉が途切れてしまいなかなか思い通りにいきません。ステップbyステップで、改善していきます。まずは大量の議事録を入れる前に１文で調整していき […]
Brute force feature engineeringとはなにか Brute force feature engineeringとは、機械学習において特徴量に様々な処理を加えることで新しい特徴量を作り出して、とに […]
sklearnのutilsにall_estimatorsという関数があります。これでtype_filterをするとclassifierを全部取得できることがわかりました。ちまちま普段使いのモデルを当てていかなくても自動で […]
sklearnのutilsにall_estimatorsという関数があります。これでtype_filterをするとregressorを全部取得できることがわかりました。ちまちま普段使いのregressorを当てていかなく […]
statsmodelsか、、やり方調べないとな pythonで回帰分析・logistic回帰分析をやろうと思うと、statsmodelsかsklearnが思いつきます。sklearnは機械学習に特化していて、coefとか […]
pythonでは多くの検定がscipyで実行することができます。多重検定に、statsmodels・scikit_posthocsを使用します。 まずはサンプルデータを作成 groupA groupB0 4.352 […]
初めに pythonのexe化は非常に難しいところがあります。ライブラリが増えるとpyinstallerのエラー地獄でだいたい前に進めなくなります。また、GUIにいいものがありません。GUIはビジュアルに強いhtml+c […]
https://kindpark.jpn.org/dogemotion/ こんなウェブアプリを作りました。犬の写真から表情を見て、感情を推測するAI（convolutional neural network）です。データ […]