この記事でわかること pythonのnltkでstopwords辞書をダウンロードする方法がわかる nltk.downloadでSSL関係のエラーが出たときの対処方法がわかる pythonの自然言語処理パッケージnltkのnltk.downloadを実行してstopwordsをダウンロードしようとしたら、 SSL CERTIFICATE_VERIFY_FAILEDエラーがでてハマりま […]
この記事で分かること ・Googletransを使ったGoogle翻訳の使い方が分かる ・GoogletransのPythonの実装例が分かる ・Googletransがなぜ不安定と言われているかわかる ・Googletransはいきなり使えなくなることがある。その対処方法が分かる メイド見習い 1万語ほど翻訳したら急に翻訳できなくなってしまったんだ。 翻訳を試みても「Expecti […]
この記事でわかること 機械学習のseq2seqの仕組みがわかる seq2seqを使うとどんなことができるかわかる seq2seqを利用した英語から日本語に翻訳するpythonのプログラミング例がわかる kerasでモデルを作る方法がわかる seq2seqとは 特徴は？ seq2seqを使うとこんな事ができます。 ・長い文章を要約することができる ・対話の応答。自動返信のチャットが良い […]
この記事でわかること 文章の生成方法がわかる kerasのLSTMの使い方がわかる 概要 kerasを使えば、LSTMで文章の生成が意外に簡単にできてしまいます。 しかも、LSTMの詳しいロジックを知らなくても、実装できてしまうのがkerasのすごいところだと思います。 LSTMとは LSTMとは「Long Short Term Memory」の略で、長期的な時系列の依存関係を学習す […]
kerasを使えば、簡単なニューラルネットワークであれば10行ほどで実装できてしまいます。 ニューラルネットワークの実装は難しそうだな〜と思っている方に参考になると思います！ 今回は、cos関数の描画という簡単なサンプルを使って、ニューラルネットワーク、kerasの使い方を説明します。 kerasでニューラルネットワークを実装する まず、kerasを使う部分だけ抜き出すと以下のような […]
この記事でわかること kernelからLINEへメッセージ送信後、ConnectionErrorエラーで失敗したときの対象方法がわかる kernelとLINE Notifyの連携方法がわかる LINE Notifyと連携させると、何が便利かわかる いきなり結論！ConnectionErrorエラーが出たときの対処方法 Kaggleのnotebooks(kernel)にLINE Not […]
「AUC評価指標」とは何？ そのような疑問に歴20年の現役エンジニアが回答します。 混同行列についての復習 前回、混同行列についてオタクかどうか判断するカメラアプリの例で解説しました。 混同行列のTP,FN,TN,FP について簡単に復習します。 ■真陽性・TP(True-Positive) ポジティブ(正例)に分類すべきものをちゃんとポジティブに分類でき […]
この記事でわかること pandasのnumpyの変換方法がわかる １行でmathを使った計算方法(記述方法)がわかる pandasからnumpyに変換してmath.logの計算するまでのフロー pandasにY軸にあたるデータが有る。それを取り出してlog関数を通して出力したい。 その実現方法がわかったのでメモ。 手順 ①pandasからnumpyに変換する y = t […]
この記事でわかること ・Pythonのflaskのノウハウが分かる ・アップロードされたCVSファイルをpandasに展開する方法がわかる 起きた問題 WEBサイト(flaskで作成)でアップロードされたファイルデータ(一時ファイル)を読み取って、 pandasに展開しようとしたらエラー(エラーの内容忘れた ^^;)が発生した。 そのときに書いたコードが以下の通り。 f […]
この記事を読むとわかること ・Kaggleを始めたら何をすべきかわかる ・コンペに参加する勇気が持てる ・初心者が挑戦するべきコンペがわかる Kaggle初心者のメイド 私、機械学習をプログラミングスクールで学んだからKaggleを初めてみたい！ Kaggleといえばコンペだけど、ランキングが低いと馬鹿にされそうで怖いな メイド長 まずは、やってみないと始まらないよ！ […]