(整理予定)言語処理道一合目

対話システム・言語処理についてぼちぼち頑張るブログ

twiiterのデータと鬼速PDCA

夜更かししてしまい、体の調子が良くない。 ●●が終わるまで寝ない作戦をしようと思ったけど、 終わってないし、次の日すこぶる気分も体も調子悪いし、ダメ。 夜型、ダメ絶対。 土日の朝に予定を入れるルールを設けた。 twitterのデータは学習用に3対1に分…

twitterの文章に対してLFDA

今日からは、twitterのデータに対して、どういったトピックが検出されるかのLFDAを作る。 研究や仕事や生活に対して鬼速PDCAを回して見たい! やるぞー!

kearsを使ってmultiな入力と出力NN 7

続き kenkyuublog.hatenadiary.jp ダミーデータで動いた! 次はいよいよ本ちゃんのデータを入れたい。 データの整形の仕方とか忘れかけてるから、複数しないと、

kearsを使ってmultiな入力と出力NN 6

続き kenkyuublog.hatenadiary.jp ふむ。やっぱりディープなニューラルネットワークをやるのは楽しい。 泣きたくなるほど楽しい。 ピアノ弾いているときとちょっと似てる。 公式様のをぼちぼちやって見ているけれども、 https://keras.io/getting-started/fu…

kearsを使ってmultiな入力と出力NN 5

続き kenkyuublog.hatenadiary.jp お昼休みです。 まさかの公式発見。経験的に公式様は最強だと言うことを知っているので、これを元に作成していきたい。 https://keras.io/getting-started/functional-api-guide/#multi-input-and-multi-output-models 本当…

kearsを使ってmultiな入力と出力NN 4

続き kenkyuublog.hatenadiary.jp パスがあまりにも解けないので別サイト様のをやってみる。 複数の分類を出力するディープラーニング→ https://qiita.com/cvusk/items/1439c1c6dde160c48d13 たまたまこのサイト様のはjupyter使っているな。 せっかくだから…

kearsを使ってmultiな入力と出力NN 3

続き kenkyuublog.hatenadiary.jp 今日は、google Colaboratoryを友人さんに教えてもらった。 パスがあまりにも解けないので、これでやってみたい。 ノートかけるの面白い。 新しいものを使うのはワクワクする。

描きたい記事

描きたい記事、あります。 【本当に本当に初心者さんがpythonを始めるまで】 →実体験元に。もっと体系的にやれば早く習得できただろうなぁと。 【プログラミング初心者が、独力でtensorflowを使って対話システムを作るまで】 →自分の実体験。先生が深層学習…

自分でなければ救えない人。自分でなければ喜ばせられない人

最近、 「情報発信は「自分でなければ救えない人」のために行おう!」 と言う文面にえらくグッときた。 自分は、多分、初心者さんや素人さんに教えるのが好きだ。 人にパーソナライズ化して教えるのが好きだ。 www.facebook.com そう言うことをもっとしてい…

遺伝的アルゴリズム動いた

kenkyuublog.hatenadiary.jp 上の相対パスがうまくいかなすぎて、気分転換にpythonで遺伝的アルゴリズムを書いていた。 https://github.com/ChengHust/NSGA-II 最初、 for r in range(fit[(0, :)].size): の部分でエラーが出ていたが for r in range(fit[0, …

最近悩み事をしてだれていた。

kenkyuublog.hatenadiary.jp これ、まだできていない。 けど、明示的な相対インポートと、暗黙の相対インポートと、絶対なインポートと、あることがわかった。 色々とパスとかいじり倒して見たけど、うまくできない。 とにかく最近だれてきている。 この時間…

kearsを使ってmultiな入力と出力NN  2

続き kenkyuublog.hatenadiary.jp なかなか相対インポートエラーから抜け出せません。 ValueError: Attempted relative import in non-package これって、パッケージとして認識されていないと言うことなの?? それともパスがおかしいの? エラーはノートに…

kearsを使ってmultiな入力と出力NN

続き kenkyuublog.hatenadiary.jp File "/Users/apple/Desktop/01A-研究関連/11-multimodal/multiple/import_practice/my_package/mod2.py", line 1, in <module> from . import mod1 ValueError: Attempted relative import in non-package 相対パスのインポートが</module>…

始まりの10分と終わりの10分をすごく大事にする。

研究でも仕事でも生活でも 始まりの10分(主に計画) 終わりの10分’(反省とコンテキスト) 絶対の適当に始めない。適当に終わらない。

時間を4つに分ける。

時間を4つに分けて捉えることにした。 ①朝起きてから家を出る時間 2h30m (3:30ー6:00) ②朝電車の時間。50m ③お昼休み 45m ④帰り電車 30m これが私の平日研究に使える時間。 朝の見積もり取るときに、この時間に当てはめて行こうかな。 読書と英語…

LFDA用のwikidataの準備のプログラムがようやく終わった

LDAの進化版のLFDAを動かすために、wikipediaのデータを作るプログラムが終わった。 多分3日でできたものを、1週間ぐらいかかってしまった。 データができるまで、multipleNNと遺伝的アルゴリズムやりたい。

kearsを使ってみた。

複数の入力、複数の出力を行える学習をしたい。 けど、やり方がよくわからない。 ので、下記サイト様を参考にやってみようと思う。 https://www.st-hakky-blog.com/entry/2017/12/07/173928 chainerとtensorflowは使ったことあるけど、kearsは使ったことない…

連想11日目 

続き kenkyuublog.hatenadiary.jp 文章を 分散表現に変えて、書き込んだファイルを作る(下)、ということをしたいのだけども。 いかんせん、wikipediaの文章データ全てなので、容量が大きくていろいろ手こずる。 全然難しくないことなのに、4日近く使って…

とにかく毎日意地でもブログを書く

気分がのらなくても、 毎日必ずやると決めた時間に研究するし(電車の時間は研究以外しないっ!) (休日は17:00まで) 毎日同じもの食べるし 毎日同じ時間に寝て起きるし 毎日同じもの飲むし 毎日同じ音楽かけて研究する!!! 最近崩れてきてるから。 やら…

連想10日目

続き kenkyuublog.hatenadiary.jp 私事のいろいろでモチベーションがガクッと下がる。 せっかくのGWなのに、全然進まない。 連想をするための下データの準備、明日終わらせる! 日記とブログとを分けたい。

連想 9日目

続き kenkyuublog.hatenadiary.jp 複数の入力に対し、複数の回答を得れるようなシステムにしないと。 つまり、マルチモーダルをやる必要がある? 連装部プロトタイプ作成締め切りまであと8日

連装 8日目

続き kenkyuublog.hatenadiary.jp 学習データがまだ揃っていない状態なので、本格的な連装の学習はできない。 土日マシンがあるところで追い込みで学習データを作成する。 そこで、試しのデータセットで連装部を模索。まず、普通のNNをいじってみることにす…

連装 7日目

続き kenkyuublog.hatenadiary.jp 連装を学習させるための元データを用意しよう!と思い立つもそこが難航しそう、、、。 対話文短すぎて情報量少なくて、なかなか連想を取るのは難しい、、、 やっぱり連装というより特徴の方がいいのかな。 ウーーム。 先輩…

連想 6日目

続き kenkyuublog.hatenadiary.jp 連想でGAを使ってみようと思うけれども、とにかく1つの評価関数になる 連想同士の関連性を実装したいが何をどうすればで難航。 普通のNNじゃダメなの?? NNの研究するにはコードをコピーしてそこから改変するだけじゃなく…

連想 5日目

続き kenkyuublog.hatenadiary.jp 提案手法が「小賢しい」ことにがっくりするも、 システムを作ってみることに。 ということで連想に戻る。 「手を動かしていた方が精神的に楽でしょ」 と言われるが、前ほど研究の結果とかに精神が辛くなくなった。 それは、…

スライド作成とプロトタイプ作成 7日目

続き kenkyuublog.hatenadiary.jp 研究のきも部分が「小賢しい」ことに気づく。 小賢しくない、本質のものを 参考研究調査に戻る。

スライド作成とプロトタイプ作成 6日目

kenkyuublog.hatenadiary.jp 続き 眠い 一回ヴァージョン2でさらにアップデート中 今日中に大和ラッセたかったが睡魔

すらいド作成とプロトタイプ作成 5日目

続き kenkyuublog.hatenadiary.jp 絶対明日中にスライドを完成させる。 忙しいほど捗るから不思議。 ルーティーン崩すと大変 土日もそこそこ朝に予定入れたい。

自分に呪をかける

土日仕事納めで疲れはて、「新年度いやいや〜〜、仕事いやいや〜〜」という大人にも関わらずいやいや期をやっていましたが、 いやいやしても何も良くはならないので、「最初が肝心!」とで気合い入れ直します。 自分に呪をかける。 京極夏彦の「言葉は呪いだ…

スライド作成とプロトタイプ作成 4日目

続き kenkyuublog.hatenadiary.jp 今週の土日はダメだった。 土日しかやるときがまとまってやる時間がないのに何をやっているのか。 原因は優先順位。 朝一で研究! スライドへの先生の指摘 「この手法がある場合とない場合との差がわからない」 毎週24時…