ゼミでSparkのノード間通信を可視化しようという話になった。 肝心のクラスタがグローバルネットワークから隔離されており、ログインノードからしかアクセスできないという環境だったので、 クラスタで収集したパケットキャプチャログをログインノードに送る…

Slacaなんて2年ぶりくらいに書いたし、ぶっちゃけほとんど何も覚えてなかったので、今後Sparkを使う可能性がある上で備忘録として。 ちなみに、Scala, sbt, Sparkのセットアップについては触れない。 import org.apache.spark.SparkContext import org.apach…

今まで「3行で」コーナーやってたけど、「概要でよくね？」という気がしてきたし、なんとなく馬鹿らしくなってきたのでやめる。"No local bad minima"というタイトル見た瞬間面白そうだと思ったので読もうと思った。 概要 ニューラルネットの学習誤差をネッ…

果たしてこのシリーズが続くのか、はたまた3日坊主になるのか。 （まあ流石に毎日やるつもりはないのだけど） 3行で マルチエージェントシステムに関して 相互に通信するようなニューラルネット(CommNNと呼ばれている)を用いて制御 交通渋滞回避などに応用で…