- プログラミング
- 2185 view
HiveでExternal Tableを削除する方法メモ
HiveのExternal TableはDrop Tableだと、オリジナルのテーブルに書き込み権限があればオリジナルのテーブルが消えてしまう恐れがあり、権限…
zuqqhi2
- 最近の記事
- 要素技術
- 891 view
[触ってみた]Microsoft Quantum Development Kit
はじめに昨日、Microsoftが量子コンピュータ向けの開発・シミュレータ環境（Quantum Development Kit）を提供した…
- プログラミング
- 907 view
sbt1.0.0のインストールとサンプル実行
はじめにsbtがついに1.0.0になり、環境構築しようと思ったらちょっと自分がやってたやり方と変わったので、自分用のメモとしてコマンドを残…
- 要素技術
- 4926 view
Tensorboardを使ってニューラルネットワークと学習の状況を可視化する
はじめにtensorflowやtflearnでモデルを作っていると、ネットワークを図にしたり学習の進み具合をさくっとグラフにしてくれるツールがある…
- プログラミング
- 2720 view
[機械学習]各種Pythonライブラリ入りの実験用Dockerイメージを作った
はじめにtensorflow、chainer、scikit-learnなど各種python用の機械学習ライブラリをインストールしてあって、…
- 要素技術
- 623 view
[機械学習]機械学習の種類
はじめにこの記事は、（大分遅くなってしまい申し訳ありませんが）Machine Learning Advent Calendar 2016の記事です…
- プログラミング
- 5193 view
[Node.js]バッチスクリプトの書き方
はじめにこの記事はNode.js Advent Calendar 2016の16日目の記事です。やりたいことごくたまに…
- プログラミング
- 3346 view
[Play][Scala]PlayFrameworkでリクエスト駆動のバッチを作る
はじめにこの記事はScala Advent Calendar 2016の21日目の記事です。解決したい問題PaaSをよ…
- プログラミング
- 1716 view
[OpenCV][Ruby]Webページのデザイン崩れ確認の自動化
はじめにこの記事は、OpenCV Advent Calendar 2016の12日目の記事です。他の皆さんの内容とくらべてかなり簡…
- 要素技術
- 1850 view
[機械学習]本番導入までの道のり
はじめにこの記事は、Machine Learning Advent Calendar 2016の11日目の記事です。機械学習のアルゴリズムに関する記事は…
- プログラミング
- 4015 view
[Hive]rankを使ってカテゴリごとに上位数件を抽出するクエリ
hiveでタイトルのようなことを実現するクエリを紹介する。これにはrank関数という関数を利用することで実現できる。rankを利用しない場合は以下のように複数の…
- プログラミング
- 799 view
Windows上で Vagrant + Ansible を使ってテスト用Webサーバ構築
Vagrantを使うことで仮想マシンを立ち上げることができる。Ansibleを使うことで立ち上げたマシンにソフトウェアをインストールさせたり、アプリをデプロイ…
- プログラミング
- 1126 view
Mocha と Chai による ブラウザサイド単体テスト – 環境構築からjQuery Deferredまで
MochaとChaiを使ってブラウザサイド単体テストをやってみる。この記事では環境構築、同期処理のテスト、非同期処理のテスト、jQuery Deferred…
- 要素技術
- 461 view
Mahout で 協調フィルタリング
Mahoutを使って協調フィルタリングをやってみる。Mahoutを使うことで基本的に一切の予備知識無しで、機械学習技術を利用することができる。本記事では、Ma…
- プログラミング
- 464 view
統計分析用フリーソフトRのインストール方法
Excelは非常に便利だが、統計や機械学習を用いた分析・グラフ化においては、さらに優秀なソフトがある。それがRだ。Rを使えば、難しい数学的な知識が必要な分析・…
- 要素技術
- 3178 view
Excel2010を使って t検定 で新手法と旧手法の差を統計的に調べる
統計的に新手法が既存手法に比べて優れているかどうかを確認するのにはt検定を使う。 t検定はExcelで簡単に実行することができるためその方法を紹介する。ABテ…
- プログラミング
- 568 view
python ローカル開発環境 構築
※2016/12/29 更新pyenvを使って python ローカル開発環境 を構築する方法を簡単にまとめた。pythonでもpyenvとvirtu…
- プログラミング
- 628 view
ScalaとSbtのインストール
Scala Sbt インストールScalaはオブジェクト指向言語と関数型言語の両方の特徴を併せ持つハイブリッドな言語。SbtはScalaのビルドツール。プロジ…
- プログラミング
- 222 view
Apache Hadoop インストール
Apache Hadoop インストール以前Hadoopの検証した時のインストールログ。個人的には、現在はCDH版のHadoopをインストールした方が安定して…
- プログラミング
- 621 view
簡単な クローラー を作ってみる
クローラー インデックス環境準備(Ubuntu)ここでは、Webページをダウンロードするためにurllib3というライブラリを使用し、We…