- プログラミング
- 2185 view
HiveでExternal Tableを削除する方法メモ
HiveのExternal TableはDrop Tableだと、オリジナルのテーブルに書き込み権限があればオリジナルのテーブルが消えてしまう恐れがあり、権限…
HiveのExternal TableはDrop Tableだと、オリジナルのテーブルに書き込み権限があればオリジナルのテーブルが消えてしまう恐れがあり、権限…
はじめに昨日、Microsoftが量子コンピュータ向けの開発・シミュレータ環境(Quantum Development Kit)を提供した…
はじめにsbtがついに1.0.0になり、環境構築しようと思ったらちょっと自分がやってたやり方と変わったので、自分用のメモとしてコマンドを残…
はじめにtensorflowやtflearnでモデルを作っていると、ネットワークを図にしたり学習の進み具合をさくっとグラフにしてくれるツールがある…
はじめにtensorflow、chainer、scikit-learnなど各種python用の機械学習ライブラリをインストールしてあって、…
はじめにこの記事は、(大分遅くなってしまい申し訳ありませんが)Machine Learning Advent Calendar 2016の記事です…
はじめにこの記事はNode.js Advent Calendar 2016の16日目の記事です。やりたいことごくたまに…
はじめにこの記事はScala Advent Calendar 2016の21日目の記事です。解決したい問題PaaSをよ…
はじめにこの記事は、OpenCV Advent Calendar 2016の12日目の記事です。他の皆さんの内容とくらべてかなり簡…
はじめにこの記事は、Machine Learning Advent Calendar 2016の11日目の記事です。機械学習のアルゴリズムに関する記事は…
hiveでタイトルのようなことを実現するクエリを紹介する。これにはrank関数という関数を利用することで実現できる。rankを利用しない場合は以下のように複数の…
Vagrantを使うことで仮想マシンを立ち上げることができる。Ansibleを使うことで立ち上げたマシンにソフトウェアをインストールさせたり、アプリをデプロイ…
MochaとChaiを使ってブラウザサイド単体テストをやってみる。この記事では環境構築、同期処理のテスト、非同期処理のテスト、jQuery Deferred…
Mahoutを使って協調フィルタリングをやってみる。Mahoutを使うことで基本的に一切の予備知識無しで、機械学習技術を利用することができる。本記事では、Ma…
Excelは非常に便利だが、統計や機械学習を用いた分析・グラフ化においては、さらに優秀なソフトがある。それがRだ。Rを使えば、難しい数学的な知識が必要な分析・…
統計的に新手法が既存手法に比べて優れているかどうかを確認するのにはt検定を使う。 t検定はExcelで簡単に実行することができるためその方法を紹介する。ABテ…
※2016/12/29 更新pyenvを使って python ローカル開発環境 を構築する方法を簡単にまとめた。pythonでもpyenvとvirtu…
Scala Sbt インストールScalaはオブジェクト指向言語と関数型言語の両方の特徴を併せ持つハイブリッドな言語。SbtはScalaのビルドツール。プロジ…
Apache Hadoop インストール以前Hadoopの検証した時のインストールログ。個人的には、現在はCDH版のHadoopをインストールした方が安定して…
クローラー インデックス環境準備(Ubuntu)ここでは、Webページをダウンロードするためにurllib3というライブラリを使用し、We…
トップのスクリーンショットにあるように、自分の Google Calendar にある直近の予定を Bot (Python) で取得しようと思いやり方を調べて…
たまに、技術検証用として、openssl コマンドで自己証明書(RSA)を作成して Web サーバ等に設定したりしています。しかし、コマン…
はじめにこの記事はNode.js Advent Calendar 2016の16日目の記事です。やりたいことごくたまに…
はじめにtensorflowやtflearnでモデルを作っていると、ネットワークを図にしたり学習の進み具合をさくっとグラフにしてくれるツールがある…
やりたいことRspecでファイル出力するバッチのテストを書きたい。プログラムバッチmongoDBからデータをcsv…
背景最近、業務でのプログラミングにて、シェルで書いた方が動くものが楽に書ける場合が多々ある。ただシェルだとエラーハンドリング周りが若干面倒なので、…
概要PCL(点群処理ライブラリ)のが出たということで触って見た。まだ python pcl でできる部分は少ないみたい。Env…
概要Cronologを使えば手軽にログローテションができたから、その構築メモ。環境OSLinux www4322gi 3.…
hiveでタイトルのようなことを実現するクエリを紹介する。これにはrank関数という関数を利用することで実現できる。rankを利用しない場合は以下のように複数の…
証明駆動開発 とは証明駆動開発 とは証明によってプログラムが期待通りの性質を有しているかを確かめながら開発する手法のこと。ユニットテストの一部で使…
本のコードを写経していて python urllib 2が必要なのだが、なぜかpipでurllib2を検索しても出て来なくて、urllib3しかないっぽいから…
去年に転職をしたのですが、選考の過程でコーディングの面接や Web テストがあるかもしれないと思い、LeetCode というコーディングの問題を解いて腕試しで…
はじめにこの記事はScala Advent Calendar 2016の21日目の記事です。解決したい問題PaaSをよ…
概要シェルスクリプトでもTDDするためにテストコードを書いてカバレッジ測定をする。テストにはshunit2を使用し、カバレッジ測定にはshcovを…
統計的に新手法が既存手法に比べて優れているかどうかを確認するのにはt検定を使う。 t検定はExcelで簡単に実行することができるためその方法を紹介する。ABテ…