akiyoko blog

akiyoko の IT技術系ブログです

2017-03-01から1ヶ月間の記事一覧

Pandas の DataFrame の基本的な使い方

Python でデータ分析をするためのライブラリといえば「Pandas」がデファクトですが、今回は、Pandas の DataFrame の基本的な使い方をまとめてみようと思い立ちました。特に、DataFrame で時系列データを扱うことを想定しています。具体的には、「金融データ…

「実践!機械学習 - Web系企業 CTO が実例を公開」に参加してきました

タイトル 【増枠!】実践!機械学習 - Web系企業 CTO が実例を公開 - connpass (2017.3.15) forkwell.connpass.com 主催 Forkwell Jobs 会場 株式会社フロムスクラッチ 東京都新宿区西新宿7丁目20番1号(住友不動産西新宿ビル17階) 全体の感想など 最近よ…

ゼロからはじめる Amazon QuickSight(AWS でお手軽データ分析 その3/3)

前々回の記事 および 前回の記事 で、Scrapy で Webスクレイピングしたデータを CSVファイルとして S3 に格納し、Amazon Athena のテーブルを作成して CSV のデータを流し込むところまでを実施しました。今回は、作成した Amazon Athena のテーブルをデータ…

ゼロからはじめる Amazon Athena(AWS でお手軽データ分析 その2/3)

前回の記事 で、Scrapy で Webスクレイピングしたデータを CSV形式で S3 に格納しました。今回は、S3 に格納した CSVファイルに対して、Amazon Athena を使ってデータ分析用のテーブルに取り込みたいと思います。 <過去記事> akiyoko.hatenablog.jp Amazon…

ゼロからはじめる Scrapy(AWS でお手軽データ分析 その1/3)

Python で Web クローリング・スクレイピングするためのツールといえば、 今や Scrapy が真っ先に候補に上がりますよね。 Pythonでクローリング・スクレイピングに使えるライブラリいろいろ - orangain flavor 「Pythonクローリング&スクレイピング」という…

Vagrant と Ansible を連携させて Ubuntu 14.04 に MySQL, PostgreSQL を provision する手順

AnsibleとVagrantで開発環境を構築する | さくらのナレッジ という記事を読んで、開発環境の Ubuntu サーバに MySQL や PostgreSQL をインストールするなら、Vagrant と Ansible を連携させた方がやりやすいな、と思ったのでメモがてらまとめておきたいと思…

PyCharm のオレオレ最強設定

【記事更新のお知らせ】 PyCharm のバージョンアップに合わせて、本記事を全面改訂しました。‍♂️(2020.5.8) akiyoko.hatenablog.jp 先日、「最強のPython開発環境 PyCharmのすゝめ - Qiita」という記事がホットエントリーに上がっていましたが、かくいう私…

「ビットコインとか勉強会#5」に参加してきました

タイトル ビットコインとか勉強会#5 - connpass (2017.2.28) cryptocurrency.connpass.com 主催 「暗号通貨読書会/勉強会」運営委員会 会場 株式会社オウケイウェイヴ 東京本社 東京都渋谷区恵比寿1-19-15(ウノサワ東急ビル5階) Twitter twitter.com 仮…