歩いたら休め

なんでこんな模様をしているのですか?

pandas

【Python】RプログラマーのためのPython入門

会社に優秀な後輩が入ってきて、優秀な先輩(私でゎない)の助けを得ながら、立派な分析者・Rプログラマーとして成長しつつあります。 しかし、R言語だけで全ての作業が完結できるわけではありません。手元でデータを加工・分析するための環境としては素晴ら…

【Python】PV数、UU数を出すSQLのクエリを作る関数を作った

最近、Google BigQueryにクエリを投げる毎日です。 社内のデータをBigQueryで一元管理しようとしているため、過去に使われていたクエリの絞り込み条件を移植し、それぞれの絞り込み条件でPV数とUU数をひたすらチェックするという面倒くさい作業をしています…

【Python】標準ライブラリのみでデータの整理

なぜかPandasがインストールできず、標準ライブラリのみで書くことがありました。意外となんとかなったものの、ものすごく手間取ってしまったため簡単なメモを残しておきます。 tsvファイルの読み込み import csv tsv = csv.reader(file("data.tsv"), delimi…

【Python】YouTubeのURLリストのリンク切れをチェックするためのコード

歌謡ロックbotのリンク切れを直しています。歌謡ロックbotはひたすらYouTubeのPVを流すだけのアカウントで、予め登録した曲のリストから一定時間おきに投稿します。 以前はリンク切れカッターが使えたのですが、YouTubeの仕様が変わったのか、このツールでは…

【Python】pandasで枝リストの形式にデータを変換する

import pandas as pd #ファイルを読み込む pixivdata = pd.read_csv("aikatsunet/pixivdata.csv",encoding="utf-8") #不要なカラムを消す del pixivdata["userID"] del pixivdata["date"] print pixivdata #カラム名からキャラクター名を取得 chara = pixivd…

【R】【Python】igraphやNetworkXで手持ちのデータをネットワークに変換してみよう

R Advent Calenderの18日目の記事です 「お手持ちのデータからネットワークを作成をしてみよう」というテーマです。 Rを使ったネットワークの解析(次数や媒介中心性、コミュニティ検出etc...)のやり方については様々な方が本やブログにまとめてらっしゃい…

【Python】【pixiv】pixivAPIから、アニメキャライラストのタグデータをcsvで出力する

pixivは(基本的に)APIを公開しておらず、ログインした状態で全てのページを情報を参照する方法が無いか長らく悩んでいました。以前、よくわからないpixivAPIを使って、ログインしていない状態で取得できる限られたデータからアニメの人間関係ネットワーク…

【Python】魔法少女まどか☆マギカ考察Wikiの各話別台詞集をpandasのデータフレームに変換する

@Med_KUさんがラブライブ各話のキャラに向けたセリフのネットワークを描いてらしたので、同じことをPythonでもできないかと画策中。 (余裕があったらやりたいですが)さすがにアニメ全話見返してセリフを写経する時間は無いので、魔法少女まどか☆マギカ考察…

【Python】matplotlibでグラフのgifアニメを作成

Rではanimationというライブラリでgifアニメが作れるという話を聞き、Pythonでも同じことができないかどうか調べてみました。 具体的には↓の記事でRを使ってやってることです。 これからの可視化は動画の時代~Rでanimationパッケージで動画を作成する方法@T…