自分のキャリアをあれこれ考えながら、Pythonで様々なデータを分析していくブログです

Python

Python

Oracleのデータをpandasに読み込んでみる

ヒノマルク ここまで環境構築系の記事をメインにアップしていました。今日からpandasの使い方に戻ろうと思います。 > 2022/11/30追記 cx_Oracleは名称が変わりpython-oracledbというライブラリになったようです...
Python

[Mac] Python3.7の仮想環境を作成する

ヒノマルク どうもヒノマルクです。今日は異なるバージョンのPythonをインストールし、異なるバージョンのPythonの仮想環境を作成したいと思います。 automlの調査をしていた時、色々なライブラリを比較していたのですが、 mlboxと...
Python

Pythonからgoogle-cloud-bigqueryでBigQueryにアクセスしてみる

ヒノマルク どうもヒノマルクです。今日はBigQueryにPythonから接続できるようにしようと思います。google-cloud-bigqueryというライブラリを使用します。 google-cloud-bigqueryに対応しているP...
Python

Pythonからimpylaでhiveを操作してみる

ヒノマルク どうもヒノマルクです。今日はhiveへのアクセスになります。 最近だとBigQueryに移行している企業もいるかと思いますが、まだまだ現役でゾウさんとハチさんに頑張ってもらっている企業も多いのではないでしょうか? ヒノマルクは業...
Python

[Mac] Pythonからcx_OracleでOracleデータベースを操作してみる

ヒノマルク どうもヒノマルクです。今日から吹き出しアイコンを使ってみました。この画像で作ると中々シュールです (笑) 今日はPythonからOracleデータベースにアクセスしてみようと思います。よろしくお願いします。 > 2022/11/...
Python

PythonからPsycopg2を使ってPostgreSQLのデータを操作してみる

明けましておめでとうございます。 2022年の最初の投稿になります、ヒノマルクです。 前回投稿した日から暫く経ってしまいました。 PythonからPostgreSQLにアクセスできるようにしようと思います。 Psycopgについて 今回はP...
Python

pandasで様々なデータをデータフレームに読み込んでみよう(TSV編)

どうもヒノマルクです。 今回はCSVファイルではなくTSVとスペースで区切られたファイルを読み込んでみます。 import pandas as pd pd.__version__ Out '1.3.4' TSVを読み込む # API ref...
Python

pandasで様々なデータをデータフレームに読み込んでみよう(CSV編)

どうもヒノマルクです。 今日はCSVをpandasで読み込みたいと思います。 データは下記のようなものを準備しました。 CSVファイル ドラえもん,2112-9-3 野比 のび太,1964-8-7 源 静香,1964-5-2 骨川 スネ夫,...
Python

[Mac] Pythonの仮想環境をvenvで作成する方法

本記事ではpythonの仮想環境を作成するvenvというモジュールの使い方をまとめておきます。 ディープラーニング系のPythonのライブラリをインストールするときにありがちなのですが、たまに競合が発生して、例えばあるライブラリAはnump...
Python

Pythonでの分析用ライブラリであるpandasとは何か

どうもhinomarucです。 記念すべき新ブログでの分析系記事の1番目です。 仕事をしていてもしばらく使わなかったら忘れがちなpandasの使い方を記事化しようとかなと思います。 pandasとは何か pandasとはPythonのライブ...