Python Oracleのデータをpandasに読み込んでみる
ヒノマルク ここまで環境構築系の記事をメインにアップしていました。今日からpandasの使い方に戻ろうと思います。 > 2022/11/30追記 cx_Oracleは名称が変わりpython-oracledbというライブラリになったようです...
hinomaruc
Python Python [Mac] Python3.7の仮想環境を作成する
ヒノマルク どうもヒノマルクです。今日は異なるバージョンのPythonをインストールし、異なるバージョンのPythonの仮想環境を作成したいと思います。 automlの調査をしていた時、色々なライブラリを比較していたのですが、 mlboxと...
Python Pythonからgoogle-cloud-bigqueryでBigQueryにアクセスしてみる
ヒノマルク どうもヒノマルクです。今日はBigQueryにPythonから接続できるようにしようと思います。google-cloud-bigqueryというライブラリを使用します。 google-cloud-bigqueryに対応しているP...
Python Pythonからimpylaでhiveを操作してみる
ヒノマルク どうもヒノマルクです。今日はhiveへのアクセスになります。 最近だとBigQueryに移行している企業もいるかと思いますが、まだまだ現役でゾウさんとハチさんに頑張ってもらっている企業も多いのではないでしょうか？ ヒノマルクは業...
Python [Mac] Pythonからcx_OracleでOracleデータベースを操作してみる
ヒノマルク どうもヒノマルクです。今日から吹き出しアイコンを使ってみました。この画像で作ると中々シュールです (笑) 今日はPythonからOracleデータベースにアクセスしてみようと思います。よろしくお願いします。 > 2022/11/...
Python PythonからPsycopg2を使ってPostgreSQLのデータを操作してみる
明けましておめでとうございます。 2022年の最初の投稿になります、ヒノマルクです。 前回投稿した日から暫く経ってしまいました。 PythonからPostgreSQLにアクセスできるようにしようと思います。 Psycopgについて 今回はP...
Database [docker] postgreSQL12 + PostGIS3 環境を作成する
ヒノマルクです。タイトルのような仕様で環境構築をする機会があったので、どなたかのお役に立てればと思い記事にしておきます。 ※ 実業務だとdockerイメージを作成するためにプロキシの設定が必要だったりと少々複雑になるので、今回は簡略化してい...
Database [Mac] PostgreSQL環境を準備する
どうもNFTやWeb3.0というワードに反応しているヒノマルクです。 時代がまた変わりそうですね。 今日はPostgreSQL環境を構築しようと思います。 Macでの構築方法になります。 「Mac postgres」で調べてみるとHomeb...
Database BigQuery環境を準備してみる
ヒノマルクです。 前回の記事ではHive環境を構築しました。 今回はBigQueryを利用する環境を準備したいと思います。 最近ではHiveからBigQueryに移行したという企業や最初からBigQueryを使う前提でインフラ環境を構築して...
Database [docker] cloudera quickstartを使ってhive環境を準備する方法
ヒノマルクです。BigQueryやHiveなどのデータをPythonで読み込んでいる方も多いと思います。 今回はHadoop環境をお手軽に試せるclouderaのquick startイメージを使ってhiveを実行できる環境を準備しようと思...