Python PythonでExcelファイルを簡単に結合する方法
毎月、報告用などで同じ形式で保存しているExcelファイルがあってそのファイルをまとめて一つのファイルにしたい要件がありました。1件ずつコピペして貼り付けていくのは、精神的にきついのでPythonでさくっと結合できないか調べたところ結構簡単だったので紹介したいと思います。
kajiblo
Python 
Azure DataFactoryパイプラインの結果をメール通知する方法
AzureFunctionsをDataFactoryでパイプライン化し、処理結果をOutlook365でメール通知してみます。処理結果を判断してメール通知する機能は,AzureのLogic appsというサービスを使います。
Azure Microsoft Fablicの機能と利点まとめ
Microsoft Fablicは、2023年11月から一般提供されるSaaS型データ分析ツールで、従来の複数サービスを統合し、データ変換や分析が単一プラットフォームで実現可能となります。AI Copilotの搭載により、効率的な環境構築が可能で、コスト削減も期待できます。
Azure 【Azure】コンテナー内のBlob(ファイル)を定期的に削除するライフサイクル管理
ログファイルを自動削除するAzureの設定手順をAzure Blobストレージのライフサイクル管理で設定してみたいと思います。
Python 【Python】100万件のテストデータを作成する(DataFrame)
簡単にテストデータを作成できるPythonプログラムを書いてみました。下記コードをJupyterなどにコピーして実行すれば簡単に100万規模のDataFrameが作れます。
ブログ作成 【アドセンス】シンガポールの税務情報を提出する
Googleアドセンスでシンガポールの税務情報に対応するには、税務署で居住者証明書を取得する必要があります。また、税務情報が審査中に収益の振り込みとなった場合はどうなるのかも体験しました。
Azure ビッグデータに最適なParquetファイル形式
Parquet(パーケットは、効率的なデータの保存と検索のために設計されたオープンソースのファイル形式です。
Azure Azureの資格情報(サービスプリンシパルとマネージドID)
Azure DataFactoryでAzure DataExploreとの接続を確立したかったので、リンクサービスの設定を実施していたところ、資格情報の選択で何を設定してよいかさっぱりわからず、途方にくれました。そこでAzureの資格情報に...
Python 【Python】Pandasのread_sqlにパラメータを渡すには?
pandas.read_sql(sql,con,params=[パラメーターの値])でSQLに対してパラメータを渡して、SQL側は?で受け取ることができます。
Azure いきなりAzure Data Factoryを使ってみた
会社内のいろいろな部署で使用されているシステムに蓄積されているデーターを一元管理できるように、データの抽出・加工・格納の処理を自動化するためにマクロソフトが提供しているAZureのサービスです。このようなサービスは一般的にETLツールと呼ばれています。