スキップしてメイン コンテンツに移動

BIツールSpotfire server がインターフェイスサーバの代わりに定期的にデータベースからデータを取得する

 当院のある部門システムはPostgreSQLを使って、データウェアハウス(DWH)のオラクルにデータベースリンクが作られていいます。その部門システムの文書検索機能になぜか文書作成日が表示されていません。簡単にいえば、お金をかけて業者にカラム追加をすれば、済む話ですが、1日2会のデータ取得が十分なので、自力で取ることにしました。

ここで紹介したいのは、Oracleのスケジュール機能でもWindowsのタスクスケジューラ機能でもなくBIツールのSpotfire serverのAutomationの機能です。

まず、一時的にデータを格納する一時表を作って、データを取得する前に前回のデータを全部削除する形にします。

ここで使ったのは、DWHをデータソールにして、一時表のインフォメーションリンクを削除用と取得用にします。インフォメーションリンクに設定できるSQLは更新前、クエリーと更新後があり、削除用のインフォメーションリンクは、DELETE文を更新前に設定して、取得用のほうは、INSERT INTO ~ SELECTを入れます。この2つインフォメーションリンクをデータテーブルにした分析ファイルを作ってAutomationのJobに削除用分析ファイルと取得用分析ファイルを順番に開くだけで、一時表の中身が自動的に更新されます。

この方法で分析用のデータのみを取得し、データマートを簡単に構築できます。

コメント

このブログの人気の投稿

iPhoneのカレンダーに見知らぬアカウントによるフィティングリンクの恐れ

 昨日突然妻から、iPhoneのカレンダーに怪しい予定はいっぱい書き込まれました。 最初はメールアドレスの盗用されたと思って、メールアカウントのパスワードと、そのメールアドレスのApple IDのパスワードを急遽変更しました。しかし、書き込みが消えず、よくカレンダーの設定のアカウントを調べると下記の画像のような気持ち悪いアカウントがいつの間にか設定されてしまいました。おそらく料理紹介のホームページにある怪しい広告をクリックしたかもしれません。くれぐれもご注意ください。 幸い、このアカウントを削除すれば、書き込みも消えました。なにが違和感を感じたときは、絶対にリンク等をクリックしないほうが身のためでしょう。 さらにnslookupで ylevelsoft.funを調べてみるとIPは13.226.77.* セグメント内の4つのようです。 $ nslookup ylevelsoft.fun Server:         192.168.11.1 Address:        192.168.11.1#53 Non-authoritative answer: Name:   ylevelsoft.fun Address: 13.226.77.19 Name:   ylevelsoft.fun Address: 13.226.77.33 Name:   ylevelsoft.fun Address: 13.226.77.8 Name:   ylevelsoft.fun Address: 13.226.77.15 これらのIPアドレスを調べると、東京にあるIPアドレスがわかって、Amazonにホスティングしてるようです。 13.226.77.19 IP Address Details - IPinfo.io カレンダーのアカウントに登録したサーばをnslookupを調べると13.33.9.*セグメントの4つが使われて、Amazonにホスティングしてるようです。 このホスト名は、server-13-33-9-105.nrt57.r.cloudfront.net 上記のIPのホスト名server-13-...

自己流思い付き

 長年契約してきたさくらインターネットのVPSに稼働しているWordpressが何らかのものに削除されました。幸い残したいものはこのブログに移したので、あまり困ったことはありませんでした。もうVPSを解約しようと思いますが、今年の11月までの契約なので、正直って迷っております。  職場のホームページサーバがMacmini上のピュアDebianなので、実験台としてVPSを契約したのですが、もう実験しないし、解約してもよいだと思います。   このブログもこれをきっかけにタイトルを変えました。

余裕ですかね。

  いまの自分はやることが多いが、意外と慌てず一歩一歩現場と歩んでいき、地道にデータ入力から可視化までの利便性、完全性と正確性を追求する余裕が出ております。SpotfireというBIツールにハマり、人に使い方を教えながらもまたその恩恵を受けているといういい循環も大きいですね。大体自分のようなポストにいる人たちはあまりプログラムを書く余裕もないだが、自分は幸せのほうと思います。