なにかのきろく

ひっそりと戻ってきて自分のためになるべく頑張る・・・

Talend

IT技術者になりたい人生だった

Talendの記事を会社で書くことを決めた。 BI/DWHのキーワードでいろいろ書くつもりです。 会社が企画しているオウンドメディアで、 未熟な私が自身のために自分で決めたことだ。 その記事を書く中で、得た知見?を残す。 ~私が試した実行環境~・Windows7 6…

Talend Bigdataでパーティションパラレルしたい!・・・したいなー、できないかなー

どーやらTalend Bigdataでのパーティションパラレル処理は 製品版じゃないとできないみたいです。tPartitionerやtCollectorがない・・・。 OpenStudioでできたら製品版いらないww になっちゃうから当然ですね。 Bigdata版を触ってコンポーネントの違いなん…

Talendでデータ結合を考える 後編

もう結合を考えるって言うか結合しなかった時どうするのかを考える回になってますwwごめんなさい。 ぱくたそ-フリー写真素材・無料ダウンロード ではでは、十二分に癒されたところで。 JOBの形はこれです。 さて、1データ上(1レコード上)に存在するエラー…

Talendでデータ結合を考える 中編

今回もTalend上でのデータ結合を考えます。はい。 前回の最後に、変数を利用して、エラー時のメッセージを表示させようとして出来なかったギャフンってのがありました。 今回は、変数を利用しなくてもエラー時のメッセージを表示させるやり方です。JOBの形は…

Talendでデータ結合を考える 前編

今回は前回用意したデータをもとにして、Talend上でのデータ結合を考える。 データ結合は、tJoinかtMapを使用する。データを一気に結合させてやる!!と気合の入った処理?にしようと考えたのでtMapを利用する。 なんかtMap大変!みたいな。 複数のDB接続を…

Talendを使っている感を出すぞww

今回はTalendで用意されている固有のコンポーネントを利用して データを成形してみようと思います。 利用してみるコンポーネントは以下の通り ・tPostgresqlInputデータを抽出する。Inputデータを保持するテーブルを用意する。 ・tJoin流れてきた複数データ…

Talendバッチ実行 こいつ!動くぞ?!

Talendをシステム上で実行する時の形にしてみる ETLちゃんは人間様が寝ている間しか動かないもんです。そのため.batとか.shで動かせなきゃダメなんです。だからその方法は確実に押さえる必要がある。 TalendOpenStudio(英語)のマニュアルを読めば理解出来る…

Happy Talend Life Fuuuuu

Talendと戯れる今回は100カラム、100万レコードを処理してみるという小さな遊びです。 この前は3カラムで100万レコードを処理した。今回はたかが100カラムにしただけです。 そもそも100カラムをデータクレンジングすることがあるのか?Bigdataに疎い私にはわ…

Talendを動かすのと同時に「ぱくたそ」凄いって思う。

フリー写真素材ぱくたそ のモデル[茜さや]さんです。世の中凄いです。 ぱくたそ-フリー写真素材・無料ダウンロード さてTalendをインストールしたので、早速動くか試す。 私の設定が正しいなら動く。当たり前だね。 ※ーーーーーーーかんきょーーーーーーー※…

DataStagePXの知見を持った人がTalend(ETL)をインストールする

今回はみんな大好きTalendをインストールしてみようと思います。 ですが、よく考えたらインストールなんて他のページ見ればわかる。恐らく。ははっ。なんですが、一応このコンテンツを扱おうと思うので書きます。 ※ーーーーーーーかんきょーーーーーーー※・W…