java

[java]reflectionを使って、引数のobjectの文字列化する。　ってやっぱり遅いんだなぁと

あはは。ahaha@wankuma.com — Sat, 20 Dec 2008 05:22:00 GMT

entityやら構造体やら、値を入れる入れ物を書くと大抵
toString()メソッドをoverrideしているかと思うわけですが、
毎回書くのは結構かったるい訳です。
DBのスキーマを元に、とかだと自動生成ツールがいろいろとあったりするわけですが、
時には自作しなければいけないもの。

で、reflectionでそこを楽にできないかなぁと調べた結果がこれ。
(下部にソース添付)
loopで10万回繰り返して、作成したentityで試してみた。
結果：
　reflectionを使用したもの：       12秒358
　普通にtoString()を実装   0秒180
　(StringBuilderで文字を組み立てたもの)

(´・ｪ・｀) ・・・違い過ぎる。
うーん、マシンスペックやらを省略してますけど、それでもこんなに違うとは。
utility的にreflectionを多用したら開発が楽できるかな？
と思ったのですが後のパフォーマンスチューニングに苦しみそうですね。
それにこれ、配列とかリストとか全然対応してないし。

とすると、次なる候補はvelocityなどのTemplateEngine系になりそうです。
(使用しているFrameworkのソースをみたらおもしろそうだったので)

package jp.co.ahaha.reflection;
import java.lang.reflect.Field;
import java.lang.reflect.Modifier;
import javax.persistence.Column;  //geronimo-jpa_3.0_spec-1.0jar を使用
public class ReflectionSample {

   /**
    * 受け取ったobjectを、　フィールド名=値　の形式でカンマ区切りにした文字列表現で返却します。
    * ただし、final　と　static で宣言された項目については呼び出す予定はありません。
    * また、もしそのobjectがentityである場合(=javax.persistence.Columnアノテーションが付加されている場合)
    * フィールド名の代わりに、Columnアノテーションの名前を用いて　出力します。
    * こちらは、返却される文字列には改行コードは含まれません。
    * @param value
    * @return
    */
   public static final String toValueOneLine(Object value) {
       return ReflectionSample.toValue(value,false);
   }
   /**
    * 受け取ったobjectを、　フィールド名=値　の形式でカンマ区切りにした文字列表現で返却します。
    * ただし、final　と　static で宣言された項目については呼び出す予定はありません。
    * また、もしそのobjectがentityである場合(=javax.persistence.Columnアノテーションが付加されている場合)
    * フィールド名の代わりに、Columnアノテーションの名前を用いて　出力します。
    * こちらは、返却される文字列の　フィールド名=値のペア毎に改行します。
    * @param value
    * @return
    */
   public static final String toValueMulti(Object value) {
       return ReflectionSample.toValue(value,true);
   }

   final static String toValue(Object value, boolean multiLine) {

       //for NullException
       if (value == null) {
           return "null";
       }

       String endOfLine = "";
       if (multiLine) {
           endOfLine = "\n";
       }
       //get public field(Seasar entity)
       Field[] fields = value.getClass().getFields();
       boolean accessPrivate = false;
       if (fields == null || fields.length == 0) {
           //get normal javaBeans
           fields = value.getClass().getDeclaredFields();
           accessPrivate = true;
       }
       StringBuilder sb = new StringBuilder(1024);
       for (Field f: fields) {
           if (accessPrivate) {
               f.setAccessible(accessPrivate);
           }
           try {
               //dont get Final or Static fields
               if (!Modifier.isFinal(f.getModifiers()) &&
!Modifier.isStatic(f.getModifiers())) {
                   //columnName (fieldName)
                   sb.append(toFieldString(f));
                   sb.append("=");

                   //columnValue
                   Object temp = f.get(value);
                   if (temp == null) {
                       sb.append("null");
                   } else {
                       sb.append(temp.toString());
                   }
                   sb.append(",");
                   sb.append(endOfLine);
               }
           } catch (Exception e) {
               // catch and proceed
               e.printStackTrace(); //need log
           }
       }
       return sb.toString();
   }

   /**
    * if field has javax.persistence.Column annotation and (name is
not null) then return column.name
    * else return field name
    * @param f
    * @return
    */
   private final static String toFieldString(Field f) {
       Column c = f.getAnnotation(Column.class);
       if (c != null && c.name() != null) {
           return c.name();
       } else {
           return f.getName();
       }
   }
}

Seasar Conference 2008に行ってきたわけでして

あはは。ahaha@wankuma.com — Sun, 07 Sep 2008 02:26:00 GMT

( ´ー｀)y-~~一番行きたかった、＋お会いしたかったのが　DBFlute 開発者のjfluteさん、
1番最初の時間で、飯田橋駅降りた後に迷っていたので
時間に間に合ってよかった( ´ー`)フゥー．．．
Webに上がってあるDocument系はざっと目を通していたんだけども
それでもまだまだ機能のうち使いこなせていないのが多かったなぁと反省。
以下、月曜日以降に試そうと思っているもの
・S2Unitによってテストケース毎にxlsでデータを準備して、テスト前にデータ投入ができるけど
　テーブルの列の増減等が多い場合、
　DBの変更に追従できなくて逆にテストしなくなっちゃう問題
　→Replace-Schema.bat(sh)を用いて、DBデータを一か所にまとめておきましょう

・DDLを生成、変更、削除があったときに、古いテーブルが残っちゃっていてそれのentityも生成しちゃってる問題
　→今使っているのがdbflute-s2jdbcの0.7.3 だけども、最新だと0.7.9があって、少し前から
　　
　　　build.propertiesの方で
　　　torque.isDeleteOldTableClass = true
　　　と設定すれば消せるらしい事

あたりでしょうか。
2か月くらい前に見ていた時はdbflute-s2jdbcがリリースされたばかりのためか、
S2Dao版のはbuildバージョンが上がってるけどS2JDBC版は上がらないなぁ
とwatchをやめていたんですよね。
( ´ー｀)y-~~うーん、webでの情報収集の考え方、方法をもう少し考えないとなぁ。

以下今後の自分のタスク
・外部キーを張ると、テストデータとか入れる時大変なんだよねーだから張らないんだ。
　っていう管理者、DBA、開発者の人に対して、どうやれば楽にデータ投入などできるから貼りましょうよ
　って説明するための、具体的な楽になる手順の提示
　(自動生成系ツールがテーブルのメタデータにアクセスして作成しようとしているのに、上記だと無理だから)

↑
jfluteさん、教えていただきありがとうございます。・・・・

ってうわー、あのあと「DBFluteユーザの集い２」ってあったんですね？
サイトを確認しておけばよかったつД｀)･ﾟ･

http://d.hatena.ne.jp/jflute/20080905

・O/Rマッパで　　列がnotnullでも、ラッパクラスとして作成されるものが多いのはなぜか？
　いくつか見ているとnotnullだとプリミティブ型　になるものと、それでもラッパクラスになるものがあるみたいだけど
　それはどういった理由・方針からなのか、
　→今回のプロジェクトではすべての列がnotnullで数値なら0、日付は1900年1月1日、文字系は""が入るようになっているが
　　dbflute-s2jdbcではすべてラッパクラス。
　　で、他の開発者、受け入れ元の会社の方からの依頼があったのでやむを得ず
mydbflute\dbflute-0.7.3\template\om\java\other\s2jdbc\entity\S2jdbcExtendedEntity.vm
のテンプレートに
　　コンストラクタを追加するよう定義。
　　コンストラクタにおいて自分自身を渡す DefalutSetter.toSet(this);
　　みたいなメソッドを作ってその中でリフレクションで上記フィールド系にデフォルト値をセットするようにしてみた

　　( ´ー｀)y-~~うーん、ここら辺はもっといろんな人の批評が聞きたいところだなぁもっとほかにいい方法あるんじゃないかなぁ？
　　(Listで1000件作成するときに、通常と比べて１GBメモリのマシンで大体1秒くらいの速度差だったからよしとしたんだけども)

　　

・ここら辺も読むこと
http://www.agiledata.org/essays/mappingObjects.html
http://c2.com/cgi-bin/wiki?ObjectRelationalToolComparison
http://www.martinfowler.com/eaaCatalog/

・情報収集の在り方についてもう少しきちんとWebと向き合おう。
　→vbaとかクラサバにかかわってた時間が長すぎるからどうしてもwebの知識が足りなすぎるし、コツコツ集めましょう

>中さん
すいません、わんくまに見る勉強会開催のススメ
という題で講演をされているのは知っていたのですが
裏番組の、「Seasarの中の中」
というAOPの仕組み javaassistの方が興味あったのでそっち行ってましたー♪いやー楽しかったー♪

( ´ー｀)y-~~そして明日は、(今日は)java勉強会です。
http://www.dalf.jp/wiki/java/doku.php
http://www.dalf.jp/wiki/java/doku.php?id=dalf-java-type1-00062100-029
↑
とりあえずこんな感じで作っていて、
同じ画面を、いろんなフレームワークで作るとどうなるの？どう違うの？
っていうのをやっています。

S2JDBC_IterationCallBackのメモ

あはは。ahaha@wankuma.com — Thu, 10 Jul 2008 00:21:00 GMT

S2JDBCのtutorialソースを読んでいて、自分で追加してテストした内容
http://s2container.seasar.org/2.4/ja/s2jdbc_manager_auto.html#イテレーションによる検索
tutorialは2.4.25
http://s2container.seasar.org/download/2008-04-18/S2JDBC-Tutorial-2.4.25.zip
( ´ー｀)y-~~んー、普通ならばListでデータを全部受け取って、for のloopなりでまわせば良いけど
メモリの関係とかで一件ずつ行いたい場合はどうなるんだ？ってことでjavadocみたりしながらやってみた
/*
* Copyright 2004-2008 the Seasar Foundation and the Others.
*
* Licensed under the Apache License, Version 2.0 (the "License");
* you may not use this file except in compliance with the License.
* You may obtain a copy of the License at
*
* http://www.apache.org/licenses/LICENSE-2.0
*
* Unless required by applicable law or agreed to in writing, software
* distributed under the License is distributed on an "AS IS" BASIS,
* WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND,
* either express or implied. See the License for the specific language
* governing permissions and limitations under the License.
*/
package examples.entity;

import org.seasar.extension.jdbc.IterationCallback;
import org.seasar.extension.jdbc.IterationContext;
import org.seasar.extension.jdbc.JdbcManager;
import org.seasar.extension.unit.S2TestCase;

/**
* @author koichik
*/
public class IterateTest extends S2TestCase {

private JdbcManager jdbcManager;

    @Override
    protected void setUp() throws Exception {
        include("app.dicon");
    }

//******************ここから追加したもの******************
public void testIterateMonomaneTx() throws Exception {
jdbcManager.from(Employee.class).iterate(new EmployeeHandler());
}
}
//こっちが受け取るほう
import org.seasar.extension.jdbc.IterationCallback;
import org.seasar.extension.jdbc.IterationContext;
import org.seasar.extension.jdbc.JdbcManager;
import org.seasar.framework.container.SingletonS2Container;

public class EmployeeHandler implements IterationCallback<Employee, Employee> {
    //ここが、通常のsql実行ならばloopでぐるぐる回す所に該当し、1件ずつ通知される
    public Employee iterate(Employee entity, IterationContext context) {
        System.out.println(entity.name);
        otherSqlExecute(entity);
        return entity;
    }

    private void otherSqlExecute(Employee entity) {
        JdbcManager jdbcmanager = SingletonS2Container.getComponent(JdbcManager.class);
        Department d = jdbcmanager.from(Department.class)
            .where("id = ?", entity.departmentId).getSingleResult();
        System.out.println(d.name);
    }
}

( ´ー｀)y-~~テストで実行してみて確かに動作することはするんだけども

　ちょっと設計として正しいのか自信が無かったりするので後で

IterationCallBackという考え方について調べてみようっと

java

[java]reflectionを使って、引数のobjectの文字列化する。 ってやっぱり遅いんだなぁと

Seasar Conference 2008に行ってきたわけでして

S2JDBC_IterationCallBackのメモ

[java]reflectionを使って、引数のobjectの文字列化する。　ってやっぱり遅いんだなぁと