TRL-Bench：表形式エンコーダを横断評価する標準ベンチマーク公開

要約

TRL-Benchは、異なる学習パラダイムの表形式エンコーダを統一条件で比較できる多粒度ベンチマークとして公開された。各エンコーダは行・列・テーブルの3粒度で埋め込みを出力し、TRL-CTbench・TRL-Rbench・TRL-DLTEの3スイートで評価される。123検証済みターゲットを持つ50件のOpenMLテーブル、16件の行ペアリンク書き換え、1,379親テーブル由来の47,772テーブルDLTEレイクがベンチマーク資産として整備された。20モデル・16タスクの検証から、エンコーダ性能は単一リーダーボードでなくタスク特性ごとに異なることが判明した。テキスト信号の強いタスクでは汎用テキストエンコーダが優位に立つ一方、事前学習目標が合致する場合は表形式専用モデルが勝る。