PAct joint-count split evaluation
GAPartNet non-PM 100 is split into few-joint objects (GT movable joints <= 3) and many-joint objects (GT movable joints >= 4). This checks the hypothesis that official PAct is strongest on simple articulated objects.
Split Metrics
| split | n | GT joints | pred joints | raw F1 | raw recall | count err |
|---|---|---|---|---|---|---|
| few_joint | 74 | 1.84 | 1.45 | 0.430 | 0.405 | 0.45 |
| many_joint | 26 | 10.00 | 3.58 | 0.198 | 0.173 | 6.42 |
| very many >=8 | 15 | 13.87 | 3.47 | 0.086 | 0.064 | 10.40 |
Charts
architectural_fixtures_8919
few_joint · Door · GT joints 2 · raw F1 1.000
architectural_fixtures_8961
few_joint · Door · GT joints 2 · raw F1 1.000
architectural_fixtures_8983
few_joint · Door · GT joints 1 · raw F1 1.000
architectural_fixtures_8997
few_joint · Door · GT joints 2 · raw F1 1.000
architectural_fixtures_9070
few_joint · Door · GT joints 1 · raw F1 1.000
large_furniture_45606
few_joint · StorageFurniture · GT joints 1 · raw F1 1.000
electronics_104011
many_joint · Printer · GT joints 27 · raw F1 0.000
electronics_103972
many_joint · Printer · GT joints 22 · raw F1 0.000
small_appliances_7265
many_joint · Microwave · GT joints 20 · raw F1 0.364
electronics_103867
many_joint · Printer · GT joints 17 · raw F1 0.000
electronics_103978
many_joint · Printer · GT joints 16 · raw F1 0.000
storage_101583
many_joint · Safe · GT joints 14 · raw F1 0.091
storage_101564
many_joint · Safe · GT joints 13 · raw F1 0.105
major_appliances_103452
many_joint · WashingMachine · GT joints 13 · raw F1 0.333
