Skip to Main Content
Table 8:
Average game score of best agent under test conditions for TPG (screen capture) along with comparator algorithms based on prior object/feature identification. Numbers in bold represent best score on each game title. Source information for comparitor algorithms is as follows: Blob-PROST (Liang et al., 2016), Hyper-NEAT (Hausknecht and Stone, 2015), NEAT (Hausknecht and Stone, 2015), and Conti-Sarsa (Mnih et al., 2015).
Game TPG Blob-PROST Hyper-NEAT NEAT Conti-Sarsa 
Alien 3,382.7 4,886.6 2,246 4,320 103.2 
Amidar 398.4 825.6 218.8 325.2 183.6 
Assault 2,422 1,829.3 2,396 2,717.2 537 
Asterix 2,400 2,965.5 2,550 1,490 1,332 
Asteroids 3,050.7 2,229.9 220 4,144 89 
Atlantis 89,653 42,937.7 44,200 126,260 852.9 
Bank Heist 1,051 793.6 1,308 380 67.4 
Battle Zone 47,233.4 37,850 37,600 45,000 16.2 
Beam Rider 1,320.8 2,965.5 1,443.2 1,900 1,743 
Bowling 223.7 91.1 250.4 231.6 36.4 
Boxing 76.5 98.3 91.6 92.8 9.8 
Breakout 12.8 190.3 40.8 43.6 6.1 
Centipede 34,731.7 21,137 33,326.6 22,469.6 4,647 
C. Command 7,070 4,898.9 8,120 4,580 16.9 
Crazy Climber 8,367 81,016 12,840 25,060 149.8 
Demon Attack 2,920.4 2,166 3,082 3,464 
Double Dunk -4.1 10.8 -16 
Enduro 125.9 299.1 112.8 133.8 159.4 
Fishing Derby 49 -28.8 -37 -43.8 -85.1 
Freeway 28.9 32.6 29.6 30.8 19.7 
Frostbite 8,144.4 4,534 2,226 1,452 180.9 
Gopher 581.4 7,451.1 6,252 6,029 2,368 
Gravitar 786.7 1,709.7 1,990 2,840 429 
H.E.R.O. 16,545.4 20,273.1 3,638 3,894 7,295 
Ice Hockey 10 22.8 3.8 -3.2 
James Bond 3,120 1,030.5 12,730 2,380 354.1 
Kangaroo 14,780 9,492.8 4,880 12,800 8.8 
Krull 12,850.4 33,263.4 23,890.2 20,337.8 3,341 
Kung-Fu Master 43,353.4 51,007.6 47,820 87,340 29,151 
M's Revenge 2,508.4 340 259 
Ms. Pac-Man 5,156 5,917.9 3,830 4,902 1,227 
Name This Game 3,712 7,787 8,346 7,084 2,247 
Pong 20.5 15.2 -17.4 
Private Eye 15,028.3 100.3 15,045.2 1,926.4 86 
Q*Bert 2,245 14,449.4 810 1,935 960.3 
River Raid 3,884.7 14,583.3 4,736 4,718 2,650 
Road Runner 27,410 41,828 14,420 9,600 89.1 
Robotank 22.9 34.4 42.4 18 12.4 
Seaquest 1,368 2,278 2,508 944 675.5 
Space Invader 1,597.2 889.8 1,481 1,481 267.9 
Star Gunner 1,406.7 1,651.6 4,160 9,580 9.4 
Tennis 0.2 1.2 
Time Pilot 13,540 5,429.5 15,640 14,320 24.9 
Tutankham 128 217.7 110 142.4 98.2 
Up 'N Down 34,416 41,257.8 6,818 10,220 2,449 
Venture 576.7 1,397 400 340 0.6 
Video Pinball 3,794.4 21,313 82,646 253,986 19,761 
Wizard of Wor 5,196.7 5,681.2 3,760 17,700 36.9 
Zaxxon 6233.4 11,721.8 4,680 6,460 21.4 
Avg. Rank (Ri2.81 2.16 2.81 2.47 4.76 
Game TPG Blob-PROST Hyper-NEAT NEAT Conti-Sarsa 
Alien 3,382.7 4,886.6 2,246 4,320 103.2 
Amidar 398.4 825.6 218.8 325.2 183.6 
Assault 2,422 1,829.3 2,396 2,717.2 537 
Asterix 2,400 2,965.5 2,550 1,490 1,332 
Asteroids 3,050.7 2,229.9 220 4,144 89 
Atlantis 89,653 42,937.7 44,200 126,260 852.9 
Bank Heist 1,051 793.6 1,308 380 67.4 
Battle Zone 47,233.4 37,850 37,600 45,000 16.2 
Beam Rider 1,320.8 2,965.5 1,443.2 1,900 1,743 
Bowling 223.7 91.1 250.4 231.6 36.4 
Boxing 76.5 98.3 91.6 92.8 9.8 
Breakout 12.8 190.3 40.8 43.6 6.1 
Centipede 34,731.7 21,137 33,326.6 22,469.6 4,647 
C. Command 7,070 4,898.9 8,120 4,580 16.9 
Crazy Climber 8,367 81,016 12,840 25,060 149.8 
Demon Attack 2,920.4 2,166 3,082 3,464 
Double Dunk -4.1 10.8 -16 
Enduro 125.9 299.1 112.8 133.8 159.4 
Fishing Derby 49 -28.8 -37 -43.8 -85.1 
Freeway 28.9 32.6 29.6 30.8 19.7 
Frostbite 8,144.4 4,534 2,226 1,452 180.9 
Gopher 581.4 7,451.1 6,252 6,029 2,368 
Gravitar 786.7 1,709.7 1,990 2,840 429 
H.E.R.O. 16,545.4 20,273.1 3,638 3,894 7,295 
Ice Hockey 10 22.8 3.8 -3.2 
James Bond 3,120 1,030.5 12,730 2,380 354.1 
Kangaroo 14,780 9,492.8 4,880 12,800 8.8 
Krull 12,850.4 33,263.4 23,890.2 20,337.8 3,341 
Kung-Fu Master 43,353.4 51,007.6 47,820 87,340 29,151 
M's Revenge 2,508.4 340 259 
Ms. Pac-Man 5,156 5,917.9 3,830 4,902 1,227 
Name This Game 3,712 7,787 8,346 7,084 2,247 
Pong 20.5 15.2 -17.4 
Private Eye 15,028.3 100.3 15,045.2 1,926.4 86 
Q*Bert 2,245 14,449.4 810 1,935 960.3 
River Raid 3,884.7 14,583.3 4,736 4,718 2,650 
Road Runner 27,410 41,828 14,420 9,600 89.1 
Robotank 22.9 34.4 42.4 18 12.4 
Seaquest 1,368 2,278 2,508 944 675.5 
Space Invader 1,597.2 889.8 1,481 1,481 267.9 
Star Gunner 1,406.7 1,651.6 4,160 9,580 9.4 
Tennis 0.2 1.2 
Time Pilot 13,540 5,429.5 15,640 14,320 24.9 
Tutankham 128 217.7 110 142.4 98.2 
Up 'N Down 34,416 41,257.8 6,818 10,220 2,449 
Venture 576.7 1,397 400 340 0.6 
Video Pinball 3,794.4 21,313 82,646 253,986 19,761 
Wizard of Wor 5,196.7 5,681.2 3,760 17,700 36.9 
Zaxxon 6233.4 11,721.8 4,680 6,460 21.4 
Avg. Rank (Ri2.81 2.16 2.81 2.47 4.76 
Close Modal

or Create an Account

Close Modal
Close Modal