ORE ORE 2015 ! Sponsored by O W O W L R e R e a s o n e r E v - - PowerPoint PPT Presentation

ore ore 2015
SMART_READER_LITE
LIVE PREVIEW

ORE ORE 2015 ! Sponsored by O W O W L R e R e a s o n e r E v - - PowerPoint PPT Presentation

x" ORE ORE 2015 ! Sponsored by O W O W L R e R e a s o n e r E v E v a l u a t i o n a l u a t i o n ! Business Mee)ng h,ps://iam.manchester.ac.uk ORE is 3 (or 4) Organiza)on Part of


slide-1
SLIDE 1

Business ¡Mee)ng ¡

ORE ORE 2015!

O W O W L R e R e a s o n e r E v E v a l u a t i o n a l u a t i o n !

x"

Sponsored by

slide-2
SLIDE 2

h,ps://iam.manchester.ac.uk ¡

slide-3
SLIDE 3

ORE ¡is ¡3 ¡(or ¡4) ¡

slide-4
SLIDE 4

Organiza)on ¡

  • Part ¡of ¡the ¡W3C ¡OWLED ¡Community ¡Group ¡

– Permanent, ¡neutral ¡infrastructure ¡ – High ¡visibility ¡pages ¡

  • For ¡the ¡World ¡and ¡for ¡the ¡W3C ¡
  • Moving ¡to ¡a ¡split ¡compe))on ¡

– DL ¡Colo ¡

  • Experimenter ¡and ¡reasoner ¡developer ¡workshop ¡
  • Big ¡corpus ¡based ¡live ¡compe))on ¡during ¡DL ¡

– OWLED ¡Colo ¡

  • User ¡and ¡ontology ¡developer ¡track ¡
  • User ¡submi,ed ¡ontology ¡offline ¡compe))on ¡
  • Live ¡“check ¡reasoner ¡error” ¡compe))on ¡during ¡OWLED ¡
slide-5
SLIDE 5

OWLED ¡2015 ¡

  • CFP ¡coming ¡soon! ¡
  • Please ¡consider ¡submiZng ¡and ¡a,ending! ¡

– Coloed ¡with ¡ISWC ¡in ¡the ¡US ¡in ¡Pennsylvania ¡

  • Near ¡my ¡hometown! ¡Na)ve ¡guide! ¡

– Just ¡in ¡ORE ¡we ¡made ¡a ¡great ¡user/reasoner ¡ connec)on ¡that ¡will ¡give ¡PAGOdA ¡an ¡excellent ¡ applica)on ¡experiment ¡

  • Watch: ¡ ¡

– h,ps://www.w3.org/community/owled/ ¡

slide-6
SLIDE 6

Outside ¡the ¡Compe))on ¡

  • Permanent ¡infrastructure ¡

– Moving ¡there! ¡Datasets ¡available, ¡at ¡least ¡ – Fire ¡up ¡a ¡compe))on ¡any)me, ¡anywhere ¡

  • E.g., ¡for ¡an ¡experiment ¡
  • E.g., ¡for ¡a ¡compe))on ¡run ¡(e.g., ¡at ¡DL ¡and ¡at ¡OWLED) ¡
  • E.g., ¡for ¡a ¡new ¡dataset ¡

– Perhaps ¡con)nually ¡running?! ¡

  • Reasoner/tool/experiment ¡catalog ¡
slide-7
SLIDE 7

New ¡Tracks ¡

  • Next ¡year ¡

– Query ¡answering/ODBA ¡for ¡sure ¡

  • Bernardo ¡got ¡us ¡85% ¡of ¡the ¡way, ¡but ¡we ¡didn’t ¡make ¡it ¡in ¡the ¡

end ¡(sorry) ¡

– Be,er ¡correctness ¡ – An ¡Applica)on ¡Benchmark ¡(maybe) ¡

  • New ¡stuff ¡

– Mobile? ¡ – Nonstandard ¡services? ¡

  • Compe)tors ¡essen)al! ¡
slide-8
SLIDE 8

2015 ¡Compe))on!! ¡

Experience ¡the ¡thrill ¡of ¡victory…. ¡ …and ¡the ¡agony ¡of ¡defeat! ¡

slide-9
SLIDE 9

The ¡Categories ¡

Task ¡ Language ¡ Compe/tors ¡ Problems ¡ Consistency ¡ EL ¡ 13 ¡ 298 ¡ DL ¡ 10 ¡ 306 ¡ Realiza)on ¡ EL ¡ 13 ¡ 264 ¡ DL ¡ 10 ¡ 109 ¡ Classifica)on ¡ EL ¡ 13 ¡ 306 ¡ DL ¡ 10 ¡ 298 ¡

slide-10
SLIDE 10

The ¡Compe)tors ¡

Chainsaw ¡ Konclude ¡ ELepHant ¡ MORe ¡ ELK ¡ TrOWL ¡ FaCT++ ¡ Newcomers! ¡ HermiT ¡(OWL ¡API ¡3 ¡& ¡4) ¡ PAGOdA ¡ jcel ¡ Pellet ¡ Jfact ¡ Racer ¡ Big ¡shout ¡out ¡to ¡Ignazio ¡Palmisano: ¡Jfact ¡author, ¡OWL ¡API ¡ maintainer, ¡porter ¡of ¡HermiT ¡and ¡Pellet ¡to ¡OWL ¡API ¡4 ¡

slide-11
SLIDE 11

EL ¡Consistency ¡

slide-12
SLIDE 12

EL ¡Consistency ¡

slide-13
SLIDE 13

EL ¡Consistency ¡

slide-14
SLIDE 14

EL ¡Consistency ¡

slide-15
SLIDE 15

DL ¡Consistency ¡

slide-16
SLIDE 16

DL ¡Consistency ¡

slide-17
SLIDE 17

DL ¡Consistency ¡

slide-18
SLIDE 18

DL ¡Consistency ¡

slide-19
SLIDE 19

EL ¡Realiza)on ¡

slide-20
SLIDE 20

EL ¡Realiza)on ¡

slide-21
SLIDE 21

EL ¡Realiza)on ¡

slide-22
SLIDE 22

EL ¡Realiza)on ¡

slide-23
SLIDE 23

DL ¡Realiza)on ¡

slide-24
SLIDE 24

DL ¡Realiza)on ¡

slide-25
SLIDE 25

DL ¡Realiza)on ¡

slide-26
SLIDE 26

DL ¡Realiza)on ¡

slide-27
SLIDE 27

EL ¡Classifica)on ¡

slide-28
SLIDE 28

EL ¡Classifica)on ¡

slide-29
SLIDE 29

EL ¡Classifica)on ¡

slide-30
SLIDE 30

EL ¡Classifica)on ¡

slide-31
SLIDE 31

DL ¡Classifica)on ¡

slide-32
SLIDE 32

DL ¡Classifica)on ¡

slide-33
SLIDE 33

DL ¡Classifica)on ¡

slide-34
SLIDE 34

DL ¡Classifica)on ¡

slide-35
SLIDE 35

The ¡BeZng ¡

slide-36
SLIDE 36

Pay ¡your ¡money, ¡take ¡your ¡chances ¡

  • We ¡had ¡64 ¡bets ¡

– Every ¡slip ¡bought! ¡

  • The ¡pot ¡is ¡56€ ¡
  • The ¡top ¡three ¡closest ¡split ¡the ¡pot ¡(40-­‑30-­‑30) ¡
  • The ¡winners ¡are: ¡

– 3rd: ¡Yizheng ¡Zhao ¡

  • MORe ¡EL-­‑CL ¡for ¡296; ¡MORe ¡got ¡294 ¡

– 2nd: ¡Despoina ¡Trivela ¡

  • Jfact ¡EL-­‑CL ¡for ¡190; ¡Jfact ¡got ¡189! ¡

– 1st: ¡Iliana ¡Petrova ¡

  • ELK ¡EL-­‑CL ¡for ¡298; ¡ELK ¡got ¡298! ¡

¡

slide-37
SLIDE 37

Most ¡amusing ¡bets ¡

  • Despoina ¡Trivela ¡

– Got ¡second ¡best ¡bet ¡

  • Jfact ¡EL-­‑CL ¡for ¡190; ¡Jfact ¡got ¡189! ¡

– Got ¡second ¡worst ¡bet ¡

  • MORe ¡DL-­‑CL ¡for ¡110; ¡MORe ¡got ¡247! ¡
  • Yevgeny ¡Kazakov ¡

– Bet ¡against ¡ELepHant ¡for ¡143; ¡it ¡solved ¡291! ¡

slide-38
SLIDE 38

Organiza)on ¡

  • ORE ¡Compe))on ¡Organisers ¡ ¡

– Birte ¡Glimm ¡(University ¡of ¡Ulm) ¡ – Rafael ¡Gonçalves ¡(Stanford ¡University) ¡ – Ernesto ¡Jiménez-­‑Ruiz ¡(University ¡of ¡Oxford) ¡ – Nicolas ¡Matentzoglu ¡(University ¡of ¡Manchester) ¡ – Bijan ¡Parsia ¡(University ¡of ¡Manchester) ¡Infrastructure ¡

  • Local ¡Organiza)on ¡

– Giorgos ¡Stamou ¡(NT ¡University ¡of ¡Athens) ¡ – Giorgos ¡Stoilos ¡(NT ¡University ¡of ¡Athens) ¡

slide-39
SLIDE 39

Special ¡Thanks ¡

  • Konstan)n ¡Korovin ¡with ¡Dmitry ¡Tsarkov ¡

(University ¡of ¡Manchester) ¡

– Compe))on ¡machines! ¡

  • Funded ¡by ¡Royal ¡Society ¡research ¡grant ¡RG080491 ¡
  • Andreas ¡Steigmiller ¡(University ¡of ¡Ulm) ¡

– Cri)cal ¡framework ¡technical ¡support! ¡

  • Yevgeny ¡Kazakov ¡(University ¡of ¡Ulm) ¡

– Transport ¡of ¡cer)ficates ¡and ¡beZng ¡slips ¡

  • Bernardo ¡Cuenca ¡Grau ¡and ¡Yujiao ¡Zhou ¡

(University ¡of ¡Oxford) ¡

– GeZng ¡us ¡85% ¡toward ¡a ¡query ¡answering ¡track ¡

¡

slide-40
SLIDE 40

Team ¡Playa ¡of ¡ORE ¡2015 ¡

I ¡

slide-41
SLIDE 41

Sponsors ¡

  • Prizes ¡and ¡T-­‑Shirts ¡

¡

slide-42
SLIDE 42

More ¡details ¡

h,ps://www.w3.org/community/owled/ore-­‑2015-­‑workshop/ ¡