51本色

Institut f眉r K眉nstliche Intelligenz

Do it yourself, but not alone: Companion-Technologie f眉r die Heimwerkerunterst眉tzung

Im Rahmen des Transferprojekts "Do it yourself, but not alone: Companion-Technologie f眉r die Heimwerkerunterst眉tzung" soll in enger Zusammenarbeit der Universit盲t Ulm mit der Zentralen Forschung und Vorausentwicklung der Robert Bosch GmbH ein prototypisches Companion-System f眉r die Heimwerkerunterst眉tzung entwickelt und praktisch erprobt werden. Basierend auf den Forschungsergebnissen der Teilprojekte A1, A2 und B1 des Sonderforschungsbereichs Transregio 62 soll dabei erstmalig ein digitaler Assistent entstehen, der Nutzer bei der Bedienung von Elektrowerkzeugen und der Durchf眉hrung von Heimwerkerprojekten individuell und kompetent unterst眉tzt. So ist der Assistent unter anderem in der Lage sich in seinen detaillierten Schritt-f眉r-Schritt-Anleitungen individuell an die Situation als auch die F盲higkeiten des jeweiligen Nutzers anzupassen. F眉r die Umsetzung der jeweiligen Assistenzaufgabe kann das System dabei auf eine umfassende Wissensbasis in Form von formalen Spezifikationen zur眉ckgreifen. Dar眉ber hinaus soll der Assistent dem Nutzer aber auch die M枚glichkeit bieten, eigene neue Heimwerkerprojekte zu spezifizieren und ihm dabei assistieren. Diese Spezifikationen k枚nnen dann auf einer Community-Plattform f眉r andere Nutzer autorisiert bereitgestellt werden.

Die Bilder zeigen Ausz眉ge des Forschungsprototyps. In der ersten Grafik ist eine Explosionszeichnung zu sehen, die das Heimwerkerprojekt abstrakt darstellt, bei dessen Bearbeitung der Assistent durch eine Schritt-f眉r-Schritt-Anleitung unterst眉tzt. Das 苍盲肠丑蝉迟别 Bild stellt einen der Anleitungsschritte dar. Hier wird das Einlegen des Akkus gezeigt sowie eine weiterf眉hrende Erkl盲rung, welche die Nutzerfrage nach weiteren Informationen zum dargestellten Akku beantwortet.

Das Projekt ist finanziert durch die .


Projektlaufzeit: Oktober 2016 bis Oktober 2019

Erfahren sie mehr 眉ber das Projekt...

Projektteilnehmer

Aus A1, Planung:
  • Prof. Dr. Susanne Biundo-Stephan (TP-Leiter)
  • Dr. Pascal Bercher (Projektkoordination)
  • Gregor Behnke, M.Sc.
Aus A1, Wissensrepr盲sentation:
  • Prof. Dr. Birte Glimm (TP-Leiter)
  • Dr. Marvin Schiller
Aus B1:
  • Prof. Dr. Dr.-Ing. Wolfgang Minker (TP-Leiter)
  • Matthias Kraus, M.Sc.

Publikationen

2020

27.
M. Kraus, F. Fischbach, P. Jansen and W. Minker, "A Comparison of Explicit and Implicit Proactive Dialogue Strategies for Conversational Recommendation" in Proceedings of the 12th International Conference on Language Resources and Evaluation (LREC 2020), ELRA, 2020, pp. 429--435.
Datei:pdf
26.
M. Kraus, N. Wagner and W. Minker, "Effects of Proactive Dialogue Strategies on Human-Computer Trust" in Proceedings of the 28th ACM Conference on User Modeling, Adaptation and Personalization, ACM, 2020, pp. 107--116.
Datei:
25.
D. H枚ller, G. Behnke, P. Bercher, S. Biundo, H. Fiorino, D. Pellier and R. Alford, "HDDL: An Extension to PDDL for Expressing Hierarchical Planning Problems" in Proceedings of the 34th AAAI Conference on Artificial Intelligence (AAAI 2020), AAAI Press, 2020, pp. 9883--9891.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2020/Hoeller2020HDDL.pdf
24.
G. Behnke, P. Bercher, M. Kraus, M. R. G. Schiller, K. Mickeleit, T. H盲ge, M. Dorna, M. Dambier, W. Minker, B. Glimm and S. Biundo, "New Developments for Robert 鈥� Assisting Novice Users Even Better in DIY Projects" in Proceedings of the 30th International Conference on Automated Planning and Scheduling (ICAPS 2020), AAAI Press, 2020, pp. 343--347.
Weblink:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2020/Behnke2020DIYAssistant.pdf
23.
G. Behnke, D. H枚ller, A. Schmid, P. Bercher and S. Biundo, "On Succinct Groundings of HTN Planning Problems" in Proceedings of the 34th AAAI Conference on Artificial Intelligence (AAAI 2020), AAAI Press, 2020, pp. 9775--9784.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2020/AAAI-BehnkeG.1770.pdf
22.
P. Bercher and C. Olz, "POP 鈮� POCL, right? Complexity Results for Partial Order (Causal Link) Makespan Minimization" in Proceedings of the 34th AAAI Conference on Artificial Intelligence (AAAI 2020), AAAI Press, 2020, pp. 9785--9793.
DOI:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2020/Bercher2020POPvsPOCL.pdf
21.
M. Kraus, M. R. G. Schiller, G. Behnke, P. Bercher, M. Dorna, M. Dambier, B. Glimm, S. Biundo and W. Minker, "Was that successful? On Integrating Proactive Meta-Dialogue in a DIY-Assistant System using Multimodal Cues" in Proceedings of 22nd ACM International Conference on Multimodal Interaction (ICMI 2020), ACM, 2020.
Weblink:
Datei:/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2020/KSBB20a.pdf

2019

20.
M. Kraus, M. R. G. Schiller, G. Behnke, P. Bercher, S. Biundo, B. Glimm and W. Minker, "9th International Workshop on Spoken Dialogue Systems", Rafael Banchs and Luis Fernando D'Haro and Haizhou Li, Eds. Springer, 2019.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Kraus2019CloudCompanion.pdf
19.
G. Behnke, M. R. G. Schiller, M. Kraus, P. Bercher, M. Schmautz, M. Dorna, M. Dambier, W. Minker, B. Glimm and S. Biundo, "Alice in DIY wonderland or: Instructing novice users on how to use tools in DIY projects", AI Communications, vol. 32, no. 1, pp. 31-57, 2019. IOS Press.
DOI:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Behnke2019bosch.pdf
18.
G. Behnke, D. H枚ller and S. Biundo, "Bringing Order to Chaos - A Compact Representation of Partial Order in SAT-based HTN Planning" in Proceedings of the 33rd AAAI Conference on Artificial Intelligence (AAAI 2019), AAAI Press, 2019, pp. 7520--7529.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Behnke2019orderchaos.pdf
17.
C. Olz and P. Bercher, "Eliminating Redundant Actions in Partially Ordered Plans -- A Complexity Analysis" in Proceedings of the 29th International Conference on Automated Planning and Scheduling (ICAPS 2019), AAAI Press, 2019, pp. 310--319.
DOI:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Olz2019StepElimination.pdf
16.
G. Behnke, D. H枚ller and S. Biundo, "Finding Optimal Solutions in HTN Planning - A SAT-based Approach" in Proceedings of the 28th International Joint Conference on Artificial Intelligence (IJCAI 2019), 2019.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Behnke2019satoptimal.pdf
15.
D. H枚ller, G. Behnke, P. Bercher, S. Biundo, H. Fiorino, D. Pellier and R. Alford, "HDDL - A Language to Describe Hierarchical Planning Problems" in Proceedings of the Second ICAPS Workshop on Hierarchical Planning, 2019, pp. 6--14.
Datei:pdf
14.
G. Behnke, D. H枚ller, P. Bercher and S. Biundo, "More Succinct Grounding of HTN Planning Problems -- Preliminary Results" in Proceedings of the Second ICAPS Workshop on Hierarchical Planning, 2019, pp. 40--48.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2019/Behnke2019Grounding.pdf
13.
D. H枚ller, P. Bercher, G. Behnke and S. Biundo, "On Guiding Search in HTN Planning with Classical Planning Heuristics" in Proceedings of the 28th International Joint Conference on Artificial Intelligence (IJCAI 2019), IJCAI, 2019, pp. 6171--6175.
Datei:pdf

2018

12.
D. H枚ller, P. Bercher, G. Behnke and S. Biundo, "A Generic Method to Guide HTN Progression Search with Classical Heuristics" in Proceedings of the 28th International Conference on Automated Planning and Scheduling (ICAPS 2018), AAAI Press, 2018, pp. 114--122.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Hoeller18Progression.pdf
11.
M. Kraus, G. Behnke, P. Bercher, M. R. G. Schiller, S. Biundo, B. Glimm and W. Minker, "A Multimodal Dialogue Framework for Cloud-Based Companion Systems" in Proc. of the 10th International Workshop on Spoken Dialog Systems Technology (IWSDS 2018), 2018.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Kraus2018CompanionCloudDemo.pdf
10.
T. Perleth, M. R. G. Schiller and B. Glimm, "Applying a Model of Text Comprehension to Automated Verbalizations of EL Derivations" in Proceedings of DL 2018, CEUR Workshop Proceedings Vol. 2211, 2018.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/PerlethSchillerGlimmDL2018.pdf
9.
M. R. G. Schiller, G. Behnke, P. Bercher, M. Kraus, M. Dorna, F. Richter, S. Biundo, B. Glimm and W. Minker, "Evaluating Knowledge-Based Assistance for DIY" in Proceedings of MCI Workshop "Digital Companion", 2018, pp. 925--930.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/MCI-WS19-schillerEtAl2018.pdf
8.
D. H枚ller, P. Bercher, G. Behnke and S. Biundo, "HTN Plan Repair Using Unmodified Planning Systems" in Proceedings of the First ICAPS Workshop on Hierarchical Planning, 2018, pp. 26--30.
Weblink:
Datei:pdf
7.
G. Behnke, M. R. G. Schiller, M. Kraus, P. Bercher, M. Schmautz, M. Dorna, W. Minker, B. Glimm and S. Biundo, "Instructing Novice Users on How to Use Tools in DIY Projects" in Proceedings of the 27th International Joint Conference on Artificial Intelligence and the 23rd European Conference on Artificial Intelligence (IJCAI-ECAI 2018), IJCAI, 2018, pp. 5805--5807.
DOI:
Weblink:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Behnke2018DIY.pdf
6.
B. Leichtmann, P. Bercher, D. H枚ller, G. Behnke, S. Biundo, V. Nitsch and M. Baumann, "Towards a Companion System Incorporating Human Planning Behavior -- A Qualitative Analysis of Human Strategies" in Proceedings der dritten transdisziplin盲ren Konferenz "Technische Unterst眉tzungssysteme, die die Menschen wirklich wollen" (engl: Proceedings of the 3rd "Transdisciplinary Conference on Support Technologies"), TCST 2018, 2018, pp. 89--98.
Datei:pdf
5.
G. Behnke, D. H枚ller and S. Biundo, "Tracking Branches in Trees - A Propositional Encoding for Solving Partially-Ordered HTN Planning Problems" in Proceedings of the First ICAPS Workshop on Hierarchical Planning, 2018, pp. 40--47.
Weblink:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Behnke2018partSAT.pdf
4.
G. Behnke and S. Biundo, "X and more Parallelism - Integrating LTL-Next into SAT-based Planning with Trajectory Constraints while Allowing for even more Parallelism" in Proceedings of the Workshop on Constraint Satisfaction Techniques for Planning and Scheduling Problems (COPLAS), 2018, pp. 1--10.
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Behnke2018satltl.pdf
3.
G. Behnke and S. Biundo, "X and more Parallelism: Integrating LTL-Next into SAT-based Planning with Trajectory Constraints While Allowing for Even More Parallelism", Inteligencia Artificial, vol. 21, no. 62, pp. 75--90, 2018.
DOI:
Datei:pdf/fileadmin/website_uni_ulm/iui.inst.090/Publikationen/2018/Behnke2018SATltljournal.pdf

Kontakt