A Parallel Bottom-up Tomita Parser

Abstract

A novel parallel parser is presented. It is related to the algorithms of Earley and Tomita, but the technicalities are different. As an interesting theoretical improvement vis-à-vis the conventional Generalized LR parser, there is no restriction on the class of context-free grammars that can be handled.

Practical comparison with the conventional Tomita parser shows a decrease in parsing complexity and an increase in constant factors. I.e., the extra costs in communication overhead are offset by the gain in processing power if the sentence is not too small.

Zusammenfassung

Es wird ein neuer paralleler Parser vorgestellt. Er ist den Algorithmen von Earley und Tomita verwandt, die technischen Einzelheiten sind jedoch im Wesentlichen neu. Eine interessante theoretische Verbesserung im Vergleich zum konventionellen Tomita Parser ist, daß in der Klasse der kontextfreien Grammatiken keine Einschränkungen gemacht werden müssen.

Ein praktischer Vergleich mit dem konventionellen Tomita Parser ergab eine niedrigere Komplexität bei höheren konstanten Faktoren. Das bedeutet für nicht zu kurze Sätze, daß die zusätzlichen Kosten der Kommunikation durch den Einsatz mehrerer Prozessoren ausgeglichen werden.