opus-mt-en-mr-onnx

Export

File layout

./                      fp32 ONNX graphs (encoder_model.onnx, decoder_model.onnx, decoder_with_past_model.onnx) + tokenizer files
./int8/                 int8 dynamic-quantized ONNX graphs

Parity check

• src: This is a book.
  • pytorch greedy: हे पुस्तक जुनं आहे.
  • onnx fp32 greedy: हे पुस्तक जुनं आहे. (match)
  • pytorch beam4: हे पुस्तक जुनं आहे.
  • onnx fp32 beam4: हे पुस्तक जुनं आहे. (match)
  • onnx int8 greedy: हे पुस्तक जुनं आहे.
• src: I am learning Marathi.
  • pytorch greedy: मी आयरिश आहे.
  • onnx fp32 greedy: मी आयरिश आहे. (match)
  • pytorch beam4: मी आयरिश आहे.
  • onnx fp32 beam4: मी आयरिश आहे. (match)
  • onnx int8 greedy: मी चेक शिकतोय.

Usage