Может кому-то будет полезно.
Скачал из этой темы и установил версию 4.0.11. Также при запуске требует libssl.so.1.1 и libcrypto.so.1.1, но они не появляются в при установке libopenssl-legacy.
В архивной директории http://bin.entware.net/mipselsf-k3.4/archive/ я нашел libopenssl_1.1.1s-1_mipsel-3.4.ipk, но он не устанавливается - пишет, что не может понизить версию libopenssl.
Тогда я из IPK-файла распаковал библиотеки libssl.so.1.1 и libcrypto.so.1.1, которые положил в /opt/lib.
После этого Zabbix Proxy запустился без ошибок и даже создал базу SQLite.
Но, к сожалению, у меня Zabbix Server 7.0 LTS, а он не поддерживает Zabbix Proxy версии 4.0.11. Если у кого-то Zabbix Server более ранних версий, то такой трюк может сработать.
libopenssl_1.1.1s-1_mipsel-3.4.ipk