返事が遅れてごめんなさい。
Dim dlg As New MyDelegate(AddressOf SetText)
Dim dlg As MyDelegate = AddressOf SetText
はどちらでも良いのですね。 http://msdn.microsoft.com/ja-jp/library/y72ewk2b(VS.80).aspx
ここに書いてありますが、AddressOf 演算子が特別な働きをします、つまり
「特定のプロシージャを参照するプロシージャ デリゲート インスタンスを作成します。」
と言うことです。
私の場合はC#から書き換えていますので、デリゲートクラスを意識した書き方に
なっています。