想麻烦请教您一个重要的问题，我现在犹豫不决。
我来美国已经有4年多了，持J-1签证，现为H-1B，在大学做肿瘤研究（博士后），打算准备申请绿卡。
但我在2年多前，持加拿大旅游签证开车去加拿大（当时还是持J签证），然后去香港拿加拿大绿卡回加拿大，再开车回美国（离开美国30天内）。但是第一次回来时忘了带I-94卡，美国海关没有让我入境，让我回加拿大拿了I-94卡后才入境。因此我回美国是凭失效的J-1签证，但有效的I-94卡回来的，因而护照上没有我出入境的记录。
我打算申请绿卡，但不知道去香港和忘了I-94卡被拒入境两件事会不会影响到我的绿卡申请，尤其是移民局是否会因此拒绝485申请？非常希望能得到您的帮助，我是否能够申请美国绿卡，还是回加拿大？
非常非常感谢您的帮助！