Jag har gjort liknande migreringar och jag tror att du är på rätt väg.
Ta bara en mysqldump av din DB och lagra den i en fil, t.ex.:
mysqldump -h [host] -u [user] -p[password] [dbname] > dumpfilename.sql
Absolut. Du kan ansluta till en MySQL RDS-instans precis som du skulle ansluta till vilken annan MySQL-instans som helst. Värdnamnet hänvisas till som "slutpunkt" i AWS Management Console.
När du har skapat RDS-instansen och ställt in säkerhetsgruppen är du redo att ladda dumpen:
mysql -h [endpoint] -u [user] -p[password] [dbname] < dumpfilename.sql