save و restor مدل در تنسورفلو

Question

سلام
من یه شبکه به یه تعداد مرحله ترین کردم و نتایج خوب شد. الان میخوام همون شبکه رو ادامه بدم و مراحل بیشتری ترینش کنم ولی نه از ابتدا. مدل رو save کردم ولی وقتی می خوام restore کنم ارور زیر رو میده :
Assign requires shapes of both tensors to match
در حالیکه من shape عوض نکردم.
و یه سوال اینکه آیا زمان restore نیاز به initialization متغیرها هست؟
کدوم فایل رو باید restore کنم؟ زمان ذخیره 3 تا فایل ckpt ذخیره میکنه

Answer 1

1- برای restore باید متغییر ها initial بشن
2- احتمالا فایل های ckpt را در مراحل مختلف آموزش ذخیره کرده. بنا به این که کدام مرحله نتیجه بهتری داشته انتخاب کنید و یا آخرین مدل را انتخاب کنید.

Comments

3تا فایل به صورت زیر هستن:
.ckpt.data-00000-of-00001
.ckpt.index
.ckpt.meta
و یه checkpoint
من توی restore اومدم فقط .ckpt رو توی with tf.Session() as sess  فراخوندم. اشتباهه؟
اول توی session بیام initialize کنم بعدش restore ؟

---

index :  نمی دونم چی هست
meta : اطلاعات مربوط گراف هست یعنی ساختار مدل رو ذخیره کرده
و خود ckpt هم وزن های شبکه رو ذخیره کرده.
فایل checkpoint یک فایل متنی هست که نشون میده آخرین چن پوینتی که ذخیره کردین کدوم فایل است.
برای بازیابی مدل لازم هست که گراف ساخته شه ( به همون شکلی که در ابتدا ساخته شده) متغییر ها initial بشن و بعد با تابع restore  وزن های ذخیره شده بازیابی بشن.
گزینه دیگه به جای ساخت مجدد گراف توسط کد بازخوانی اون از فایل meta  هست.

---

من نتیجه ای که گرفتم و جواب داد به این صورته که:
- توی restore کردن دیگه نیازی به initial نیست چون وزنای قبلی گرفته میشه و ادامه ی اون میره جلو عملیات ترینینگ
- من save هام رو توی یه آدرس انجام می دادم و checkpoint به مشکل میخورد که باید توی آدرسای مختلف و پوشه های جداگانه چند سیو انجام داد.