چندتا سوال در مورد خطای out of memory

Question

سلام عرض ادب
۱-) دوستان وقتی میخام یک شبکه بزرگ رو فاین تیون کنم با 1080 - ابتدای کار همه چیز اوکی هست و ترین میشه حالا که میخام دوباره فاین تیون کنم و ادامه بدم (resume) میزنه out of memory - در این حالت وقتی یبار سیستم رو ریستارت میکنم و بعدش میزنم ادامه میده دلیلش چی میتونه باشه ؟

۲) وقتی میخام شبکه رو ترین کنم اگه در ابتدای کار بنویسه
name: GeForce GTX 1080 major: 6 minor: 1 memoryClockRate(GHz): 1.835
pciBusID: 0000:01:00.0
totalMemory: 7.92GiB freeMemory: 7.67GiB
ترین رو انجام میده و اکی هست یعنی وقتی که مینویسه free memory در حد گیگ هست ترین صورت میگیرد اما وقتی میزنه در حد مگا هست out of memory میزنه سوالم اینکه بنظرتون این برعکس نباید باشه ؟ اصلا چرا اینجوری میشه ؟

Comments

سلام
تو متلب یا پایتون ؟!

---

سلام
اول برنامه گراف رو ریست کن ببین حل میشه؟
tf.reset_default_graph()

---

از مدل های TF-SLIM استفاده میکنم نمیدونم چیکار باید انجام بدم

Answer 1

سلام
این مشکلیه که توی تنسورفلو خیلی باهاش مواجه میشن
توی پایتون و چیزهایی مثل jupyter یا spyder، یه بار که kernel رو ریست کنید یا console رو ببندید، مموری آزاد میشه
اما بحثهای زیادی در موردش هست که چی کار کنیم بدون ریست کردن مموری برای کارهای بعدی آزاد بشه، از تنظیمات گرفته تا اینکه session رو ببندیم یا اینکه graph رو ریست کنیم و ...

این پستها رو برای بحثهای بیشتر ببینید:

https://stackoverflow.com/questions/39758094/clearing-tensorflow-gpu-memory-after-model-execution

---

https://www.quora.com/How-do-I-release-GPU-memory-after-running-TensorFlow-programs

---

http://forums.fast.ai/t/tip-clear-tensorflow-gpu-memory/1979

---

https://www.packtpub.com/mapt/book/big_data_and_business_intelligence/9781786469786/7/ch07lvl1sec67/gpu-memory-management