どうしたら、彼にとって重荷とならない彼女でいられるのでしょうか

相談させて頂きます。長文です。
20歳。自分から告白して、初めて彼氏ができました。

私は昔精神的なものを患った経験があり、今は平気ですがごくたまに鬱々とした気分が襲う時があって、
そういう時は重荷になりたくないので、極力彼とは会わず連絡も取らない事にしています。
（彼も精神病の経験があり、今でも不安定な時は薬などを飲んでいます。お互い知っています）

私は結構面倒臭がりな性格で束縛はされたくないし、していないつもりです。
ただ中学時代に虐められたトラウマから自己卑下をする癖がかなり強く、
「私みたいな奴が彼の横に居ていいのかな」とほぼ常に考えてしまいます。彼には言いません。

一方彼は精神的に弱い反面普段は軽い感じで、よく私の女友達に可愛い可愛い言ってはスキンシップしたりしますが
私自身「しょうがないなーお前は！ｗ」ぐらいのもんであまり気にしていません。
周りは「あんなことされて妬かないの？」と心配してくれますが、本当に妬いてないんです。
私みたいな奴に好きって言われても拒まず、大切にしてくれた彼なので、私は彼を心から信頼しています。
彼にはいくら感謝してもしきれないぐらい感謝しています。

しかし彼にこの前「気持ちが重い」と言われてしまいました。
彼曰く、私の一途すぎる気持ちがたまに重いらしく・・・
「俺は精神的に弱くて、軽いふりしてすぐ逃げる、たらしで女の子にチヤホヤされたい最低な奴。
でもお前が俺みたいな奴のことを一途に思ってくれて、大事にしてくれてるのが伝わるから、
キャパが足りなくて受け止めきれなくなって、重たく感じる時がある・・・」
みたいなことを、真っすぐに私の目を見て言ってくれました。

彼が重いと思っていたことより何より、彼に甘えてしまっていた自分に幻滅しました。
彼が大好きで、一緒にいれる時間が幸せで、大切にしたくて、日に日に気持ちは大きくなって、
でもその気持ちが彼を苦しめていたんだと思うと本当に情けなくて申し訳なくて。

負担になりたくなくて必死に堪えようとしましたが、我慢できず彼の前で泣いてしまいました。
彼はびっくりして、馬鹿みたいに泣きじゃくる私をぎゅっと抱きしめてくれました。
しかしその後、泣いてまた彼を苦しめたと更に自己嫌悪に陥ってしまい・・・

彼の負担にだけはなりたくない一心で、色んなことを苦もなく我慢できましたが、
気持ちが重いと言われてしまった以上、どうしたら彼の負担にならずに済むのか分かりません。
別に生活の全てが彼中心！みたいなことは決して無いんです。友人も家族も勉強もバイトも大切にしています。
メールも面倒臭くて基本私からはあまり送りませんし（苦笑）
もし彼がいなくなったらどうしよう・・・という恐怖もそれほどありません。
彼が私の横に居てくれることは、私にとって奇跡であり、だからこそ大切にしたいんです。

どうしたら、彼にとって重荷とならない彼女でいられるのでしょうか・・・
少しだけでもいいのでアドバイス頂けると嬉しいです。

長文＆乱文、失礼しました。