講義ノートやゼミ発表のレジュメをコピーしてもいいですか

いいえ、いけません。図書館にあるコピー機は、図書館が所蔵している資料を、著作権法で許された範囲でコピーすること以外に使用することはできません。