主角不慎遗失了自己的收藏品，得知被他人据为己有，于是召开私人拍卖会，邀请那些占有者，放一些一般的拍品，起拍价虚高，占有者根据之前捡到的收藏品猜测拍品一定价值不菲，花费十倍的价格高价收购，事后发现不对，要求主角退款，主角要求返还遗失的收藏品，否则拒不退款。主角遗失收藏品后，直到占有者要求退款前，从未向占有者索要遗失的收藏品。请问双方的行为是否构成违法或犯罪？