关于“出版物”的定义，《出版专业基础（中级）》（2015版）一书中是这样描述的：
具有经过编辑加工的以文字、图形、图像、声音或其他符号形式表现的精神文化内容，可供阅读、欣赏。
具有承载这些精神文化内容的物质载体，而不论其实具有相对固定形态的，还是呈灵活多样形态的。
具有复本，可以向公众传播。
因此，对于出版物，其实就看三点：是否编辑加工？是否有物质载体？是否存在复本？三者都符合的就称为出版物，而没有按照国家法定程序出版（经过出版社编辑，有正式书号）就可以定义为非法出版物。
对照这一标准，来看提问者的五个例子。
第一个：严格来说是非法出版物。因为小册子出来之前肯定有过删改、改进，这就是编辑加工行为。小册子的物质载体毫无疑问是纸张。在淘宝上卖的不可能只有一份，那显然具有复本。三个要素齐全，属于出版物。但没有经过正规流程出版，所以是非法出版物。
第二个：打印一张纸，那就是没有复本，那就不算。打印十页教学资料，从提问者的描述里来看也没看到复制行为，那就应该也不算。
第三个：没太看明白，是指跟着正规出版物一起出版，然后附赠部分多印一些单独卖？这个算是打擦边球了，不过只要出版社同意那应该是没什么问题。
第四个：严格来说印刷后就成了非法出版物了。不过具体可能看印量，因为不到1000本的情况下，是不是算得上向公众传播还得看执法者的心情。
第五个：电子出版物是指光盘一类的吧？那个当然是算的。如果你是说付费下载的那种，那个一般叫做互联网出版物。这方面目前管得比较松，但严格按照法律来的话，没有出版社审核过的付费下载其实应该也算是非法出版物。此外，小说网站上的付费阅读不算非法出版物，因为这个小说本身没有复本。