Слово пустяк происходит от «пустой» и буквально означает «нечто пустое» – пустяк, пустышку: «Эта сельдь с икрой?» - «Нет, без икры - пустяк». В переносном, но буквальном смысле
пустяк - то, что не содержит сути; бессодержательно, бессмысленно – пусто для меня, т.е. – пустяк.

«Ну и как тебе встреча?» - «Пустяк. Пусто: я не узнал ничего нового». – «А как тебе Гуру-сан?» - « И он - пустяк: напыщенный вид, напущенная важность… Но я не увидел в нём ничего ценного, он – пустой  (для меня): человек-пустяк».  

И о деле можно сказать «пустяк», не потому что оно легко, а потому что - пусто, т.е. бессодержательно.  

Забавно: в основе философии буддизма лежит идея Пустоты – Шуньяты, и утверждается что «все вещи – пусты» (см. Нагарджуна), иначе говоря, «всё вокруг – пустяки,  и самость – пустяк, даже нирвана - пустяк». Пустяковая философия, однако. :)