昌平区办理的母婴手册可以在海淀区用。根据北京市计划生育官网查询得知：母子健康手册是由北京市发放的，因此昌平办的母婴健康手册可以在海淀区使用。母子健康手册是由国家卫健委组织专家编写的、在全国范围内推广使用的母子健康档案。