编译内核模块问题

我现在编译内核模块都是通过make modules来编译的，这样会编译很多不是我要的内核模块，假如我现在自己写了一个内核驱动，我像单独只交叉编译我的这个驱动程序，不想和内核其他的文件一起编译，就是像在x86机器上一样只需要一个make -C /$DIR M=$(pwd) modules  就能编译出来。而且节省很多时间，但是我现在用这种方法不得行，请问高手们这个方法行的通吗，是我自己那里没搞对，还是交叉编译的环境上不能像x86下面一样单独编译内核模块啊？？？？