程序博客网 > 手机数字键盘钢琴软件

【Android Framework】 Android Binder 机制解析

来源：互联网 发布：手机数字键盘钢琴软件 编辑：程序博客网 时间：2024/05/24 01:01

        人类社会进步的根源力量是那些头脑卓越的天才，大至推动社会革新的发明创造，微至影响某一行业发展方向的技术创造，比如Android操作系统，小部分天才的发明创造（android系统的核心设计者），才有无数为之修边幅的工作机会，此篇不敢妄谈android太多内容，只将本人对android系统设计中一个巧妙无比的binder机制的浅薄认知做一个分析：

涉及的要义：

A）Binder IPC

B）Binder通信模型

C）Android为何引入Binder


A）Binder IPC

        Binder机制符合Client-Server通信机制，总体来说系统中一个进程将android上层能提供的service综合管理起来，比如（电源管理服务，多媒体编解码，输入子系统服务

等）；其他的用户进程作为客户端向该进程提出要求服务申请。通过该过程我们分析，客户端如何获取所需服务的入口呢？这是第一步需求；其二，Client与Server间如何进行

通信和数据交互，好比李四去人事局找局长办事，这就相当于客户端的需求，而局长相当于服务端，门岗则相当于binder守护进程，李四需通过门岗获取局长办公室的具体位

置，而该位置是局长办公室挂牌的第一天就在门岗做了注册记录的，此举相当于android系统的service向binder进程注册操作，李四从门岗那里拿到的并不是局长办公室，而是

办公室的位置信息说明，姑且称之为局长办公室物理位置的引用，李四最终通过该“引用”就可以找到局长办公室（binder实体），而后就可以跟局长交流所需服务，这当中肯定

涉及双方语种一致无交流障碍，即binder通信协议。

        面向对象思想的引入将进程间通信转化为通过对某个Binder对象的引用调用该对象的方法，而其独特之处在于Binder对象是一个可以跨进程引用的对象，它的实体位于一个进程中，而它的引用却遍布于系统的各个进程之中。最诱人的是，这个引用和java里引用一样既可以是强类型，也可以是弱类型，而且可以从一个进程传给其它进程，让大家都能访问同一Server，就象将一个对象或引用赋值给另一个引用一样。

B）Binder通信模型

        Binder框架有四个组成部分：Client，Server，binder驱动，以及ServiceManager；其中binder驱动运行于内核空间，其余三者运行在用户空间。套用互联网传输的例子，Server为服务器，Client为终端设备，ServiceManager为DNS（域名服务器），驱动为硬件通道功能的路由器。

B.1) Binder驱动

        所谓的驱动自然是底层，少有体现在上层，而此驱动也有别于具体的硬件设备（I2c设备等）驱动，跟具体硬件设备毫无关联，只是套用了硬件设备的驱动模型而已，我们看kenel中的binder.c文件，可知binder注册为misc节点框架下的设备（/dev/binder），并向用户空间提供open(), mmap(), ioctl(), poll()等调用入口，用户可通过其注册生成的设备节点从用户空间实现调用，驱动负责进程之间Binder通信的建立，进程间Binder的传递，Binder的引用计数管理，数据包在进程间的传递和交互等系列支持。

B.2) Binder实体与ServiceManager

        ServiceManager的作用是将字符形式的Binder名字转化成Client中对该Binder的引用，使得Client能够通过Binder 名字获得对Server中Binder实体的引用。注册了名字的Binder叫实名Binder，就象每个网站除了有IP地址外都有自己的网址。Server创建了Binder实体，为其取一个字符形式，可读易记的名字，将这个Binder连同名字以数据包的形式通过Binder驱动发送给 SMgr，通知SMgr注册一个名叫张三的Binder，它位于某个Server中。驱动为这个穿过进程边界的Binder创建位于内核中的实体节点以及 SMgr对实体的引用，将名字及新建的引用传递给SMgr。SMgr收数据包后，从中取出名字和引用填入一张查找表中。

       细心的读者可能会发现其中的蹊跷：SMgr是一个进程，Server是另一个进程，Server向SMgr注册Binder必然会涉及进程间通信。当前实现的是进程间通信却又要用到进程间通信，这就好象蛋可以孵出鸡前提却是要找只鸡来孵蛋。Binder的实现比较巧妙：预先创造一只鸡来孵蛋。 SMgr和其它进程同样采用Binder通信，SMgr是Server端，有自己的Binder实体，其它进程都是Client，需要通过这个 Binder的引用来实现Binder的注册，查询和获取。SMgr提供的Binder比较特殊，它没有名字也不需要注册，当一个进程使用 BINDER_SET_CONTEXT_MGR命令将自己注册成SMgr时Binder驱动会自动为它创建Binder实体（这就是那只预先造好的鸡）。其次这个Binder的引用在所有Client中都固定为0而无须通过其它手段获得。也就是说，一个Server若要向SMgr注册自己Binder就必需通过0这个引用和SMgr的Binder通信。类比网络通信，0号引用就好比域名服务器的地址，你必须手工或动态配置好。要注意这里说的Client是相对SMgr而言的，一个应用程序是个提供服务的Server，但对SMgr来说它仍然是个Client。

ServiceManager的代码部分：frameworks/native/cmds/servicemanager

[cpp] view plain copy
 print?
  1. int main(int argc, char **argv)  
  2. {  
  3.     struct binder_state *bs;  
  4.     void *svcmgr = BINDER_SERVICE_MANAGER;  
  5.   
  6.     bs = binder_open(128*1024);  
  7.   
  8.     if (binder_become_context_manager(bs)) {  
  9.         ALOGE("cannot become context manager (%s)\n", strerror(errno));  
  10.         return -1;  
  11.     }  
  12.   
  13.     klog_init();  
  14.   
  15.     svcmgr_handle = svcmgr;  
  16.     binder_loop(bs, svcmgr_handler);  
  17.     return 0;  
  18. }  


binder_open定义在frameworks/native/cmds/servicemanager/binder.c中，

[cpp] view plain copy
 print?
  1. struct binder_state *binder_open(unsigned mapsize)  
  2. {  
  3.     struct binder_state *bs;  
  4.   
  5.     bs = malloc(sizeof(*bs));  
  6.     if (!bs) {  
  7.         errno = ENOMEM;  
  8.         return 0;  
  9.     }  
  10.   
  11.     bs->fd = open("/dev/binder", O_RDWR);  
  12.     if (bs->fd < 0) {  
  13.         fprintf(stderr,"binder: cannot open device (%s)\n",  
  14.                 strerror(errno));  
  15.         goto fail_open;  
  16.     }  
  17.   
  18.     bs->mapsize = mapsize;  
  19.     bs->mapped = mmap(NULL, mapsize, PROT_READ, MAP_PRIVATE, bs->fd, 0);  
  20.     if (bs->mapped == MAP_FAILED) {  
  21.         fprintf(stderr,"binder: cannot map device (%s)\n",  
  22.                 strerror(errno));  
  23.         goto fail_map;  
  24.     }  
  25.   
  26.         /* TODO: check version */  
  27.   
  28.     return bs;  
  29.   
  30. fail_map:  
  31.     close(bs->fd);  
  32. fail_open:  
  33.     free(bs);  
  34.     return 0;  
  35. }  

实际是调用到了binder驱动中的binder_open方法：

[cpp] view plain copy
 print?
  1. static int binder_open(struct inode *nodp, struct file *filp)  
  2. {  
  3.     struct binder_proc *proc;  
  4.   
  5.     binder_debug(BINDER_DEBUG_OPEN_CLOSE, "binder_open: %d:%d\n",  
  6.              current->group_leader->pid, current->pid);  
  7.   
  8.     proc = kzalloc(sizeof(*proc), GFP_KERNEL);  
  9.     if (proc == NULL)  
  10.         return -ENOMEM;  
  11.     get_task_struct(current);  
  12.     proc->tsk = current;  
  13.     INIT_LIST_HEAD(&proc->todo);  
  14.     init_waitqueue_head(&proc->wait);  
  15.     proc->default_priority = task_nice(current);  
  16.   
  17.     binder_lock(__func__);  
  18.   
  19.     binder_stats_created(BINDER_STAT_PROC);  
  20.     hlist_add_head(&proc->proc_node, &binder_procs);  
  21.     proc->pid = current->group_leader->pid;  
  22.     INIT_LIST_HEAD(&proc->delivered_death);  
  23.     filp->private_data = proc;  
  24.   
  25.     binder_unlock(__func__);  
  26.   
  27.     if (binder_debugfs_dir_entry_proc) {  
  28.         char strbuf[11];  
  29.         snprintf(strbuf, sizeof(strbuf), "%u", proc->pid);  
  30.         proc->debugfs_entry = debugfs_create_file(strbuf, S_IRUGO,  
  31.             binder_debugfs_dir_entry_proc, proc, &binder_proc_fops);  
  32.     }  
  33.   
  34.     return 0;  
  35. }  

        这个函数的主要作用就是创建一个binder_proc 结构来保存打开/dev/binder设备节点的进程的上下文信息，并且将进程上下文信息保存在结构体file的private_data变量中，如此一来，在执行其他该设备节点的相关操作的时候便可以通过此结构体来获取进程的上下文信息，该进程上下文信息还会保存在一个全局的哈希表binder_procs中，供驱动内部使用。

binder_proc乃binder驱动层面非常重要的一个结构体，定义在驱动目录的binder.c中，

[cpp] view plain copy
 print?
  1. struct binder_proc {  
  2.     struct hlist_node proc_node;  
  3.     struct rb_root threads;  
  4.     struct rb_root nodes;  
  5.     struct rb_root refs_by_desc;  
  6.     struct rb_root refs_by_node;  
  7.     int pid;  
  8.     struct vm_area_struct *vma;  
  9.     struct mm_struct *vma_vm_mm;  
  10.     struct task_struct *tsk;  
  11.     struct files_struct *files;  
  12.     struct hlist_node deferred_work_node;  
  13.     int deferred_work;  
  14.     void *buffer;  
  15.     ptrdiff_t user_buffer_offset;  
  16.   
  17.     struct list_head buffers;  
  18.     struct rb_root free_buffers;  
  19.     struct rb_root allocated_buffers;  
  20.     size_t free_async_space;  
  21.   
  22.     struct page **pages;  
  23.     size_t buffer_size;  
  24.     uint32_t buffer_free;  
  25.     struct list_head todo;  
  26.     wait_queue_head_t wait;  
  27.     struct binder_stats stats;  
  28.     struct list_head delivered_death;  
  29.     int max_threads;//设置threads数目阀值</span>  
  30.     int requested_threads;  
  31.     int requested_threads_started;  
  32.     int ready_threads;  
  33.     long default_priority;  
  34.     struct dentry *debugfs_entry;  
  35. };  
其中红色标识的四个结构体是主旋律，这四个成员是四个红黑树节点，即binder_proc分别挂载4颗红黑树上，threads树用来保存proc进程内处理用户请求的线程；nodes树用来保存binder_proc进程内的binder实体；refs_by_desc树和refs_by_node树用来保存binder_proc进程内的Binder引用，即引用的其它进程的Binder实体，它分别用两种方式来组织红黑树，一种是以句柄作来key值来组织，一种是以引用的实体节点的地址值作来key值来组织，它们都是表示同一样东西，只不过是为了内部查找方便而用两个红黑树来表示。在一个进程中，有多少“被其他进程进行跨进程调用的”binder实体，就会在该进程对应的nodes树中生成多少个红黑树节点。另外一方面，一个进程若要访问其他进程的binder实体，则必须在其refs_by_desc树中拥有对应的引用节点。

之后是mmap方法，同样间接调用到内核的binder驱动中，

[cpp] view plain copy
 print?
  1. static int binder_mmap(struct file *filp, struct vm_area_struct *vma)  
  2. {  
  3.     int ret;  
  4.     struct vm_struct *area;  
  5.     struct binder_proc *proc = filp->private_data;  
  6.     const char *failure_string;  
  7.     struct binder_buffer *buffer;  
  8.   
  9.     if (proc->tsk != current)  
  10.         return -EINVAL;  
  11.   
  12.     if ((vma->vm_end - vma->vm_start) > SZ_4M)  
  13.         vma->vm_end = vma->vm_start + SZ_4M;  
  14.   
  15.     binder_debug(BINDER_DEBUG_OPEN_CLOSE,  
  16.              "binder_mmap: %d %lx-%lx (%ld K) vma %lx pagep %lx\n",  
  17.              proc->pid, vma->vm_start, vma->vm_end,  
  18.              (vma->vm_end - vma->vm_start) / SZ_1K, vma->vm_flags,  
  19.              (unsigned long)pgprot_val(vma->vm_page_prot));  
  20.   
  21.     if (vma->vm_flags & FORBIDDEN_MMAP_FLAGS) {  
  22.         ret = -EPERM;  
  23.         failure_string = "bad vm_flags";  
  24.         goto err_bad_arg;  
  25.     }  
  26.     vma->vm_flags = (vma->vm_flags | VM_DONTCOPY) & ~VM_MAYWRITE;  
  27.   
  28.     mutex_lock(&binder_mmap_lock);  
  29.     if (proc->buffer) {  
  30.         ret = -EBUSY;  
  31.         failure_string = "already mapped";  
  32.         goto err_already_mapped;  
  33.     }  
  34.   
  35.     area = get_vm_area(vma->vm_end - vma->vm_start, VM_IOREMAP);  
  36.     if (area == NULL) {  
  37.         ret = -ENOMEM;  
  38.         failure_string = "get_vm_area";  
  39.         goto err_get_vm_area_failed;  
  40.     }  
  41.     proc->buffer = area->addr;  
  42.     proc->user_buffer_offset = vma->vm_start - (uintptr_t)proc->buffer;  
  43.     mutex_unlock(&binder_mmap_lock);  
  44.   
  45. #ifdef CONFIG_CPU_CACHE_VIPT  
  46.     if (cache_is_vipt_aliasing()) {  
  47.         while (CACHE_COLOUR((vma->vm_start ^ (uint32_t)proc->buffer))) {  
  48.             pr_info("binder_mmap: %d %lx-%lx maps %p bad alignment\n", proc->pid, vma->vm_start, vma->vm_end, proc->buffer);  
  49.             vma->vm_start += PAGE_SIZE;  
  50.         }  
  51.     }  
  52. #endif  
  53.     proc->pages = kzalloc(sizeof(proc->pages[0]) * ((vma->vm_end - vma->vm_start) / PAGE_SIZE), GFP_KERNEL);  
  54.     if (proc->pages == NULL) {  
  55.         ret = -ENOMEM;  
  56.         failure_string = "alloc page array";  
  57.         goto err_alloc_pages_failed;  
  58.     }  
  59.     proc->buffer_size = vma->vm_end - vma->vm_start;  
  60.   
  61.     vma->vm_ops = &binder_vm_ops;  
  62.     vma->vm_private_data = proc;  
  63.   
  64.     if (binder_update_page_range(proc, 1, proc->buffer, proc->buffer + PAGE_SIZE, vma)) {  
  65.         ret = -ENOMEM;  
  66.         failure_string = "alloc small buf";  
  67.         goto err_alloc_small_buf_failed;  
  68.     }  
  69.     buffer = proc->buffer;  
  70.     INIT_LIST_HEAD(&proc->buffers);  
  71.     list_add(&buffer->entry, &proc->buffers);  
  72.     buffer->free = 1;  
  73.     binder_insert_free_buffer(proc, buffer);  
  74.     proc->free_async_space = proc->buffer_size / 2;  
  75.     barrier();  
  76.     proc->files = get_files_struct(current);  
  77.     proc->vma = vma;  
  78.     proc->vma_vm_mm = vma->vm_mm;  
  79.   
  80.     /*pr_info("binder_mmap: %d %lx-%lx maps %p\n", 
  81.          proc->pid, vma->vm_start, vma->vm_end, proc->buffer);*/  
  82.     return 0;  
  83.   
  84. err_alloc_small_buf_failed:  
  85.     kfree(proc->pages);  
  86.     proc->pages = NULL;  
  87. err_alloc_pages_failed:  
  88.     mutex_lock(&binder_mmap_lock);  
  89.     vfree(proc->buffer);  
  90.     proc->buffer = NULL;  
  91. err_get_vm_area_failed:  
  92. err_already_mapped:  
  93.     mutex_unlock(&binder_mmap_lock);  
  94. err_bad_arg:  
  95.     pr_err("binder_mmap: %d %lx-%lx %s failed %d\n",  
  96.            proc->pid, vma->vm_start, vma->vm_end, failure_string, ret);  
  97.     return ret;  
  98. }  

        函数首先通过filp->private_data得到在打开设备文件/dev/binder时创建的binder_proc结构。内存映射信息放在vma参数中，注意，此时的vma数据类型是struct vm_area_struct，它表示连续的一块虚拟内存区域，在函数变量声明的地方，我们还可以看到一个struct vm_struct结构，此结构体也表示一块连续的虚拟内存区域，那么两者的区别在哪里呢？在linux中，vm_area_struct表示的虚拟地址是给进程使用的，而vm_struct表示的虚拟地址是给内核使用的，它们对应的物理页面都可以是不连续的，vm_area_struct表示的虚拟地址范围为0~3G，而vm_struct表示的范围为(3G + 896M + 8M)~4G，我们有一个疑问，为何vm_struct地址空间范围不是3G~4G呢？原来，3G~(3G + 896M)和实际的连续的物理内存存在简单的对应关系，即对应0~896M的物理内存，而(3G + 896M) ~ (3G + 896M + 8M)是安全保护区域（所有指向该地址段的指针都是非法的），因此vm_struct使用(3G + 896M + 8M)~4G地址空间来映射非连续的物理页面；理解此函数需要一定的内核内存映射及管理的功底，敝人自认为功力有些许不足，只做大体功能的说明，binder通信的数据传输涉及两个系统空间，其一是用户进程，运行于用户空间；其二是内核进程，运行于内核空间；而客户端通过binder驱动与另一个用户空间进程的数据进行交互，则同样的数据需要Client将数据copy至内核虚拟内存空间，binder驱动再将内核虚拟内存空间数据copy至Server的用户空间进程的虚拟存储区域，即需要至少两次copy；而通过mmap映射的原理就是将一个物理页分别映射到进程虚拟空间及内核虚拟空间，则交互的数据只需从进程空间copy至内核空间一次，前文说到物理页多重映射可实现内核空间与server间的数据共享，即少copy一次，进而提升效率。

这样，frameworks/base/cmds/servicemanager/binder.c文件中的binder_open函数就描述完了，回到frameworks/base/cmds/servicemanager/service_manager.c文件中的main函数，下一步就是调用binder_become_context_manager来通知Binder驱动程序自己是Binder机制的上下文管理者，即守护进程。binder_become_context_manager函数位于frameworks/base/cmds/servicemanager/binder.c文件中：

[cpp] view plain copy
 print?
  1. int binder_become_context_manager(struct binder_state *bs)  
  2. {  
  3.     return ioctl(bs->fd, BINDER_SET_CONTEXT_MGR, 0);  
  4. }  

这个功能是通过ioctl实现的，我们可以看一下内核binder驱动中对BINDER_SET_CONTEXT_MGR的处理：

[cpp] view plain copy
 print?
  1. static long binder_ioctl(struct file *filp, unsigned int cmd, unsigned long arg)  
  2. {  
  3.     ....  
  4.     switch (cmd) {  
  5.         ...  
  6.         case BINDER_SET_CONTEXT_MGR:  
  7.         if (binder_context_mgr_node != NULL) {  
  8.             pr_err("BINDER_SET_CONTEXT_MGR already set\n");  
  9.             ret = -EBUSY;  
  10.             goto err;  
  11.         }  
  12.         ret = security_binder_set_context_mgr(proc->tsk);  
  13.         if (ret < 0)  
  14.             goto err;  
  15.         if (uid_valid(binder_context_mgr_uid)) {  
  16.             if (!uid_eq(binder_context_mgr_uid, current->cred->euid)) {  
  17.                 pr_err("BINDER_SET_CONTEXT_MGR bad uid %d != %d\n",  
  18.                        from_kuid(&init_user_ns, current->cred->euid),  
  19.                        from_kuid(&init_user_ns, binder_context_mgr_uid));  
  20.                 ret = -EPERM;  
  21.                 goto err;  
  22.             }  
  23.         } else  
  24.             binder_context_mgr_uid = current->cred->euid;  
  25.         binder_context_mgr_node = binder_new_node(proc, 0, 0);  
  26.         if (binder_context_mgr_node == NULL) {  
  27.             ret = -ENOMEM;  
  28.             goto err;  
  29.         }  
  30.         binder_context_mgr_node->local_weak_refs++;  
  31.         binder_context_mgr_node->local_strong_refs++;  
  32.         binder_context_mgr_node->has_strong_ref = 1;  
  33.         binder_context_mgr_node->has_weak_ref = 1;  
  34.         break;  
  35.     ...  
  36. }  
  37. }  
binder_context_mgr_uid初始值为INVALID_UID(-1), 那么第一次调用会走else下边的红色代码行，于是初始化binder_context_mgr_uid为current->cred->euid，这样，当前线程就成为Binder机制的守护进程了，并且通过binder_new_node为Service Manager创建Binder实体：

[cpp] view plain copy
 print?
  1. static struct binder_node *binder_new_node(struct binder_proc *proc,  
  2.                        binder_uintptr_t ptr,  
  3.                        binder_uintptr_t cookie)  
  4. {  
  5.     struct rb_node **p = &proc->nodes.rb_node;  
  6.     struct rb_node *parent = NULL;  
  7.     struct binder_node *node;  
  8.   
  9.     while (*p) {  
  10.         parent = *p;  
  11.         node = rb_entry(parent, struct binder_node, rb_node);  
  12.   
  13.         if (ptr < node->ptr)  
  14.             p = &(*p)->rb_left;  
  15.         else if (ptr > node->ptr)  
  16.             p = &(*p)->rb_right;  
  17.         else  
  18.             return NULL;  
  19.     }  
  20.   
  21.     node = kzalloc(sizeof(*node), GFP_KERNEL);  
  22.     if (node == NULL)  
  23.         return NULL;  
  24.     binder_stats_created(BINDER_STAT_NODE);  
  25.     rb_link_node(&node->rb_node, parent, p);  
  26.     rb_insert_color(&node->rb_node, &proc->nodes);  
  27.     node->debug_id = ++binder_last_id;  
  28.     node->proc = proc;  
  29.     node->ptr = ptr;  
  30.     node->cookie = cookie;  
  31.     node->work.type = BINDER_WORK_NODE;  
  32.     INIT_LIST_HEAD(&node->work.entry);  
  33.     INIT_LIST_HEAD(&node->async_todo);  
  34.     binder_debug(BINDER_DEBUG_INTERNAL_REFS,  
  35.              "%d:%d node %d u%016llx c%016llx created\n",  
  36.              proc->pid, current->pid, node->debug_id,  
  37.              (u64)node->ptr, (u64)node->cookie);  
  38.     return node;  
  39. }  
注意，这里传进来的ptr和cookie均为NULL。函数首先检查proc->nodes红黑树中是否已经存在以ptr为键值的node，如果已经存在，就返回NULL。在这个场景下，由于当前线程是第一次进入到这里，所以肯定不存在，于是就新建了一个ptr为NULL的binder_node，并且初始化其它成员变量，并插入到proc->nodes红黑树中去。

        binder_new_node返回到binder_ioctl函数后，就把新建的binder_node指针保存在binder_context_mgr_node中了，紧接着，又初始化了binder_context_mgr_node的引用计数值。

最后回到ServiceManager.c的main函数继续走，binder_loop; 则binder系统初始化完成，进入到loop中，等候Client与Server的交互请求了。

讲到这里，我们回到问题三：

C）Android为何引入Binder

        从binder的框架模型中我们得知，数据交互的活跃方为Client-Server之间资源的调度和数据交互，内核中传统的IPC机制有管道，消息队列，共享内存，信号量，socket，这其中支持上述交互方式的只有socket；其次从传输性能看，System V IPC（消息队列，共享内存，信号量）传输数据均需要copy两次，第一次将数据源copy至内核开辟的缓冲区，第二次从内核开辟的缓冲区copy至接收方缓冲区，共享内存不需copy，但是很难控制，binder只需要一次copy，socket适合不同终端进程在网络中传输数据，效率低，开销大；最后就是安全性层面，android给应用程序都分配了相应的UID/PID，这一机制在底层有赖于linux内核的安全机制，如果用其他的通讯方式则UID/PID 只能自己设置，但是这就给网络应用程序以可乘之机，危害系统安全。

基于以上原因，Android需要建立一套新的IPC机制来满足系统对通信方式，传输性能和安全性的要求，这就是Binder。Binder基于 Client-Server通信模式，传输过程只需一次拷贝，为发送发添加UID/PID身份，既支持实名Binder也支持匿名Binder，安全性高。 


后续可能会有对kernel binder驱动部分细化的分析，欢迎诸位留言交流。

0 0
手机数字键盘钢琴软件 手机数字键盘钢琴软件
原创粉丝点击
热门IT博客
wifii访客数据评估wifii访客数据评估
什么装机软件好什么装机软件好
一知f君张碧晨三部rar
唾液可以杀菌消炎 知乎
声音调节软件
最新网络说唱歌曲大全
nosql数据库 mysql
云计算呼叫中心
诺基亚n8软件下载
tracert使用端口
计算机考试软件
看不起培训机构程序员
程序员一年经验工资
什么事windows原版系统
泰拉瑞亚数据统计器
mac相册看图片不方便
淘宝的运费险怎么用
林忆莲 都市触觉 知乎
win8系统改mac地址
2017院士 知乎
热门问题 老师的惩罚 人脸识别 我在镇武司摸鱼那些年 重生之率土为王 我在大康的咸鱼生活 盘龙之生命进化 天生仙种 凡人之先天五行 春回大明朝 姑娘不必设防，我是瞎子 汽机油级别 速霸1000 龙蟠润滑油 液压油 摩托车机油 埃尔夫润滑油 美孚一号全合成机油 0w20机油 摩托车前减震 道达尔5w30 美孚公司 bp润滑油 油气 为什么4s店不建议加壳牌油 为什么好多人不要壳牌 单壳程四管程换热器 万达回归a股借壳大连电瓷 壳聚糖宫颈膜 壳聚糖伤口护理膜 壳聚糖宫颈抗菌膜 膜壳 壳聚糖抗菌成膜喷剂 坚果壳壳手机膜 壳聚糖宫颈抗菌膜价格 乐普膜壳 玻璃钢膜壳 壳聚糖抗菌膜 磨砂膜手机 壵 壵怎么读 壵怎么读音 壵怎么读yao 壵读yao 壵怎么读什么意思 壵的拼音 壵是什么意思 壵字的读音yao 壵垚 藤壶 尿壶 壶

程序博客网，程序员的互联网技术博客家园。csdn论坛精品 msdn技术资料都在这里