win7透传

背景

本次使用wddm过滤驱动的应用场景是透传场景我这边运用WDDM过滤驱动也有人叫主要有如下功能

1给透传显卡虚拟出一个显示器因为透传显卡都是插在服务器上一台服务器需要插十几张显卡消费级显卡不可能给每个显卡插一个显示器不插显示器又会存在分辨率无法设置分辨率过低的问题为此需要自己虚拟一个显示器“插”在透传显卡上。

2我们VDI使用协议协议的图片来源是QXL显卡驱动现在QXL显卡被透传显卡取代了QXL驱动没有了用武之地如果此时想使用协议进行连接可想而知结果就是黑屏问题是如何在不改变和代码的情况下实现的正常连接这也需要依赖wddm过滤驱动了此次它提供的功能是高效采集屏幕信息需要采集每次变化的区域全屏采集的话会造成带宽剧增。

进展

将近3个月过去了一直在做win7下虚拟显示器的相关工作本次几个比较大的收获

1是实现了虚拟显示器对Aero效果的支持在集显、AMD和NV独显有分别做过测试都能做到较好的支持更细致的型号支持需要进一步接受市场考验

2通过WDDM过滤驱动实现了win7下的高效截屏同时能获取到屏幕变化区域

3突破了在windows7上对Aero效果高效截屏和D3D全win7透传屏独占模式的高效截屏其中D3D全屏的截屏相对于OBS的HOOKAPI方案具有更好的兼容性同时具备更高效率。

最终实现的效果如下PC上插一个物理显示器自己虚拟一个显示器左边显示为虚拟显示器内容通过一个软件来看效果右边是物理显示器以下是让虚拟显示器和物理显示器呈现“复制屏”模式和“扩展屏”模式。

意义

1该实现意味着我们可以在VDI上使用消费级显卡透传到虚机作为渲染引擎不再依赖专业级显卡不再依赖显卡厂商为我们提供拔插虚拟显示器API、截屏API对成本的降低可想而知

2在VDI上对vGPU场景、显卡透传场景可以使用同一套显示框架且无需去关注GPU是哪个厂商会大大降低开发工作量

考虑到很多网友只对虚拟显示器感兴趣所以特别搞了个虚拟显示器的demo

https://blog.csdn.net/dailongjian2008/article/details/80958163

后续会推出专门用于截屏的wddmhook框架的demo具有强大的兼容性适应各类显卡敬请期待......

10月份我请了陪产假老婆生了个漂亮的女儿我也是儿女双全了也有半个月的时间没有上班在家的那段时间仔细梳理了下实现逻辑以及下一步应该侧重的方向好让我11月份上班后的尝试不再那么的没有针对性。所以我11月份一上班便很快取得了一些突破。

虚拟显示器我在7月份的时候做完了下一步要做的就是把虚拟显示器的屏幕数据截获并远程传递给客户端显示做完后为了更快的看到效果和进行试点最开始我获取屏幕数据采用mirror驱动方式mirror驱动是win7上微软官方支持的效率最高的截屏方式win7在截屏这块其实是比较尴尬的mirror驱动是XP时代的产物在win7上使用起来有太多的限制DXGI方式的截屏只能在win8及以上系统使用。

从测试和试点的效果来看使用mirror驱动截屏目前来说有几个比较显著的缺点

1只能截获主屏数据扩展屏貌似不能截不清楚怎么截扩展屏有知道的可以告知声

2开启了mirror驱动win7就不能开启毛玻璃效果且DirectDraw加速之类的不能使用大大降低了体验

3对D3D全屏场景如3D游戏全屏MediaCenter全屏Mirror驱动是截不到的具体原因我这里就不多讲了可以自行研究

4在测试过程中发现有些场景如PS的画图场景开启硬件加速后只要有开启mirror驱动延时就会变得相当严重开始以为是我们mirror驱动实现的问题后面直接把微软的sample拿过来什么都没改开启后延时依然这样的话证明延时就跟就跟mirror驱动的框架有关了。

鉴于上述的种种原因在开发完mirror驱动截图一个版本后我决定放弃这种框架因为后面的维护成本会很高而且有很多硬伤是无法解决的倒不如抛弃这种框架。于是我决定去尝试直接从wddm过滤驱动获取图片数据其实displayLink驱动的截图就是这种实现的他们的效果是业界一流的。

从9月份一开始我就转入了WDDM过滤驱动截获图片数据开发先从支持非Areo效果的图片开始期间也遇到了很多问题

内存映射问题