CVPixelBufferRef到NSImage - 腾讯云开发者社区

及其子类)是真正用来表示图像数据的.它主要从三个方面来描述一个图像:大小,颜色空间,图片格式 NSImageRep类也负责图片数据的存取和转换工作: 它知道如何从一个文件中获取图像数据,或者将图像数据写入到一个文件中去....它也会将图片数据进行转换后显示到对应的上下文环境中....会自动根据图像文件来创建合适的NSImageRep实例对象,不需要我们手动创建.我们只需关心将图像显示到视图中....: Implied cache settings 图像缓存机制是图像显示过程中非常有效的一个环节.这是因为第一次加载图像数据时,它的格式可能并不适合直接渲染到屏幕上去.比如说...,cocoa都做了什么为了能够快速的查询到图像缓存,cocoa使用了注册索引的方式,你可以想象图像缓存就是一个仓库,里面保存了很多图像缓存数据, 而注册索引就像是这个仓库的目录,这样便于快速的获取指定的物品

1.4K3 0

SwiftUI图片处理(缩放、拼图)

} // 保存图片到本地 func saveImage(image: NSImage, fileName: String) -> Bool { guard var imageData...let targetImage: NSImage = NSImage(size: size) targetImage.lockFocus() sourceImageRep.draw...0 : (height - readHeight) * 0.5) let newImage: NSImage = NSImage(size: targetSize)...= nil // var newImage: NSImage?...(image: NSImage) -> CIImage?

4.2K2 0

您找到你想要的搜索结果了吗？

是的

没有找到

Metal入门教程（八）Metal与OpenGL ES交互

CVPixelBufferRef Metal纹理在Metal入门教程（五）视频渲染有详细的介绍； CVPixelBufferRef OpenGL ES纹理在OpenGL ES文集也有相关的介绍...；本文就是基于CVPixelBufferRef，将Metal的纹理转成CVPixelBufferRef，再用CVPixelBufferRef转成OpenGL ES的纹理，实现Metal到OpenGL...三种渲染效果展示具体步骤 1、Metal渲染 Metal渲染包括两步，分别是渲染到纹理和渲染到屏幕。...在Metal渲染完毕后，会把CVPixelBufferRef里面的数据转成UIImage，同时也会传给OpenGL ES渲染： // 渲染到纹理 { // 创建计算指令的编码器...2、UIImageView渲染 UIImageView显示的数据对象是UIImage，需要把CVPixelBufferRef转成UIImage，具体的步骤如下： /** * 根据CVPixelBufferRef

2.6K1 0

iOS 图片风格转换（CoreML）

而这个模型就可以被我们不断用来进行图片到具体某一风格的转换。 CoreML介绍 CoreML 是 Apple 今年 WWDC 新推出面向开发者的机器学习框架。...代码实现 CoreML对图片的处理都需要将图片转换成为CVPixelBufferRef数据，这里提供一段UIImage转CVPixelBufferRef的代码。 ?...CVPixelBufferRef转换代码将图片转换成为CVPixelBufferRef之后放入模型进行处理生成Output并得到结果，结果也是一个CVPixelBufferRef的数据。 ?...Output 所以这里我们还需要将CVPixelBufferRef转回去UIImage，具体的实现代码如下： ? image.png 更多具体的代码见项目。...因此我们可以移植原图的U以及V到合成图上，就可以得到示例图2中的颜色转换合成图了。

2K8 0

OS X开发：NSButton按钮控件应用原

title; //设置按钮开启状态的标题 @property (copy) NSString *alternateTitle; //设置按钮图片 @property (nullable, strong) NSImage...*image; //设置按钮开启状态图片 @property (nullable, strong) NSImage *alternateImage; //设置按钮图片位置 /* typedef NS_ENUM...*sound; 下面是一些便捷创建按钮的方法： //创建标准的按钮包括标题和图片 + (instancetype)buttonWithTitle:(NSString *)title image:(NSImage...title target:(nullable id)target action:(nullable SEL)action; //创建图片按钮 + (instancetype)buttonWithImage:(NSImage

1.4K2 0

Mac开发跬步积累(四):ImageIO解析Gif 图像数据

获取gif 资源的路径 */ guard let gifPath = Bundle.main.pathForImageResource(NSImage.Name.init("timg.gif...创建数组,用于存放转换后的NSImage */ var imageArray = [NSImage](); for i in 0 ..NSImage */ let image = NSImage(cgImage: cgImageRef, size: CGSize(width: cgImageRef.width...CGImageSource; CGImageSourceGetCount(): 获取gif中包含的图片总数; CGImageSourceCreateImageAtIndex(): 根据自定帧数创建一个CGImage对象; 到这里我们已经获取到...本例中只是macOS上的效果,对于iOS有兴趣的朋友可以试着将解析后的NSImage数组赋值给UIImageView的animationImages属性实现Gif动效,权当阅读后的练习,就不给出具体代码了

2K3 0

iOS端 TRTC v2 版本自定义采集视频数据实现

E5.92.8C.E6.B8.B2.E6.9F.93 自定义采集视频接口介绍 TRTC SDK 的 iOS 版本支持 NV12 和 i420 两种 YUV 数据格式，在 iOS 平台上，比较高性能的图像传递方式是 CVPixelBufferRef...pixelBuffer CVPixelBufferRef 如果 TRTCVideoBufferType 是 PixelBuffer 才需填写。...然后将采集到的 yuv 数据通过 sendCustomVideoData 接口不断的回调给SDK，SDK收到数据后会自行编码并进行网络传输。...两种 YUV 数据格式（6.2版本只支持 i420），如果需要转换 yuv 格式可以通过三方库 libyuv 实现 //通过 libyuv 转换 yuv 格式 - (void)nv12ToI420:(CVPixelBufferRef...)src dest:(CVPixelBufferRef)dst { //图像宽度（像素） int pixelWidth = (int)CVPixelBufferGetWidth(src

2K2 0

小型电裁剪刀_手动裁剪

，CVPixelBufferRef再转换为CMSampleBufferRef。...4.NV12转换为CVPixelBufferRef时，填入对应的步长：nv12_plane1_stride。...= 0) { screenshots_hight++; } //CVPixelBufferRef是CVImageBufferRef的别名,两者操作几乎一致。...screenshots_y + screenshots_hight > buffer_height) { return nil; } // 1.NV12数据进行相应的裁剪 // 步长必须是16的倍数，因为涉及到字节对齐...width*/ (int)buffer_width, /*int height*/ (int)buffer_height); // 2.I420数据进行相应的裁剪 // 步长必须是16的倍数，因为涉及到字节对齐

1.5K2 0

音视频面试题集锦第 17 期

下面是第 17 期面试题精选： 1、聊聊 iOS CVPixelBufferRef 相关的细节？ 2、聊聊对音视频同步的理解？ 1、聊聊 iOS CVPixelBufferRef 相关的细节？...1）CVPixelBufferRef 数据格式类型常用的 CVPixelBufferRef 数据格式（kCVPixelFormatType）有： kCVPixelFormatType_420YpCbCr8BiPlanarVideoRange...合理使用 CVPixelBufferRef 实现 CPU 与 GPU 共享内存。...开发中，如果要进行视频处理，比如滤镜、美颜等，都会用到设备的 GPU 能力，也就是会用到 OpenGL ES 的 API，而 CPU 和 GPU 之间的数据传递效率十分低下，尤其是从 GPU 回传数据到...满足某种条件的 CVPixelBufferRef 本身就是共享内存，这个条件就 CVPixelBufferRef 具有 kCVPixelBufferIOSurfacePropertiesKey 属性，从

4321 0

启动图第一篇教程

class func selectedLaunchImages() throws -> [NSImage] { let openPannel = NSOpenPanel() openPannel.allowedFileTypes...index == NSFileHandlingPanelOKButton else { throw SFileMangerError.other } var images:[NSImage...] = [] let urls = openPannel.urls for url in urls { let image = NSImage(contentsOf: url...} return images } 在ViewController新建一个变量保存我们选择的图片 /// 保存之前选择的图片 var launchImages:[NSImage]?

6772 0

启动图第二篇文章启动图名字生成第二篇

SFileManger.readLaunchNames() else { return } controller.promptValues = list } 经过发现NSImage...: [NSImageRep] { get } 属性，里面的NSImageRep里面的 open var pixelsWide: Int open var pixelsHigh: Int 我们写一个给NSImage...写一个扩展的属性sSize extension NSImage { var sSize:NSSize { get { var size = NSZeroSize...} return size } } } 写一下保存的逻辑 class func saveLaunchImages(list:[NSImage...saveImage(image: image, name: fileName) } } } } class func saveImage(image:NSImage

3411 0

使用VideoToolbox硬解码H.264

前言使用VideoToolbox硬编码H.264 在上一篇的硬编码简单介绍了H.264和VideoToolbox以及如何使用VideoToolbox硬编码从摄像头采集到的数据为H.264文件，这次使用...VideoToolbox硬解码上一篇生成的H.264文件并渲染显示到屏幕。...NSInputStream读入原始H.264码流，用CADisplayLink控制显示速率，用NALU的前四个字节识别SPS和PPS并存储，当读入IDR帧的时候初始化VideoToolbox，并开始同步解码；解码得到的CVPixelBufferRef...infoFlags, CVImageBufferRef pixelBuffer, CMTime presentationTimeStamp, CMTime presentationDuration ){ CVPixelBufferRef...*outputPixelBuffer = (CVPixelBufferRef *)sourceFrameRefCon; *outputPixelBuffer = CVPixelBufferRetain

2.6K6 0

OpenGL ES实践教程（九）OpenGL与视频混合

2、配置OpenGL ES渲染到纹理通过CVOpenGLESTextureCacheCreateTextureFromImage方法，创建目标纹理destTextureRef，并且用glFramebufferTexture2D...绑定到帧缓存上。...4、返回CVPixelBufferRef数据如果是处于合并状态下，可能需要多次GLKBaseEffect的绘制，最终再返回CVPixelBufferRef。...（这里比较推荐使用多重纹理的合并图像方式） OpenGL ES相关的核心代码： - (void)prepareToDraw:(CVPixelBufferRef)videoPixelBuffer andDestination...:(CVPixelBufferRef)destPixelBuffer { // 准备绘制相关 if ([EAGLContext currentContext] !

3K7 0

Core ML简介及实时目标检测及Caffe TensorFlow coremltools模型转换

本文也不会讲解深度学习的相关内容，作者还没有能力将相关内容讲的很透彻，想要深入到各个模型网络中，直接看论文是最好的选择。...Core ML简介参考官方文档 CoreML简介通过Core ML我们可以将已经训练好的机器学习模型集成到App中。 ?...将下载的模型mlmodel文件拖入到XCode工程中，单击该文件可以看到相关描述，如下图所示： ?...error); } else { //识别成功，输出可能性最大的分类标签 NSLog(@"Label: %@", output.classLabel); } //由于在转换UIImage到CVPixelBufferRef...trackingRequest.trackingLevel = VNRequestTrackingLevelAccurate; //添加请求到数组中

3.2K7 0

Metal入门教程（三）摄像头采集渲染

前言 Metal入门教程（一）图片绘制 Metal入门教程（二）三维变换前面的教程介绍了如何绘制一张图片和如何把图片显示到3D物体上并进行三维变换，这次介绍如何用Metal渲染摄像头采集到的图像。...采集摄像头数据得到CMSampleBufferRef，用CoreVideo提供的方法将图像数据转为Metal的纹理，再用MetalPerformanceShaders的高斯模糊滤镜对图像进行处理，结果展示到屏幕上...didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection { CVPixelBufferRef...CVMetalTextureGetTexture(tmpTexture); CFRelease(tmpTexture); } } 这是demo的核心内容，摄像头回传CMSampleBufferRef数据，找到CVPixelBufferRef...或者给MTKView增加旋转变换： self.mtkView.transform = CGAffineTransformMakeRotation(M_PI / 2); 总结本文有两个核心点：从CVPixelBufferRef

1.5K4 1

iOS摄像头采集和编码

[_captureSession setSessionPreset:AVCaptureSessionPreset640x480]; } //绑定input和output到session...NSString *scodectype = FOURCC2STR(codectype); //NSLog(@"codec type:%@", scodectype); //CVPixelBufferRef...CVPixelBufferRef imageBuffer = CMSampleBufferGetImageBuffer(sampleBuffer); imageBuffer = RotatePixelBuffer...使用VTCompressionSessionEncodeFrame推送数据到编码器。...图像处理 //旋转和镜像操作 static CVPixelBufferRef RotatePixelBuffer(CVPixelBufferRef pixelBuffer, CGImagePropertyOrientation

1K2 0

OS X开发NSMenu应用详解原

*/ @property NSEventModifierFlags keyEquivalentModifierMask; //Item图标 @property (nullable, strong) NSImage...*image; //Item状态 @property NSInteger state; //开启状态下的图标 @property (null_resettable, strong) NSImage *...onStateImage; //关闭状态下的图标 @property (nullable, strong) NSImage *offStateImage; //混合状态下的图标 @property (null_resettable..., strong) NSImage *mixedStateImage; //是否有效 @property (getter=isEnabled) BOOL enabled; //是否前置 @property

1.6K3 0

Metal入门教程（五）视频渲染

Metal渲染回调时读取CMSampleBuffer，然后获取其CVPixelBufferRef，再用CoreVideo提供的方法进行处理，得到Y和UV的纹理。...Shader中定义了YUV转RGB的矩阵，用其对两个纹理进行处理，最终得到RGB的颜色值并显示到屏幕上。...整体的架构如下：通过苹果的头文件，我们知道 CVBufferRef = CVImageBufferRef = CVMetalTextureRef CVImageBufferRef CVPixelBufferRef...当CVPixelBufferRef和CVMetalTextureRef绑定之后，通过getText的接口，我们可以拿到Metal用的纹理，所有渲染到该纹理的数据，会通过高速通道返回给CPU。...LYConvertMatrix是自定义的矩阵结构体，包括一个矩阵和一个向量，用于YUV到RGB的颜色空间转换。

4.3K7 0

coreml之通过URL加载模型

inputName; //data as color (kCVPixelFormatType_32BGRA) image buffer @property (readwrite, nonatomic) CVPixelBufferRef...data; - (instancetype)init NS_UNAVAILABLE; - (instancetype)initWithData:(CVPixelBufferRef)data inputName...end NS_ASSUME_NONNULL_END 这个是类方法实现的文件： @implementation MLModelInput - (instancetype)initWithData:(CVPixelBufferRef

1.5K2 0

iOS AVDemo（12）：视频解码，MP4 → H.264H.265 → YUV 的源码丨音视频工程示例

而解码器数据回调接口则使用 CVPixelBufferRef[2] 作为返回值类型。...在解码器数据回调接口中，我们通过 CVPixelBufferRef 打包的是对 H.264/H.265 解码后得到的 YUV 数据。...self.navigationItem.rightBarButtonItems = @[startBarButton]; // 完成音频解码后，可以将 App Document 文件夹下面的 output.yuv 文件拷贝到电脑上...4、用工具播放 YUV 文件完成 Demo 后，可以将 App Document 文件夹下面的 output.yuv 文件拷贝到电脑上，使用 ffplay 播放来验证一下效果是否符合预期： $ ffplay...: https://developer.apple.com/documentation/corevideo/cvpixelbufferref/ - 完 -

6232 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

Mac开发跬步积累(一):Cocoa Drawing 之 NSImage imageNamed: 到底做了什么?

SwiftUI图片处理(缩放、拼图)

Metal入门教程（八）Metal与OpenGL ES交互

iOS 图片风格转换（CoreML）

OS X开发：NSButton按钮控件应用原

Mac开发跬步积累(四):ImageIO解析Gif 图像数据

iOS端 TRTC v2 版本自定义采集视频数据实现

小型电裁剪刀_手动裁剪

音视频面试题集锦第 17 期

启动图第一篇教程

启动图第二篇文章启动图名字生成第二篇

使用VideoToolbox硬解码H.264

OpenGL ES实践教程（九）OpenGL与视频混合

Core ML简介及实时目标检测及Caffe TensorFlow coremltools模型转换

Metal入门教程（三）摄像头采集渲染

iOS摄像头采集和编码

OS X开发NSMenu应用详解原

Metal入门教程（五）视频渲染

coreml之通过URL加载模型

iOS AVDemo（12）：视频解码，MP4 → H.264H.265 → YUV 的源码丨音视频工程示例

扫码

相关资讯

热门标签

活动推荐

运营活动

社区

活动

资源

关于

腾讯云开发者

热门产品

热门推荐

更多推荐