经过前面图片添加滤镜效果的实践，相机预览无非也就是将每一帧的bitmap放到OpenGL中去渲染。 所以很容易想到如下方案： 方案A 使用TextureView用于相机预览，TextureView表面再盖上一层GLSurfaceView用与OpenGL ES的渲染输出，从TextureView中获取每一帧的Bitmap交给OpenGL ES渲染到GLSurfaceView上。 很容易看出，方案A的性能并不好，甚至可以说很差，不免反思我们是不是可以去掉一层，因此有了方案B。 方案B 从OpenGL ES中生成一个纹理对象，以纹理ID new一个SurfaceTexture...

三角形的绘制 编写顶点着色器和片段着色器代码 输入和输出：基于OpenGL的渲染流程，从而每个着色器都有输入和输出，这样才能进行数据交流和传递。GLSL定义了in和out关键字专门来达成这个目的。只要一个输出变量与下一个着色器阶段的输入匹配，它就会传递下去。 Uniform关键字：Uniform是一种从CPU中的应用向GPU中的着色器发送数据的方式，但uniform和顶点属性有些不同。 uniform是全局的(Global) 无论你把uniform值设置成什么，uniform会一直保存它们的数据，直到它们被重置或更新 //顶点着色器 //声明...

原理步骤： 继承LinearSmoothScroller，重写calculateDtToFit，计算滑动的距离；calculateSpeedPerPixel，计算每个像素滑动的速度。 继承LinearLayoutManager，重写smoothScrollToPosition，使用LinearSmoothScroller进行滑动。 使用自定义的layoutManager，在item点击回调中，调用layoutManager的smoothScrollToPosition即可。 代码： /** * 用于RecyclerView点击item后，item居中 */ publ...

视频加滤镜播放： MediaCodec解码——>OpenGL es——> GLSurfaceView 视频滤镜合成导出： MediaCodec解码——>OpenGL es——> MediaCodec编码 大体来说就是OpenGL渲染后的输出不一样，需要使用编码器编码保存到本地，由于OpenGL ES并不负责窗口管理以及上下文管理，该职责由各个平台自行完成，没有了GLSurfaceView为我们创建的上下文环境，因此我们需要使用相关的API初始化OpenGL的上下文环境以支持后续的操作。 主要流程还是上图所示，该功能的实现，需要对整体的流程有一定的了解同时也...

鹅厂员工一枚，秋招开始了。 顶贴后，私发我 姓名-邮箱-手机号-学校-专业 即可！ 我收到推荐后，你们会收到更新信息的邮件和短信。 时间挺多的，可以帮大家查状态哈。 Tips:以前推过的可以不用推了，完善简历就可以了，我再推一次倒也是能查看简历状态。

学习阶段（一）：OpenGL es基础的学习 理论： OpenGL es渲染流程 着色器的编写 图元的绘制 VAO、VBO、EBO 纹理的绘制 矩阵变换 滤镜原理、卷积核 实践： 基本形状的绘制（三角形、正方形、正方体、圆） 纹理的绘制（绘制图片到图元、混合纹理绘制） 矩阵的变换（缩放、平移、旋转、MVP矩阵） 图像加滤镜效果（黑白、放大、四格） 问题： 绘制纹理遇见了大小比例不一被拉伸的现象，这种情况可以使用投影矩阵解决，用正交投影把坐标归一化。 OOM问题，起初将bitmap作为来源生成相应的纹理，即使用完之后显...

在Android平台上，虽说系统自带的GLSurfaceView这个控件中已经帮我们创建好EGL环境了，一般来说使用GLSurfaceView就可以满足我们的需求了。 而当我们用不着GLSurfaceView的时候，那又如何自己创建EGL环境呢？因此就来探究下 EGL环境的创建。 在Java层，EGL封装了两套框架 位于javax.microedition.khronos.egl包下的EGL10。 位于android.opengl包下的EGL14。 区别如下： EGL14是在Android 4.2(API 17)引入的，所以API 17以下的版本不支持EGL14。 E...

顶点缓冲对象（Vertex Buffer Objects，VBO）   顶点缓冲对象VBO是在显卡存储空间中开辟出的一块内存缓存区，用于存储顶点的各类属性信息，如顶点坐标，顶点法向量，顶点颜色数据等。在渲染时，可以直接从VBO中取出顶点的各类属性数据，由于VBO在显存而不是在内存中，不需要从CPU传输数据，处理效率更高。      所以可以理解为VBO就是显存中的一个存储区域，可以保持大量的顶点属性信息。并且可以开辟很多个VBO，每个VBO在OpenGL中有它的唯一标识ID，这个ID对应着具体的VBO的显存地址，通过这个ID可以对特定的VBO内的数据进行存取操作。 顶点数组对象（Vertex...

注意点： MediaCodec 解码后的原始数据，格式为yuv，而OpenGL所能渲染的格式为rgb，因此我们需要使用扩展库中的扩展纹理 GLES11Ext.GL_TEXTURE_EXTERNAL_OES 而它的作用就是实现YUV格式到RGB的自动转化。 uniform samplerExternalOES sTexture COLOR_FormatYUV420Flexible YUV420Flexible并不是一种确定的YUV420格式，而是包含COLOR_FormatYUV411Planar, COLOR_FormatYUV411PackedPlan...

看了一大堆的音视频理论知识，还是得实操一下。 这次就来实现一个播放视频的Demo吧。 使用到如下几个类： MediaExtractor extractor意思就是提取器，功能就是提取我们所需的流（音频/视频），选取指定的track。 常用Api 功能介绍 setDataSource(String path) 设置数据的来源（文件路径or网络流的url地址） int getTrackCount() 获取数据源中的轨道数量（音频轨道、视频轨道） Medi...

只申明一个采样器默认激活了采样单元并且绑定了。 声明俩个或俩个以上需要将采样器绑定到相应的采样单元并激活再进行纹理的绑定。 //x代表采样器要绑定的纹理单元序号 GLES30.glUniform1i(GLES30.glGetUniformLocation(mProgram, "texture0"),0); GLES30.glUniform1i(GLES30.glGetUniformLocation(mProgram,"texture1"),1); //激活并绑定纹理 GLES30.glActiv...

正如我们所知，我们对OpenGL es 的操作也只是编写相应的着色器从而达到相应的图形或纹理。 而所谓的滤镜也只是通过对着色器的编写，也是对某个像素或坐标做特定的一些变换，从而达到滤镜的效果。 通过前面对顶点着色器、片段着色器、纹理的学习之后，也对OpenGL es有了一定的了解。 可通用的顶点着色器： #version 300 es //变换矩阵 uniform mat4 uMVPMatrix; //顶点坐标 layout (location = 0) in vec4 aPosition; //纹理坐标 layout (location = 1) in vec2 aTextureC...

总的变换矩阵： mvpMatrix = projectionMatrix * viewMatrix * modelMatrix; 投影矩阵（projectrionMatrix）： //根据屏幕宽高计算 float ratio = (float) width / height; //计算投影矩阵 Matrix.frustumM(mProjectionMatrix, 0, -ratio, ratio, -1, 1, 3, 7); 视图矩阵（viewMatrix）： float[] resultTransform = new float[16]; ...

Windows环境下编译FFmpeg源码 由于最近需要学习Android音视频开发方面的知识，也就开始了FFmpeg方面的学习，往后的学习都会写成博客更新。 要想在Android开发中使用FFmpeg，首先当然是需要编译FFmpeg源码。 首先，网上很多编译环境大都是Linux、Mac，而我电脑是windows，不免觉得会有很多坑要踩，果不其然，花了我很多时间。 流程如下： 由于windows没有相应的编译环境，我们则需要安装相应的环境——MinGw 安装NDK（建议r14b，不要使用最新版，同时需要在project structure中配置好） 下载FFmpeg源码（...