Android多媒体开发（3）————使用Android NKD编译havlenapetr-FFMpeg-7c27aa2

http://blog.csdn.net/conowen/article/details/7526398

分类： Android多媒体&流媒体开发

/********************************************************************************************
* author：conowen@大钟
* E-mail：conowen@hotmail.com
* http://blog.csdn.net/conowen
* 注：本文为原创，仅作为学习交流使用，转载请标明作者及出处。

********************************************************************************************/


1、

使用NDK去编译官方的FFmpeg原版的话，还得自己实现JNI层与java层，工程量比较大。所以移植FFmpeg到Android平台时，可以移植一些已经实现JNI与JAVA层的开源项目，毕竟软件行业从来都是站在巨人肩膀上发展的。


2、移植havlenapetr/FFMpeg


havlenapetr的开源项目是比较出名的一个FFmpeg工程，很多Android多媒体项目都是在此基础上面修改的。


下载地址：https://github.com/havlenapetr/FFMpeg

可以直接ZIP包：https://github.com/havlenapetr/FFMpeg/zipball/debug

或者通过git方式下载，新建一个目录，然后在linux的终端下执行，当然了，你要事情安装git的相关工具

[java] view plain copy print ?
  1. gitclonehttps://github.com/havlenapetr/FFMpeg.git

3、利用NDK编译生成so库


下载后直接在havlenapetr-FFMpeg-7c27aa2的顶级目录下执行

[java] view plain copy print ?
  1. $ndk/ndk-build

是可以编译通过的，不会提示任何error。

关于如何利用NDK编译，可以参考我之前的博文：http://blog.csdn.net/conowen/article/details/7518870


4、导入java工程，实现播放

然后把在eclipse里面，把havlenapetr-FFMpeg-7c27aa2这个项目import进来，就可以播放视频了。


4.1、需要注意的是：这个版本的havlenapetr FFmpeg工程只能在Android 2.2上面运行，因为havlenapetr采用的是音视频直接在JNI层输入。可以注意到havlenapetr-FFMpeg-7c27aa2目录下有prebuilt这样一个目录，此目录下有Android 2.2版本的libjniaudio.so和libjnivideo.so两个库文件。


4.2、Android版本不同导致不能播放：

havlenapetr的FFmpeg项目音视频输出如下

音频：采用Android底层的audiotrack输出。

视频：在FFmpeg解码之后，得到YUV信号，然后转换成RGB信号，最终通过Android底层的surface输出。


提示：可以移植SDL开源库实现音视频输出，因为SDL的视频输出机制是通过OPenGL呈现画面，这样就可以兼容所有的Android平台。


但是问题就来了，Android每个版本的framework都是不大一样的，所以要在底层使用Android的audiotrack和surface来输入音视频信号，就要在相应版本的Android源代码中，重新编译生成libjniaudio.so和libjnivideo.so两个库文件了。


5、编译havlenapetr FFmpeg工程Android 2.3版本的libjniaudio.so和libjnivideo.so

首先要明白一点，Android的官方源代码编译之后，是不会生成libjniaudio.so和libjnivideo.so的。所以要自己添加audiotrack.cpp、surface.cpp和Android.mk文件到Android源代码里面编译生成。（每次编译libjniaudio.so和libjnivideo.so都要重新编译这个Android源代码，时间比较长。）


5.1下载audio与video文件夹

可以在https://github.com/havlenapetr/android_frameworks_base下载audiotrack.cpp、surface.cpp和Android.mk，注意要选择正确的branch（分支）

froyo---->Android 2.2

gingerbread---->Android 2.3

ICS---->Android 4.0


关于havlenapetr-FFMpeg在Android 4.0（ICS）的补充说明



5.2、编译Android系统源代码

下载之后，然后找到里面的native文件夹，把里面的audio和video文件夹拖进Android源代码的frameworks/base/native目录下。

绿色的是新加入的文件


需要注意的一点是：

gingerbread下载之后，里面是没有audio和video文件夹的，但是可以用froyo版本的audio和video文件夹。（也就是下载gingerbread感觉也没啥用Orz~~~）

但是我们可以使用froyo的audio和video文件夹，编译Android源代码是可以成功通过的，ndk-build也可以通过，但是在Android的java工程里面使用就会有以下错误信息。

[cpp] view plain copy print ?
  1. java.lang.NoSuchFieldError:nofieldwithname='mSurface'signature='I'inclassLandroid/view/Surface;

加载库时，找不到mSruface类
修改方法是：
将surface.cpp中mSurface改为 mNativeSurface ，然后重新编译即可。当然了，你也可以用ICS的surface.cpp文件，这个版本是没有问题的。


另外编译havlenapetr FFmpeg工程Android 4.0版本的libjniaudio.so和libjnivideo.so与上面步骤差不多。


/************************************************************************/

附上我所使用的audio与video(来源havlenapetr的项目)

video/jni/surface.cpp(注意目录结构)


[cpp] view plain copy print ?
  1. /*
  2. *Copyright(C)2009TheAndroidOpenSourceProject
  3. *
  4. *LicensedundertheApacheLicense,Version2.0(the"License");
  5. *youmaynotusethisfileexceptincompliancewiththeLicense.
  6. *YoumayobtainacopyoftheLicenseat
  7. *
  8. *http://www.apache.org/licenses/LICENSE-2.0
  9. *
  10. *Unlessrequiredbyapplicablelaworagreedtoinwriting,software
  11. *distributedundertheLicenseisdistributedonan"ASIS"BASIS,
  12. *WITHOUTWARRANTIESORCONDITIONSOFANYKIND,eitherexpressorimplied.
  13. *SeetheLicenseforthespecificlanguagegoverningpermissionsand
  14. *limitationsundertheLicense.
  15. */
  16. #include<android/surface.h>
  17. #include<surfaceflinger/Surface.h>
  18. #include<utils/Log.h>
  19. #include<SkBitmap.h>
  20. #include<SkCanvas.h>
  22. #defineTAG"SurfaceWrapper"
  24. usingnamespaceandroid;
  26. staticSurface*sSurface;
  27. staticSkBitmapsBitmapClient;
  28. staticSkBitmapsBitmapSurface;
  30. staticSurface*getNativeSurface(JNIEnv*env,jobjectjsurface){
  31. jclassclazz=env->FindClass("android/view/Surface");
  32. jfieldIDfield_surface=env->GetFieldID(clazz,"mNativeSurface","I");
  33. if(field_surface==NULL){
  34. returnNULL;
  35. }
  36. return(Surface*)env->GetIntField(jsurface,field_surface);
  37. }
  39. staticintinitBitmap(SkBitmap*bitmap,intformat,intwidth,intheight,boolallocPixels){
  40. switch(format){
  41. casePIXEL_FORMAT_RGBA_8888:
  42. bitmap->setConfig(SkBitmap::kARGB_8888_Config,width,height);
  43. break;
  45. casePIXEL_FORMAT_RGBA_4444:
  46. bitmap->setConfig(SkBitmap::kARGB_4444_Config,width,height);
  47. break;
  49. casePIXEL_FORMAT_RGB_565:
  50. bitmap->setConfig(SkBitmap::kRGB_565_Config,width,height);
  51. break;
  53. casePIXEL_FORMAT_A_8:
  54. bitmap->setConfig(SkBitmap::kA8_Config,width,height);
  55. break;
  57. default:
  58. bitmap->setConfig(SkBitmap::kNo_Config,width,height);
  59. break;
  60. }
  62. if(allocPixels){
  63. bitmap->setIsOpaque(true);
  64. //--allocarrayofpixels
  65. if(!bitmap->allocPixels()){
  66. return-1;
  67. }
  68. }
  69. return0;
  70. }
  72. intAndroidSurface_register(JNIEnv*env,jobjectjsurface){
  73. __android_log_print(ANDROID_LOG_INFO,TAG,"registeringvideosurface");
  75. sSurface=getNativeSurface(env,jsurface);
  76. if(sSurface==NULL){
  77. returnANDROID_SURFACE_RESULT_JNI_EXCEPTION;
  78. }
  80. __android_log_print(ANDROID_LOG_INFO,TAG,"registered");
  82. returnANDROID_SURFACE_RESULT_SUCCESS;
  83. }
  85. intAndroidSurface_getPixels(intwidth,intheight,void**pixels){
  86. __android_log_print(ANDROID_LOG_INFO,TAG,"gettingsurface'spixels%ix%i",width,height);
  87. if(sSurface==NULL){
  88. returnANDROID_SURFACE_RESULT_JNI_EXCEPTION;
  89. }
  90. if(initBitmap(&sBitmapClient,PIXEL_FORMAT_RGB_565,width,height,true)<0){
  91. returnANDROID_SURFACE_RESULT_COULDNT_INIT_BITMAP_CLIENT;
  92. }
  93. *pixels=sBitmapClient.getPixels();
  94. __android_log_print(ANDROID_LOG_INFO,TAG,"getted");
  95. returnANDROID_SURFACE_RESULT_SUCCESS;
  96. }
  98. staticvoiddoUpdateSurface(){
  99. SkCanvascanvas(sBitmapSurface);
  100. SkRectsurface_sBitmapClient;
  101. SkRectsurface_sBitmapSurface;
  102. SkMatrixmatrix;
  104. surface_sBitmapSurface.set(0,0,sBitmapSurface.width(),sBitmapSurface.height());
  105. surface_sBitmapClient.set(0,0,sBitmapClient.width(),sBitmapClient.height());
  106. matrix.setRectToRect(surface_sBitmapClient,surface_sBitmapSurface,SkMatrix::kFill_ScaleToFit);
  108. canvas.drawBitmapMatrix(sBitmapClient,matrix);
  109. }
  111. staticintprepareSurfaceBitmap(Surface::SurfaceInfo*info){
  112. if(initBitmap(&sBitmapSurface,info->format,info->w,info->h,false)<0){
  113. return-1;
  114. }
  115. sBitmapSurface.setPixels(info->bits);
  116. return0;
  117. }
  119. intAndroidSurface_updateSurface(){
  120. staticSurface::SurfaceInfosurfaceInfo;
  121. if(sSurface==NULL){
  122. returnANDROID_SURFACE_RESULT_JNI_EXCEPTION;
  123. }
  124. if(!Surface::isValid(sSurface)){
  125. returnANDROID_SURFACE_RESULT_NOT_VALID;
  126. }
  127. if(sSurface->lock(&surfaceInfo)<0){
  128. returnANDROID_SURFACE_RESULT_COULDNT_LOCK;
  129. }
  131. if(prepareSurfaceBitmap(&surfaceInfo)<0){
  132. returnANDROID_SURFACE_RESULT_COULDNT_INIT_BITMAP_SURFACE;
  133. }
  135. doUpdateSurface();
  137. if(sSurface->unlockAndPost()<0){
  138. returnANDROID_SURFACE_RESULT_COULDNT_UNLOCK_AND_POST;
  139. }
  140. returnANDROID_SURFACE_RESULT_SUCCESS;
  141. }
  143. intAndroidSurface_unregister(){
  144. __android_log_print(ANDROID_LOG_INFO,TAG,"unregisteringvideosurface");
  145. __android_log_print(ANDROID_LOG_INFO,TAG,"unregistered");
  146. returnANDROID_SURFACE_RESULT_SUCCESS;
  147. }


 video/jni/Android.mk (注意目录结构)

[cpp] view plain copy print ?
  1. LOCAL_PATH:=$(callmy-dir)
  2. include$(CLEAR_VARS)
  4. #oursourcefiles
  5. #
  6. LOCAL_SRC_FILES:=\
  7. surface.cpp
  9. LOCAL_SHARED_LIBRARIES:=\
  10. libskia\
  11. libsurfaceflinger_client\
  12. libutils\
  13. liblog
  15. LOCAL_C_INCLUDES+=\
  16. $(JNI_H_INCLUDE)\
  17. external/skia/src/core\
  18. external/skia/include/core\
  19. frameworks/base/include\
  20. frameworks/base/native/include
  22. #Optionaltagwouldmeanitdoesn'tgetinstalledbydefault
  23. LOCAL_MODULE_TAGS:=optional
  25. LOCAL_PRELINK_MODULE:=false
  27. LOCAL_MODULE:=libjnivideo
  29. include$(BUILD_SHARED_LIBRARY)

/audio/jni/audiotrack.cpp(注意目录结构)

[cpp] view plain copy print ?
  1. /*
  2. *Copyright(C)2009TheAndroidOpenSourceProject
  3. *
  4. *LicensedundertheApacheLicense,Version2.0(the"License");
  5. *youmaynotusethisfileexceptincompliancewiththeLicense.
  6. *YoumayobtainacopyoftheLicenseat
  7. *
  8. *http://www.apache.org/licenses/LICENSE-2.0
  9. *
  10. *Unlessrequiredbyapplicablelaworagreedtoinwriting,software
  11. *distributedundertheLicenseisdistributedonan"ASIS"BASIS,
  12. *WITHOUTWARRANTIESORCONDITIONSOFANYKIND,eitherexpressorimplied.
  13. *SeetheLicenseforthespecificlanguagegoverningpermissionsand
  14. *limitationsundertheLicense.
  15. */
  17. #include<android/audiotrack.h>
  18. #include<utils/Log.h>
  19. #include<media/AudioTrack.h>
  20. #include<media/AudioSystem.h>
  21. #include<utils/Errors.h>
  23. #include<binder/MemoryHeapBase.h>
  24. #include<binder/MemoryBase.h>
  26. #defineTAG"AudioTrackWrapper"
  28. usingnamespaceandroid;
  30. //structaudiotrack_fields_t{
  31. staticAudioTrack*track;
  32. //sp<MemoryHeapBase>memHeap;
  33. //sp<MemoryBase>memBase;
  34. //};
  35. //staticstructaudiotrack_fields_taudio;
  37. staticAudioTrack*getNativeAudioTrack(JNIEnv*env,jobjectjaudioTrack){
  38. jclassclazz=env->FindClass("android/media/AudioTrack");
  39. jfieldIDfield_track=env->GetFieldID(clazz,"mNativeTrackInJavaObj","I");
  40. if(field_track==NULL){
  41. returnNULL;
  42. }
  43. return(AudioTrack*)env->GetIntField(jaudioTrack,field_track);
  44. }
  46. /*
  47. staticboolallocSharedMem(intsizeInBytes){
  48. memHeap=newMemoryHeapBase(sizeInBytes);
  49. if(memHeap->getHeapID()<0){
  50. returnfalse;
  51. }
  52. memBase=newMemoryBase(memHeap,0,sizeInBytes);
  53. returntrue;
  54. }
  55. */
  57. intAndroidAudioTrack_register(){
  58. __android_log_print(ANDROID_LOG_INFO,TAG,"registeringaudiotrack");
  59. track=newAudioTrack();
  60. if(track==NULL){
  61. returnANDROID_AUDIOTRACK_RESULT_JNI_EXCEPTION;
  62. }
  63. __android_log_print(ANDROID_LOG_INFO,TAG,"registered");
  64. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  65. }
  67. intAndroidAudioTrack_start(){
  68. //__android_log_print(ANDROID_LOG_INFO,TAG,"startingaudiotrack");
  69. if(track==NULL){
  70. returnANDROID_AUDIOTRACK_RESULT_ALLOCATION_FAILED;
  71. }
  72. track->start();
  73. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  74. }
  76. intAndroidAudioTrack_set(intstreamType,
  77. uint32_tsampleRate,
  78. intformat,
  79. intchannels){
  80. if(track==NULL){
  81. returnANDROID_AUDIOTRACK_RESULT_ALLOCATION_FAILED;
  82. }
  84. __android_log_print(ANDROID_LOG_INFO,TAG,"settingaudiotrack");
  86. status_tret=track->set(streamType,
  87. sampleRate,
  88. format,
  89. channels,
  90. 0,
  91. 0,
  92. 0,
  93. 0,
  94. false);
  96. if(ret!=NO_ERROR){
  97. returnANDROID_AUDIOTRACK_RESULT_ERRNO;
  98. }
  99. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  100. }
  102. intAndroidAudioTrack_flush(){
  103. if(track==NULL){
  104. returnANDROID_AUDIOTRACK_RESULT_ALLOCATION_FAILED;
  105. }
  106. track->flush();
  107. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  108. }
  110. intAndroidAudioTrack_stop(){
  111. if(track==NULL){
  112. returnANDROID_AUDIOTRACK_RESULT_ALLOCATION_FAILED;
  113. }
  114. track->stop();
  115. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  116. }
  118. intAndroidAudioTrack_reload(){
  119. if(track==NULL){
  120. returnANDROID_AUDIOTRACK_RESULT_ALLOCATION_FAILED;
  121. }
  122. if(track->reload()!=NO_ERROR){
  123. returnANDROID_AUDIOTRACK_RESULT_ERRNO;
  124. }
  125. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  126. }
  128. intAndroidAudioTrack_unregister(){
  129. __android_log_print(ANDROID_LOG_INFO,TAG,"unregisteringaudiotrack");
  130. if(!track->stopped()){
  131. track->stop();
  132. }
  133. //memBase.clear();
  134. //memHeap.clear();
  135. free(track);
  136. //track=NULL;
  137. __android_log_print(ANDROID_LOG_INFO,TAG,"unregistered");
  138. returnANDROID_AUDIOTRACK_RESULT_SUCCESS;
  139. }
  141. intAndroidAudioTrack_write(void*buffer,intbuffer_size){
  142. //givethedatatothenativeAudioTrackobject(thedatastartsattheoffset)
  143. ssize_twritten=0;
  144. //regularwrite()orcopythedatatotheAudioTrack'ssharedmemory?
  145. if(track->sharedBuffer()==0){
  146. written=track->write(buffer,buffer_size);
  147. }else{
  148. //writingtosharedmemory,checkforcapacity
  149. if((size_t)buffer_size>track->sharedBuffer()->size()){
  150. __android_log_print(ANDROID_LOG_INFO,TAG,"buffersizewastoosmall");
  151. buffer_size=track->sharedBuffer()->size();
  152. }
  153. memcpy(track->sharedBuffer()->pointer(),buffer,buffer_size);
  154. written=buffer_size;
  155. }
  156. returnwritten;
  157. }

/audio/jni/Android.mk(注意目录结构)

[cpp] view plain copy print ?
  1. LOCAL_PATH:=$(callmy-dir)
  2. include$(CLEAR_VARS)
  4. #oursourcefiles
  5. #
  6. LOCAL_SRC_FILES:=\
  7. audiotrack.cpp
  9. LOCAL_SHARED_LIBRARIES:=\
  10. libbinder\
  11. libmedia\
  12. libutils\
  13. liblog
  15. LOCAL_C_INCLUDES+=\
  16. $(JNI_H_INCLUDE)\
  17. frameworks/base/include\
  18. frameworks/base/native/include
  20. #Optionaltagwouldmeanitdoesn'tgetinstalledbydefault
  21. LOCAL_MODULE_TAGS:=optional
  23. LOCAL_PRELINK_MODULE:=false
  25. LOCAL_MODULE:=libjniaudio
  27. include$(BUILD_SHARED_LIBRARY)

更多相关文章

  1. Android版本检测\自动更新 （转的别人的）
  2. android 编译内核
  3. Android(安卓)日常报错之 Android(安卓)dependency 'com.android
  4. 开机不锁屏
  5. Android(安卓)Studio : Rendering Problems
  6. Android最新版本号与API级别对应关系
  7. NDK各版本下载
  8. android studio SDK版本的调节
  9. compileSdkVersion、buildToolsVersion、targetSdkVersion 、Fai

随机推荐

  1. android:hintText与android:inputType详
  2. android官方下载链接最新版 (Windows版本
  3. android计时器chronometer的基本使用
  4. Android(安卓)ShapeDrawable 虚线 的显示
  5. Android(安卓)浅谈AsyncTask异步
  6. Android - 4种基本布局
  7. Android(安卓)NDK进入发展
  8. Android动画之RotateAnimation使用
  9. 我的android 第7天 - 控件美化 和 编码性
  10. 模拟器上网