পটভূমি
আমি APK ফাইলগুলি (বিভক্ত এপিএল ফাইলগুলি সহ) সম্পর্কিত তথ্য পেতে চেয়েছিলাম, এমনকি যদি তারা সংকুচিত জিপ ফাইলের মধ্যে থাকে (সেগুলি ডি-সংক্ষেপণ না করে)। আমার ক্ষেত্রে এটিতে প্যাকেজের নাম, সংস্করণ-কোড, সংস্করণ-নাম, অ্যাপ্লিকেশন-লেবেল, অ্যাপ্লিকেশন-আইকন, এবং এটি বিভক্ত যদি APK ফাইল হয় বা না হয় তার মতো বিভিন্ন বিষয় অন্তর্ভুক্ত রয়েছে।
মনে রাখবেন যে আমি এটি একটি অ্যান্ড্রয়েড অ্যাপের ভিতরেই করতে চাইছি, পিসি ব্যবহার না করে, তাই কিছু সরঞ্জাম ব্যবহার করা সম্ভব নাও হতে পারে।
সমস্যাটি
এর অর্থ আমি getPackageArchiveInfo ফাংশনটি ব্যবহার করতে পারি না , কারণ এই ফাংশনটির জন্য APK ফাইলের জন্য একটি পথ প্রয়োজন এবং এটি কেবল বিভক্ত-এপিপি ফাইলগুলিতে কাজ করে।
সংক্ষেপে, এটি করার জন্য কোনও ফ্রেমওয়ার্কের ফাংশন নেই, তাই ইনপুটস্ট্রিমটিকে কোনও ফাংশনে পার্স করার জন্য ইনপুট স্ট্রিমটি ব্যবহার করে জিনপ ফাইলটিতে গিয়ে কীভাবে এটি করা যায় তার একটি উপায় আমাকে খুঁজে বের করতে হবে।
অ্যান্ড্রয়েডের বাইরের সহ অনলাইনে বিভিন্ন সমাধান রয়েছে, তবে আমি স্থিতিশীল এবং এটি সব ক্ষেত্রেই কাজ করে এমন একটি সম্পর্কে আমার জানা নেই। অনেকগুলি অ্যান্ড্রয়েডের জন্য এমনকি উদাহরণস্বরূপ ( এখানে উদাহরণস্বরূপ ) ভাল হতে পারে তবে পার্সিংয়ে ব্যর্থ হতে পারে এবং উরি / ইনপুট স্ট্রিমের পরিবর্তে ফাইলের প্রয়োজন হতে পারে।
আমি যা খুঁজে পেয়েছি এবং চেষ্টা করেছি
আমি পেয়েছি এই Stackoverflow, কিন্তু দুঃখিতভাবে আমার পরীক্ষা অনুযায়ী, এটা সবসময় বিষয়বস্তু উত্পন্ন, কিন্তু কিছু বিরল ক্ষেত্রে এটি একটি বৈধ XML বিষয়বস্তু নয়।
এখনও অবধি, আমি এই অ্যাপ্লিকেশনগুলির প্যাকেজের নাম এবং তাদের সংস্করণ কোডগুলি খুঁজে পেয়েছি যা পার্সার পার্স করতে ব্যর্থ হয়েছে, আউটপুট এক্সএমএল সামগ্রীটি অবৈধ:
- com.farproc.wifi.analyzer 139
- com.teslacoilsw.launcherclientproxy 2
- com.hotornot.app 3072
- অ্যান্ড্রয়েড 29 (এটি "অ্যান্ড্রয়েড সিস্টেম" সিস্টেম অ্যাপ্লিকেশন নিজেই)
- com.google.android.videos 41300042
- com.facebook.katana 201518851
- com.keramidas.TitaniumBackupPro 10
- com.google.android.apps.tachyon 2985033
- com.google.android.apps.photos 3594753
একটি এক্সএমএল ভিউয়ার এবং এক্সএমএল যাচাইকারী ব্যবহার করে , এই অ্যাপ্লিকেশনগুলির সাথে সমস্যাগুলি এখানে রয়েছে:
- # 1, # 2 জন্য, আমি একটি খুব অদ্ভুত বিষয়বস্তু পেয়েছি, দিয়ে শুরু
<mnfs। - # 3 এর জন্য এটি "&" এর পছন্দ করে না
<activity theme="resourceID 0x7f13000b" label="Features & Tests" ... - # 4 এর জন্য, এটি শেষে "ম্যানিফেস্ট" এর শেষ ট্যাগটি মিস করেছে।
- # 5 এর জন্য, এটি কমপক্ষে "অভিপ্রায়-ফিল্টার", "রিসিভার" এবং "ম্যানিফেস্ট" একাধিক প্রান্তের ট্যাগগুলি হারিয়েছে। হয়তো আরো.
- # 6 এর জন্য, এটি কোনও কারণে "অ্যাপ্লিকেশন" ট্যাগে দুবার "অনুমতিব্যাকআপ" বৈশিষ্ট্যটি পেয়েছে।
- # 7, এটি স্পষ্ট ট্যাগে অ্যাট্রিবিউট ছাড়া একটি মান করেছেন:
<manifest versionCode="resourceID 0xa" ="1.3.2"। - # 8-র জন্য, কিছু "ইউজ-ফিচার" ট্যাগ পাওয়ার পরে এটি প্রচুর সামগ্রী মিস করেছে এবং "ম্যানিফেস্ট" এর জন্য একটি শেষ ট্যাগ নেই।
- # 9 এর জন্য, কিছু "ব্যবহারের অনুমতি" ট্যাগ পাওয়ার পরে এটি প্রচুর সামগ্রী মিস করেছে এবং "ম্যানিফেস্ট" এর জন্য একটি শেষ ট্যাগ নেই
আশ্চর্যজনকভাবে, আমি বিভক্ত এপিএল ফাইলগুলির সাথে কোনও সমস্যা পাইনি। কেবলমাত্র প্রধান APK ফাইলগুলি।
এখানে কোড (এছাড়াও উপলব্ধ এখানে ):
মেইনঅ্যাক্টিভিটি। কেটি
class MainActivity : AppCompatActivity() {
override fun onCreate(savedInstanceState: Bundle?) {
super.onCreate(savedInstanceState)
setContentView(R.layout.activity_main)
thread {
val problematicApkFiles = HashMap<ApplicationInfo, HashSet<String>>()
val installedApplications = packageManager.getInstalledPackages(0)
val startTime = System.currentTimeMillis()
for ((index, packageInfo) in installedApplications.withIndex()) {
val applicationInfo = packageInfo.applicationInfo
val packageName = packageInfo.packageName
// Log.d("AppLog", "$index/${installedApplications.size} parsing app $packageName ${packageInfo.versionCode}...")
val mainApkFilePath = applicationInfo.publicSourceDir
val parsedManifestOfMainApkFile =
try {
val parsedManifest = ManifestParser.parse(mainApkFilePath)
if (parsedManifest?.isSplitApk != false)
Log.e("AppLog", "$packageName - parsed normal APK, but failed to identify it as such")
parsedManifest?.manifestAttributes
} catch (e: Exception) {
Log.e("AppLog", e.toString())
null
}
if (parsedManifestOfMainApkFile == null) {
problematicApkFiles.getOrPut(applicationInfo, { HashSet() }).add(mainApkFilePath)
Log.e("AppLog", "$packageName - failed to parse main APK file $mainApkFilePath")
}
if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.LOLLIPOP)
applicationInfo.splitPublicSourceDirs?.forEach {
val parsedManifestOfSplitApkFile =
try {
val parsedManifest = ManifestParser.parse(it)
if (parsedManifest?.isSplitApk != true)
Log.e("AppLog", "$packageName - parsed split APK, but failed to identify it as such")
parsedManifest?.manifestAttributes
} catch (e: Exception) {
Log.e("AppLog", e.toString())
null
}
if (parsedManifestOfSplitApkFile == null) {
Log.e("AppLog", "$packageName - failed to parse main APK file $it")
problematicApkFiles.getOrPut(applicationInfo, { HashSet() }).add(it)
}
}
}
val endTime = System.currentTimeMillis()
Log.d("AppLog", "done parsing. number of files we failed to parse:${problematicApkFiles.size} time taken:${endTime - startTime} ms")
if (problematicApkFiles.isNotEmpty()) {
Log.d("AppLog", "list of files that we failed to get their manifest:")
for (entry in problematicApkFiles) {
Log.d("AppLog", "packageName:${entry.key.packageName} , files:${entry.value}")
}
}
}
}
}
ManifestParser.kt
class ManifestParser{
var isSplitApk: Boolean? = null
var manifestAttributes: HashMap<String, String>? = null
companion object {
fun parse(file: File) = parse(java.io.FileInputStream(file))
fun parse(filePath: String) = parse(File(filePath))
fun parse(inputStream: InputStream): ManifestParser? {
val result = ManifestParser()
val manifestXmlString = ApkManifestFetcher.getManifestXmlFromInputStream(inputStream)
?: return null
val factory: DocumentBuilderFactory = DocumentBuilderFactory.newInstance()
val builder: DocumentBuilder = factory.newDocumentBuilder()
val document: Document? = builder.parse(manifestXmlString.byteInputStream())
if (document != null) {
document.documentElement.normalize()
val manifestNode: Node? = document.getElementsByTagName("manifest")?.item(0)
if (manifestNode != null) {
val manifestAttributes = HashMap<String, String>()
for (i in 0 until manifestNode.attributes.length) {
val node = manifestNode.attributes.item(i)
manifestAttributes[node.nodeName] = node.nodeValue
}
result.manifestAttributes = manifestAttributes
}
}
result.manifestAttributes?.let {
result.isSplitApk = (it["android:isFeatureSplit"]?.toBoolean()
?: false) || (it.containsKey("split"))
}
return result
}
}
}
ApkManifestFetcher.kt
object ApkManifestFetcher {
fun getManifestXmlFromFile(apkFile: File) = getManifestXmlFromInputStream(FileInputStream(apkFile))
fun getManifestXmlFromFilePath(apkFilePath: String) = getManifestXmlFromInputStream(FileInputStream(File(apkFilePath)))
fun getManifestXmlFromInputStream(ApkInputStream: InputStream): String? {
ZipInputStream(ApkInputStream).use { zipInputStream: ZipInputStream ->
while (true) {
val entry = zipInputStream.nextEntry ?: break
if (entry.name == "AndroidManifest.xml") {
// zip.getInputStream(entry).use { input ->
return decompressXML(zipInputStream.readBytes())
// }
}
}
}
return null
}
/**
* Binary XML doc ending Tag
*/
private var endDocTag = 0x00100101
/**
* Binary XML start Tag
*/
private var startTag = 0x00100102
/**
* Binary XML end Tag
*/
private var endTag = 0x00100103
/**
* Reference var for spacing
* Used in prtIndent()
*/
private var spaces = " "
/**
* Parse the 'compressed' binary form of Android XML docs
* such as for AndroidManifest.xml in .apk files
* Source: http://stackoverflow.com/questions/2097813/how-to-parse-the-androidmanifest-xml-file-inside-an-apk-package/4761689#4761689
*
* @param xml Encoded XML content to decompress
*/
private fun decompressXML(xml: ByteArray): String {
val resultXml = StringBuilder()
// Compressed XML file/bytes starts with 24x bytes of data,
// 9 32 bit words in little endian order (LSB first):
// 0th word is 03 00 08 00
// 3rd word SEEMS TO BE: Offset at then of StringTable
// 4th word is: Number of strings in string table
// WARNING: Sometime I indiscriminently display or refer to word in
// little endian storage format, or in integer format (ie MSB first).
val numbStrings = lew(xml, 4 * 4)
// StringIndexTable starts at offset 24x, an array of 32 bit LE offsets
// of the length/string data in the StringTable.
val sitOff = 0x24 // Offset of start of StringIndexTable
// StringTable, each string is represented with a 16 bit little endian
// character count, followed by that number of 16 bit (LE) (Unicode) chars.
val stOff = sitOff + numbStrings * 4 // StringTable follows StrIndexTable
// XMLTags, The XML tag tree starts after some unknown content after the
// StringTable. There is some unknown data after the StringTable, scan
// forward from this point to the flag for the start of an XML start tag.
var xmlTagOff = lew(xml, 3 * 4) // Start from the offset in the 3rd word.
// Scan forward until we find the bytes: 0x02011000(x00100102 in normal int)
run {
var ii = xmlTagOff
while (ii < xml.size - 4) {
if (lew(xml, ii) == startTag) {
xmlTagOff = ii
break
}
ii += 4
}
} // end of hack, scanning for start of first start tag
// XML tags and attributes:
// Every XML start and end tag consists of 6 32 bit words:
// 0th word: 02011000 for startTag and 03011000 for endTag
// 1st word: a flag?, like 38000000
// 2nd word: Line of where this tag appeared in the original source file
// 3rd word: FFFFFFFF ??
// 4th word: StringIndex of NameSpace name, or FFFFFFFF for default NS
// 5th word: StringIndex of Element Name
// (Note: 01011000 in 0th word means end of XML document, endDocTag)
// Start tags (not end tags) contain 3 more words:
// 6th word: 14001400 meaning??
// 7th word: Number of Attributes that follow this tag(follow word 8th)
// 8th word: 00000000 meaning??
// Attributes consist of 5 words:
// 0th word: StringIndex of Attribute Name's Namespace, or FFFFFFFF
// 1st word: StringIndex of Attribute Name
// 2nd word: StringIndex of Attribute Value, or FFFFFFF if ResourceId used
// 3rd word: Flags?
// 4th word: str ind of attr value again, or ResourceId of value
// TMP, dump string table to tr for debugging
//tr.addSelect("strings", null);
//for (int ii=0; ii<numbStrings; ii++) {
// // Length of string starts at StringTable plus offset in StrIndTable
// String str = compXmlString(xml, sitOff, stOff, ii);
// tr.add(String.valueOf(ii), str);
//}
//tr.parent();
// Step through the XML tree element tags and attributes
var off = xmlTagOff
var indent = 0
// var startTagLineNo = -2
while (off < xml.size) {
val tag0 = lew(xml, off)
//int tag1 = LEW(xml, off+1*4);
// val lineNo = lew(xml, off + 2 * 4)
//int tag3 = LEW(xml, off+3*4);
// val nameNsSi = lew(xml, off + 4 * 4)
val nameSi = lew(xml, off + 5 * 4)
if (tag0 == startTag) { // XML START TAG
// val tag6 = lew(xml, off + 6 * 4) // Expected to be 14001400
val numbAttrs = lew(xml, off + 7 * 4) // Number of Attributes to follow
//int tag8 = LEW(xml, off+8*4); // Expected to be 00000000
off += 9 * 4 // Skip over 6+3 words of startTag data
val name = compXmlString(xml, sitOff, stOff, nameSi)
//tr.addSelect(name, null);
// startTagLineNo = lineNo
// Look for the Attributes
val sb = StringBuffer()
for (ii in 0 until numbAttrs) {
// val attrNameNsSi = lew(xml, off) // AttrName Namespace Str Ind, or FFFFFFFF
val attrNameSi = lew(xml, off + 1 * 4) // AttrName String Index
val attrValueSi = lew(xml, off + 2 * 4) // AttrValue Str Ind, or FFFFFFFF
// val attrFlags = lew(xml, off + 3 * 4)
val attrResId = lew(xml, off + 4 * 4) // AttrValue ResourceId or dup AttrValue StrInd
off += 5 * 4 // Skip over the 5 words of an attribute
val attrName = compXmlString(xml, sitOff, stOff, attrNameSi)
val attrValue = if (attrValueSi != -1)
compXmlString(xml, sitOff, stOff, attrValueSi)
else
"resourceID 0x" + Integer.toHexString(attrResId)
sb.append(" $attrName=\"$attrValue\"")
//tr.add(attrName, attrValue);
}
resultXml.append(prtIndent(indent, "<$name$sb>"))
indent++
} else if (tag0 == endTag) { // XML END TAG
indent--
off += 6 * 4 // Skip over 6 words of endTag data
val name = compXmlString(xml, sitOff, stOff, nameSi)
resultXml.append(prtIndent(indent, "</$name>")) // (line $startTagLineNo-$lineNo)
//tr.parent(); // Step back up the NobTree
} else if (tag0 == endDocTag) { // END OF XML DOC TAG
break
} else {
// println(" Unrecognized tag code '" + Integer.toHexString(tag0)
// + "' at offset " + off
// )
break
}
} // end of while loop scanning tags and attributes of XML tree
// println(" end at offset $off")
return resultXml.toString()
} // end of decompressXML
/**
* Tool Method for decompressXML();
* Compute binary XML to its string format
* Source: Source: http://stackoverflow.com/questions/2097813/how-to-parse-the-androidmanifest-xml-file-inside-an-apk-package/4761689#4761689
*
* @param xml Binary-formatted XML
* @param sitOff
* @param stOff
* @param strInd
* @return String-formatted XML
*/
private fun compXmlString(xml: ByteArray, @Suppress("SameParameterValue") sitOff: Int, stOff: Int, strInd: Int): String? {
if (strInd < 0) return null
val strOff = stOff + lew(xml, sitOff + strInd * 4)
return compXmlStringAt(xml, strOff)
}
/**
* Tool Method for decompressXML();
* Apply indentation
*
* @param indent Indentation level
* @param str String to indent
* @return Indented string
*/
private fun prtIndent(indent: Int, str: String): String {
return spaces.substring(0, min(indent * 2, spaces.length)) + str
}
/**
* Tool method for decompressXML()
* Return the string stored in StringTable format at
* offset strOff. This offset points to the 16 bit string length, which
* is followed by that number of 16 bit (Unicode) chars.
*
* @param arr StringTable array
* @param strOff Offset to get string from
* @return String from StringTable at offset strOff
*/
private fun compXmlStringAt(arr: ByteArray, strOff: Int): String {
val strLen = (arr[strOff + 1] shl (8 and 0xff00)) or (arr[strOff].toInt() and 0xff)
val chars = ByteArray(strLen)
for (ii in 0 until strLen) {
chars[ii] = arr[strOff + 2 + ii * 2]
}
return String(chars) // Hack, just use 8 byte chars
} // end of compXmlStringAt
/**
* Return value of a Little Endian 32 bit word from the byte array
* at offset off.
*
* @param arr Byte array with 32 bit word
* @param off Offset to get word from
* @return Value of Little Endian 32 bit word specified
*/
private fun lew(arr: ByteArray, off: Int): Int {
return (arr[off + 3] shl 24 and -0x1000000 or ((arr[off + 2] shl 16) and 0xff0000)
or (arr[off + 1] shl 8 and 0xff00) or (arr[off].toInt() and 0xFF))
} // end of LEW
private infix fun Byte.shl(i: Int): Int = (this.toInt() shl i)
// private infix fun Int.shl(i: Int): Int = (this shl i)
}
প্রশ্নসমুহ
- আমি কীভাবে কিছু APK ম্যানিফেস্ট ফাইলের জন্য একটি অবৈধ এক্সএমএল সামগ্রী পেতে পারি (সুতরাং তাদের জন্য এক্সএমএল পার্সিং ব্যর্থ হওয়া)?
- আমি কীভাবে এটি সর্বদা কাজ করতে পারি?
- বৈধ এক্সএমএলে ম্যানিফেস্ট ফাইলটি পার্স করার আরও ভাল কোনও উপায় আছে কি? সম্ভবত এর চেয়ে ভাল বিকল্প, এটি জিপড ফাইলগুলি সহ সমস্ত ধরণের APK ফাইলগুলি সংক্ষেপণ ছাড়াই কাজ করতে পারে?
আমি মনে করি যে উদ্ভাসিত কিছুগুলি DexGuard দ্বারা আবদ্ধ করা হয়েছে ( এখানে দেখুন ) যেখানে ম্যানিফেস্ট ফাইলের অস্পষ্টতার কথা বলা হয়েছে। এটি আপনার তালিকার # 1 এর ক্ষেত্রে বলে মনে হচ্ছে, com.farproc.wifi.analyzer। এর ম্যানিফেস্ট ফাইলটি "<মেনিফেস্ট" এর পরিবর্তে "<mnfs" দিয়ে শুরু হয় এবং তাই আমার ফোনে আরও 20 বা তাই অ্যাপ্লিকেশনগুলি করে।
—
চেটিক্যাম্প
@ ক্যান্টেম্প স্ট্যাম্প, ফ্রেমওয়ার্ক নিজেই এটি ঠিকঠাক পড়তে পারে। এগুলি সমস্ত ডিপিএল ফাইল যা আমার ডিভাইসে সূক্ষ্মভাবে ইনস্টল করা আছে। আপনার বর্ণনা করা কিছুটির কাছে এই সঠিক সমস্যাটি ছিল না এবং তাদের মধ্যে একটি অত্যন্ত পুরানো।
—
অ্যান্ড্রয়েড বিকাশকারী
এবং তবুও, ডেক্সগার্ড দাবি করেছে যে ম্যানিফেস্ট ফাইলটি অপ্রকাশিত করতে সক্ষম হবে। আমি জানি না তারা কীভাবে এটি করে এবং তবুও ফ্রেমওয়ার্কটি ম্যানিফেস্টটি পড়তে পারে তবে এটি আইএমওতে দেখার বিষয় to অন্যান্য সমস্যা হিসাবে, আপনি কি প্রয়োজন কেবল এক্সট্রোল করতে এক্সএমএলপুলপারসার ব্যবহার করে দেখেছেন? হতে পারে আপনি ইতিমধ্যে এটি চেষ্টা করেছেন এবং আমি যথেষ্ট মনোযোগ দিয়ে পড়িনি।
—
চেটিক্যাম্প
আমি ইতিমধ্যে খুঁজে পাওয়া সমস্ত সমস্যার উল্লেখ করেছি এবং বেশিরভাগ ক্ষেত্রে এটি "এমএনএফএস" নয়। এটি কেবল প্রথম 2 টি ক্ষেত্রে। এছাড়াও, যদি আপনি কিছু অনলাইন সরঞ্জামের মাধ্যমে সেগুলি বিশ্লেষণ করার চেষ্টা করেন তবে এটি এখনও দুর্দান্ত কাজ করবে।
—
অ্যান্ড্রয়েড বিকাশকারী
এপিপি-পার্সার দিয়ে কী কাজ করে না ? আমি এটি একটি এমুলেটরটিতে চালাতে সক্ষম হয়েছি এবং এটি ঠিক আছে। এটির জন্য কি কোনও ইনপুট স্ট্রিম গ্রহণ করতে হবে?
—
চেটিক্যাম্প