Bago ang course na ito: Data Analytics Basics (course 7.3). Dapat alam mo na ang apat na uri ng analytics, kung paano sumulat ng malinaw na tanong, kung paano maglinis ng CSV gamit ang log, at ang mean, median at mode. Kung hindi pa, gawin muna ang course na iyon. Dito, lalalim pa tayo nang isang hakbang: mga totoong dataset, distribution, kawalang-katiyakan, mga ugnayan at mga tapat na chart.
Magsimula sa totoong data at suriin muna ito
Bago ka magluto gamit ang pagkaing galing sa palengke, tinitingnan at inaamoy mo muna ito. Ganoon din ang data. Bago ka mag-kalkula ng kahit ano, tingnan muna ang data at itanong: ano ito, sino ang gumawa, at mukha ba itong tama?
- Mas magandang praktis ang totoong pampublikong dataset kaysa sa gawa-gawang numero dahil may mga puwang, kakaibang value at mga tala itong kailangan mong basahin.
- Naglalathala ang statistics agency ng bansa mo ng mga data table na puwede mong i-download (tingnan ang In your country sa ibaba). Gumagamit ang lesson na ito ng Canada bilang halimbawa: naglalathala ang Statistics Canada ng mga table na puwede mong i-download bilang CSV. Halimbawa: table 18-10-0004-01, Consumer Price Index, monthly, not seasonally adjusted. Nag-aalok ang page nito ng iba't ibang opsyon sa pag-download ng CSV, kasama ang buong table bilang CSV zip file.
- Sa Canada, ang Open Government Portal (open.canada.ca) ay naglilista ng marami pang bukas na dataset.
- Bago mag-analyse, gawin ang isang first look check:
| Check | Tanong na dapat itanong |
|---|---|
| Source | Sino ang naglathala nito, at kailan ito huling na-update? |
| Mga row at column | Ano ang kahulugan ng isang row (isang tao, isang buwan, isang lungsod)? |
| Mga unit | Dollar, libo-libong dollar, porsyento, index points? |
| Mga nawawalang value | May ginagamit bang blangko, "..", "x" o "F" na simbolo? Ano ang ibig sabihin ng mga ito? |
| Saklaw ng panahon | Aling mga petsa ang sakop? May mga puwang ba? |
| Mga depinisyon | Basahin ang mga footnote at metadata ng table. |
- Alamin ang unit of analysis. Kung ang isang row ay isang buwan, wala kang masasabi tungkol sa mga indibidwal na tao.
- Ang mga index number (tulad ng CPI) ay nagpapakita ng pagbabago kumpara sa isang base period, hindi presyo sa dollar.
- Ang Statistics Canada ang pangunahing ahensya ng estadistika ng Canada, sa ilalim ng Statistics Act. Pinapatakbo nito ang Census kada limang taon.
- Source: Statistics Canada, about us: www.statcan.gc.ca/en/about/about
- Dalawang pangunahing ahensya ng estadistika: ang Census Bureau (mga tao, pabahay at ekonomiya, census.gov) at ang Bureau of Labor Statistics (trabaho, kawalan ng trabaho, presyo at sahod, bls.gov).
- Source: Census Bureau, What we do: www.census.gov/about/what.html ; BLS, About us: www.bls.gov/about-bls/home.htm
- Ang pambansang tanggapan ng estadistika ay ang Philippine Statistics Authority (PSA), na nilikha ng RA 10625 (2013).
- Source: RA 10625 text: lawphil.net/statutes/repacts/ra2013/ra_10625_2013.html
- Ang pambansang tanggapan ng estadistika ay ang National Bureau of Statistics (NBS, stats.gov.cn). Ang portal nito para sa pagkuha ng data ay data.stats.gov.cn.
- Source: National Bureau of Statistics: www.stats.gov.cn/
- Ang tanggapan ng estadistika ay ang Statistics Bureau (Ministry of Internal Affairs and Communications), sa stat.go.jp. Ang portal nito para sa mga estadistika ng gobyerno ay e-Stat.
- Source: Statistics Bureau of Japan: www.stat.go.jp/english/index.html ; e-Stat: www.e-stat.go.jp/en/
- Ang pambansang tanggapan ng estadistika ay ang Ministry of Data and Statistics (dating Statistics Korea), sa mods.go.kr. Itinuturo ng site nito ang KOSIS statistical portal sa Ingles.
- Source: Ministry of Data and Statistics: mods.go.kr/anse/
- Buksan ang page ng Statistics Canada table para sa 18-10-0004-01 (o isang table sa paksang gusto mo mula sa statistics agency ng sarili mong bansa).
- Basahin ang pamagat, ang dalas ng pag-update at ang mga footnote bago mag-download.
- Gamitin ang mga opsyon sa pag-download para kumuha ng CSV, at mag-save ng kopya ng orihinal na file na hindi ginalaw.
- Buksan ang kopya sa Excel o Google Sheets.
- Punan ang first look check table sa itaas sa isang tala: source, ano ang isang row, mga unit, mga simbolo ng nawawalang value, saklaw ng panahon.
- Bilangin ang mga row at tingnan ang pinakamaliit at pinakamalaking value sa bawat column (
=MIN(),=MAX(),=COUNT()). - Isulat ang isang tanong na masasagot ng data na ito, gamit ang mga patakaran mula sa course 7.3.
- Tingnan: mababasa ng isang kaibigan ang tala mo at malalaman niya kung ano ang data nang hindi binubuksan ang file.
Videos by other creators on YouTube, for reference. They are not made by or affiliated with The Future Market.
Read the video script
[Host] "Bago ka mag-kalkula ng kahit ano, tingnan ang data mo na parang detective."
[Screen: Statistics Canada table page with Download options] "May kasamang mga tala ang totoong data. Basahin muna ang pamagat, ang mga unit at ang mga footnote."
[Text on screen: Source, Row meaning, Units, Missing, Time span] "Limang check: source, kahulugan ng row, mga unit, mga nawawalang value, saklaw ng panahon."
[Host] "Ang limang minutong pagsusuri ay nakakatipid ng oras-oras na maling sagot."
Mag-download ng isang table mula sa Statistics Canada o sa statistics agency ng sarili mong bansa. Isulat ang first look check (anim na linya) at isang tanong na masasagot ng table. Panatilihing hindi ginagalaw ang raw file.
ClaudeStuck? Copy a ready-made prompt for Claude
Copy this, open Claude, paste it, and Claude will walk you through the lesson step by step.
For a grown-up: Claude is for adults (18+). Copy this, paste it into Claude, and use the answer to explain the lesson to your child.
I'm learning "Data Analysis in Practice: istatistika at visualisation sa totoong data" on The Future Market. Lesson 1: "Magsimula sa totoong data at suriin muna ito". What the lesson teaches: - Mas magandang praktis ang totoong pampublikong dataset kaysa sa gawa-gawang numero dahil may mga puwang, kakaibang value at mga tala itong kailangan mong basahin. - Naglalathala ang statistics agency ng bansa mo ng mga data table na puwede mong i-download (tingnan ang In your country sa ibaba). Gumagamit ang lesson na ito ng Canada bilang halimbawa: naglalathala ang Statistics Canada ng mga table na puwede mong i-download bilang CSV. Halimbawa: table 18-10-0004-01, Consumer Price Index, monthly, not seasonally adjusted. Nag-aalok ang page nito ng iba't ibang opsyon sa pag-download ng CSV, kasama ang buong table bilang CSV zip file. - Sa Canada, ang Open Government Portal (open.canada.ca) ay naglilista ng marami pang bukas na dataset. - Bago mag-analyse, gawin ang isang first look check: - Check - Tanong na dapat itanong - Source - Sino ang naglathala nito, at kailan ito huling na-update? - Mga row at column - Ano ang kahulugan ng isang row (isang tao, isang buwan, isang lungsod)? The exercise I'm working on: Mag-download ng isang table mula sa Statistics Canada o sa statistics agency ng sarili mong bansa. Isulat ang first look check (anim na linya) at isang tanong na masasagot ng table. Panatilihing hindi ginagalaw ang raw file. I'm stuck. Please: 1. Explain the main idea in plain, simple words with one everyday example. 2. Walk me through the exercise one small step at a time. Ask me what I've done so far before giving the next step. 3. Don't just give me the final answer. Help me do it myself, and check my work when I share it.
I'm a parent helping my child (about 8 years old) with a lesson called "Magsimula sa totoong data at suriin muna ito" from the course "Data Analysis in Practice: istatistika at visualisation sa totoong data". Here's what the lesson says: Bago ka magluto gamit ang pagkaing galing sa palengke, tinitingnan at inaamoy mo muna ito. Ganoon din ang data. Bago ka mag-kalkula ng kahit ano, tingnan muna ang data at itanong: ano ito, sino ang gumawa, at mukha ba itong tama? The activity: Mag-download ng isang table mula sa Statistics Canada o sa statistics agency ng sarili mong bansa. Isulat ang first look check (anim na linya) at isang tanong na masasagot ng table. Panatilihing hindi ginagalaw ang raw file. Please explain this so an 8-year-old understands: short sentences, a fun everyday example, and no hard words. Then give me 3 simple questions I can ask my child to check they understood, and a way to do the activity together, one tiny step at a time.
Sources
- Statistics Canada, Consumer Price Index, monthly, not seasonally adjusted (table 18-10-0004-01): www150.statcan.gc.ca/t1/tbl1/en/tv.action?pid=1810000401
- Government of Canada, Open Government: open.canada.ca/en/open-data
Mga distribution: ang hugis ng data mo
This lesson is part of full access: every course and every level for one payment.
Mga sample, kawalang-katiyakan at confidence interval
This lesson is part of full access: every course and every level for one payment.
Correlation: pagbasa ng mga ugnayan
This lesson is part of full access: every course and every level for one payment.
Simpleng regression: pag-fit ng linya
This lesson is part of full access: every course and every level for one payment.
Mga tapat na chart
This lesson is part of full access: every course and every level for one payment.
Isulat ang analysis at sabihin ang mga limitasyon nito
This lesson is part of full access: every course and every level for one payment.
Final project
This lesson is part of full access: every course and every level for one payment.
Quiz
Magbanggit ng dalawang check na ginagawa mo bago mag-analyse ng pampublikong dataset.
Alinmang dalawa sa: source, kahulugan ng row, mga unit, mga nawawalang value, saklaw ng panahon, mga depinisyon.
Para sa right-skewed na data tulad ng mga upa, alin ang karaniwang mas mataas, ang mean o ang median?
Ang mean.
Ano ang patakarang pang-hinuha sa outlier gamit ang mga quartile?
Mas mababa sa Q1 - 1.5 x IQR o mas mataas sa Q3 + 1.5 x IQR.
Sa distribution na halos hugis kampana, humigit-kumulang anong bahagi ng mga value ang nasa loob ng 2 standard deviation mula sa mean?
Mga 95%.
Ano ang ibig sabihin ng "19 times out of 20" sa resulta ng survey?
Kung inulit nang maraming beses ang survey, maglalaman ang mga interval ng totoong value 19 beses sa 20 (95% confidence).
Sinasabi ba ng 95% confidence interval para sa isang mean na 95% ng mga tao ay nasa saklaw?
Hindi, tungkol ito sa average (ang estimate), hindi sa mga indibidwal.
Ano ang nangyayari sa margin of error kapag lumaki ang sample?
Lumiliit ito.
Anong saklaw ang puwedeng magkaroon ng correlation coefficient na r?
Mula -1 hanggang +1.
Bakit mag-plot bago pagkatiwalaan ang r?
Ang magkakaibang padron, tulad ng mga kurba at outlier, ay puwedeng magbigay ng parehong r (Anscombe's quartet).
Sa halimbawa ng oras ng pag-aaral, ano ang ibig sabihin ng slope na mga 3.86?
Sa karaniwan, mga 3.9 pang puntos sa bawat dagdag na oras, sa loob ng saklaw ng data.
Bakit hindi dapat mag-predict ng score para sa 20 oras mula sa data na sumasaklaw lang sa 1 hanggang 8?
Extrapolation iyon: hindi maaasahan nang malayo sa labas ng data (nagbigay ito ng 124.8 sa 100).
Anong patakaran ang para sa mga bar chart?
Dapat magsimula sa zero ang axis.
Final exam
This lesson is part of full access: every course and every level for one payment.
Certificate
This lesson is part of full access: every course and every level for one payment.